Python网络爬虫实战直播课-蜗牛学苑

首页 / 软件研发专题 · Python开发专题:Python开发专题 / Python网络爬虫实战直播课

发布于 2022-04-21 · 2096 次观看

展开剩余

视频列表
评论
课程介绍
资料列表
教师笔记

1-课程介绍及环境配置

31分钟 · 257次播放

2-爬虫基础知识介绍

63分钟 · 38次播放

3-用chrome进行抓包

49分钟 · 40次播放

4-requests库的使用

75分钟 · 1038次播放

5-xpath库的使用

15分钟 · 45次播放

6-beautifulsoup库的使用

33分钟 · 45次播放

7-正则表达式的基本使用

52分钟 · 43次播放

8-蜗牛官网note抓取实战

74分钟 · 67次播放

day2-1-简单爬虫框架讲解

67分钟 · 50次播放

day2-2-常见反爬手段的介绍

17分钟 · 44次播放

day2-3-身份验证1

56分钟 · 50次播放

day2-4-身份验证2

21分钟 · 42次播放

day2-5-验证码识别

65分钟 · 41次播放

day2-6-IP代理基础知识

15分钟 · 39次播放

day2-7-异步请求

33分钟 · 39次播放

day2-8-JS混淆加密

60分钟 · 47次播放

day2-9-代理池知识点讲解1

36分钟 · 11次播放

day3-1-迭代器及生成器介绍

81分钟 · 6次播放

day3-2-协程基本概念及实例

66分钟 · 6次播放

day3-3-IP代理池结构及源码解读

28分钟 · 8次播放

day3-4-scrapy框架介绍

24分钟 · 15次播放

day3-5-scrapy安装

10分钟 · 12次播放

day3-6-scrapy创建项目及结构介绍

41分钟 · 13次播放

day3-7-scrapy selector的使用

14分钟 · 8次播放

day3-8-scrapy抓取蜗牛官网note文章

32分钟 · 11次播放

day3-9-请求间参数传递

15分钟 · 10次播放

day3-10-scrapy pipeline组件

33分钟 · 8次播放

day3-11-scrapy middleware

0分钟 · 0次播放

day3-11-scrapy middleware

11分钟 · 8次播放

day4-1-数据分析基本概念和流程介绍

38分钟 · 9次播放

day4-2-数据分析简单例子演示

32分钟 · 8次播放

day4-3-Series对象简介

42分钟 · 5次播放

day4-4-dataframe简介和基本操作

51分钟 · 6次播放

day4-5-缺失值的处理方式

41分钟 · 5次播放

day4-6-数据清理实战

29分钟 · 5次播放

day4-7-数据格式转换及重塑

40分钟 · 3次播放

day4-8-数据统计及可视化操作

54分钟 · 14次播放

共有条回复

{{replyComment.createTime | dateForMat(replyComment.createTime)}}

课程目标

为以后进入机器学习、数据挖掘行业打下基础

知识要点

主要是针对不了解爬虫、数据分析的受众，用案例实战的形式带领大家了解和入门爬虫和数据分析可视化这个行业

课程详情

授课讲师

卿淳俊

20年+Python全栈开发、安全测试开发及项目管理经验，认证敏捷项目Scrum Master。长期专注Python开发，熟悉各种常见渗透测试工具及攻击手段与防护策略，同时在移动互联网、敏捷项目管理、电商测试等领域有丰富的项目经验。对大数据、机器学习、区块链等新兴技术均有深入研究。10年+讲师经验铸就了深入浅出的授课风格，秉持着“授人以鱼不如授人以渔”的理念，让学员达到“知其然更要知其所以然”，真正掌握技术的本质，出版“ Python爬虫开发实战教程”。

看看TA的主页

推荐课程

就业辅导

刘颖聪 · 1709人观看 · 158分钟

就业辅导

通过对跳槽前的自我分析，让大家能够清楚地认识自身存在的优势和劣势，针对性地对跳槽做出充分的准备。

加入收藏

系统测试

卿淳俊 · 6896人观看 · 1209分钟

系统测试

能够利用Python开发基于网络协议如HTTP，TCP，WebService等接口测试自动化，能应用JMeter或SoapUI等接口测试工具

对软件系统测试的方法，流程和测试用例设计方法有深刻理解，对缺陷管理及黑盒测试方法有深刻体会

加入收藏

JavaSE面向对象

李柏松 · 5943人观看 · 1415分钟

JavaSE面向对象

掌握面向对象思想，利用对象行为重构WoniuATM，掌握java.lang包的重要对象的应用

Java面向对象，封装，继承，多态，基本设计原则，类加载机制，常用API对象

加入收藏

Windows与网络基础

杨文财 · 125916人观看 · 1658分钟

Windows与网络基础

1、掌握Windows操作系统的常用命令、注册表、权限、系统服务、防火墙、组策略，熟悉Windows系统的常见脆弱项及日志文件 2、掌握计算机网络基础基础原理、掌握OSI模型与TCP/IP协议族、理解各种协议的工作原理 3、掌握GNS3、PT和eNSP等网络模拟器基本使用，熟悉Wireshark与科来协议分析工具

环境配置、Windows命令、用户管理、注册表、系统权限、组策略、防火墙、VMWare虚拟机、网络基础、OSI与TCP/IP模型、数据传输过程、IP地址与子网划分，Wireshark与科来协议监控分析工具

加入收藏

回归分析

周一 · 4777人观看 · 366分钟

回归分析

掌握具体实战中使用python进行回归分析的步骤、方法与评估

线性回归的概念、线性回归适用条件、一元回归分析、多元回归分析。线性回归实现、线性回归诊断-残差分析、线性回归诊断-强影响点分析、线性回归诊断-多重共线性、非线性回归扩展。

加入收藏

数据预处理实战

周一 · 6572人观看 · 800分钟

数据预处理实战

在实际项目中掌握特诊工程处理数据、提升分析信度、效度的方法

数据分析的基本过程、数据理解、数据清洗、特征构造。特征工程-标量、向量与空间、特征工程-计数、对数、缩放与归一化、特征工程-文本数据扁平化、过滤与分块。特征工程-数据降维概念、特征工程-PCA概念、特征工程-数据降维实战

加入收藏

人工智能体开发

邓强 · 401人观看 · 1549分钟

人工智能体开发

利用RAG进行知识库开发、本地和云模型API调用、大语言模型应用开发、LangChain与Dify等开发框架的使用、人工智能体开发技术

本地模型的API调用、云AI的API调用、图像识别、语音识别、语音合成等各种云API的用法、利用Python整合各类模型和环境进行AI的原生应用开发、基于LangChain、LlamaIndex和Dify等框架的人工智能体开发、利用AI开发每日新闻摘要、本地知识库、看图说话、每日学英语、智能阅卷、智能图书馆、智能导游、编程小助手、会议实时摘要等各种项目（项目库将实时更新，项目数量不限，学员练到精通为止）

加入收藏

MYSQL数据库

李利敏 · 14592人观看 · 1133分钟

MYSQL数据库

将项目中的用户信息及对战信息通过数据库保存及操作

数据库概念，MySQL配置，命令，建库建表，约束，数据的增删改查，视图，函数，事务，建模工具、JDBC操作数据库，开源工具DbUtils的使用

加入收藏

ArkUI架构、数据库实战

徐朝波 · 3020人观看 · 1919分钟

ArkUI架构、数据库实战

1. 基于ArkUI容器来实现各种页面的布局设计 2. 本地数据库持久化，动态加载性能优化 3. 路由环境搭建、路由跳转和参数传递，路由拦截业务 4. 网络请求模块解析，异步请求封装工具 5. 身份认证和身份存储的概念

条件渲染、动态渲染、数据懒加载、布局容器、全局状态、页面状态缓存、本地数据库持久化设计、网络请求封装、webscoket双工通信规则、华为账号一键登录、路由守卫、用户首选项、华为支付接口联调

加入收藏

系统测试基础-预科

梁爽 · 9115人观看 · 1066分钟

系统测试基础-预科

理解软件工程的各类实际问题，树立清晰的学习目标，掌握测试用例设计的常用方法和综合运用

软件工程，软件质量，系统测试流程，方法，软件测试专业术语，测试用例设计，测试报告，缺陷管理

加入收藏

网页布局实战

徐朝波 · 4151人观看 · 3138分钟

网页布局实战

1. 熟练掌握HTML5、CSS3、Less、Sass，独立实现基础页面布局、页面性能优化、考虑用户性能体验 2. 熟练运用HTML+CSS特性完成页面布局、掌握常见的兼容性处理，浮动布局和弹性布局的对比和使用常见 3. 熟练应用CSS3技术，动画、弹性盒模型设计网页，熟练的完成页面动画设计，并优化网页的布局

网页核心布局标签、网页样式设计、导航样式、产品列表、选择器、雪碧图、浮动布局、标准盒子模型、表单样式、字体图标、样式继承、样式权重计算

加入收藏

纸飞机飞行动画游戏实战

罗启迪 · 831人观看 · 315分钟

纸飞机飞行动画游戏实战

网页特效，飞行动画游戏将带领你举一反三，学会更多的动画技能

1.针对1-2年前端开发代码经验的同学，小白也能入门完成动画设计 2. 基于3D动画需要的技术点，提升大家网页中的特效设计能力

加入收藏

基本信息

联系信息

上传资料