第1章 网络爬虫入门

• 第1讲 搭建Python开发环境

  第1讲 搭建Python开发环境

• 第2讲 使用PyCharm配置Conda环境

  第2讲 使用PyCharm配置Conda环境

• 课后习题

第2章 爬虫基础

• 第3讲 HTTP基本原理

  第3讲 HTTP基本原理

• 第4讲 requests库——安装requests库

  第4讲 requests库——安装requests库

• 第5讲 requests库——设置请求方法

  第5讲 requests库——设置请求方法

• 第6讲 requests库——传递URL参数

  第6讲 requests库——传递URL参数

• 第7讲 requests库——定制请求头

  第7讲 requests库——定制请求头

• 第8讲 requests库——设置Cookie

  第8讲 requests库——设置Cookie

• 课后习题

第3章 网页解析基础

• 第9讲 XPath语法

  第9讲 XPath语法

• 第10讲 beautifulsoup4库——基本用法

  第10讲 beautifulsoup4库——基本用法

• 第11讲 beautifulsoup4库——CSS选择器

  第11讲 beautifulsoup4库——CSS选择器

• 课后习题

第4章 爬取动态加载数据

• 第12讲 逆向分析请求页面

  第12讲 逆向分析请求页面

• 第13讲 selenium库——定位节点

  第13讲 selenium库——定位节点

• 第14讲 selenium库——模拟浏览器操作

  第14讲 selenium库——模拟浏览器操作

• 第15讲 selenium库——页面等待

  第15讲 selenium库——页面等待

• 第16讲 pymongo库基本使用

  第16讲 pymongo库基本使用

• 课后习题

第5章 反爬虫策略

• 第17讲 使用代理IP

  第17讲 使用代理IP

• 第18讲 降低请求频率

  第18讲 降低请求频率

• 课后习题

第6章 模拟登录和处理验证码

• 第19讲 处理图片验证码

  第19讲 处理图片验证码

• 第20讲 处理点触验证码

  第20讲 处理点触验证码

• 第21讲 处理滑动拼图验证码

  第21讲 处理滑动拼图验证码

• 课后习题

第7章 爬取App和PC客户端数据

• 第22讲 爬取App数据——设置Fiddler

  第22讲 爬取App数据——设置Fiddler

• 第23讲 爬取App数据——Fiddler抓包分析

  第23讲 爬取App数据——Fiddler抓包分析

• 课后习题

第8章 爬虫框架Scrapy

• 第24讲 Scrapy应用

  第24讲 Scrapy应用

• 课后习题

第9章 分布式爬虫

• 第25讲 Scrapy-Redis分布式爬虫

  第25讲 Scrapy-Redis分布式爬虫

• 课后习题

期末考试试卷

• 期末考试试卷