课程目录

1-1 [基础知识] Scrapy简介 (07:44)
1-2 [基础知识] 用Scrapy Shell抓取Web资源 (12:48)
1-3 [基础知识] 为Scrapy Shell指定用户代理(UserAgent) (12:05)
1-4 [基础知识] XPath入门 (22:02)
2-1 [Scrapy基础] 创建和使用Scrapy工程 (16:18)
2-2 [Scrapy基础] 使用Scrapy抓取数据,并通过XPath指定解析规则 (13:25)
2-3 [Scrapy基础] 通过项目(Item)将抓取的数据保存成多种格式的文件 (24:07)
2-4 [Scrapy基础] 使用ItemLoader保存单条抓取的数据 (08:17)
2-5 [Scrapy基础] 使用ItemLoader保存多条抓取数据的两种方法 (09:48)
2-6 [Scrapy基础] 检测网络爬虫是否有效 (13:37)
2-7 [Scrapy基础] 抓取多个Url (30:59)
3-1 [高级Scrapy技术] 处理登录页面 (24:49)
3-2 [高级Scrapy技术] 处理带隐藏文本框的登录页面【思考题】 (21:39)
3-3 [高级Scrapy技术] 抓取API数据 (22:24)
3-4 [高级Scrapy技术] 从CSV格式转换到JSON格式 (18:38)
4-1 [配置与管理Scrapy] 不同作用域的Scrapy设置(修改Scrapy的并发数) (10:44)
4-2 [配置与管理Scrapy] 设置日志级别 (03:26)
4-3 [配置与管理Scrapy] 使用Scrapy内建的Telnet Console【思考题】 (06:43)
4-4 [配置与管理Scrapy] 设置网络爬虫的停止条件 (06:23)
4-5 [配置与管理Scrapy] 使用缓存(Cache) (08:41)