课程目录
1-1 [基础知识] Scrapy简介 (07:44) 1-2 [基础知识] 用Scrapy Shell抓取Web资源 (12:48) 1-3 [基础知识] 为Scrapy Shell指定用户代理(UserAgent) (12:05) 1-4 [基础知识] XPath入门 (22:02) 2-1 [Scrapy基础] 创建和使用Scrapy工程 (16:18) 2-2 [Scrapy基础] 使用Scrapy抓取数据,并通过XPath指定解析规则 (13:25) 2-3 [Scrapy基础] 通过项目(Item)将抓取的数据保存成多种格式的文件 (24:07) 2-4 [Scrapy基础] 使用ItemLoader保存单条抓取的数据 (08:17) 2-5 [Scrapy基础] 使用ItemLoader保存多条抓取数据的两种方法 (09:48) 2-6 [Scrapy基础] 检测网络爬虫是否有效 (13:37) 2-7 [Scrapy基础] 抓取多个Url (30:59) 3-1 [高级Scrapy技术] 处理登录页面 (24:49) 3-2 [高级Scrapy技术] 处理带隐藏文本框的登录页面【思考题】 (21:39) 3-3 [高级Scrapy技术] 抓取API数据 (22:24) 3-4 [高级Scrapy技术] 从CSV格式转换到JSON格式 (18:38) 4-1 [配置与管理Scrapy] 不同作用域的Scrapy设置(修改Scrapy的并发数) (10:44) 4-2 [配置与管理Scrapy] 设置日志级别 (03:26) 4-3 [配置与管理Scrapy] 使用Scrapy内建的Telnet Console【思考题】 (06:43) 4-4 [配置与管理Scrapy] 设置网络爬虫的停止条件 (06:23) 4-5 [配置与管理Scrapy] 使用缓存(Cache) (08:41)





