Scrapy

Scrapy网络爬虫框架学习笔记、示例，在python3.8环境下编写。

讲解

微信公众号

1. 网络爬虫是什么？：网络爬虫是什么？.
2. Scrapy简介及安装：Scrapy简介及安装.
3. Scrapy简介及安装（补充）：Windows系统安装Scrapy失败的解决方法！.
4. demo1教程：编写第一个Scrapy网络爬虫 之 采集书籍信息.
5. Scrapy教程：Scrapy框架结构及工作原理.
6. Scrapy教程：Scrapy爬虫框架中的 Request 和 Response 对象.
7. Scrapy教程：Spider开发流程.
8. Scrapy教程：使用Selector提取数据 -- Selector 对象.
9. Scrapy教程：使用Selector提取数据 -- Response 内置 Selector.
10. Scrapy教程：使用Selector提取数据 -- XPath.
11. Scrapy教程：使用Selector提取数据——CSS选择器.
12. demo2教程：Scrapy 使用 Item 封装数据.
13. demo3教程：Scrapy 使用 Item Pipeline 处理数据.
14. demo4教程：Scrapy 使用 Item Pipeline 过滤重复数据.
15. demo5教程：Scrapy 将数据存入 MongoDB.
16. demo6教程：Scrapy用LinkExtractor提取链接.
17. demo7教程：Scrapy 使用 Exporter 导出数据.

今日头条“码上学”

1. 网络爬虫是什么？：网络爬虫是什么？.
2. Scrapy简介及安装：Scrapy简介及安装.
3. Scrapy简介及安装（补充）：Windows系统安装Scrapy失败的解决方法！.
4. demo1教程：编写第一个Scrapy网络爬虫 之 采集书籍信息.
5. Scrapy教程：Scrapy框架结构及工作原理.
6. Scrapy教程：Scrapy爬虫框架中的 Request 和 Response 对象.
7. Scrapy教程：Spider开发流程.
8. Scrapy教程：使用Selector提取数据 -- Selector 对象.
9. Scrapy教程：使用Selector提取数据 -- Response 内置 Selector.
10. Scrapy教程：使用Selector提取数据 -- XPath.
11. Scrapy教程：使用Selector提取数据——CSS选择器.
12. demo2教程：Scrapy 使用 Item 封装数据.
13. demo3教程：Scrapy 使用 Item Pipeline 处理数据.
14. demo4教程：Scrapy 使用 Item Pipeline 过滤重复数据.
15. demo5教程：Scrapy 将数据存入 MongoDB.
16. demo6教程：Scrapy用LinkExtractor提取链接.
17. demo7教程：Scrapy 使用 Exporter 导出数据.

关注公众号，查看更多教程

支持一下（感谢您的支持^_^）

注意

• 本项目所有代码仅供交流学习使用，严禁商业用途。
• 使用本工具的用户，请严格遵守《国家网络安全法》相关规定，严禁爬取任何个人隐私数据。
• 使用本工具的用户，请严格遵守网站Robots协议。