Scrapy框架

2017-12-27

1.买两个apple

2. Crawspider 这个参数适合大量的链接爬取

3.

可以提取全部网页

4.

执行命令

5.利用浏览器的缓存 去拿数据（百度快照为例）

6.

最强爬虫

7.

分布式请求队列共享

8.4.5  4.6