爬虫(4-1 4-2)

2018-07-03  本文已影响248人  buaishengqi

4-1 scrapy安装以及目录结构介绍
用过豆瓣源下载scrapy


1.jpg

2 将scrapy模板导入项目工程


1.jpg
1.jpg
1.jpg
1.jpg

4-2 pycharm 调试scrapy 执行流程

1.jpg

由于pycharm里没有scrapy的模板。不方便调试,所以我们在pycharm里写以个main函数
方便我们调试


1.jpg
1.jpg 1.jpg

这里的name和jobbole.py里的name是一致的。
注意:
将settings.py文件里的true改成false


1.jpg

可以打上断点,debug一下main文件


1.jpg
上一篇 下一篇

猜你喜欢

热点阅读