Python爬虫大数据 爬虫Python AI Sql爬虫专题

Mac环境下Scrapy的安装

2017-11-15  本文已影响780人  博行天下

前言:

用Python写爬虫经常会用到Scrapy框架,今天为大家分享的是怎么安装Scrapy,以及用pycharm怎么用来运行和调试Scrapy

对于Mac OS系统来说,由于系统本身会引用自带的python2.x的库,因此默认安装的包是不能被删除的,但是你用python2.x来安装Scrapy会报错,用python3.x来安装也是报错,我最终没有找到直接安装Scrapy的方法,所以我用另一种安装方式来说一下安装步骤,解决的方式是就是使用virtualenv来安装。
(1)sudo pip install virtualenv
(2)virtualenv scrapyenv
(3)cd scrapyenv
(4)source bin/activate
(5)pip install Scrapy
执行上面五个步骤就会很顺利的安装成功,如果需要安装其他包需要在激活的scrapyenv文件夹下安装即可,附录一下包:


scrapy.png

如果没有安装成功的小伙伴可以私信我哦,开始你的爬虫之旅吧。

上一篇下一篇

猜你喜欢

热点阅读