scrapy实战

2020-07-12  本文已影响0人  李永开

一.scrapy

  1. scrapy是一个爬虫框架
  2. 使用python3安装pip3 install scrapy
  3. 如果你使用的事brew安装的python3,那么直接在命令行是敲不出scrapy的.
    解决办法,创建一个软连接/usr/local/Cellar/python/3.7.7/Frameworks/Python.framework/Versions/3.7/bin/scrapy /usr/local/bin/scrapy将brew下面的python的scrpy在/usr/local/bin映射一个

二.开始爬虫

1.scrapy startproject meizitu新建一个工程
2.scrapy genspider mztSpider https://www.meizitu.com创建爬虫
3.scrapy crawl mztSpider运行爬虫

上一篇下一篇

猜你喜欢

热点阅读