python spider

在docker下运行python

2017-08-23  本文已影响132人  Alex陌

步骤一:首先你得安装了 docker

步骤二:找到你的项目路径 在终端输入 cd +项目路径

步骤三:找到docker安装相关插件 

到docker目录下执行命令:docker-compose up scrapyd 创建项目爬虫环境及运行docker镜像

安装ing 安装成功

第四步:进入docker

命令:docker-compose exec scrapy bash(执行bash程序)

第五步:找到要执行文件的目录

命令:cd  spider (进入spider) 

命令:scrapy crawl + 文件名

报错与升级:

镜像需要升级:

拓展:

中止爬取快捷键:control+cc   选中即复制 control+w 删除一个单词

(mac电脑,window请自行百度 哈哈)

上一篇下一篇

猜你喜欢

热点阅读