pycharm 配置scrapy
2017-04-08 本文已影响137人
a十二_4765
1.首先创建scrapy 项目 以伯乐在线网站为例
首先找到目录创建 : 在F盘下的pachong文件夹里创建
win+r
回车 启动cmd 窗口
然后输入 F: 找到爬虫文件夹
cd pachong 进入爬虫 目录
输入 scrapy startproject bole 创建文件夹
创建成功后 在F盘下的pachong 文件夹下面 你就会发现有个bole文件夹
打开pycharm
在main.py里面配置 我们需要找到main.py所在的目录的父类
#coding:utf-8
fromscrapy.cmdlineimportexecute #导入需要的包
importsys
importos
#sys.path.append(os.path.abspath(__file__)) #找到main.py
#通过os.path.dimame 找到父类
#可以打印看一下
#py3 打印
#print (sys.path.append(os.path.dirname(os.path.abspath(__file__))))
sys.path.append(os.path.dirname(os.path.abspath(__file__)))
execute(["scrapy","crawl","job"]) #最三个参数 对应自己创建项目的参数然后run 就会发现scrapy运行了