py爬虫程序猿阵线联盟-汇总各类技术干货

pycharm 配置scrapy

2017-04-08  本文已影响137人  a十二_4765

1.首先创建scrapy 项目  以伯乐在线网站为例

首先找到目录创建 : 在F盘下的pachong文件夹里创建

win+r

回车 启动cmd 窗口

然后输入 F: 找到爬虫文件夹

cd pachong 进入爬虫 目录

输入 scrapy startproject bole  创建文件夹

创建成功后 在F盘下的pachong 文件夹下面 你就会发现有个bole文件夹

打开pycharm


在main.py里面配置 我们需要找到main.py所在的目录的父类

#coding:utf-8

fromscrapy.cmdlineimportexecute     #导入需要的包

importsys 

importos

#sys.path.append(os.path.abspath(__file__)) #找到main.py

#通过os.path.dimame 找到父类

#可以打印看一下

#py3 打印

#print (sys.path.append(os.path.dirname(os.path.abspath(__file__))))

sys.path.append(os.path.dirname(os.path.abspath(__file__))) 

execute(["scrapy","crawl","job"])    #最三个参数 对应自己创建项目的参数然后run 就会发现scrapy运行了


上一篇下一篇

猜你喜欢

热点阅读