python爬虫---爬取当天杭州二手房的信息

2019-04-25  本文已影响0人  我是月月老师

requests是python实现的简单易用的HTTP库,使用起来比urllib简洁很多

因为是第三方库,所以使用前需要cmd安装

pip install requests

如果你的网速不好,为了加速,可以从国内镜像下载。如果你用的是公司或者学校内部的网络,可以设置代理

pip install requests -i http://mirrors.aliyun.com/pypi/simple/ --trusted-host mirrors.aliyun.com --proxy 87.254.212.121:8080

下面文章讲requests的用法,非常详细,我就不再搬运过来了。

https://www.cnblogs.com/mzc1997/p/7813801.html

下面是我用python爬取了杭州透明售房网的二手房挂牌数据(网站上首页就有当天的数据,不知道在网站如何查看历史数据,知道的小伙伴们麻烦告知。)

2019-04-25:73673

代码地址:

https://github.com/mayue615/learningPython/blob/master/catch_house_data.py

上一篇 下一篇

猜你喜欢

热点阅读