大数据 爬虫Python AI Sql

Python来袭!利用Python代理爬虫来区分哪些电影是烂片?

2018-07-16  本文已影响7人  919b0c54458f

我们准备抓 国内高匿代理IP网 的十个页面的代理

fetch_proxy(10)

但是有代理IP还不行,因为我们不知道这代理能不能用,是否有效。

下面我们用百度网进行检验(大公司不怕咱们短时间内高频率访问),上代码:

运行该代码,效果如下

代理Ip池生成函数

开始上代码

后续文章我会写点对豆瓣电影数据的分析(会使用pandas库)

get到了吧?进群:125240963   即可获取数十套PDF哦!

上一篇 下一篇

猜你喜欢

热点阅读