Python来袭!利用Python代理爬虫来区分哪些电影是烂片?
2018-07-16 本文已影响7人
919b0c54458f
我们准备抓 国内高匿代理IP网 的十个页面的代理
fetch_proxy(10)
但是有代理IP还不行,因为我们不知道这代理能不能用,是否有效。
下面我们用百度网进行检验(大公司不怕咱们短时间内高频率访问),上代码:
运行该代码,效果如下
代理Ip池生成函数
开始上代码
后续文章我会写点对豆瓣电影数据的分析(会使用pandas库)
get到了吧?进群:125240963 即可获取数十套PDF哦!