分布式爬虫爬取知乎用户—代理ip池篇

如果报requests.exceptions.ConnectionError: HTTPSConnectionPool(host='www.zhihu.com', port=443): Max retries exceeded with url

{'error': {'redirect': 'https://www.zhihu.com/account/unhuman?type=unhuman&message=xxx', 'code': 40352, 'message': '系统检测到您的帐号或IP存在异常流量，请输入以下字符用于确认这些请求不是自动程序发出的'}}

说明ip被限制 需要换ip

Ip池使用七夜 代理ip池