爬虫反复请求网络单元

2018-04-17  本文已影响0人  Hank_Hus

while 循环实现重复请求

signal = False
j = 0
while signal == False and j<10:
  try:
     request…
     signal = True
  except:
     j += 1

在运行爬虫时经常由于网络问题导致请求失败,而且逻辑没有错,此时使用此单元。

上一篇下一篇

猜你喜欢

热点阅读