程序師世界是廣大編程愛好者互助、分享、學習的平台,程序師世界有你更精彩!
首頁
編程語言
C語言|JAVA編程
Python編程
網頁編程
ASP編程|PHP編程
JSP編程
數據庫知識
MYSQL數據庫|SqlServer數據庫
Oracle數據庫|DB2數據庫
您现在的位置: 程式師世界 >> 編程語言 >  >> 更多編程語言 >> Python

python爬蟲如何發送請求直到服務器響應為止呢?

編輯:Python

有一個需求,爬取一般的網站 直接requestes.get(url)就可以獲取響應,目前我遇到的問題是我的目標服務器非常的不穩定,有時候的請求會直接報502網關錯誤(網頁正常訪問也會出現這個問題),我拿到了要請求的所有地址,使用異步的方法挨個請求,如何讓其遇到錯誤之後繼續請求,直到返回正常的數據回來,而不是遇到了一個錯誤之後的請求都不執行了。


  1. 上一篇文章:
  2. 下一篇文章:
Copyright © 程式師世界 All Rights Reserved