解決「請求中的URL 超過最大重試次數」錯誤
嘗試從iTunes App Store 抓取資料時,尤其是大批量資料時,您可能會遇到錯誤「URL 超出最大重試次數」。出現此問題的原因是 requests 函式庫的預設行為限制了遇到連線錯誤後的重試次數。
要解決此問題,我們可以使用 requests 的功能實現自訂重試行為:
import requests from requests.adapters import HTTPAdapter from urllib3.util.retry import Retry # Configure retry settings retry = Retry(connect=3, backoff_factor=0.5) # Create a session and mount the adapter session = requests.Session() adapter = HTTPAdapter(max_retries=retry) session.mount('http://', adapter) session.mount('https://', adapter) # Perform GET request with retry session.get(url)
此組態指定在出現任何連線錯誤時請求應重試 3 次。此外,「backoff_factor」會在嘗試之間引入延遲,以避免超出請求配額。
利用 urllib3.util.retry.Retry 的強大功能,您可以自訂重試行為的各個方面,例如嘗試次數、逾時和退避策略。
以上是如何解決 Python 請求中的「URL 超出最大重試次數」錯誤?的詳細內容。更多資訊請關注PHP中文網其他相關文章!