requests超时重试方法(由于连接方在一段时间后没有正确答复或连接的主机没有反应,连接尝试失败)]

前言

“由于连接方在一段时间后没有正确答复或连接的主机没有反应,连接尝试失败”,这是经常遇到的问题requests.exceptions.ConnectionError: HTTPSConnectionPool(host='www.github.com', port=443): Max retries exceeded with url: / (Caused by NewConnectionError('<urllib3.connection.VerifiedHTTPSConnection object at 0x0000020F06524AC8>: Failed to establish a new connection: [WinError 10060] 由于连接方在一段时间后没有正确答复或连接的主机没有反应,连接尝试失败。',))
一般出现这个问题的原因是:host='www.github.com' 主机地址没连上,使用 requests 发请求时,有些网站服务器不稳定,特别是国外的网站,经常会出现连接失败情况。
连接失败后,有时候会抛出上面异常,有时候会一直卡住,进入假死状态,没响应,也不会结束。

timeout

requests发请求的时候有个默认的超时时间,这个时间在20秒左右

import requests

s=requests.session()

url="https://www.github.com/"

r=s.request("GET",url=url)

print(r.text)

 连不上服务器会出现异常:requests.exceptions.ConnectionError


requests.exceptions.ConnectionError: HTTPSConnectionPool(host``=``'www.github.com'``, port``=``443``): ``Max retries exceeded with url: ``/ (Caused by NewConnectionError(``'<urllib3.connection.VerifiedHTTPSConnection object at 0x0000020F06524AC8>: Failed to establish a new connection: [WinError 10060] 由于连接方在一段时间后没有正确答复或连接的主机没有反应,连接尝试失败。'``,))

|

如果请求一直没响应,进入假死状态,可以加个timeout超时时间,达到这个请求超时时间就结束,如0.1s超时

import requests

s=requests.session()

url="https://www.github.com/"

r=s.request("GET",url=url,timeout=0.1)

print(r.text)

 |

 这样抛出的异常是:requests.exceptions.ConnectTimeout

raise ConnectTimeout(e, request``=``request)

requests.exceptions.ConnectTimeout: HTTPSConnectionPool(host``=``'www.github.com'``, port``=``443``): ``Max retries exceeded with url: ``/ (Caused by ConnectTimeoutError(<urllib3.connection.VerifiedHTTPSConnection ``object at ``0x0000000003472358``>, ``'Connection to www.github.com timed out. (connect timeout=0.1)'``))

** 失败重试 max_retries**

Requests自带了一个传输适配器,也就是HTTPAdapter。这个适配器使用了强大的urllib3, 为Requests提供了默认的HTTP和HTTPS交互。

每当Session被初始化,就会有适配器附着在Session上,其中一个供HTTP使用,另一个供HTTPS使用。


import requests
from requests.exceptions import ConnectTimeout
from requests.adapters import HTTPAdapter
import time


s=requests.session()
 
s.mount('http://',HTTPAdapter(max_retries=3))#重试3次, 在第一次的基础上增加次数,一共发送4次
s.mount('https://',HTTPAdapter(max_retries=3))

a = time.time()
url="http://124.0.1.0:8000/"
try:
    r=s.request("GET",url=url ,timeout=10)
    print(r.text)
except ConnectTimeout as e:
    print(111)
    
print(time.time() -a)


这样每次请求超过0.1s,超过时,会重试3次,最大请求时长0.1s

文字从 https://www.cnblogs.com/canglongdao/p/13454007.html 复制粘贴, 有问题请联系删除

©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容