在线程处理中更改Python请求模块的连接池大小(&Q)
问题描述
(编辑:这个错误的意思可能我弄错了。这是否表明我的客户端的连接池已满?或者服务器上的连接池已满,而这就是向我的客户端提供的错误?)
我正在尝试使用pythonthreading
和requests
模块并发发出大量http
请求。我在日志中看到此错误:
WARNING:requests.packages.urllib3.connectionpool:HttpConnectionPool is full, discarding connection:
如何才能增加请求的连接池大小?
解决方案
这应该会起作用:
import requests.adapters
session = requests.Session()
adapter = requests.adapters.HTTPAdapter(pool_connections=100, pool_maxsize=100)
session.mount('http://', adapter)
response = session.get("/mypage")
相关文章