一个Python的‘Threadpool

2023-01-31 05:01:42 python threadpool

    为了能够实现异步操作获得目标主机的响应头中“Server”字段信息,准备用requests+ThreadPool进行。于是写了两个函数,一个请求,一个负责记录。具体代码片段如下:

def getHead(port,ipss):
 DDD={};
 url='Http://'+ipss+':'+port;
 try:
  r=requests.get(url);
  hedd=r.headers;
  hed=hedd['server'];
  ddd.update({ipss:hed})
 except:
  pass;
 return (port,ddd)
def heres(port,ddd):
 diH[port].update(ddd);

传入2个参数PORT和IP,然后记录在字典数据中,

下面是些的ThreadPool的调用:

 pl=threadpool.ThreadPool(50);
 req=threadpool.makeRequests(getHead,ls,heres);
 [pl.putRequest(rep) for rep in req]
 pl.wait();

ls=[(port,ip),(port,ip),.......]


如果按照官网的例子是没有问题的,但是数据执行的时候报错。。。。具体报错如下:

Traceback (most recent call last):
  File "C:\Program Files\python36\lib\site-packages\threadpool.py", line 158, in run
    result = request.callable(*request.args, **request.kwds)
TypeError: getHead() argument after ** must be a mapping, not str

网上搜了具体报错信息,都没有一点提示,于是没办法,只好去找源码

结果发现ThreadPool包会对传入数据进行验证,如果传入的是个元组数据(悲催的我传入的元组数据),则元组中第一个元素为请求值,即给请求函数调用的值,第二个元素是结果值,就是请求函数执行后的输出值。

如果第二个元素是其它值,则会报错。而这个“巨坑”官网上竟然没有说明。

在这里我仅自己记录并给广大使用python的ThreadPool 包的人一个提醒吧。太坑了啊!!!!!

相关文章