一个Python的‘Threadpool
为了能够实现异步操作获得目标主机的响应头中“Server”字段信息,准备用requests+ThreadPool进行。于是写了两个函数,一个请求,一个负责记录。具体代码片段如下:
def getHead(port,ipss):
DDD={};
url='Http://'+ipss+':'+port;
try:
r=requests.get(url);
hedd=r.headers;
hed=hedd['server'];
ddd.update({ipss:hed})
except:
pass;
return (port,ddd)
def heres(port,ddd):
diH[port].update(ddd);
传入2个参数PORT和IP,然后记录在字典数据中,
下面是些的ThreadPool的调用:
pl=threadpool.ThreadPool(50);
req=threadpool.makeRequests(getHead,ls,heres);
[pl.putRequest(rep) for rep in req]
pl.wait();
ls=[(port,ip),(port,ip),.......]
如果按照官网的例子是没有问题的,但是数据执行的时候报错。。。。具体报错如下:
Traceback (most recent call last):
File "C:\Program Files\python36\lib\site-packages\threadpool.py", line 158, in run
result = request.callable(*request.args, **request.kwds)
TypeError: getHead() argument after ** must be a mapping, not str
网上搜了具体报错信息,都没有一点提示,于是没办法,只好去找源码。
结果发现ThreadPool包会对传入数据进行验证,如果传入的是个元组数据(悲催的我传入的元组数据),则元组中第一个元素为请求值,即给请求函数调用的值,第二个元素是结果值,就是请求函数执行后的输出值。
如果第二个元素是其它值,则会报错。而这个“巨坑”官网上竟然没有说明。
在这里我仅自己记录并给广大使用python的ThreadPool 包的人一个提醒吧。太坑了啊!!!!!
相关文章