参照官网的例子,写了一个 asyncore.dispatcher 的子类,用于获取信息。 众所周知,现在大多数地方,网站都有链接数量限制。 由于总数量约在 8w 条,考虑限制链接数。 主要功能代码如下:
if __name__ == "__main__":
q_in = queue.Queue()
q_out = queue.Queue()
conn_count = 5
with open("ipLib_20.txt", "rb") as frd:
for line_b in frd:
q_in.put(line_b)
cc = WhoisClient(q_in, q_out)
if len(asyncore.socket_map) >= conn_count:
print(f"first len={len(asyncore.socket_map)},q_in = {q_in.qsize()} , q_out = {q_out.qsize()}")
asyncore.loop(count=1)
print(f"end len={len(asyncore.socket_map)},q_in = {q_in.qsize()} , q_out = {q_out.qsize()}")
asyncore.loop()
本意为当 socket_map 数量高于一定数量,就等到完成一些再继续增加连接。
其中 WhoisClient 是仿照官网 HttpClient 改写无问题。
按照帮助文档中 asyncore.loop()的参数说明,当 count 为默认 None 时,阻塞至所有 WhoisClient 实例完成。count=具体数值时,阻塞至完成 count 个实例。 可是我的代码运行状况却并如预期(保持 5 个连接,做好 1 个继续添加连接)。
本以为 loop 不阻塞,取消 count=1,结果每 5 个连接完成,继续下 5 个。
不知道哪位大大能帮我分析分析这个 loop 咋才能达到我的预期啊?
这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。
V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。
V2EX is a community of developers, designers and creative people.