使用4000线程的Python线程

Question

使用来自NASDAQ的URL查看库存数据。对于4000股股票，我们正在考虑在线程中做每个4000个url线程。有没有人试过这个？它是否超载Windows堆栈？

Answer 1

我建议使用concurrent.futures.ThreadPoolExecutor()默认最大工作人员太多的线程会导致巨大的开销。

最大工作人员默认为(processor_count) * 5这对你的情况很好，我相信。

使用asyncio的客户端也是一个选项，但它有点复杂。