-1
如何在Scrapy（python）中设置线程池大小？在Scrapy中设置线程池大小
A
回答
4
由于Scrapy不使用多线程，而是使用所谓的底层异步HTTP框架Twisted你说的肯定是你有多少蜘蛛可以同时运行？请参阅CONCURRENT_REQUESTS文档。 默认：16
相关问题
- 1. Java线程池大小（Executors）
- 2. 优化线程池大小
- 3. 设置线程池中的最小线程数
- 4. 设置线程池中的最大线程数少于核心
- 5. 动态调整大小的线程池
- 6. 蟒蛇线程池的大小
- 7. 更改JVM的线程池大小
- 8. sidekiq忽略池大小设置
- 9. Sails Framework + MongoDB设置连接池大小
- 10. 如何为MySQLDataSource设置池大小？
- 11. 如何设置Oracle连接池大小？
- 12. 池大小为1的Java线程池1
- 13. 无法在mysql中设置线程堆栈大小
- 14. 当池大小小于线程数时，避免ConnectionTimeoutError
- 15. node-postgres：设置最大连接池大小
- 16. Spring AsyncRestTemplate连接池和线程池设置
- 17. 在运行时确定libuv线程池的大小？
- 18. 在使用ExecutorService时“刷新”固定大小的线程池
- 19. 设置石英线程池的线程数
- 20. 阿卡均衡池中有可变大小的线程池执行人
- 21. 如何设置的BasicDataSource最大池大小或连接大小Spring框架
- 22. 线程池中的线程
- 23. 线程池配置问题
- 24. .NET线程池和配置
- 25. C++中的线程池设计
- 26. 线程池在C＃
- 27. Java多线程性能随线程池大小的增加而变差
- 28. 如何为线程池中的单个线程设置时间限制？
- 29. 关闭一个固定大小的线程池
- 30. Java - 管理线程池的大小（主要增加）
scrapy没有一个线程池。你的意思是如何增加并发请求的数量 - 在文档中有几个设置覆盖了这一点。 – 2013-04-07 09:01:49