我问了一个关于在python lambda函数中创建并行进程的相关问题,我更加好奇如何解决max_pool_sizes上的一个特定问题。我正在使用线程模块,简而言之,我的问题是尝试从S3访问多个文件,以同时从所有文件中检索数据。目前,似乎有一个max_pool_size属性阻止我获取我需要的所有内容。因此我得到这个错误Connection pool is full, discarding connection: s3.amazonaws.com
有没有其他人有类似的错误或有任何建议?多线程aws函数
Q
多线程aws函数
0
A
回答
0
您可能会检查ClientConfiguration类并使用setMaxConnections(int maxConnections)方法实现此目的。把这个链接看看:
+0
不幸的是我需要它使用boto3 sdk for python。感谢boto也许boto拥有类似的布局 –
+0
无论哪种方式,您都非常感谢我给出了一个很好的解决方案! –
0
我也有类似的需要,发现在AWS计算博客的解决方案。我下面链接此线程的未来的读者:
Parallel Processing in Python with AWS Lambda(奥兹阿肯09月/ 2017年,AWS计算博客)
相关问题
- 1. '多线程'setInterval函数(Javascript)
- 2. 多线程函数调用
- 3. 函数的多重处理/线程
- 4. 类与多线程成员函数
- 5. 如何在Flask中多线程函数?
- 6. 多线程环境中的mkdirs()函数
- 7. Python的多线程径向基函数
- 8. 多线程DLL和锁从第二个线程调用函数
- 9. setDaemon函数线程
- 10. 更好的多线程:单个函数或集合函数
- 11. Claudia.js具有多个AWS lambda函数
- 12. Python的多功能多线程与线程。线程? (可变线程数)
- 13. AWS Lambda函数+ CloudWatch
- 14. x线程数的多线程示例
- 15. 多个DAO jdbctemplate构造函数注入多线程风险?
- 16. 定期运行三个函数 - 多线程?多?
- 17. 线程和函数'打印'
- 18. Qt线程调用函数
- 19. ThreadbyEvaluatingJavascript的线程函数
- 20. C++线程函数说明
- 21. boost ::线程函数执行
- 22. strtok函数线程安全
- 23. 线程化函数-PyQt GUI
- 24. Python多线程/具有函数的子进程
- 25. aws s3>是使用多线程实现的“aws s3 cp”命令吗?
- 26. 多线程C++,从一类传递函数用参数到主
- 27. 具有可变类型参数的多线程函数
- 28. 如何多线程函数,从API调用返回数据
- 29. 如何将多个参数传递给线程函数
- 30. 使用多线程中的输入参数调用函数
这有什么好做的λ,对不对?这纯粹是一个boto3问题。 –
是的。 Lambda只是背景信息。 –
太好了,我已经从问题的标题和标签中删除了“lambda”。这听起来像你有一个关于'boto3'的问题;如果这是正确的,那么我建议你在问题的标题和标签中添加“boto3”。 –