回答
每天100万肯定是很多,其很难想象有什么需要有这样一个庞大的数字资源。我所能建议的仅仅是在ftp同步级别上使用现成的工具来解决此问题。 (也许http://www.ftpsynchronizer.com/?)
如果失败了,敲开一个目录来观察ftp上传器在使用ftp库的大多数通用语言中编程工作将不是一件非常困难的工作。
另一种选择是,如果您可以在面向服务器的互联网上获取这些文件,则可以切换到使用Akamai Http Content Delivery并使Akamai获取图像,而不必持续推送它们。
+1网站投递的好主意 – andy 2012-01-03 02:42:35
有人可以提供一个链接,指向您称为“Akamai Http Content Delivery?”的文档。我没有特别找到它。在我的项目中,我必须从私有的SFTP服务器上获取大量文件,并通过Onstream在Akamai上托管它们。如果我能让Akamai为我做拉,这将是有效的,而不是让我的动态站点的应用程序服务器从SFTP拉出并将文件推送到Akamai。 – 2014-03-05 14:24:46
如果你有这么大数量的文件,并且你想要更快地上传,那么我会建议去'signiant'产品,这将大大提高上传时间。它的第三方上传服务与Akamai合作得非常好,许多客户都使用它。
- 1. 什么是简单合并文件的最快捷方式,什么是分割数组的最快捷方式?
- 2. 上传大文件到服务器的最快方法是什么
- 3. 验证用户上传文件的最佳方式是什么?
- 4. 用jQuery上传文件的最佳方式是什么?
- 5. 上传ASP.NET MVC 2文件的最佳方式是什么?
- 6. 什么是用javaee上传文件的最佳方式maven
- 7. 从asp.net上传Akamai文件
- 8. 将文件上传到MemoryStream(C#)的最佳做法是什么?
- 9. 什么是流式传输桌面的最快方式?
- 10. 将xls文件上传到数据库的最快方法
- 11. 将大量数据集上传到appengine的最快方法是什么?
- 12. 什么是最快的方式来查找和删除文件?
- 13. 将DataTable导出到Excel文件的最佳方式是什么?
- 14. 将数据保存到文件的最佳方式是什么?
- 15. 在iPhone上写大文件的最快方法是什么?
- 16. 将Excel文件传递到WEB API Web服务的最佳方式是什么?
- 17. 将文件夹上传到网站的最佳方法是什么?
- 18. 将csv文件上传到MS SQL表格的最佳方法是什么?
- 19. 上传文件的最佳/最快方式
- 20. 在GLSL中传递值的最快方式是什么?
- 21. 将文件上传到php web服务并将其保存到mysql数据库的最佳方式是什么?
- 22. 将数据从Hadoop DFS传输到本地文件系统的最快方式是什么?
- 23. 什么是上传一个非常大的文件夹到我的服务器的最佳/最快的方法?
- 24. 在Web服务器上合并音频文件的最快方式是什么?
- 25. WPF:将项目添加到ListView的最有效/最快的方式是什么?
- 26. 最快的方式将文件
- 27. 使用Java传输文件的最佳方式是什么?
- 28. 上传文件最安全的方法是什么?
- 29. 从Node.js将大文件复制到S3的最快方法是什么?
- 30. 将大型DataFrame输出到CSV文件的最快方法是什么?
您的服务器能够承受上百万个文件的负载吗? – Jiminy 2011-10-03 07:58:17