我有超过25000点人的数据如何管理这些数据,以便有没有性能问题如何管理数据量非常大的文件夹中
1
A
回答
1
需要更多的信息。
您担心哪些性能问题?储存空间?查找速度?写入速度?
数据如何排列?
通常这样的数据集会自然存储在数据库中 - 是否有一个特定的原因,你为什么要将它存储在文件夹?文件夹通常会要求您决定特定的查找系统/密钥,而数据库允许您根据自己的意愿对数据进行切块。
0
对于输入/输出,确保读写器被缓冲。
3
如果你想保留在文件中(而不是在数据库中),一个重要的事情是将它们分散到子文件夹中。单个文件夹中的25000多个文件将是,比平均包含100个文件的250个子文件夹的访问速度慢很多。
相关问题
- 1. 如何处理非常大的数据?
- 2. 如何管理非常大的MySql数据库
- 3. 如何在WPF中管理包含非常大数据的列表框?
- 4. Angularjs管理大量数据
- 5. 如何共享我的文件夹是非管理员?
- 6. 很多文本文件中的大量数据 - 如何处理?
- 7. 处理非常大的数据帧
- 8. 如何根据文件和文件夹管理jsTree的contextmenu
- 9. 如何管理非文件组件?
- 10. 如何使用Tableau处理非常大的数据
- 11. 如何处理拥有非常大数据的表?
- 12. 处理非常大的文本数据需要保存的文件格式
- 13. 如何计算组件非常大的2向量的大小?
- 14. 如何创建非常大的矢量
- 15. WIX中非管理员用户的Appdata文件夹中没有文件
- 16. c#中的管理非托管变量
- 17. 使用VIM管理#TODO(大量文件)
- 18. .NET中的非常大的XML文件
- 19. 针对数据量非常大的数据库设计
- 20. iPhone:文件夹管理
- 21. 如何在vb.net中处理一个非常大的数组
- 22. 如何在节点js中处理非常大的数字?
- 23. 在处理非常大的数据集时,Parallel.ForEach抛出异常
- 24. 如何存储和管理大文件
- 25. laravel app.js非常大的文件大小
- 26. CUDA最大数量管理
- 27. 如何管理我的域中的多个文件夹?
- 28. 如何管理wp7中xml文件中的数据?
- 29. 在html中处理非常大的视频文件5
- 30. 在内存中管理非常大的xml
取决于文件系统和特定的使用场景。我在NTFS上的测量结果表明,与使用分布在676个子目录中的相同文件相比,NTFS能够以大约400K文件的速度运行。 – 2011-02-04 11:09:29