0
我正在使用@shai的代码将数据转换为hdf5，但转换后数据的大小过大，大于caffe的限制大小（2GB） 那么，我的问题是我们应该如何拆分数据？ 我们只需要分别转换数据取决于我们想要的？如何将分割回归数据转换为hdf5（Caffe）
A
回答
0
这将有助于获得更多的信息以给出更好的答案。请给出Caffe给你的实际错误。另外，什么是大于2GB？它是txt文件吗？
HDF5效率不高。我会建议使用数据库层（http://caffe.help/manual/layers/data.html）或编写自己的自定义Python层（http://caffe.help/manual/layers/python.html）。
相关问题
- 1. HDF5数据Caffe中的多级分类
- 2. 如何分割字符串并将其转换为整数
- 3. 回归使用Caffe
- 4. 如何以HDF5格式提供caffe多标签数据？
- 5. caffe像素级分类/回归
- 6. 将返回2递归的递归函数转换为迭代
- 7. 将Caffe模型转换为CoreML
- 8. 将Caffe配置转换为DeepLearning4J配置
- 9. 将TensorRT输出转换为Caffe
- 10. 将Tensorflow模型转换为Caffe模型
- 11. 如何将数据从ASCII转换为Unicode（正确归类）？
- 12. caffe：如何解释EuclideanLoss（像素回归）
- 13. 将Spark数据框分割为每一行并将其转换为JSON - Python
- 14. 将Caffe caffe :: Datum转换为OpenCV cv :: Mat in C++
- 15. 如何将循环转换为递归？
- 16. 将plpgsql递归函数转换回pg8.1
- 17. 分割数递归
- 18. R - 分割数据，回归并将公式应用于新的分割数据集
- 19. 如何分割字符串数组并将其转换为散列数
- 20. Python的转换分割功能回到
- 21. 如何将XML数据转换为data.frame？
- 22. 如何将XML数据转换为NSMutableArray
- 23. 如何将Streamreader数据转换为XmlDocument？
- 24. 如何将列数据转换为行
- 25. 如何将JavaPairRDD转换为数据集？
- 26. 如何将数据转换为图像？
- 27. 如何将dict转换为数据框？
- 28. 如何将行数据转换为列？
- 29. 将循环转换为递归函数
- 30. 将PHP数组递归转换为XML？
您是否将每个示例都制作为hdf5文件，并且单个示例大于2GB？你能添加一个链接到shai的代码以供参考吗？ – Jonathan
@Jonathan我使用caffe中的matlab示例代码来转换我的数据，并且我自己将文本文件中的数据分开，但是这个shai的代码： http://stackoverflow.com/q/31774953/6281477 –