马歇尔多的protobuf到文件

Question

背景：

我使用谷歌的protobuf，我想读/写的protobuf的几个GB使用C++整理数据文件。因为建议将每个protobuf对象的大小保持在1MB以下，所以我认为写入文件的二进制流（如下所示）会起作用。每个偏移量都包含到达下一个偏移量的字节数，直到文件结束。这样，每个protobuf可以保持在1MB以下，并且我可以将它们放在一起以符合我心中的内容。

[int32 offset] 
[protobuf blob 1] 
[int32 offset] 
[protobuf blob 2] 
... 
[eof] 

我有在Github上起作用的implemntation：

src/glob.hpp
src/glob.cpp
test/readglob.cpp
test/writeglob.cpp

但我觉得我已经写了一些差的代码，并希望得到一些建议如何改善它。因此，

问题：

• 我使用reinterpret_cast<char*>读/写的32位整数从二进制fstream。由于我使用protobuf，所以我假设所有机器都是小端。我还断言int确实是4个字节。 鉴于这两个限制性假设，是否有更好的方法来读取/写入32位整数为二进制fstream？
• 在从fstream读书，我创建临时固定长度char缓冲器，这样我可以然后通过这个固定长度缓冲器向protobuf的库中使用ParseFromArray，作为ParseFromIstream将消耗整个流进行解码。我真的只想告诉图书馆最多读取fstream的N字节，但在protobuf中似乎没有这种功能。 在fstream的最多N个字节处传递函数的最习惯方法是什么？或者是我的设计充分颠覆，我应该完全考虑一种不同的方法？

编辑：

• @codymanix：我铸造char因为istream::read需要char数组，如果我没有记错。我也没有使用提取操作符>>，因为我读它是与二进制流使用差的形式。或者这是最后一条忠告吗？
• @Martin York：删除new/delete有利于std::vector<char>。 glob.cpp现在已更新。谢谢！

Answer 1

请勿使用new []/delete []。

取而代之的是，我们保留了一个std :: vector作为释放的情况。

不要认为读数会返回您请求的所有字节。
使用gcount（）检查以确保你得到了你所要求的。

而不是让Glob根据构造函数中的开关实现输入和输出的代码。而是实现两个专门的类，如ifstream/ofstream。这将简化界面和使用。