分隔二进制数据块

Question

我将大块日志数据存储在memcache中，以便稍后将其扔入数据库。在对服务器的每个请求中，我使用memcached :: append（）保存一组数据，使用换行符来分隔块。一个简化的版本是这样的：

$myCache->append('log', serialize($myArray)."\n"); 

后来，当我要建立可查询我拉所有行从数据库中和反序列化每一个：

$dataToInsert = explode("\n", $myCache->get('log')); 
$dataToInsert = array_map(function($row) { 
    return unserialize($row); 
}, $dataToInsert); 

也能正常工作与构建在serialize（）和unserialize（）中，但我想利用igbinary的明显优势 - 大小和速度。不幸的是，当我替换函数的igbinary版本时，出现错误。

看来，igbinary-序列化的数据可以包含“\ n”字符，所以当我爆炸存储的数据时，它会创建部分行，当然会失败。

除了换行符以外，我还可以使用分隔符来区分igbinary数据块，还是igbinary和append（）从根本上不兼容？

Answer 1

由于igbinary存储binary data as-is，因此不能保证任何字符可供使用：您可以序列化包含任何字节的字符串或整数，任何字符。

memcached支持添加，删除和替换数据以及更新字符串。

两种方式，以保持记录的数据出来的记忆和memcached的，直到SQL查询浮现在脑海中：

• 使用多个键：'log1'，...，'logN'并跟踪N。
• 通过转义序列化的二进制输出（并在反序列化之前消除）保留一个字符。

预约可以做这样的：

str_replace("\n", "\n1", $data) . "\n0" 

这将确保有每一次的输出\n， 它后跟一个0或1。

我不跟\n\n更换\n，因为这将无法正常工作，如果$data的开始或结束\n。

所以：

$myCache->append('log', str_replace("\n", "\n1", igbinary_serialize($myArray)."\n0"); 

拆分然后将数据使用\n0做的，而\n1被转义回\n：

$dataToInsert = explode("\n0", $myCache->get('log')); 
$dataToInsert = array_map(function($row) { 
    return igbinary_unserialize(str_replace("\n1", "\n", $row)); 
}, $dataToInsert);