在Python中使用动态数组反序列化C结构

Question

我最近继承了一个项目，在该项目中我们反序列化了一个由我无法更改的系统写出的一串数据（希望他们使用标准串行器，但我无法更改此项）。在大多数情况下，我能够使用ctypes来表示结构并将数据正确地转换为Python，但是我们有一些情况下底层的数据结构是一团糟（再次，无论我尝试过多少次都无法改变）。当C结构定义如下2例正在推动我坚果试图找到一种有效的方式是：

简单的例子：

struct b{ 
    int data; 
    int more_data; 
}; 

struct a{ 
    int num_entries; 
    b* data; 
}; 

，当它是序列化，挤满了b *数据进入内存，就好像它是一个静态数组减速。

这里来最恐怖的情况下，我不得不面对：

struct c{ 
    int a; 
    int b; 
}; 

struct b{ 
    int random_data; 
    c* data; 
    int more_data; 
}; 

struct a{ 
    int len; // This actually defines the length in struct b for "data" array size 
    b nested_data; 
    c why_not_it_is_this_poorly_organized; 
} 

任何帮助将肯定可以理解的！

Answer 1

你试过看看Python bitstring API？从这里开始，您可以编写一些方法通过切分数组来反序列化数据。它可能是这个样子：

def parse_c(buffer): 
    # Parse data into list 

def parse_b(buffer): 
    # Parse first int of B 
    list = parse_c(buffer[8:-8]) # skip first/last int 
    # Parse last int of B 

def parse_a(buffer): 
    # Parse len (you could also pass this into parse_b, but b can figure it out from the size) 
    b = parse_b(buffer[-8:-16]) 
    c = parse_c(buffer[-16:])