Python可写缓冲区/内存视图到数组/字节数组/ ctypes字符串缓冲区

Matt 发表于 Dev

马特

问题：

固定大小记录的二进制数据
想要使用struct.unpack_from和struct.pack_in来操作二进制数据
不需要数据副本
希望有多个视图进入内存，以简单地抵消计算等。
数据可以在array.array bytearray或ctypes字符串缓冲区中

我试图做的是：

part1 = buffer(binary_data, 0, size1)
part2 = buffer(binary_data, size1, size2)
part3 = buffer(binary_data, size1 + size2) # no size is given for this one as it should consume the rest of the buffer
struct.pack_into('I', part3, 4, 42)

这里的问题是struct.pack_into抱怨缓冲区是只读的。我已经研究过memoryviews，因为它们可以创建一个读/写视图，但是它们不允许您像缓冲区函数那样指定偏移量和大小。

如何完成将多个零复制视图放入一个可读，可写且可以使用struct.unpack_from和struct.pack_into进行访问/修改的字节缓冲区中

孙ry

在2.6+中，ctypes数据类型具有一种from_buffer采用可选偏移量的方法。它期望可写缓冲区，否则将引发异常。（对于只读缓冲区有from_buffer_copy。）这是使用ctypeschar数组的示例的快速翻译：

from ctypes import *
import struct

binary_data = bytearray(24)
size1 = size2 = 4
size3 = len(binary_data) - size1 - size2

part1 = (c_char * size1).from_buffer(binary_data)
part2 = (c_char * size2).from_buffer(binary_data, size1)
part3 = (c_char * size3).from_buffer(binary_data, size1 + size2)
struct.pack_into('4I', part3, 0, 1, 2, 3, 4)

>>> binary_data[8:]
bytearray(b'\x01\x00\x00\x00\x02\x00\x00\x00\x03\x00\x00\x00\x04\x00\x00\x00')

>>> struct.unpack_from('4I', part3)
(1, 2, 3, 4)