python 读写二进制 struct_python系列（struct-数据结构之二进制数据结构）

该struct模块包括用于在字节串和本机Python数据类型(如数字和字符串)之间进行转换的函数。

函数与结构类

一组模块级函数可用于处理结构化值以及Struct类。格式说明符从其字符串格式转换为编译表示形式，类似于处理正则表达式的方式。转换需要一些资源，因此在创建Struct实例并在实例上调用方法而不是使用模块级函数时，通常更有效。以下所有示例都使用Struct该类。

包装和拆包

Structs支持将数据打包成字符串，并使用格式说明符从字符串中解压缩数据，格式说明符由表示数据类型和可选计数和字节顺序指示符的字符组成。有关支持的格式说明符的完整列表，请参阅标准库文档。

在此示例中，说明符调用整数或长整数值，双字节字符串和浮点数。包含格式说明符中的空格以分隔类型指示符，并在编译格式时忽略。

struct_pack.py

import structimport binasciivalues = (1, 'ab'.encode('utf-8'), 2.7)s = struct.Struct('I 2s f')packed_data = s.pack(*values)print('Original values:', values)print('Format string :', s.format)print('Uses :', s.size, 'bytes')print('Packed Value :', binascii.hexlify(packed_data))该示例将打包值转换为十六进制字节序列以进行打印binascii.hexlify()，因为某些字符为空。

$ python3 struct_pack.pyOriginal values: (1, b'ab', 2.7)Format string : b'I 2s f'Uses : 12 bytesPacked Value : b'0100000061620000cdcc2c40'用于unpack()从其打包表示中提取数据。

struct_unpack.py

import structimport binasciipacked_data = binascii.unhexlify(b'0100000061620000cdcc2c40')s = struct.Struct('I 2s f')unpacked_data = s.unpack(packed_data)print('Unpacked Values:', unpacked_data)将打包值传递给unpack()，返回基本相同的值(注意浮点值的差异)。

$ python3 struct_unpack.pyUnpacked Values: (1, b'ab', 2.700000047683716)字节顺序

默认情况下，使用本机C库的字节序概念对值进行编码 。通过在格式字符串中提供显式字节序指令，可以轻松覆盖该选项。

struct_endianness.py

import structimport binasciivalues = (1, 'ab'.encode('utf-8'), 2.7)print('Original values:', values)endianness = [ ('@', 'native, native'), ('=', 'native, standard'), ('', 'big-endian'), ('!', 'network'),]for code, name in endianness: s = struct.Struct(code + ' I 2s f') packed_data = s.pack(*values) print() print('Format string :', s.format, 'for', name) print('Uses :', s.size, 'bytes') print('Packed Value :', binascii.hexlify(packed_data)) print('Unpacked Value :', s.unpack(packed_data))下表列出了使用的字节顺序说明符Struct。

struct的字节顺序说明符码含义@本地订单=原生标准大端!网络订单

$ python3 struct_endianness.pyOriginal values: (1, b'ab', 2.7)Format string : b'@ I 2s f' for native, nativeUses : 12 bytesPacked Value : b'0100000061620000cdcc2c40'Unpacked Value : (1, b'ab', 2.700000047683716)Format string : b'= I 2s f' for native, standardUses : 10 bytesPacked Value : b'010000006162cdcc2c40'Unpacked Value : (1, b'ab', 2.700000047683716)Format string : b'< I 2s f' for little-endianUses : 10 bytesPacked Value : b'010000006162cdcc2c40'Unpacked Value : (1, b'ab', 2.700000047683716)Format string : b'> I 2s f' for big-endianUses : 10 bytesPacked Value : b'000000016162402ccccd'Unpacked Value : (1, b'ab', 2.700000047683716)Format string : b'! I 2s f' for networkUses : 10 bytesPacked Value : b'000000016162402ccccd'Unpacked Value : (1, b'ab', 2.700000047683716)缓冲区

使用二进制打包数据通常保留用于对性能敏感的情况或将数据传入和传出扩展模块。通过避免为每个打包结构分配新缓冲区的开销，可以优化这些情况。该pack_into()和unpack_from()方法支持直接写入预先分配给缓冲区。

struct_buffers.py

import arrayimport binasciiimport ctypesimport structs = struct.Struct('I 2s f')values = (1, 'ab'.encode('utf-8'), 2.7)print('Original:', values)print()print('ctypes string buffer')b = ctypes.create_string_buffer(s.size)print('Before :', binascii.hexlify(b.raw))s.pack_into(b, 0, *values)print('After :', binascii.hexlify(b.raw))print('Unpacked:', s.unpack_from(b, 0))print()print('array')a = array.array('b', b'\0' * s.size)print('Before :', binascii.hexlify(a))s.pack_into(a, 0, *values)print('After :', binascii.hexlify(a))print('Unpacked:', s.unpack_from(a, 0))该size属性Struct告诉我们缓冲区需要多大。

$ python3 struct_buffers.pyOriginal: (1, b'ab', 2.7)ctypes string bufferBefore : b'000000000000000000000000'After : b'0100000061620000cdcc2c40'Unpacked: (1, b'ab', 2.700000047683716)arrayBefore : b'000000000000000000000000'After : b'0100000061620000cdcc2c40'Unpacked: (1, b'ab', 2.700000047683716)