• 3.5 字节到大整数的打包与解包
    • 问题
    • 解决方案
    • 讨论

    3.5 字节到大整数的打包与解包

    问题

    你有一个字节字符串并想将它解压成一个整数。或者,你需要将一个大整数转换为一个字节字符串。

    解决方案

    假设你的程序需要处理一个拥有128位长的16个元素的字节字符串。比如:

    1. data = b'\x00\x124V\x00x\x90\xab\x00\xcd\xef\x01\x00#\x004'

    为了将bytes解析为整数,使用 int.from_bytes() 方法,并像下面这样指定字节顺序:

    1. >>> len(data)
    2. 16
    3. >>> int.from_bytes(data, 'little')
    4. 69120565665751139577663547927094891008
    5. >>> int.from_bytes(data, 'big')
    6. 94522842520747284487117727783387188
    7. >>>

    为了将一个大整数转换为一个字节字符串,使用 int.to_bytes() 方法,并像下面这样指定字节数和字节顺序:

    1. >>> x = 94522842520747284487117727783387188
    2. >>> x.to_bytes(16, 'big')
    3. b'\x00\x124V\x00x\x90\xab\x00\xcd\xef\x01\x00#\x004'
    4. >>> x.to_bytes(16, 'little')
    5. b'4\x00#\x00\x01\xef\xcd\x00\xab\x90x\x00V4\x12\x00'
    6. >>>

    讨论

    大整数和字节字符串之间的转换操作并不常见。然而,在一些应用领域有时候也会出现,比如密码学或者网络。例如,IPv6网络地址使用一个128位的整数表示。如果你要从一个数据记录中提取这样的值的时候,你就会面对这样的问题。

    作为一种替代方案,你可能想使用6.11小节中所介绍的 struct 模块来解压字节。这样也行得通,不过利用 struct 模块来解压对于整数的大小是有限制的。因此,你可能想解压多个字节串并将结果合并为最终的结果,就像下面这样:

    1. >>> data
    2. b'\x00\x124V\x00x\x90\xab\x00\xcd\xef\x01\x00#\x004'
    3. >>> import struct
    4. >>> hi, lo = struct.unpack('>QQ', data)
    5. >>> (hi << 64) + lo
    6. 94522842520747284487117727783387188
    7. >>>

    字节顺序规则(little或big)仅仅指定了构建整数时的字节的低位高位排列方式。我们从下面精心构造的16进制数的表示中可以很容易的看出来:

    1. >>> x = 0x01020304
    2. >>> x.to_bytes(4, 'big')
    3. b'\x01\x02\x03\x04'
    4. >>> x.to_bytes(4, 'little')
    5. b'\x04\x03\x02\x01'
    6. >>>

    如果你试着将一个整数打包为字节字符串,那么它就不合适了,你会得到一个错误。如果需要的话,你可以使用 int.bit_length() 方法来决定需要多少字节位来存储这个值。

    1. >>> x = 523 ** 23
    2. >>> x
    3. 335381300113661875107536852714019056160355655333978849017944067
    4. >>> x.to_bytes(16, 'little')
    5. Traceback (most recent call last):
    6. File "<stdin>", line 1, in <module>
    7. OverflowError: int too big to convert
    8. >>> x.bit_length()
    9. 208
    10. >>> nbytes, rem = divmod(x.bit_length(), 8)
    11. >>> if rem:
    12. ... nbytes += 1
    13. ...
    14. >>>
    15. >>> x.to_bytes(nbytes, 'little')
    16. b'\x03X\xf1\x82iT\x96\xac\xc7c\x16\xf3\xb9\xcf...\xd0'
    17. >>>

    原文:

    http://python3-cookbook.readthedocs.io/zh_CN/latest/c03/p05_pack_unpack_large_int_from_bytes.html