是否支持从定界文件读取/写入十六进制浮点数？

Question

Python标准库或scipy / numpy / pandas等是否支持在定界文件（例如TSV或CSV）中读写浮点数（即“十六进制”）的十六进制表示形式？

作为测试，我制作了一个CSV文件，其中各列在十进制和十六进制浮点数之间交替，并尝试使用pandas.read_csv读取此文件。 在结果数据框中，将包含十进制浮点数的列正确转换为Python浮点数，而将包含十六进制浮点数的列保留为字符串。

---

编辑：澄清：我不需要帮助将hexfloats转换为float，反之亦然。 有float.fromhex和float.hex 。 我正在寻找的是一种文件读取器，该文件读取器将应用合理的启发式方法自动将十六进制浮点数转换为浮点数（就像pandas.read_csv知道将数字的十进制表示形式转换为Python数字对象一样）。

Answer 1

我在%格式规范中找不到任何可以为浮点数创建hex的内容（对于ints仅为%x ）。 因此，接受您的float.hex ，我可以创建一个函数，将数组中的每个float转换为十六进制字符串：

def foo(x):
    return x.hex()
vfoo=np.vectorize(foo)   # just for ease of applying foo to an array

In [478]: x=np.arange(12.).reshape(3,4)/3

In [479]: x
Out[479]: 
array([[ 0.        ,  0.33333333,  0.66666667,  1.        ],
       [ 1.33333333,  1.66666667,  2.        ,  2.33333333],
       [ 2.66666667,  3.        ,  3.33333333,  3.66666667]])

In [480]: vfoo(x)
Out[480]: 
array([['0x0.0p+0', '0x1.5555555555555p-2', '0x1.5555555555555p-1',
        '0x1.0000000000000p+0'],
       ['0x1.5555555555555p+0', '0x1.aaaaaaaaaaaabp+0',
        '0x1.0000000000000p+1', '0x1.2aaaaaaaaaaabp+1'],
       ['0x1.5555555555555p+1', '0x1.8000000000000p+1',
        '0x1.aaaaaaaaaaaabp+1', '0x1.d555555555555p+1']], 
      dtype='<U20')

然后我可以使用通常的savetxt将这些字符串写入文件

In [481]: np.savetxt('test.txt',vfoo(x), fmt='%25s',delimiter=',')

看起来像：

In [482]: cat test.txt
                 0x0.0p+0,     0x1.5555555555555p-2,     0x1.5555555555555p-1,     0x1.0000000000000p+0
     0x1.5555555555555p+0,     0x1.aaaaaaaaaaaabp+0,     0x1.0000000000000p+1,     0x1.2aaaaaaaaaaabp+1
     0x1.5555555555555p+1,     0x1.8000000000000p+1,     0x1.aaaaaaaaaaaabp+1,     0x1.d555555555555p+1

和loadtxt可以处理这个

In [486]: np.loadtxt('test.txt',delimiter=',')
Out[486]: 
array([[ 0.        ,  0.33333333,  0.66666667,  1.        ],
       [ 1.33333333,  1.66666667,  2.        ,  2.33333333],
       [ 2.66666667,  3.        ,  3.33333333,  3.66666667]])

当看到0x列时， loadtxt使用这段代码

/usr/lib/python3/dist-packages/numpy/lib/npyio.py in floatconv(x)
    656         x.lower()
    657         if b'0x' in x:
--> 658             return float.fromhex(asstr(x))

通过研究npyio.py文件，您可能会得到其他想法。

Answer 2

from binascii import unhexlify
from struct import unpack
hex_string="abcd33ef"
my_bytes = unhexlify(hex_string)
my_float = unpack("f",my_bytes)

我想...也许吗？