将pandas dataframe列拆分为多个列的最有效方法

Question

例如，我有一个包含列表作为值的数据帧列（'x'）。

import pandas as pd
jk = pd.DataFrame()
jk['x'] = [[1, 2, 3], [1, 4, 2], [27, 1, 3]]

我使用下面的代码将值拆分为这样的列。 但是，我的实际数据集非常大。 我在每个列表中有大约80,000行和16个值。 有没有更有效的方法来做到这一点？

jk1 = pd.DataFrame(jk.x.values.tolist(), columns=['a','b','c'])

Answer 1

不，没有更有效的方法

您应该首先避免创建一系列列表。 一旦你这样做，你就会得到一个带有嵌套指针层的object dtype系列。 一个层指向每个列表，另一个层指向每个列表中的各个元素。 这禁止矢量化操作。