将usnparser类似于json的数据转换为pandas dataframe

Question

我有usnparser数据，其输出如下（套利字段）：

{
 "thisisafield":"THISISAVALUE",
 "thisisanewf": "ThisIsANewVal",
 "LastField":"LastValue"
}
{
 "thisisafield":"THISISAVALUE1",
 "thisisanewf": "ThisIsANewVal1",
 "LastField":"LastValue1"
}

我正在尝试像下面这样的大熊猫阅读它：

data = pathtomyfile
pd.read_json(data, orient='records')

我也尝试过使用json，如下所示：

数据= json.dumps（pathtomyfile）pd.read_json（data，orient ='records'）

我如何将数据获取到熊猫数据框？

Answer 1

这是一种方法，但是您需要编辑文件中的数据：

import pandas as pd
import ast

with open(pathtomyfile) as f:
    data = f.read()
    data = '[' + data.replace('\n', '').replace('}', '},') + ']' #convert it to list of dicts
    df = pd.DataFrame(ast.literal_eval(data))
    df
#thisisafield  thisisanewf    LastField
#THISISAVALUE  ThisIsANewVal  LastValue
#THISISAVALUE1 ThisIsANewVal1 LastValue1

并使您的数据json转储，如下所示：

data = '[' + data.replace('\n', '').replace('}', '},', data.count('}')-1) + ']'
df = pd.read_json(data)