2016-07-11 73 views
3

下面是我的数据框的输出:删除字典报价从熊猫数据框中

   0         1 
0 {"time": "2016-03-28T23:23:12Z"  "target": "Raffi-Antilian"} 
1 {"time": "2016-03-28T23:23:12Z"  "target": "Caroline-Kaiser"} 

我怎么可以转换单个记录从类型字典的正常数据帧记录的列名是字典键和记录值是字典中的值?我期望的输出应该是:

   Time    Target 
0 2016-03-28T23:23:12Z  Raffi-Antilian 
1 2016-03-28T23:23:12Z  Caroline-Kaiser 

我有大约2000条记录,感谢任何帮助/指导。

+5

如何将数据存入数据框?这是解决这个问题的一步。 – root

+0

@root看起来像一个字典或JSON的repr,由','分割......但是......完全同意:) –

+0

@root我使用pd.DataFrame.from_csv命令通过.txt文件获取它。在.txt文件中,单个记录被封装在一个字典中,并且记录之间没有分隔符(例如{'time':XX,'Target':YY}'''''''',V','Target':ZZ})。 –

回答

1

您可以用read_csv如果sep=';'在文件;,因此,所有的数据都在一个Series

import pandas as pd 
import ast 
import io 

temp=u"""{"time": "2016-03-28T23:23:12Z","target": "Raffi-Antilian"} 
{"time": "2016-03-28T23:23:12Z","target": "Caroline-Kaiser"}""" 
#after testing replace io.StringIO(temp) to filename 
s = pd.read_csv(io.StringIO(temp), index_col=None, header=None, sep=';', squeeze=True) 
print (s) 
0 {"time": "2016-03-28T23:23:12Z","target": "Raf... 
1 {"time": "2016-03-28T23:23:12Z","target": "Car... 
Name: 0, dtype: object 

L = s.apply(lambda x: ast.literal_eval(x)).tolist() 
print (L) 
[{'time': '2016-03-28T23:23:12Z', 'target': 'Raffi-Antilian'}, 
{'time': '2016-03-28T23:23:12Z', 'target': 'Caroline-Kaiser'}] 

print (pd.DataFrame(L)) 
      target     time 
0 Raffi-Antilian 2016-03-28T23:23:12Z 
1 Caroline-Kaiser 2016-03-28T23:23:12Z 

编辑:

另一条线解决方案:

import pandas as pd 
import json 

print (pd.DataFrame([json.loads(line.strip()) for line in open('file.txt')])) 

      target     time 
0 Raffi-Antilian 2016-03-28T23:23:12Z 
1 Caroline-Kaiser 2016-03-28T23:23:12Z 
+1

一如既往的绝佳解决方案: ) 谢谢 –

3
import json 
data = [] 
with open('filename', 'r') as f: 
    for line in f: 
     data.append(json.loads(line)) 
pd.DataFrame(data) 

Out[49]: 
      target     time 
0 Raffi-Antilian 2016-03-28T23:23:12Z 
1 Caroline-Kaiser 2016-03-28T23:23:12Z 
然后通过 ast.literal_eval和最后使用 pd.DataFrame转换 stringdictionary