[英]Python Pandas Debugging on to_datetime
数以百万计的数据记录在我的数据框中。 我必须将字符串列转换为日期时间。 我这样做如下:
allData['Col1'] = pd.to_datetime(allData['Col1'])
但是,某些字符串不是有效的日期时间字符串,因此出现值错误。 我不太擅长使用Python进行调试,因此我在努力寻找某些数据项不可转换的原因。
我需要Python向我显示行号以及不可转换的值,而不是抛出无用的错误,使我一无所获。 我该如何实现?
您可以使用boolean indexing
与条件,其中检查NaT
由值isnull
创建to_datetime
与参数errors='coerce'
-它创造NaT
哪里都是无效的日期时间:
allData1 = allData[pd.to_datetime(allData['Col1'], errors='coerce').isnull()]
样品:
allData = pd.DataFrame({'Col1':['2015-01-03','a','2016-05-08'],
'B':[4,5,6],
'C':[7,8,9],
'D':[1,3,5],
'E':[5,3,6],
'F':[7,4,3]})
print (allData)
B C Col1 D E F
0 4 7 2015-01-03 1 5 7
1 5 8 a 3 3 4
2 6 9 2016-05-08 5 6 3
print (pd.to_datetime(allData['Col1'], errors='coerce'))
0 2015-01-03
1 NaT
2 2016-05-08
Name: Col1, dtype: datetime64[ns]
print (pd.to_datetime(allData['Col1'], errors='coerce').isnull())
0 False
1 True
2 False
Name: Col1, dtype: bool
allData1 = allData[pd.to_datetime(allData['Col1'], errors='coerce').isnull()]
print (allData1)
B C Col1 D E F
1 5 8 a 3 3 4
声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.