将字符串 YYYYMMDDHHMM 转换为日期 DD-MM-YYYY HH:SS PYSPARK

Question

我已经从 JSON 中提取了日期值 202108161202。需要将此日期转换为 DD-MM-YYYY HH:MM

参考Converting yyyymmdd to MM-dd-yyyy format in pyspark

创建如下所示的 lambda 函数并能够获得如下所示的输出。

+----------------+
|   convertedDate|
+----------------+
|16-08-2021 00:08|
+----------------+

#Lambda function to convert string to date
convertStrtoDate =  udf (lambda x: datetime.strptime(x, '%Y%m%d%H%M'), DateType())

df = dfSource.withColumn('convertedDate', date_format(convertStrtoDate(col('string_date_column')), 'dd-MM-yyyy HH:MM'))

Answer 1

在熊猫我们可以使用pd.to_datetime()用于转换...

df['DataFrame Column'] = pd.to_datetime(df['DataFrame Column'], format=specify your format)

其实我不明白这个问题，你能解释一下确切的要求吗？？？