将 Pyspark dataframe 加载到 postgres RDS 中的表中时出错
[英]Error while Loading a Pyspark dataframe into a table in postgres RDS
问题描述
尝试将 dataframe 写入 RDS 中的 postgres 表时出现以下错误
将DataFrame写入RDS中的active_user表
clean_user_df.write.jdbc(url=jdbc_url, table='active_user', mode=mode, properties=config)
1 个解决方案
解决方案1
0 2021-12-03 04:48:27
您需要下载 JDBC 驱动程序（您可以使用评论中的那个），然后按照官方说明使用该 jar 文件
./bin/spark-shell --driver-class-path postgresql-9.4.1207.jar --jars postgresql-9.4.1207.jar
在pyspark中为forframe调用foreach时出现__getattr__错误
[英]__getattr__ error while calling foreach for dataframe in pyspark
将 Pyspark Dataframe 写入 Hive 表 - 未定义名称“数据库”错误
[英]Write Pyspark Dataframe to Hive table - name 'database' is not defined Error
通过使用 foreach 方法处理旧 dataframe 创建新 pyspark dataframe 时出现泡菜错误
[英]Pickle error while creating new pyspark dataframe by processing old dataframe using foreach method
Pyspark 错误：“Py4JJavaError：调用 o655.count 时发生错误。” 在数据帧上调用 count() 方法时
[英]Pyspark Error: “Py4JJavaError: An error occurred while calling o655.count.” when calling count() method on dataframe
声明:本站的技术帖子网页，遵循CC BY-SA 4.0协议，如果您需要转载，请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.
相关问题
有限制地将表格加载到PySpark Dataframe中
Pyspark dataframe入hive表
将CSV载入PySpark中的DataFrame时出现问题
在pyspark中为forframe调用foreach时出现__getattr__错误
将 Pyspark Dataframe 写入 Hive 表 - 未定义名称“数据库”错误
通过使用 foreach 方法处理旧 dataframe 创建新 pyspark dataframe 时出现泡菜错误
pyspark：在 pyspark 中创建新列时出错
PySpark：Dataframe 嵌套字段到关系表
如何将PySpark中的表dataframe导出到csv？
Pyspark 错误：“Py4JJavaError：调用 o655.count 时发生错误。” 在数据帧上调用 count() 方法时
相关标签