我正在尝试使用df.write.saveAsTable("table_name")保存 dataframe 但我无法再次检索此表（不在同一次运行中）。 我试过了 和 但两者都没有工作给出错误 ...
遇到一个奇怪的问题。 删除分区的Alter table命令适用于 > 或 < 或 >= 或 <= 符号，但不适用于 = 检查。 工作命令： 命令不起作用并抛出错误，指出分区不存在： 当我show partitions ，我可以看到“20231230”分区。 注意： ...
我在 HIVE 中有三个外部表： 表格1： 表 2： 表3： 我现在想制作一个托管表，在我的两个唯一键列上左外连接上面的表，如下所示： 我该怎么做呢？ 编辑 1： 这是我能想到的，从两个表中加入。 我仍然无法弄清楚如何将三个表连接起来形成一个表： 编辑 2： 我刚刚意识到加入很昂贵。 那么，我可以使 ...
我有三个.csv文件，每个文件位于不同的 hdfs 目录中。 我现在想用这三个文件中的数据制作一个 Hive 内部表。 我想要第一个文件的四列，第二个文件的三列和第三个文件的两列。 第一个文件与第二个文件共享一个唯一的 id 列，第三个文件与第三个文件共享另一个唯一的 id 列。 两个唯一 ID 都 ...
我在 HDFS 中有一个目录，其中具有固定结构和列名的.csv文件将在每天结束时转储，可能如下所示： 我应该从具有附加了新的数据，在每一天的开始，随着数据的蜂巢表.csv前一天的.csv文件。 我如何做到这一点。 ...
我正在尝试在一些使用spark-scala生成的avro文件之上创建一个Hive external table 。 我正在使用CDH 5.16 ，它具有hive 1.1和spark 1.6 。 我创建了hive external table ，它运行成功。 但是当我查询数据时，所有列都为NULL ...
我成功地使用Sqoop从oracle表临时导入了Hive表。 现在，我想使用我用于即席导入的确切参数来创建并保存Sqoop作业。 但是如果我说： sqoop job --create myjob --import \\ --connect jdbc:mysql://host.port ...
我正在尝试在 spark (scala) 中创建一个表，然后从两个现有数据帧中插入值，但我得到了这个例外： 这是代码： 我该如何解决？ ...
我需要从hdfs位置创建一个外部配置单元表，其中文件中的一列具有保留名称（结尾）。 运行脚本时出现错误：“无法在列规范中识别'end''STRUCT''<'附近的输入” 我找到2个解决方案。 第一个是设置hive.support.sql11.reserved.keywor ...
我一直在尝试使用以下语句删除配置单元外部表 修改表$ tableName set tblproperties（'EXTERNAL'='FALSE'）; 在我传递这些属性并执行 DROP TABLE TABLENAME; 此命令还将删除该数据库中其他配置单元表中 ...
我是hadoop的新手。 我有50列的tsv格式的数据，我需要将数据存储到配置单元中。 如何在不使用读取模式使用create table statementa手动创建表的情况下快速创建数据并将其加载到表中？ ...
我正在尝试在 Spark 中读取 Hive 表。 以下是 Hive 表格式： 当我尝试使用 Spark SQL 和以下命令读取它时： 我收到以下警告：- 18/07/02 18:02:02 WARN ReaderImpl：找不到字段：_col0、_col1、_col2、_col3、_ ...
我在XYZ数据库中有一个名为ABC的配置单元表。 当我运行describe formatted XYZ.ABC; 从色相中，我得到以下信息。 那是 那么，这实际上是外部还是托管/内部配置单元表？ ...