用Impala寫入S3實木復合地板

Question

我想以鑲木地板格式將整個表寫入s3a。 我們將其稱為表abc_schem.thattable。 我想使用Impala查詢來選擇* WHERE to_date（create_time）='YYYY-MM-DD'

寫入Parquet S3的確切語法是什么？

Answer 1

您可以在特定位置創建一個外部表，並在已配置s3系統的情況下將其插入到該表中

CREATE EXTERNAL TABLE abc_schem.thattable(
... 
) 
STORED AS PARQUET 
LOCATION 's3a://bucket/path';

然后使用一些LOAD DATA或INSERT INTO... SELECT... FROM命令從那里獲取數據

Answer 2

CREATE TABLE schema.temp_c 
STORED AS PARQUET LOCATION "s3a://s3highlevel/c/lowlevel" AS 
SELECT * FROM schema.table