AWS Athena 如何从不同的 S3 存储桶获取数据？

Question

我有两个 AWS S3 存储桶。 一个存储桶存储产品用户日志。 另一个存储桶存储用户属性（例如性别、年龄等）数据。

我想从这些存储桶中获取用户日志和归因数据，并将数据合并到一个表中。 我可以知道该怎么做吗？

Answer 1

很容易...

• 使用CREATE TABLE定义每个表，指定数据的LOCATION
• 使用标准 SQL 运行连接两个表的查询

您可以同时从两个表中查询数据，也可以使用CREATE TABLE AS创建一个新表，该表是此类查询的 output。

Answer 2

只需使用以下方法创建两个表

CREATE [EXTERNAL] TABLE [IF NOT EXISTS]
 [db_name.]table_name [(col_name data_type [COMMENT col_comment] [, ...] )]
 [COMMENT table_comment]
 [PARTITIONED BY (col_name data_type [COMMENT col_comment], ...)]
 [ROW FORMAT row_format]
 [STORED AS file_format] 
 [WITH SERDEPROPERTIES (...)] ]
 [LOCATION 's3://bucket_name/[folder]/']
 [TBLPROPERTIES ( ['has_encrypted_data'='true | false',] ['classification'='aws_glue_classification',] property_name=property_value [, ...] ) ]

然后加入两个表以创建所需的结果表

AWS 文档链接