将S3用于HIVE元存储库？
[英]Use S3 for HIVE metastore?
问题描述
我将S3配置为Hive的数据仓库。 但是，我不确定Hive的“元存储”部分是否可以使用S3作为存储。
大多数教程（即https://data-flair.training/blogs/apache-hive-metastore/ ）都提到元存储仅支持Derby和其他一些RDBMS。
真的吗？ 配置metastore以将s3用作存储听起来对我来说是一个简单的配置更改。
1 个解决方案
解决方案1
1 已采纳 2019-06-04 00:34:51
Hive Metastore保留Hive表和分区的元数据。 它由关系数据库支持，目前支持MySQL，Postgres，Oracle和MS SQL Server 。 S3是对象存储 ，而不是关系数据库。
这是ER图，显示了Hive Metastore中存储的各种表，列和约束。
如何使用Pig中的HCatlog对Hive Metastore使用压缩技术？
[英]How to use compression techniques for hive metastore using HCatlog in Pig?
如何配置 Hive Metastore 以使用本地文件系统而不是 Derby？
[英]How to configure Hive metastore to use local filesytem instead of Derby?
如何使用 MySql 5.7 作为 hive Metastore，因为它需要 SSL 参数？
[英]how to use MySql 5.7 as hive metastore as it need SSL parameter?
声明:本站的技术帖子网页，遵循CC BY-SA 4.0协议，如果您需要转载，请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.
相关问题
带有 Iceberg 和 S3 的独立 Hive Metastore
我们可以使用nosql数据库作为Hive Metastore吗？
如何使用Pig中的HCatlog对Hive Metastore使用压缩技术？
如何配置 Hive Metastore 以使用本地文件系统而不是 Derby？
如何使用 MySql 5.7 作为 hive Metastore，因为它需要 SSL 参数？
如何在s3中对数据进行分区以与hadoop配置单元一起使用？
启动蜂巢元商店
具有Kerberos的Hive远程元存储
Hive Metastore 配置 PostgreSQL
使用mysql metastore的hive
相关标签