![](/img/trans.png)
[英]kafka s3 sink connector keys and headers s3 storage write not working
[英]Can Confluent's S3 Sink Connector for Kafka Connect write topics to a nested (not a top-level) folder in an S3 bucket using `topics.dir`?
Confluent 的 S3 Sink Connector for Kafka Connect 可以使用topics.dir
将主题写入 S3 存储桶中的嵌套(不是顶级)文件夹吗?
例如,如果我将topics.dir
的值设置为thisistoplevel/thisisnested
,连接器会工作吗?
topics.dir
配置属性的文档说:
用于存储从 Kafka 提取的数据的顶级目录。
但这似乎是一个奇怪的限制。 也许“顶级目录”一词的意思更像是“将在其下编写主题的最顶层目录”。
也许其他人已经对此进行了测试或在生产中使用了嵌套目录?
在 S3 的上下文中,没有文件夹“嵌套”这样的东西; S3 没有“文件夹”。 它只是桶中的字符串前缀。
是的,前缀只要你需要就可以,然后主题名称会在写的时候追加到那个路径
声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.