cost 390 ms
Hadoop中Zookeeper的作用 - Role of Zookeeper in Hadoop

我根据幻灯片了解到,在 Hadoop 的上下文中,Zookeeper 用于存储 Master 的信息,以及不同任务的状态,哪个工作人员正在哪个分区上工作,并且可用的工作人员也存储在 Zookeeper 中。 为什么这里使用 Zookeeper 来存储这个元数据呢? 可以使用任何数据存储吗? 例如 C ...

如何修复 zookeeper 和 kafka (2.8.x) 之间不一致的主题存在 state - How to fix inconsistent topic existence state between zookeeper and kafka (2.8.x)

我们已经看到主题创建(我们通过 Terraform 控制)有时会失败。 初始申请时,terraform报连接错误。 在重新计划时,它想创建主题,但在第二次应用时它失败了,说主题已经存在。 发生这种情况时,zookeeper 节点知道该主题,但 kafka 代理不知道。 该示例仅检查一名动物园管理员 ...

Spring Integration 是否具有关于 IntegrationFlow“所有权”的领导者选举的任何功能? - Does Spring Integration have any features for leader election with respect to IntegrationFlow "ownership"?

我已经学习 Spring Integration 大约一个月了,我突然明白了:如果你要求在任何时间点只有一个IntegrationFlow实例,但你有多个 Spring 应用程序实例正在运行怎么办在同一个环境? 意思是说,我的应用程序可能有 3 个节点/实例在开发环境中运行,并且所有 3 个节点/ ...

将 Apache kafka 从 2.7 版本升级到 3.X,在生产 kafka 集群上没有 zookeeper - upgrade Apache kafka from 2.7 version to 3.X without zookeeper on production kafka cluster

我们有 2.7 版本的生产 Kafka 集群,RHEL 7.9 版本上有 5 个 Kafka 代理我们想升级Kafka版本到3.X版本 3.X版本不包含zookeeper,所以我们想知道是否可以在不丢失任何数据的情况下进行升级关于 kafka 2.7 版本,Kafka 将元数据存储在 zookee ...

Kafka:解决错误:打开与服务器 localhost/127.0.0.1:2181 的套接字连接。 不会尝试使用 SASL 进行身份验证(未知错误)? - Kafka: Resolving Error: Opening socket connection to server localhost/127.0.0.1:2181. Will not attempt to authenticate using SASL (unknown error)?

在启动 kafka 模式注册表或 kafka 服务器时,我遇到以下错误并且服务器启动失败。 有人可以帮我解决以下错误。 我的 Docker Compose 文件如下 - ...

TypeError:创建名为“kafkaHighLevelConsumer”的 bean 时出错:在 docker 中 - TypeError: Error creating bean with name 'kafkaHighLevelConsumer': in docker

我在本地使用 docker-compose 启动 Zookeeper、kafka 和 kafdrop,一切正常。 当我想在 EC2 实例中做同样的事情时,我得到了这个错误。 我使用的 EC2 类型是 t2.micro,默认 VPC 和 Su.net 中有一个 OBS。 docker-compose. ...

为 kafka-python 创建本地 Kafka 实例时,使用不需要 Zookeeper 的 Kafka 2.8+ 是个好主意吗? - When creating a local Kafka instance for kafka-python, is it a good idea using Kafka 2.8+ that don't need Zookeeper?

2021 年 4 月,Kafka 发布了一个早期版本,以消除对 Zookeeper 的依赖。 我读过很多帖子(大部分是从 2021 年开始的)说在产品上使用这些版本仍然不是一个好主意,因为它们太新了。 我读过的每个 kafka-python 教程都是从构建本地 Kafka 实例并为此运行 Zoo ...

为不同的kafka集群合并多个zookeeper - Consolidating multiple zookeeper for different kafka clusters

我们有 5 个 kafka 集群和 5 个 diff zk 集群(1-1 关系)。 我们想转移到单个 zk 集群(因为我们最终浪费/投资了太多机器只是为了确保 zk 的高可用性,在我们的例子中是 25 台机器)。 所有 kafka 集群的 zkpath 都是不同的(否则可能会出现一些问题)。 作为 ...

kafka-topics.bat --list --bootstrap-server localhost:9092 未返回列表 - kafka-topics.bat --list --bootstrap-server localhost:9092 is not returning list

kafka-topics.bat --list --bootstrap-server localhost:9092 没有返回任何东西 kafka-topics.bat --list --bootstrap-server localhost:9092 没有显示任何内容上面的命令旨在向我显示主题列表, ...

创建 SolrCore 'new_core' 时出错:缺少 coreNodeName - Error CREATEing SolrCore 'new_core': coreNodeName missing

我在我们的开发集群中为 Apache Solr 托管了Bitnami helm chart ,当我尝试创建一个新核心时,它说, 因此,从官方文档、 这个和 这个链接,我开始知道我必须将legacyCloud设置为 true。 所以,我已经登录到我的 zookeeper pod,当我运行命令时 它 ...


 
粤ICP备18138465号  © 2020-2024 STACKOOM.COM