cost 110 ms
Hadoop中Zookeeper的作用

[英]Role of Zookeeper in Hadoop

我根據幻燈片了解到,在 Hadoop 的上下文中,Zookeeper 用於存儲 Master 的信息,以及不同任務的狀態,哪個工作人員正在哪個分區上工作,並且可用的工作人員也存儲在 Zookeeper 中。 為什么這里使用 Zookeeper 來存儲這個元數據呢? 可以使用任何數據存儲嗎? 例如 C ...

Solr 9.1 收藏創建

[英]Solr 9.1 Collection creation

我在 solcrloud 部署中的三個運行 Ubuntu 22.04.1 LTS 的 EC2 上安裝了 zookeeper 3.7.1 和 Solr 9.1。 zoo.cfg 如下: Solr 部署幾乎是開箱即用的。 solr.xml 未修改。 這是部分: /etc/default/solr ...

如何使用 sarama go 客戶端連接 zookeeper?

[英]How to connect zookeeper using sarama go client?

我是使用 sarama 客戶端的初學者。 雖然我的代碼在引導服務器上運行良好,但無法連接到動物園管理員。 kafka節點版本: confluent-kafka-2.11-0.10.2.1-2.noarch sarama客戶端版本: v1.38.0 錯誤: kafka:客戶已經用完可用的經紀人 ...

如何修復 zookeeper 和 kafka (2.8.x) 之間不一致的主題存在 state

[英]How to fix inconsistent topic existence state between zookeeper and kafka (2.8.x)

我們已經看到主題創建(我們通過 Terraform 控制)有時會失敗。 初始申請時,terraform報連接錯誤。 在重新計划時,它想創建主題,但在第二次應用時它失敗了,說主題已經存在。 發生這種情況時,zookeeper 節點知道該主題,但 kafka 代理不知道。 該示例僅檢查一名動物園管理員 ...

Spring Integration 是否具有關於 IntegrationFlow“所有權”的領導者選舉的任何功能?

[英]Does Spring Integration have any features for leader election with respect to IntegrationFlow "ownership"?

我已經學習 Spring Integration 大約一個月了,我突然明白了:如果你要求在任何時間點只有一個IntegrationFlow實例,但你有多個 Spring 應用程序實例正在運行怎么辦在同一個環境? 意思是說,我的應用程序可能有 3 個節點/實例在開發環境中運行,並且所有 3 個節點/ ...

將 Apache kafka 從 2.7 版本升級到 3.X,在生產 kafka 集群上沒有 zookeeper

[英]upgrade Apache kafka from 2.7 version to 3.X without zookeeper on production kafka cluster

我們有 2.7 版本的生產 Kafka 集群,RHEL 7.9 版本上有 5 個 Kafka 代理我們想升級Kafka版本到3.X版本 3.X版本不包含zookeeper,所以我們想知道是否可以在不丟失任何數據的情況下進行升級關於 kafka 2.7 版本,Kafka 將元數據存儲在 zookee ...

log4j升級后kafka無法啟動

[英]after log4j upgradation kafka unable to start

我最近將我們應用程序的日志記錄 jar 從 log4j-1.2.17.jar 更新為最新的 log4j-1.2-api-2.18.0.jar。配置最新的之后。我的 kafka 服務器和 zookeeper 服務器無法啟動 更新 log4j 后如何解決此問題 ...

第二個節點無法綁定到 Apache Nifi 集群

[英]Second node failed to bind to Apache Nifi cluster

我在 Kubernetes 中部署了兩個 apache nifi 節點。 Apache nifi 在 yaml 文件中有 statefulset 種類。 第二個節點“nifi-1”引發錯誤,在 pod 對應的日志中我有以下內容: 我不知道我錯過了什么。 Seconde節點nifi-1連接失敗。 ...

Kafka:解決錯誤:打開與服務器 localhost/127.0.0.1:2181 的套接字連接。 不會嘗試使用 SASL 進行身份驗證(未知錯誤)?

[英]Kafka: Resolving Error: Opening socket connection to server localhost/127.0.0.1:2181. Will not attempt to authenticate using SASL (unknown error)?

在啟動 kafka 模式注冊表或 kafka 服務器時,我遇到以下錯誤並且服務器啟動失敗。 有人可以幫我解決以下錯誤。 我的 Docker Compose 文件如下 - ...

TypeError:創建名為“kafkaHighLevelConsumer”的 bean 時出錯:在 docker 中

[英]TypeError: Error creating bean with name 'kafkaHighLevelConsumer': in docker

我在本地使用 docker-compose 啟動 Zookeeper、kafka 和 kafdrop,一切正常。 當我想在 EC2 實例中做同樣的事情時,我得到了這個錯誤。 我使用的 EC2 類型是 t2.micro,默認 VPC 和 Su.net 中有一個 OBS。 docker-compose. ...

Clickhouse 實體化視圖聚合 ghost 行

[英]Clickhouse materialized view aggregate ghost rows

所以我正在使用 clickhouse,這是我當前的表架構。 我有一個包含我的數據的主表:CREATE TABLE default.Liquidity ( `Date` Date, `LiquidityId` UInt64, `TreeId_LQ` UInt64, `A ...

為 kafka-python 創建本地 Kafka 實例時,使用不需要 Zookeeper 的 Kafka 2.8+ 是個好主意嗎?

[英]When creating a local Kafka instance for kafka-python, is it a good idea using Kafka 2.8+ that don't need Zookeeper?

2021 年 4 月,Kafka 發布了一個早期版本,以消除對 Zookeeper 的依賴。 我讀過很多帖子(大部分是從 2021 年開始的)說在產品上使用這些版本仍然不是一個好主意,因為它們太新了。 我讀過的每個 kafka-python 教程都是從構建本地 Kafka 實例並為此運行 Zoo ...

為不同的kafka集群合並多個zookeeper

[英]Consolidating multiple zookeeper for different kafka clusters

我們有 5 個 kafka 集群和 5 個 diff zk 集群(1-1 關系)。 我們想轉移到單個 zk 集群(因為我們最終浪費/投資了太多機器只是為了確保 zk 的高可用性,在我們的例子中是 25 台機器)。 所有 kafka 集群的 zkpath 都是不同的(否則可能會出現一些問題)。 作為 ...

將 Kafka 從 Kraft 切換到 Zookeeper

[英]Switching Kafka from Kraft to Zookeeper

我最近有一個使用 Kraft 的 Kafka 集群。 我遇到了一些問題,這可能是由於使用了 Kraft。 我希望在不丟失數據的情況下切換到 Zookeeper。 停機時間沒問題。 我怎么go一下呢? ...

kafka-topics.bat --list --bootstrap-server localhost:9092 未返回列表

[英]kafka-topics.bat --list --bootstrap-server localhost:9092 is not returning list

kafka-topics.bat --list --bootstrap-server localhost:9092 沒有返回任何東西 kafka-topics.bat --list --bootstrap-server localhost:9092 沒有顯示任何內容上面的命令旨在向我顯示主題列表, ...

創建 SolrCore 'new_core' 時出錯:缺少 coreNodeName

[英]Error CREATEing SolrCore 'new_core': coreNodeName missing

我在我們的開發集群中為 Apache Solr 托管了Bitnami helm chart ,當我嘗試創建一個新核心時,它說, 因此,從官方文檔、 這個和 這個鏈接,我開始知道我必須將legacyCloud設置為 true。 所以,我已經登錄到我的 zookeeper pod,當我運行命令時 它 ...


 
粵ICP備18138465號  © 2020-2024 STACKOOM.COM