K8s 集群中的 Redis 故障转移

Question

我正在尝试让 Redis 故障转移在 Kubernetes 中使用工作节点故障场景。 我有一个 K8s 集群，它由一个主节点和两个工作节点组成。 主节点不调度 pod。 Redis 的清单是这样的，在一个有状态集中有一个主实例和一个从实例，在另一个有状态集中有 3 个哨兵。 清单具有关联性，可以引导 Pod 在不同的工作节点上进行调度。 如果我耗尽了一个具有主实例和一个哨兵的工作节点，故障转移就像一个冠军。

但是，如果有2 个哨兵与主实例一起被驱逐，则没有选择主实例，并且在剩余的工作节点上重新启动的 2 个哨兵报告： -failover-abort-no-good-slave master jnpr-ipb-redis-masters 10.244.1.209 7380 。 日志消息中的 IP 地址是前从站的 IP 地址（我希望将其提升为新的主站）。

是否有一些魔法可以使这项工作？ 这是一个有效的集群配置吗？ 不太确定我应该看什么来了解正在发生的事情。

Answer 1

您想要的是 PodDisruptionBudget。 这将使自愿驱逐至少不会破坏事情。 除此之外，您可以使用硬反关联来强制将 pod 安排在不同的节点上。 但是，如果您同时丢失两个节点，Sentinel 可能会不同步，则仍然可能出现故障。 这就是为什么 Redis Sentinel 不再使用以支持集群模式的很大一部分原因。