生产 Redis 集群，在 Kubernetes 中分片

Question

我已经尝试过 Redis stable “掌舵”图表来部署一个 Redis 集群，该集群具有 1 个主节点和 3 个从节点，可以复制写入主节点的数据。 但这是一个单点故障——我删除了 master，没有重新创建新的 master pod。 此外，图表不支持数据分区（分片）。

编辑：我使用 helm redis-ha图表创建了一个 Redis 集群，但是没有分片选项。

没有 Redis helm图表来部署支持分区（分片）的生产就绪 HA 集群吗？ 您能否指出我可以用来设置可管理的 Redis 集群的资源？ 我的 Redis 主要用于数据缓存、消息处理和流式传输。

Answer 1

您需要 Redis 哨兵。

如果helm是一个选项，这些链接可能会有所帮助：

https://github.com/helm/charts/tree/master/stable/redis （注意sentinel相关的配置参数）

https://github.com/helm/charts/tree/master/stable/redis-ha

Answer 2

这是一个关于设置带分区的 3 主 / 3 从 redis 集群的精美教程。 它针对的是 Rancher，但这是可选的，我刚刚在 Azure Kubernetes 服务上对其进行了测试，它工作正常。

首先，应用这个 yaml（ConfigMap，StatefulSet with 6 replicas，Service）：

apiVersion: v1
kind: ConfigMap
metadata:
  name: redis-cluster
data:
  update-node.sh: |
    #!/bin/sh
    REDIS_NODES="/data/nodes.conf"
    sed -i -e "/myself/ s/[0-9]\{1,3\}\.[0-9]\{1,3\}\.[0-9]\{1,3\}\.[0-9]\{1,3\}/${POD_IP}/" ${REDIS_NODES}
    exec "$@"
  redis.conf: |+
    cluster-enabled yes
    cluster-require-full-coverage no
    cluster-node-timeout 15000
    cluster-config-file /data/nodes.conf
    cluster-migration-barrier 1
    appendonly yes
    protected-mode no
---
apiVersion: apps/v1
kind: StatefulSet
metadata:
  name: redis-cluster
spec:
  serviceName: redis-cluster
  replicas: 6
  selector:
    matchLabels:
      app: redis-cluster
  template:
    metadata:
      labels:
        app: redis-cluster
    spec:
      containers:
      - name: redis
        image: redis:5.0.1-alpine
        ports:
        - containerPort: 6379
          name: client
        - containerPort: 16379
          name: gossip
        command: ["/conf/update-node.sh", "redis-server", "/conf/redis.conf"]
        env:
        - name: POD_IP
          valueFrom:
            fieldRef:
              fieldPath: status.podIP
        volumeMounts:
        - name: conf
          mountPath: /conf
          readOnly: false
        - name: data
          mountPath: /data
          readOnly: false
      volumes:
      - name: conf
        configMap:
          name: redis-cluster
          defaultMode: 0755
  volumeClaimTemplates:
  - metadata:
      name: data
    spec:
      accessModes: [ "ReadWriteOnce" ]
      resources:
        requests:
          storage: 1Gi
---
apiVersion: v1
kind: Service
metadata:
  name: redis-cluster
spec:
  type: ClusterIP
  ports:
  - port: 6379
    targetPort: 6379
    name: client
  - port: 16379
    targetPort: 16379
    name: gossip
  selector:
    app: redis-cluster

下一步是运行此脚本以形成集群（您必须以交互方式输入“yes”一次）：

kubectl exec -it redis-cluster-0 -- redis-cli --cluster create --cluster-replicas 1 $(kubectl get pods -l app=redis-cluster -o jsonpath='{range.items[*]}{.status.podIP}:6379 ')
for x in $(seq 0 5); do echo "redis-cluster-$x"; kubectl exec redis-cluster-$x -- redis-cli role; echo; done

Answer 3

很抱歉，这不是答案，但我有一个问题要问@Markus Dresch 他的解决方案。

嘿，markus，我已经尝试了确切的文档，并且我已经在 AKS 本身上进行了尝试，唯一的修改是我将服务公开为“负载平衡器”而不是集群 Ip。 创建集群后你做了什么来连接redis-cluster？ 我需要使用 redis-py-cluster（python 库）连接到 redis-cluster 来写入数据。 当我在外部公开它时，我有一个外部 IP 从 python 连接，当我尝试连接时，它说“python 需要连接到所有主节点”，它们是 Pod 的内部 IP。 如何处理这种情况？ 有人可以帮忙吗？