kubernetes持久化存储 ceph

Kubernetes持久化存储 Ceph

1. 引言

在Kubernetes集群中，持久化存储是一个重要的组件，它能够确保我们的应用数据在容器重启、迁移或者故障转移的情况下不会丢失。Ceph是一个开源的分布式存储系统，它具有高可用性、可扩展性和容错性，因此非常适合用于Kubernetes的持久化存储。

本文将介绍如何在Kubernetes集群中使用Ceph作为持久化存储，并提供相应的代码示例供读者参考。

2. Ceph简介

Ceph是一个软件定义的存储系统，它由多个节点组成，每个节点都可以存储和访问数据。Ceph集群可以包含多个储存节点和监视器节点，这些节点可以分布在不同的物理机上。Ceph可以自动地进行数据复制和容错，以确保数据的可靠性和高可用性。

在Kubernetes中，我们可以使用Ceph提供的RBD（Rados Block Device）或者Ceph FS（Ceph File System）来进行持久化存储。RBD提供了块设备接口，可以将Ceph存储映射为块设备并挂载到容器中。Ceph FS则提供了一个分布式的文件系统，可以在容器中直接使用。

3. 使用Ceph RBD作为持久化存储

在使用Ceph RBD之前，我们需要先在Kubernetes集群中配置Ceph的相关信息。首先，我们需要创建一个存储类（StorageClass）来定义Ceph RBD的属性和参数。以下是一个示例的存储类定义：

apiVersion: storage.k8s.io/v1
kind: StorageClass
metadata:
  name: ceph-rbd
provisioner: kubernetes.io/rbd
parameters:
  monitors: "mon1.example.com,mon2.example.com,mon3.example.com"
  pool: rbd
  imageFormat: "2"
  imageFeatures: "layering"
  secretRef:
    name: ceph-rbd-secret

在上面的代码中，我们定义了一个名为ceph-rbd的存储类，使用的RBD provisioner是kubernetes.io/rbd。我们还指定了Ceph的监视器节点、存储池、镜像格式和镜像特性。最后，我们需要指定一个密钥（secret）来访问Ceph集群。

接下来，我们需要创建一个密钥对象（Secret）来保存Ceph集群的访问密钥。以下是一个示例的密钥对象定义：

apiVersion: v1
kind: Secret
metadata:
  name: ceph-rbd-secret
type: kubernetes.io/rbd
data:
  key: BASE64_ENCODED_KEY

在上面的代码中，我们需要将Ceph集群的访问密钥进行Base64编码，并将编码后的值填入key字段中。

完成了上述配置之后，我们可以创建一个持久化卷声明（PersistentVolumeClaim）来申请使用Ceph RBD作为持久化存储。以下是一个示例的持久化卷声明定义：

apiVersion: v1
kind: PersistentVolumeClaim
metadata:
  name: ceph-rbd-pvc
spec:
  accessModes:
    - ReadWriteOnce
  storageClassName: ceph-rbd
  resources:
    requests:
      storage: 1Gi

在上面的代码中，我们定义了一个名为ceph-rbd-pvc的持久化卷声明，指定了读写模式为单节点读写（ReadWriteOnce），使用的存储类是之前创建的ceph-rbd，并且申请了1GB的存储空间。

最后，我们可以在容器的Pod中使用上述的持久化卷声明，并将持久化卷挂载到容器中。以下是一个示例的Pod定义：

apiVersion: v1
kind: Pod
metadata:
  name: ceph-rbd-pod
spec:
  containers:
    - name: app
      image: nginx
      volumeMounts:
        - name: ceph-rbd-volume
          mountPath: /data