如何在同一项目中的GKE簇中迁移持久量？

Question

我有一个gke群集运行，其中有几个持久磁盘用于存储。 为了设置一个登台环境，我在同一项目中创建了第二个集群。 现在，我想在登台集群中使用生产群集的持久磁盘中的数据。

我已经为登台集群创建了持久磁盘。将生产数据转移到登台群集的磁盘的最佳方法是什么？

Answer 1

您可以使用开源工具 velero 旨在迁移kubernetes cluster资源。

请按照以下步骤在GKE簇中迁移持久磁盘：

1. 创建一个GCS桶：

BUCKET=<your_bucket_name>
gsutil mb gs://$BUCKET/

2. 创建 Google Service帐户并将关联的电子邮件存储在变量中以供以后使用：

GSA_NAME=<your_service_account_name>
gcloud iam service-accounts create $GSA_NAME \
    --display-name "Velero service account" 

SERVICE_ACCOUNT_EMAIL=$(gcloud iam service-accounts list \
  --filter="displayName:Velero service account" \
  --format 'value(email)')

3. 为服务帐户创建自定义角色：

PROJECT_ID=<your_project_id>
ROLE_PERMISSIONS=(
    compute.disks.get
    compute.disks.create
    compute.disks.createSnapshot
    compute.snapshots.get
    compute.snapshots.create
    compute.snapshots.useReadOnly
    compute.snapshots.delete
    compute.zones.get
    storage.objects.create
    storage.objects.delete
    storage.objects.get
    storage.objects.list
)

gcloud iam roles create velero.server \
    --project $PROJECT_ID \
    --title "Velero Server" \
    --permissions "$(IFS=","; echo "${ROLE_PERMISSIONS[*]}")"

gcloud projects add-iam-policy-binding $PROJECT_ID \
    --member serviceAccount:$SERVICE_ACCOUNT_EMAIL \
    --role projects/$PROJECT_ID/roles/velero.server

gsutil iam ch serviceAccount:$SERVICE_ACCOUNT_EMAIL:objectAdmin gs://${BUCKET}

4. 授予对Velero的访问：

gcloud iam service-accounts keys create credentials-velero \
    --iam-account $SERVICE_ACCOUNT_EMAIL

5. 下载并在源群集上下载和安装Velero：

wget https://github.com/vmware-tanzu/velero/releases/download/v1.8.1/velero-v1.8.1-linux-amd64.tar.gz
tar -xvzf velero-v1.8.1-linux-amd64.tar.gz
sudo mv velero-v1.8.1-linux-amd64/velero /usr/local/bin/velero

velero install \
    --provider gcp \
    --plugins velero/velero-plugin-for-gcp:v1.4.0 \
    --bucket $BUCKET \
    --secret-file ./credentials-velero

注意：下载和安装已在A上执行Linux系统，这是云外壳使用的操作系统。如果您通过Cloud SDK管理GCP资源，则发布和安装过程可能会有所不同。

6. 确认正在运行Velero Pod：

$ kubectl get pods -n velero
NAME                      READY   STATUS    RESTARTS   AGE
velero-xxxxxxxxxxx-xxxx   1/1     Running   0          11s

7. 为PV创建备份，PVCS：

velero backup create <your_backup_name> --include-resources pvc,pv --selector app.kubernetes.io/<your_label_name>=<your_label_value> 

8. 验证您的备份成功而没有错误或警告：

$ velero backup describe <your_backup_name>  --details
Name:         your_backup_name
Namespace:    velero
Labels:       velero.io/storage-location=default
Annotations:  velero.io/source-cluster-k8s-gitversion=v1.21.6-gke.1503
              velero.io/source-cluster-k8s-major-version=1
              velero.io/source-cluster-k8s-minor-version=21

Phase:  Completed

Errors:    0
Warnings:  0

---

既然持续的卷已经备份，则可以继续迁移到目标集群之后，然后再迁移到目标集群。步骤：

1. 在目标群集安装velero中进行身份验证

gcloud container clusters get-credentials <your_destination_cluster> --zone <your_zone> --project <your_project>

2. 使用与步骤5相同的参数

velero install \
    --provider gcp \
    --plugins velero/velero-plugin-for-gcp:v1.4.0 \
    --bucket $BUCKET \
    --secret-file ./credentials-velero

3. ：确认Velero Pod正在运行：

kubectl get pods -n velero
NAME                      READY   STATUS    RESTARTS   AGE
velero-xxxxxxxxxx-xxxxx   1/1     Running   0          19s

4. 避免覆盖备份数据，请将存储桶更改为仅读取模式：

kubectl patch backupstoragelocation default -n velero --type merge --patch '{"spec":{"accessMode":"ReadOnly"}}'

5. 确认Velero能够要从Bucket访问备份：

velero backup describe <your_backup_name> --details

6. 还原后备的卷：

velero restore create --from-backup <your_backup_name>

7. 确认持续的量已在目标群集上恢复：

kubectl get pvc
NAME                                     STATUS   VOLUME                                     CAPACITY   ACCESS MODES   STORAGECLASS   AGE
redis-data-my-release-redis-master-0     Bound    pvc-ae11172a-13fa-4ac4-95c5-d0a51349d914   8Gi        RWO            standard       79s
redis-data-my-release-redis-replicas-0   Bound    pvc-f2cc7e07-b234-415d-afb0-47dd7b9993e7   8Gi        RWO            standard       79s
redis-data-my-release-redis-replicas-1   Bound    pvc-ef9d116d-2b12-4168-be7f-e30b8d5ccc69   8Gi        RWO            standard       79s
redis-data-my-release-redis-replicas-2   Bound    pvc-65d7471a-7885-46b6-a377-0703e7b01484   8Gi        RWO            standard       79s

查看此教程作为参考。