AWS简单搭建使用EKS二

时间:2023-02-15 17:17:42

背景:

紧接AWS简单搭建使用EKS一,eks集群简单搭建完成。需要搭建有状态服务必然就用到了storageclass 存储类,这里用ebs记录以下

AWS简单搭建使用EKS二

存储类选型:

参照官方文档:https://kubernetes.io/zh-cn/docs/concepts/storage/storage-classes/#the-storageclass-resource AWS简单搭建使用EKS二

关于eks的存储类:

参照:存储类 AWS简单搭建使用EKS二 个人这里习惯用EBS块存储!

使用 AWS CLI 创建 Amazon EBS CSI 插件 IAM 角色

参照:https://docs.aws.amazon.com/zh_cn/eks/latest/userguide/csi-iam-role.html

查看集群的 OIDC 提供商 URL

查看集群的 OIDC 提供商 URL,将 my-cluster 替换为您的集群名称。如果命令的输出为 None,请查看先决条件: AWS简单搭建使用EKS二AWS简单搭建使用EKS二 这里采用了AWS CLI方式添加:

aws eks describe-cluster \
  --name my-cluster \
  --query "cluster.identity.oidc.issuer" \
  --output text

AWS简单搭建使用EKS二 输出内容如下:

https://oidc.eks.cn-north-1.amazonaws.com.cn/id/xxxxxxxxx

注意: url中的 加粗黑体的关键词 https://oidc.eks.cn-north-1.amazonaws.com.cn/id/xxxxxxxxx

创建 IAM 角色

生成aws-ebs-csi-driver-trust-policy.json

将以下内容复制到名为** aws-ebs-csi-driver-trust-policy.json 的文件中。请将 111122223333 替换为您的账户 ID,将 region-code **替换为您的 AWS 区域,并将 EXAMPLED539D4633E53DE1B71EXAMPLE 替换为上一步骤中返回的值。如果您的集群位于 AWS GovCloud(美国东部)或 AWS GovCloud(美国西部)AWS 区域,则将 arn:aws: 替换为 arn:aws-us-gov:

{
  "Version": "2012-10-17",
  "Statement": [
    {
      "Effect": "Allow",
      "Principal": {
        "Federated": "arn:aws:iam::111122223333:oidc-provider/oidc.eks.region-code.amazonaws.com/id/EXAMPLED539D4633E53DE1B71EXAMPLE"
      },
      "Action": "sts:AssumeRoleWithWebIdentity",
      "Condition": {
        "StringEquals": {
          "oidc.eks.region-code.amazonaws.com/id/EXAMPLED539D4633E53DE1B71EXAMPLE:aud": "sts.amazonaws.com",
          "oidc.eks.region-code.amazonaws.com/id/EXAMPLED539D4633E53DE1B71EXAMPLE:sub": "system:serviceaccount:kube-system:ebs-csi-controller-sa"
        }
      }
    }
  ]
}

由于实例在中国区我的json内容如下: AWS简单搭建使用EKS二 注意箭头指向的关键词的替换!

创建角色

aws iam create-role \
  --role-name AmazonEKS_EBS_CSI_DriverRole \
  --assume-role-policy-document file://"aws-ebs-csi-driver-trust-policy.json"

AWS简单搭建使用EKS二

AWS 托管策略附加到角色

注意arn:aws 地域区分 arn:aws-cn

aws iam attach-role-policy \
  --policy-arn arn:aws-cn:iam::aws:policy/service-role/AmazonEBSCSIDriverPolicy \
  --role-name AmazonEKS_EBS_CSI_DriverRole

AWS简单搭建使用EKS二 官方有使用自定义 KMS 密钥进行加密的步骤,不需要忽略: AWS简单搭建使用EKS二

kubectl annotate serviceaccount ebs-csi-controller-sa \
    -n kube-system \
    eks.amazonaws.com/role-arn=arn:aws-cn:iam::xxxxxxxx:role/AmazonEKS_EBS_CSI_DriverRole

注:这个不用执行的其实有问题了在说

管理 Amazon EKS 附加组件

参照:添加 Amazon EBS CSI 附加组件

aws eks create-addon --cluster-name xxxx --addon-name aws-ebs-csi-driver \
  --service-account-role-arn arn:aws:iam::xxxx:role/AmazonEKS_EBS_CSI_DriverRole

AWS简单搭建使用EKS二 aws cli版本有问题貌似?参照https://docs.aws.amazon.com/cli/latest/userguide/getting-started-install.html更新aws cli V2

curl "https://awscli.amazonaws.com/awscli-exe-linux-x86_64.zip" -o "awscliv2.zip"
unzip awscliv2.zip
sudo ./aws/install

AWS简单搭建使用EKS二AWS简单搭建使用EKS二

/usr/local/bin/aws eks create-addon --cluster-name xxxx --addon-name aws-ebs-csi-driver   --service-account-role-arn arn:aws-cn:iam::xxxx:role/AmazonEKS_EBS_CSI_DriverRole

注意arn:aws-cn地域 AWS简单搭建使用EKS二

kubectl get pods -n kube-system

AWS简单搭建使用EKS二 eks控制台点开对应集群-插件标签,可以看到多了aws-ebs-csi-driver的插件(插件名称可以自定义) AWS简单搭建使用EKS二 这个时候获取storageclass依然是没有的:

[root@ip-10-0-28-172 ~]# kubectl get sc
No resources found

部署示例应用程序并验证 CSI 驱动程序是否正常运行

参照:部署示例应用程序并验证 CSI 驱动程序是否正常运行

  1. Amazon EBS 容器存储接口 (CSI) 驱动程序 GitHub 存储库克隆到您的本地系统。
git clone https://github.com/kubernetes-sigs/aws-ebs-csi-driver.git
  1. 切换到dynamic-provisioning 示例目录
cd aws-ebs-csi-driver/examples/kubernetes/dynamic-provisioning/
  1. 从 manifests 目录部署 ebs-sc 存储类、ebs-claim 持久性卷声明和 app 示例应用程序
kubectl apply -f manifests/
kubectl get sc
kubectl get pods

AWS简单搭建使用EKS二

  1. 简单验证查看与验证

AWS简单搭建使用EKS二

kubectl exec -it app -- cat /data/out.txt

AWS简单搭建使用EKS二

  1. 删除实例
cd manifests
kubectl delete -f pod.yaml
kubectl delete -f claim.yaml

关于storageclass

紧接上文manifests目录下,cat storageclass.yaml,其他配置默认就好,name可以修改成自己新要的名字,这里就默认ebs-sc了。后续有状态服务sc默认名为ebs-sc AWS简单搭建使用EKS二

kubectl get sc

AWS简单搭建使用EKS二 注意:sc =storageclass