【kubeEdge】离线部署

时间：2024-04-19 07:11:28

部署 kubeEdge

在线部署

在线方式部署直接执行以下命令，会联网下载需要的安装文件执行安装

$ keadm init --advertise-address={ip} --kubeedge-version={version} --kube-config={config_path}，

离线部署

离线准备工作

所有下载操作均在可以联网的机子上进行，然后复制到需要安装的部署机

从 kubeEdge 的官方 git 仓库的 https://github.com/kubeedge/kubeedge/releases 中获取合适的版本的 keadm 和 kubeedge 包，以及校验包

在云端和边端主机上，都执行下面的步骤：

  • 将 keadm 压缩包中的可执行文件 keadm 复制到 ​​/usr/local/bin​​ 下 tar -xvf
  • 将 kubeedge 压缩包（cloudcore和edgecore的二进制文件）放置到 ​​/etc/kubeedge​​ 目录下
  • 将 checksum 放置到 ​​/etc/kubeedge​​ 目录下
  • 选择合适的版本，从 https://github.com/kubeedge/kubeedge 下载源码
云端 cloudcore
  1. 复制所需物料到云端主机
  1.   将源码中 ​​/build/crds​​​ 中的所有内容拷贝到云端部署机的 ​​/etc/kubeedge/crds​​ 目录
  2.   将源码中 ​​/build/tools/cloudcore.service​​​ 文件放置到云端部署机的 ​​/etc/kubeedge​​ 目录
  1. 使用下面的命令初始化 cloudcore
keadm init --advertise-address={ip} --kubeedge-versinotallow={version} --kube-cnotallow={config_path}
  1. ip 换成 cloudcore 所在的主机 ip
  2. version 换成自己的安装的版本，因为 keadm 默认版本不一定和我们需要的一样。
  3. config 路径指向 kubernetes 的配置路径，默认是​​/root/.kube/config​​，也可设置为 /etc/kubernetes/admin.conf
  4.   如果出现下面的内容，初始化成功
Kubernetes version verification passed, KubeEdge installation will start... 
KubeEdge cloudcore is running, For logs visit: /var/log/kubeedge/cloudcore.log 
CloudCore started
  1. 修改 flannel-ds 和 kube-proxy 的配置
  1.   通过kubectl edit ds -n kube-system kube-flannel-ds修改flannel配置：

  3.   通过kubectl edit ds -n kube-system kube-proxy修改kube-proxy配置：

  1. 云端配置文件 cloudcore.yaml
  1.   /etc/kubeedge/config/cloudcore.yaml
边端 edgecore
  1. 安装 MQTT 服务
  1.   在边缘节点还需要安装 MQTT 服务，需要以下的 deb 包和依赖：

  3.   下载 mosquitto 服务端和客户端以及依赖包
$ apt install mosquitto     
$ apt install mosquitto-clients
# 连配置卸载：apt autopurge  mosquitto
  1.   安装 apt 增强工具，并下载依赖包
# 创建目录
$ mkdir mosquitto
# apt 增强工具
$ apt install aptitude 
# 清理缓存空间
$ aptitude clean
# 只下载依赖且不安装
$ aptitude --download-only install mosquitto
# 将依赖deb从缓存拷贝置创建当前目录
$ mv /var/cache/apt/archives/*.deb ./
  1.   执行安装
$ dpkg -i ./mosquitto/*.deb
  1. 配置 MQTT 服务
  1.   添加配置文件
  2.   在​​/etc/mosquitto/conf.d​​​目录下，添加配置文件​​myconfig.conf​​ 配置文件：
sudo vi /etc/mosquitto/conf.d/myconfig.conf
  1.   粘入下面这些配置
#添加 broker 监听端口（很重要，否则只能本机访问）
listener 1883
#-------------------------------------------
# 如果关闭匿名访问，客户端必须使用用户名密码
allow_anonymous true

#指定 用户名-密码 文件
password_file /etc/mosquitto/pwfile.txt
#--------------------------------------------
  1. 添加账户密码
sudo mosquitto_passwd -c /etc/mosquitto/pwfile.txt <<用户名>>
  1. 启动mosquitto查看运行状态
sudo service mosquitto start
sudo service mosquitto status
  1. 在云端运行 keadm gettoken 将返回 token 令牌，该令牌将在加入边缘节点时使用。
  2. 复制所需物料到边端主机
  1.   将源码中 ​​./build/tools/edgecore.service​​​ 文件复制到边端主机的 ​​/etc/kubeedge​​ 目录
  2.   通过下面的命令让边端纳入云端管理
$ keadm join --cloudcore-ipport={ip}:{port} --kubeedge-version={version} --token={token}

  2.   可以通过 journalctl -u edgecore.service -f 查看 edgecore 的日志，或在云端 kubectl get nodes 查看是否能看到我们刚加入的 edge 节点（systemcl status）

  1. 检查服务状态
service edgecore status
  1. 导入pause镜像
  1.   在能联网的机子上拉取 kubeedge/pause:3.1 镜像，使用 docker save -o kubeedge_pause_3.1.tar kubeedge/pause:3.1 命令打包，在边缘节点上，使用 docker load -i kubeedge_pause_3.1.tar 命令导入镜像
  1. 配置边端配置文件 edgecore.yaml
  1.   /etc/kubeedge/config/edgecore.yaml

edge Pod 实验

如果想要将应用调度到edge端，需要给edge端打上标签后，在应用的yaml文件中进行指定。

kubectl label nodes edge name=edge

根据k8s的这个规则，可以将节点通过 label 的方式进行分组，比如将某几个节点都打上标签为 name=edge，当调度应用到 edge 节点时，会找到 label 为 edge 的所有节点，根据设置的副本数，将应用启动起来，如果设置的副本数超过了设置 edge 标签的节点数，则多出的将会显示 pending 状态，从而无法启动。

编辑应用的 yaml 文件，添加 nodeSelector，下面给出一个例子 nginx.yaml

apiVersion: apps/v1
kind: Deployment
metadata:
  name: nginx-deployment
  labels:
    app: nginx
spec:
  replicas: 1
  selector:
    matchLabels:
      app: nginx
  template:
    metadata:
      labels:
        app: nginx
    spec:
      nodeSelector: ##添加的配置
        name: "edge" ##打的标签是什么，这里就写什么
      containers:
      - name: nginx
        image: nginx:latest
        imagePullPolicy: IfNotPresent
        ports:
        - containerPort: 80
          hostPort: 80

通过 kubectl get pod -o wide 查看，可看到该pod成功被部署到edge01节点上。

在边缘节点上查看容器 docker ps

启用 kubectl logs 功能

如果不开启此功能，在云端无法通过 kubectl logs 查看边端 pods 的日志

开启云端的 cloudStream 和边端的 edgeStream（websocketde 的另外一个通道10003），通过该通道传递数据

云端支持 Metrics-server

需要复用 kubectl logs 中的 cloudStream 和 edgeStream 的通道

重置部署

清除 keadm init 或 keadm join 造成的影响均可使用 keadm reset，这个操作会删除 /etc/kubeedge 下的文件，如有需要请提前备份。重置操作不会清理 /etc/mosquitto

相关文章