1 环境准备

在原来Harbor 2.1.2安装的基础上，继续集成Helm仓库

Helm 是一个命令行下的客户端工具。主要用于 Kubernetes 应用程序 Chart 的创建、打包、发布以及创建和管理本地和远程的 Chart 仓库。
Tiller 是 Helm 的服务端，部署在 Kubernetes 集群中。Tiller 用于接收 Helm 的请求，并根据 Chart 生成 Kubernetes 的部署文件（ Helm 称为 Release ），然后提交给 Kubernetes 创建应用。Tiller 还提供了 Release 的升级、删除、回滚等一系列功能。
Chart Helm 的软件包，采用 TAR 格式。类似于 APT 的 DEB 包或者 YUM 的 RPM 包，其包含了一组定义 Kubernetes 资源相关的 YAML 文件
Repoistory Helm 的软件仓库，Repository 本质上是一个 Web 服务器，该服务器保存了一系列的 Chart 软件包以供用户下载，并且提供了一个该 Repository 的 Chart 包的清单文件以供查询。Helm 可以同时管理多个不同的 Repository。-->Harbor
Release 使用 helm install 命令在 Kubernetes 集群中部署的 Chart 称为 Release

注意点：

helm3移除了tiller这个组件，默认通过~/.kube/config与集群进行交互，也就是说使用了与kubctl相同的上下文访问权限，若不在默认位置可通过–kubeconfig参数进行指定，按照官方安装文档安装即可直接使用

**-------------------------------Harbor服务器

相关操作如下----------------------------**

2 启用 Harbor的chart repository服务

默认新版 harbor不会启用 chart repository service ，如果需要管理 helm ，我们需要在安装时添加额外的参数

## 默认安装

复制

$ cd /usr/local/harbor

复制

$ ./install.sh

复制

## 启动 chart repository service 服务

复制

$ cd /usr/local/harbor

复制

$ ./install.sh --with-chartmuseum

复制

等待安装完成，完成后会有如下提示：

[Step 0]: checking if docker is installed ...

复制

Note: docker version: 20.10.1

复制

[Step 1]: checking docker-compose is installed ...

复制

Note: docker-compose version: 1.27.4

复制

[Step 2]: loading Harbor images ...

复制

Loaded image: goharbor/chartmuseum-photon:v2.1.2

复制

Loaded image: goharbor/prepare:v2.1.2

复制

Loaded image: goharbor/harbor-log:v2.1.2

复制

Loaded image: goharbor/harbor-registryctl:v2.1.2

复制

Loaded image: goharbor/clair-adapter-photon:v2.1.2

复制

Loaded image: goharbor/harbor-db:v2.1.2

复制

Loaded image: goharbor/harbor-jobservice:v2.1.2

复制

Loaded image: goharbor/clair-photon:v2.1.2

复制

Loaded image: goharbor/notary-signer-photon:v2.1.2

复制

Loaded image: goharbor/harbor-portal:v2.1.2

复制

Loaded image: goharbor/redis-photon:v2.1.2

复制

Loaded image: goharbor/nginx-photon:v2.1.2

复制

Loaded image: goharbor/trivy-adapter-photon:v2.1.2

复制

Loaded image: goharbor/harbor-core:v2.1.2

复制

Loaded image: goharbor/registry-photon:v2.1.2

复制

Loaded image: goharbor/notary-server-photon:v2.1.2

复制

[Step 3]: preparing environment ...

复制

[Step 4]: preparing harbor configs ...

复制

prepare base dir is set to /usr/local/harbor

复制

Clearing the configuration file: /config/portal/nginx.conf

复制

Clearing the configuration file: /config/log/logrotate.conf

复制

Clearing the configuration file: /config/log/rsyslog_docker.conf

复制

Clearing the configuration file: /config/nginx/nginx.conf

复制

Clearing the configuration file: /config/core/env

复制

Clearing the configuration file: /config/core/app.conf

复制

Clearing the configuration file: /config/registry/passwd

复制

Clearing the configuration file: /config/registry/config.yml

复制

Clearing the configuration file: /config/registry/root.crt

复制

Clearing the configuration file: /config/registryctl/env

复制

Clearing the configuration file: /config/registryctl/config.yml

复制

Clearing the configuration file: /config/db/env

复制

Clearing the configuration file: /config/jobservice/env

复制

Clearing the configuration file: /config/jobservice/config.yml

复制

Generated configuration file: /config/portal/nginx.conf

复制

Generated configuration file: /config/log/logrotate.conf

复制

Generated configuration file: /config/log/rsyslog_docker.conf

复制

Generated configuration file: /config/nginx/nginx.conf

复制

Generated configuration file: /config/core/env

复制

Generated configuration file: /config/core/app.conf

复制

Generated configuration file: /config/registry/config.yml

复制

Generated configuration file: /config/registryctl/env

复制

Generated configuration file: /config/registryctl/config.yml

复制

Generated configuration file: /config/db/env

复制

Generated configuration file: /config/jobservice/env

复制

Generated configuration file: /config/jobservice/config.yml

复制

loaded secret from file: /data/secret/keys/secretkey

复制

Generated configuration file: /config/chartserver/env

复制

Generated configuration file: /compose_location/docker-compose.yml

复制

Clean up the input dir

复制

Note: stopping existing Harbor instance ...

复制

Stopping harbor-jobservice ... done

复制

Stopping nginx             ... done

复制

Stopping harbor-core       ... done

复制

Stopping harbor-portal     ... done

复制

Stopping redis             ... done

复制

Stopping registryctl       ... done

复制

Stopping registry          ... done

复制

Stopping harbor-db         ... done

复制

Stopping harbor-log        ... done

复制

Removing harbor-jobservice ... done

复制

Removing nginx             ... done

复制

Removing harbor-core       ... done

复制

Removing harbor-portal     ... done

复制

Removing redis             ... done

复制

Removing registryctl       ... done

复制

Removing registry          ... done

复制

Removing harbor-db         ... done

复制

Removing harbor-log        ... done

复制

Removing network harbor_harbor

复制

Removing network harbor_harbor-chartmuseum

复制

WARNING: Network harbor_harbor-chartmuseum not found.

复制

[Step 5]: starting Harbor ...

复制

Creating network "harbor_harbor" with the default driver

复制

Creating network "harbor_harbor-chartmuseum" with the default driver

复制

Creating harbor-log ... done

复制

Creating harbor-db     ... done

复制

Creating registry      ... done

复制

Creating registryctl   ... done

复制

Creating redis         ... done

复制

Creating harbor-portal ... done

复制

Creating chartmuseum   ... done

复制

Creating harbor-core   ... done

复制

Creating nginx             ... done

复制

Creating harbor-jobservice ... done

复制

✔ ----Harbor has been installed and started successfully.----

复制

这之后，就可以用上述 harbor 来管理 helm charts。

3 图形界面操作

3.1 创建项目

首先，需要在 harbor 上创建一个名为 helm-repo 的项目，如图所示：

3.2 创建test用户

**-------------------------------kmaster服务器

相关操作如下----------------------------**

4 k8s集群一侧，安装helm等

4.1 安装helm

$ wget https://get.helm.sh/helm-v3.4.2-linux-amd64.tar.gz

复制

$ tar -zxvf helm-v3.4.2-linux-amd64.tar.gz

复制

$ cd linux-amd64/

复制

# 拷贝helm到 /usr/local/bin

复制

$ cp helm /usr/local/bin

复制

4.2 验证helm

$ helm

复制

The Kubernetes package manager

复制

Common actions for Helm:

复制

- helm search:    search for charts
- helm pull:      download a chart to your local directory to view
- helm install:   upload the chart to Kubernetes
- helm list:      list releases of charts

复制

$ helm version

复制

version.BuildInfo{Version:"v3.4.2", GitCommit:"23dd3af5e19a02d4f4baa5b2f242645a1a3af629", GitTre                                                                                                  eState:"clean", GoVersion:"go1.14.13"}

复制

5 chart仓库

5.1 添加 hostname

$ vi /etc/hosts

复制

192.168.8.131 reg.local.com

复制

5.1 添加chart仓库

5.1.1 添加认证

cat /etc/docker/daemon.json

复制

{"exec-opts":["native.cgroupdriver=systemd"],"log-driver":"json-file","log-opts":{"max-size":"100m"},"insecure-registries": ["reg.local.com"]}

复制

**-------------------------------harbor服务的认证信息

拷贝到kmaster服务器----------------------------**

5.1.2 把harbor的认证信息拷贝到kmaster服务器的相同位置

[root@harbor cert]# ll

复制

total 32

复制

-rw-r--r--. 1 root root 2033 Dec 31 04:25 ca.crt

复制

-rw-r--r--. 1 root root 3243 Dec 31 04:25 ca.key

复制

-rw-r--r--. 1 root root   17 Dec 31 04:25 ca.srl

复制

-rw-r--r--. 1 root root 2094 Dec 31 04:25 reg.local.com.cert

复制

-rw-r--r--. 1 root root 2094 Dec 31 04:25 reg.local.com.crt

复制

-rw-r--r--. 1 root root 1708 Dec 31 04:25 reg.local.com.csr

复制

-rw-r--r--. 1 root root 3247 Dec 31 04:25 reg.local.com.key

复制

-rw-r--r--. 1 root root  263 Dec 31 04:25 v3.ext

复制

[root@kmaster cert]# ll

复制

total 32

复制

-rw-r--r-- 1 root root 2033 Dec 31 04:25 ca.crt

复制

-rw-r--r-- 1 root root 3243 Dec 31 04:25 ca.key

复制

-rw-r--r-- 1 root root   17 Dec 31 04:25 ca.srl

复制

-rw-r--r-- 1 root root 2094 Dec 31 04:25 reg.local.com.cert

复制

-rw-r--r-- 1 root root 2094 Dec 31 04:25 reg.local.com.crt

复制

-rw-r--r-- 1 root root 1708 Dec 31 04:25 reg.local.com.csr

复制

-rw-r--r-- 1 root root 3247 Dec 31 04:25 reg.local.com.key

复制

-rw-r--r-- 1 root root  263 Dec 31 04:25 v3.ext

复制

-------------------------------kmaster服务器相关操作如下----------------------------

5.1.3 追加私有仓库

$ helm repo add stable https://charts.helm.sh/stable

复制

$ helm repo add --ca-file /data/cert/ca.crt --cert-file /data/cert/reg.local.com.cert --key-file /data/cert/reg.local.com.key test https://reg.local.com/chartrepo/helm-repo

复制

"test" has been added to your repositories

复制

5.2 更新chart列表

$ helm repo update

复制

Hang tight while we grab the latest from your chart repositories...

复制

...Successfully got an update from the "test" chart repository

复制

...Successfully got an update from the "stable" chart repository

复制

5.3 使用helm安装mysql

$ helm install stable/mysql --generate-name

复制

5.4 查看mysql是否成功安装

$ helm ls

复制

5.5 推送应用

helm3 现在默认不支持推送到charts库，需要安装插件helm-push

5.5.1 安装插件

$ helm plugin install https://github.com/chartmuseum/helm-push

复制

Downloading and installing helm-push v0.9.0 ...

复制

https://github.com/chartmuseum/helm-push/releases/download/v0.9.0/helm-push_0.9.0_linux_amd64.tar.gz

复制

Installed plugin: push

复制

5.5.2 查看追加的chart仓库

$ helm repo list

复制

NAME    URL

复制

stable  https://charts.helm.sh/stable

复制

test    https://reg.local.com/chartrepo/helm-repo

复制

5.5.3 创建chart

$ helm create mychart

复制

Creating mychart

复制

$ ll

复制

total 8

复制

drwxr-xr-x 2 root root    6 Jan  6 15:15 charts

复制

-rw-r--r-- 1 root root 1098 Jan  6 15:15 Chart.yaml

复制

drwxr-xr-x 3 root root  162 Jan  6 15:15 templates

复制

-rw-r--r-- 1 root root 1800 Jan  6 15:15 values.yaml

复制

5.5.4 检查chart

$ helm lint ./mychart

复制

==> Linting ./mychart

复制

Error unable to check Chart.yaml file in chart: stat mychart/Chart.yaml: no such file or directory

复制

Error: 1 chart(s) linted, 1 chart(s) failed

复制

[root@kmaster mychart]# cd ..

复制

[root@kmaster ~]# helm lint ./mychart

复制

==> Linting ./mychart

复制

[INFO] Chart.yaml: icon is recommended

复制

1 chart(s) linted, 0 chart(s) failed

复制

5.5.5 推送chart

$ helm push mychart test --ca-file /data/cert/ca.crt -u admin -p Harbor12345

复制

Pushing mychart-0.1.0.tgz to test...

复制

Done.

复制

-------------------------------harbor服务器相关操作如下----------------------------

6 验证刚推送成功的chart

版本0.1.0