harbor部署（helm chat）

一、安装docker-ce

docker-ce二进制包下载地址
二进制包下载地址：https://download.docker.com/linux/static/stable/x86_64/

#解压
tar xf docker-20.10.15.tgz 
#拷贝二进制文件
cp docker/* /usr/bin/
#创建containerd的service文件,并且启动
cat >/etc/systemd/system/containerd.service <<EOF
[Unit]
Description=containerd container runtime
Documentation=https://containerd.io
After=network.target local-fs.target

[Service]
ExecStartPre=-/sbin/modprobe overlay
ExecStart=/usr/bin/containerd
Type=notify
Delegate=yes
KillMode=process
Restart=always
RestartSec=5
LimitNPROC=infinity
LimitCORE=infinity
LimitNOFILE=1048576
TasksMax=infinity
OOMScoreAdjust=-999

[Install]
WantedBy=multi-user.target
EOF
systemctl enable --now containerd.service
#准备docker的service文件
cat > /etc/systemd/system/docker.service <<EOF
[Unit]
Description=Docker Application Container Engine
Documentation=https://docs.docker.com
After=network-online.target firewalld.service containerd.service
Wants=network-online.target
Requires=docker.socket containerd.service

[Service]
Type=notify
ExecStart=/usr/bin/dockerd -H fd:// --containerd=/run/containerd/containerd.sock
ExecReload=/bin/kill -s HUP $MAINPID
TimeoutSec=0
RestartSec=2
Restart=always
StartLimitBurst=3
StartLimitInterval=60s
LimitNOFILE=infinity
LimitNPROC=infinity
LimitCORE=infinity
TasksMax=infinity
Delegate=yes
KillMode=process
OOMScoreAdjust=-500

[Install]
WantedBy=multi-user.target
EOF
#准备docker的socket文件
cat > /etc/systemd/system/docker.socket <<EOF
[Unit]
Description=Docker Socket for the API

[Socket]
ListenStream=/var/run/docker.sock
SocketMode=0660
SocketUser=root
SocketGroup=docker

[Install]
WantedBy=sockets.target
EOF
#创建docker组
groupadd docker
#启动docker
systemctl enable --now docker.socket  && systemctl enable --now docker.service
#验证
docker info

二、部署harbor

下载链接：https://github.com/goharbor/harbor/releases/download/v2.6.2/harbor-offline-installer-v2.6.2.tgz
生成证书：

# 生成ca私钥
root@harbor:~/apps/harbor/certs# openssl genrsa -out ca.key 4096
Generating RSA private key, 4096 bit long modulus (2 primes)
..................................................++++
.....................................................................++++
e is 65537 (0x010001)
#生成ca证书
root@harbor:~/apps/harbor/certs# ls
ca.key
root@harbor:~/apps/harbor/certs# openssl req -x509 -new -nodes -sha512 -days 3650 -subj "/C=CN/ST=Beijing/L=Beijing/O=example/OU=Personal/CN=harbor.whyxx.net" -key ca.key -out ca.crt
root@harbor:~/apps/harbor/certs# ls
ca.crt  ca.key
# 生成服务端key
root@harbor:~/apps/harbor/certs# openssl genrsa -out harbor.whyxx.net.key 4096
Generating RSA private key, 4096 bit long modulus (2 primes)
.....................................................................++++
............................................................................................................................................................................................................................................................++++
e is 65537 (0x010001)
root@harbor:~/apps/harbor/certs# ls
ca.crt  ca.key  harbor.whyxx.net.key
# 生成证书签署请求文件
root@harbor:~/apps/harbor/certs# openssl req -sha512 -new -subj "/C=CN/ST=Beijing/L=Beijing/O=example/OU=Personal/CN=harbor.whyxx.net" -key harbor.whyxx.net.key -out harbor.whyxx.net.csr
root@harbor:~/apps/harbor/certs# ls
ca.crt  ca.key  harbor.whyxx.net.csr  harbor.whyxx.net.key
# 新建扩展文件
root@harbor:~/apps/harbor/certs# cat v3.ext 
authorityKeyIdentifier=keyid,issuer
basicConstraints=CA:FALSE
keyUsage = digitalSignature, nonRepudiation, keyEncipherment, dataEncipherment
extendedKeyUsage = serverAuth
subjectAltName = @alt_names

[alt_names]
DNS.1=harbor.whyxx.net
DNS.2=harbor
DNS.3=ks-allinone
# 使用根证书、根私钥签署服务器证书
root@harbor:~/apps/harbor/certs# openssl x509 -req -sha512 -days 3650 -extfile v3.ext -CA ca.crt -CAkey ca.key -CAcreateserial -in harbor.whyxx.net.csr -out harbor.whyxx.net.crt
Signature ok
subject=C = CN, ST = Beijing, L = Beijing, O = example, OU = Personal, CN = harbor.whyxx.net
Getting CA Private Key
root@harbor:~/apps/harbor/certs# ls
ca.crt  ca.srl                harbor.whyxx.net.csr  v3.ext
ca.key  harbor.whyxx.net.crt  harbor.whyxx.net.key
# 更新部署证书
root@harbor:/usr/local/share/ca-certificates# cp /root/apps/harbor/certs/harbor.whyxx.net.crt .
root@harbor:/usr/local/share/ca-certificates# ls
harbor.whyxx.net.crt
root@harbor:/usr/local/share/ca-certificates# update-ca-certificates 
Updating certificates in /etc/ssl/certs...
rehash: warning: skipping ca-certificates.crt,it does not contain exactly one certificate or CRL
1 added, 0 removed; done.
Running hooks in /etc/ca-certificates/update.d...
done.

将csr转换成cert，给予docker使用

openssl x509 -inform PEM -in harbor.whyxx.net.crt -out harbor.whyxx.net.cert

修改harbor配置文件：

cp harbor.yml.tmpl harbor.yml
image.png

安装harbor:

root@harbor:~/apps/harbor# ls
LICENSE  common.sh             harbor.yml       install.sh
certs    harbor.v2.6.2.tar.gz  harbor.yml.tmpl  prepare
root@harbor:~/apps/harbor# ./install.sh --help

Note: Please set hostname and other necessary attributes in harbor.yml first. DO NOT use localhost or 127.0.0.1 for hostname, because Harbor needs to be accessed by external clients.
Please set --with-notary if needs enable Notary in Harbor, and set ui_url_protocol/ssl_cert/ssl_cert_key in harbor.yml bacause notary must run under https. 
Please set --with-trivy if needs enable Trivy in Harbor
Please set --with-chartmuseum if needs enable Chartmuseum in Harbor
# 安装
root@harbor:~/apps/harbor# ./install.sh --with-notary --with-chartmuseum --with-trivy

[Step 0]: checking if docker is installed ...

Note: docker version: 20.10.12

[Step 1]: checking docker-compose is installed ...

Note: docker-compose version: 1.25.0

[Step 2]: loading Harbor images ...
93d5db33d7f0: Loading layer  37.72MB/3
................

同步证书：

root@harbor:/etc/docker# mkdir certs.d/harbor.whyxx.net -p
root@harbor:~/apps/harbor/certs# cp ca.crt harbor.whyxx.net.crt harbor.whyxx.net.key /etc/docker/certs.d/harbor.whyxx.net/

添加hosts解析：

root@harbor:~/apps/harbor/certs# cat /etc/hosts
127.0.0.1 localhost
192.168.50.10 master01
192.168.50.11 master02
192.168.50.12 master03
192.168.50.13 etcd01
192.168.50.14 etcd02
192.168.50.15 etcd03
192.168.50.16 node01
192.168.50.17 node02
192.168.50.18 node03
192.168.50.19 harbor.whyxx.net

重启docker

root@harbor:~/apps/harbor/certs# systemctl daemon-reload
root@harbor:~/apps/harbor/certs# systemctl restart docker

访问：
https://192.168.50.19

三、使用harbor存储docker镜像

四、使用harbor存储helm chat

4.1、安装 helm

下载地址：https://get.helm.sh/helm-v3.10.2-linux-amd64.tar.gz
cp helm /usr/bin/

4.2、在harbor ui 界面上创建仓库
4.3、helm增加repo

root@master01:/etc/docker/certs/harbor.whyxx.net# helm repo add --ca-file /etc/docker/certs/harbor.whyxx.net/ca.crt --cert-file /etc/docker/certs/harbor.whyxx.net/harbor.whyxx.net.cert --key-file /etc/docker/certs/harbor.whyxx.net/harbor.whyxx.net.key --username admin --password 123456 chartrepo https://harbor.whyxx.net/chartrepo/chartrepo
"chartrepo" has been added to your repositories
root@master01:/etc/docker/certs/harbor.whyxx.net# helm repo update
Hang tight while we grab the latest from your chart repositories...
...Successfully got an update from the "chartrepo" chart repository
Update Complete. ⎈Happy Helming!⎈
root@master01:/etc/docker/certs/harbor.whyxx.net# helm repo list
NAME        URL                                         
chartrepo   https://harbor.whyxx.net/chartrepo/chartrepo

4.4、向harbor仓库push一个应用

root@master01:~/apps/helm/chat# helm create wh-helm
Creating wh-helm
root@master01:~/apps/helm/chat/wh-helm/templates# cat <<EOF > configmap.yaml
> apiVersion: v1
> kind: ConfigMap
> metadata:
>   name: helm-configmap
> data:
>   myvalue: "Hello World"
> EOF
root@master01:~/apps/helm/chat# helm package wh-helm/
Successfully packaged chart and saved it to: /root/apps/helm/chat/wh-helm-0.1.0.tgz
root@master01:~/apps/helm/chat# ls
wh-helm  wh-helm-0.1.0.tgz
# 安装 push 插件
root@master01:~/apps/helm/chat# helm plugin install https://github.com/chartmuseum/helm-push
Downloading and installing helm-push v0.10.3 ...
https://github.com/chartmuseum/helm-push/releases/download/v0.10.3/helm-push_0.10.3_linux_amd64.tar.gz
Installed plugin: cm-push
# 推送
root@master01:~/apps/helm/chat# helm cm-push --ca-file /etc/docker/certs/harbor.whyxx.net/ca.crt --cert-file /etc/docker/certs/harbor.whyxx.net/harbor.whyxx.net.cert --key-file /etc/docker/certs/harbor.whyxx.net/harbor.whyxx.net.key --username admin --password 123456 wh-helm-0.1.0.tgz chartrepo 
Pushing wh-helm-0.1.0.tgz to chartrepo...
Done.

4.5、安装与更新

root@master01:~# helm install wh-test chartrepo/wh-test  # 这还可以这样写 helm install chartrepo/wh-test --generate-name
NAME: wh-test
LAST DEPLOYED: Tue Dec 13 21:15:49 2022
NAMESPACE: default
STATUS: deployed
REVISION: 1
NOTES:
1. Get the application URL by running these commands:
  export POD_NAME=$(kubectl get pods --namespace default -l "app.kubernetes.io/name=wh-test,app.kubernetes.io/instance=wh-test" -o jsonpath="{.items[0].metadata.name}")
  export CONTAINER_PORT=$(kubectl get pod --namespace default $POD_NAME -o jsonpath="{.spec.containers[0].ports[0].containerPort}")
  echo "Visit http://127.0.0.1:8080 to use your application"
  kubectl --namespace default port-forward $POD_NAME 8080:$CONTAINER_PORT
root@master01:~# kubectl get cm 
NAME                DATA   AGE
kube-root-ca.crt    1      28h
wh-helm-configmap   1      6s
root@master01:~# helm list
NAME    NAMESPACE   REVISION    UPDATED                                 STATUS      CHART           APP VERSION
wh-test default     1           2022-12-13 21:15:49.104792438 +0800 CST deployed    wh-test-0.1.0   1.16.0 
# 删除
root@master01:~# helm uninstall wh-test
release "wh-test" uninstalled
root@master01:~# kubectl get cm
NAME               DATA   AGE
kube-root-ca.crt   1      28h

参考：
https://zhuanlan.zhihu.com/p/461455968
https://zhuanlan.zhihu.com/p/565478061

最后编辑于 ：
©著作权归作者所有,转载或内容合作请联系作者
  • 人面猴
    序言：七十年代末，一起剥皮案震惊了整个滨河市，随后出现的几起案子，更是在滨河造成了极大的恐慌，老刑警刘岩，带你破解...
    沈念sama阅读 216,544评论 6赞 501
  • 死咒
    序言：滨河连续发生了三起死亡事件，死亡现场离奇诡异，居然都是意外死亡，警方通过查阅死者的电脑和手机，发现死者居然都...
    沈念sama阅读 92,430评论 3赞 392
  • 救了他两次的神仙让他今天三更去死
    文/潘晓璐 我一进店门，熙熙楼的掌柜王于贵愁眉苦脸地迎上来，“玉大人，你说我怎么就摊上这事。” “怎么了？”我有些...
    开封第一讲书人阅读 162,764评论 0赞 353
  • 道士缉凶录：失踪的卖姜人
    文/不坏的土叔 我叫张陵，是天一观的道长。 经常有香客问我，道长，这世上最难降的妖魔是什么？ 我笑而不...
    开封第一讲书人阅读 58,193评论 1赞 292
  • 港岛之恋（遗憾婚礼）
    正文 为了忘掉前任，我火速办了婚礼，结果婚礼上，老公的妹妹穿的比我还像新娘。我一直安慰自己，他们只是感情好，可当我...
    茶点故事阅读 67,216评论 6赞 388
  • 恶毒庶女顶嫁案：这布局不是一般人想出来的
    文/花漫 我一把揭开白布。 她就那样静静地躺着，像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上，一...
    开封第一讲书人阅读 51,182评论 1赞 299
  • 城市分裂传说
    那天，我揣着相机与录音，去河边找鬼。 笑死，一个胖子当着我的面吹牛，可吹牛的内容都是我干的。 我是一名探鬼主播，决...
    沈念sama阅读 40,063评论 3赞 418
  • 双鸳鸯连环套：你想象不到人心有多黑
    文/苍兰香墨 我猛地睁开眼，长吁一口气：“原来是场噩梦啊……” “哼！你这毒妇竟也来了？” 一声冷哼从身侧响起，我...
    开封第一讲书人阅读 38,917评论 0赞 274
  • 万荣杀人案实录
    序言：老挝万荣一对情侣失踪，失踪者是张志新（化名）和其女友刘颖，没想到半个月后，有当地人在树林里发现了一具尸体，经...
    沈念sama阅读 45,329评论 1赞 310
  • 护林员之死
    正文 独居荒郊野岭守林人离奇死亡，尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,543评论 2赞 332
  • 白月光启示录
    正文 我和宋清朗相恋三年，在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,722评论 1赞 348
  • 活死人
    序言：一个原本活蹦乱跳的男人离奇死亡，死状恐怖，灵堂内的尸体忽然破棺而出，到底是诈尸还是另有隐情，我是刑警宁泽，带...
    沈念sama阅读 35,425评论 5赞 343
  • 日本核电站爆炸内幕
    正文 年R本政府宣布，位于F岛的核电站，受9级特大地震影响，放射性物质发生泄漏。R本人自食恶果不足惜，却给世界环境...
    茶点故事阅读 41,019评论 3赞 326
  • 男人毒药：我在死后第九天来索命
    文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹，春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,671评论 0赞 22
  • 一桩弑父案，背后竟有这般阴谋
    文/苍兰香墨 我抬头看了看天上的太阳。三九已至，却和暖如春，着一层夹袄步出监牢的瞬间，已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,825评论 1赞 269
  • 情欲美人皮
    我被黑心中介骗来泰国打工， 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留，地道东北人。 一个月前我还...
    沈念sama阅读 47,729评论 2赞 368
  • 代替公主和亲
    正文 我出身青楼，却偏偏与公主长得像，于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子，可洞房花烛夜当晚...
    茶点故事阅读 44,614评论 2赞 353

推荐阅读更多精彩内容