Kubernets 环境搭建
以下所有步骤均在真实环境下测试，全文手动码字。
安装前的准备
Kubernets运行最低2G内存，2核CPU，20G磁盘空间
操作系统：ubuntu16.04-server-LTS,因为阿里源暂时对1604支持比较好
- 设置root密码
sudo passwd
- 修改操作系统镜像源
#打开终端，进入/etc/apt/
cd /etc/apt
#对sources.list 文件进行备份
sudo cp sources.list sources.list.backup
#修改文件
sudo gedit sources.list
#删除掉source.list 里的所有内容，然后选择清华源粘出来
deb http://mirrors.tuna.tsinghua.edu.cn/ubuntu/ xenial main restricted
deb http://mirrors.tuna.tsinghua.edu.cn/ubuntu/ xenial-updates main restricted
deb http://mirrors.tuna.tsinghua.edu.cn/ubuntu/ xenial universe
deb http://mirrors.tuna.tsinghua.edu.cn/ubuntu/ xenial-updates universe
deb http://mirrors.tuna.tsinghua.edu.cn/ubuntu/ xenial multiverse
deb http://mirrors.tuna.tsinghua.edu.cn/ubuntu/ xenial-updates multiverse
deb http://mirrors.tuna.tsinghua.edu.cn/ubuntu/ xenial-backports main restricted universe multiverse
deb http://mirrors.tuna.tsinghua.edu.cn/ubuntu/ xenial-security main restricted
deb http://mirrors.tuna.tsinghua.edu.cn/ubuntu/ xenial-security universe
deb http://mirrors.tuna.tsinghua.edu.cn/ubuntu/ xenial-security multiverse
#保存后记得更新一下
sudo apt-get update
一、统一环境配置
1. 关闭交换空间
swapoff -a
查看交换空间
free -h
2. 避免开机启动交换空间
vim /etc/fstab
注释swap的那一行
3. 关闭防火墙
ufw disable
4. 配置DNS
vim /etc/systemd/resolved.conf
取消DNS注释，并增加DNS配置，DNS=114.114.114.114
5. 安装docker-ce
# step 1: 安装必要的一些系统工具
sudo apt-get update
sudo apt-get -y install apt-transport-https ca-certificates curl software-properties-common
# step 2: 安装GPG证书
curl -fsSL http://mirrors.aliyun.com/docker-ce/linux/ubuntu/gpg | sudo apt-key add -
# Step 3: 写入软件源信息
sudo add-apt-repository "deb [arch=amd64] http://mirrors.aliyun.com/docker-ce/linux/ubuntu $(lsb_release -cs) stable"
# Step 4: 更新并安装 Docker-CE
sudo apt-get -y update
sudo apt-get -y install docker-ce
- 安装校验
root@iZbp12adskpuoxodbkqzjfZ:$ docker version
Client:
Version: 17.03.0-ce
API version: 1.26
Go version: go1.7.5
Git commit: 3a232c8
Built: Tue Feb 28 07:52:04 2017
OS/Arch: linux/amd64
Server:
Version: 17.03.0-ce
API version: 1.26 (minimum version 1.12)
Go version: go1.7.5
Git commit: 3a232c8
Built: Tue Feb 28 07:52:04 2017
OS/Arch: linux/amd64
Experimental: false
- 配置镜像加速器
针对Docker客户端版本大于 1.10.0 的用户
您可以通过修改daemon配置文件/etc/docker/daemon.json来使用加速器
sudo mkdir -p /etc/docker
sudo tee /etc/docker/daemon.json <<-'EOF'
{
"registry-mirrors": ["https://f******b.mirror.aliyuncs.com"]
}
EOF
sudo systemctl daemon-reload
sudo systemctl restart docker
6. ubuntu16.04安装Kubernetes必备工具
apt-get update && apt-get install -y apt-transport-https
curl https://mirrors.aliyun.com/kubernetes/apt/doc/apt-key.gpg | apt-key add -
cat <<EOF >/etc/apt/sources.list.d/kubernetes.list
deb https://mirrors.aliyun.com/kubernetes/apt/ kubernetes-xenial main
EOF
apt-get update
apt-get install -y kubelet kubeadm kubectl
7. 同步时间
- 设置时区
dpkg-reconfigure tzdata
选择亚洲-重庆
- 设置系统时间与网络时间同步
ntpdate cn.pool.ntp.org
- 将系统时间写入硬件时间
hwclock --systohc
date命令查看时间
- 修改cloud.cfg,防止重启后主机名还原（1604不适用，1804可以参考）
vim /etc/cloud/cloud.cfg
将preserve_hostname:设置为true
- 重启
reboot
二、分别单独主机配置
- 修改主机名
sudo vim /etc/hostname #填写主机名
sudo vim /etc/hosts #修改127.0.1.1对应对主机名
- 配置静态IP
vim /etc/network/interfaces
#添加以下内容
auto ens33 #ens** 为网卡名
iface ens33 inet static
address 192.168.1.131 #网关必须和宿主机保持一致
netmask 255.255.255.0
gateway 192.168.1.1 #网关必须和宿主机保持一致
dns-nameserver 114.114.114.114 #必须配置dns信息
- 配置 DNS
sudo vim /etc/systemd/resolved.conf
[Resolve]
DNS=114.114.114.114 8.8.8.8
- reboot, 一定要！
三、 配置集群
- 分别增加host映射
sudo vim /etc/hosts #增加没个工作节点的IP映射
192.168.31.100 k8s.master
192.168.31.200 k8s.node1
192.168.31.201 k8s.node2
- 在master节点上适用kubeadm初始化配置文件
kubeadm config print init-defaults --kubeconfig ClusterConfiguration > kubeadm.yml
- 修改默认配置文件
localAPIEndpoint:
advertiseAddress: 192.168.31.100 #改为master主机IP
- 修改默认仓库
imageRepository: registry.aliyuncs.com/google_containers #修改为阿里云仓库
- 增加pod通信子网
networking:
dnsDomain: cluster.local
podSubnet: 10.244.0.0/16 #新增pod子网配置
serviceSubnet: 10.96.0.0/12
- 查看将要下载的镜像
root@k8s:/usr/local/kubernetes/cluster# kubeadm config images list --config kubeadm.yml
W0306 11:45:19.384940 3252 validation.go:28] Cannot validate kube-proxy config - no validator is available
W0306 11:45:19.385634 3252 validation.go:28] Cannot validate kubelet config - no validator is available
registry.aliyuncs.com/google_containers/kube-apiserver:v1.17.0
registry.aliyuncs.com/google_containers/kube-controller-manager:v1.17.0
registry.aliyuncs.com/google_containers/kube-scheduler:v1.17.0
registry.aliyuncs.com/google_containers/kube-proxy:v1.17.0
registry.aliyuncs.com/google_containers/pause:3.1
registry.aliyuncs.com/google_containers/etcd:3.4.3-0
registry.aliyuncs.com/google_containers/coredns:1.6.5
- 拉取镜像,这一步根据网速需要等待一段时间
kubeadm config images pull --config kubeadm.yml
- 配置master节点
kubeadm init --config=kubeadm.yml --upload-certs | tee kubeadm-init.log
日志中保存了节点使用的命令和加入集群的方法。
- 查看nodes
kubectl get nodes
- master节点按照日志内容配置目录
- node节点上执行加入集群命令（带token的）
- 再次查看节点状态
root@k8s:/usr/local/kubernetes/cluster# kubectl get nodes
NAME STATUS ROLES AGE VERSION
k8s.master NotReady master 7m42s v1.17.3
k8s.node1 NotReady <none> 23s v1.17.3
k8s.node2 NotReady <none> 8s v1.17.3
- 安装Calico
kubectl apply -f https://docs.projectcalico.org/manifests/calico.yaml
- 查看pod状态，直到所有的状态为running
watch kubectl get pods --all-namespaces
- 查看所有node,均为ready状态。在此过程中可能会因为网络原因下载镜像失败，但它会自动重试直到成功。
root@k8s:/usr/local/kubernetes/cluster# kubectl get nodes
NAME STATUS ROLES AGE VERSION
k8s.master Ready master 58m v1.17.3
k8s.node1 Ready <none> 50m v1.17.3
k8s.node2 Ready <none> 50m v1.17.3
- 查看 cs
root@k8s:/usr/local/kubernetes/cluster# kubectl get cs
NAME STATUS MESSAGE ERROR
controller-manager Healthy ok
scheduler Healthy ok
etcd-0 Healthy {"health":"true"}
- 查看集群信息
root@k8s:/usr/local/kubernetes/cluster# kubectl cluster-info
Kubernetes master is running at https://192.168.31.100:6443
KubeDNS is running at https://192.168.31.100:6443/api/v1/namespaces/kube-system/services/kube-dns:dns/proxy
To further debug and diagnose cluster problems, use 'kubectl cluster-info dump'.
配置完成，至此集群安装完成。
