[toc]

有网环境进行安装
服务器centos7.5

一、环境规划

1 集群类型

Kubernetes集群大致分为两类:一主多从和多主多从。

  1. 一主多从:一个Master节点和多台Node节点,搭建简单,但是有单机故障风险,适合用于测试环境。

  2. 多主多从:多台Master和多台Node节点,搭建麻烦,安全性高,适合用于生产环境。

image.png

为了测试方便,本次搭建的是一主多从类型的集群。

2 安装方式

kubernetes有多种部署方式,目前主流的方式有kubeadm、minikube、二进制包。

  1. minikube:一个用于快速搭建单节点的kubernetes工具。
  2. kubeadm:一个用于快速搭建kubernetes集群的工具。
  3. 二进制包:从官网上下载每个组件的二进制包,依次去安装,此方式对于理解kubernetes组件更加有效。

我们需要安装kubernetes的集群环境,但是又不想过于麻烦,所以选择kubeadm方式。

3 主机规划

角色IP地址操作系统配置
Master192.168.158.128CentOS7.8+,基础设施服务器2核CPU,2G内存,50G硬盘
Node1192.168.158.129CentOS7.8+,基础设施服务器2核CPU,2G内存,50G硬盘
Node2192.168.158.130CentOS7.8+,基础设施服务器2核CPU,2G内存,50G硬盘

二、环境搭建

1. 前言

本次环境搭建需要三台CentOS服务器(一主二从),然后在每台服务器中分别安装Docker(18.06.3)、kubeadm(1.18.0)、kubectl(1.18.0)和kubelet(1.18.0)。

没有特殊说明,就是三台机器都需要执行。

2. 环境初始化

2.1 检查操作系统的版本

检查操作系统的版本(要求操作系统的版本至少在7.5以上):

cat /etc/redhat-release

2.2 设置主机名

设置主机名:

hostnamectl set-hostname <hostname> && bash

设置192.168.158.128的主机名:

hostnamectl set-hostname master && bash

设置192.168.158.129的主机名:

hostnamectl set-hostname slave1 && bash

设置192.168.158.130的主机名:

hostnamectl set-hostname slave2  && bash

2.3 主机名解析(三台设置)

修改配置文件:/etc/hosts

192.168.158.128 master
192.168.158.129 slave1
192.168.158.130 slave2

2.4 同步时间(三台设置)

systemctl start chronyd

2.5 关闭防火墙和禁止防火墙开机启动

关闭防火墙:

systemctl stop firewalld

禁止防火墙开机启动:

 systemctl disable firewalld

2.6 关闭selinux

查看selinux是否开启:

getenforce

永久关闭selinux,需要重启:

sed -i 's/enforcing/disabled/' /etc/selinux/config

临时关闭selinux,重启之后,无效:

setenforce 0

修改文件:/etc/selinux/config

image.png

2.7 关闭swap分区

永久关闭swap分区,需要重启:

sed -ri 's/.*swap.*/#&/' /etc/fstab

临时关swap分区,重启之后,无效::

swapoff -a

2.8 将桥接的IPv4流量传递到iptables的链

在每个节点上将桥接的IPv4流量传递到iptables的链:

cat > /etc/sysctl.d/k8s.conf << EOF
net.bridge.bridge-nf-call-ip6tables = 1
net.bridge.bridge-nf-call-iptables = 1
net.ipv4.ip_forward = 1
vm.swappiness = 0
EOF
# 加载br_netfilter模块
modprobe br_netfilter
# 查看是否加载
lsmod | grep br_netfilter
# 生效
sysctl --system

2.9 开启ipvs

在kubernetes中service有两种代理模型,一种是基于iptables,另一种是基于ipvs的。ipvs的性能要高于iptables的,但是如果要使用它,需要手动载入ipvs模块。

在每个节点安装ipset和ipvsadm:

yum -y install ipset ipvsadm

在所有节点执行如下脚本:

cat > /etc/sysconfig/modules/ipvs.modules <<EOF
#!/bin/bash
modprobe -- ip_vs
modprobe -- ip_vs_rr
modprobe -- ip_vs_wrr
modprobe -- ip_vs_sh
modprobe -- nf_conntrack_ipv4
EOF

授权、运行、检查是否加载:

chmod 755 /etc/sysconfig/modules/ipvs.modules && bash /etc/sysconfig/modules/ipvs.modules && lsmod | grep -e ip_vs -e nf_conntrack_ipv4

检查是否加载

lsmod | grep -e ipvs -e nf_conntrack_ipv4

2.10 重启三台机器

重启三台Linux机器:

reboot

四、安装Docker

1. 下载

wget https://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo -O /etc/yum.repos.d/docker-ce.repo

2. 安装

yum -y install docker-ce-18.06.3.ce-3.el7

3. 设置开机自启和启动docker

systemctl enable docker && systemctl start docker

4. 检查

docker version

5. 设置Docker镜像加速器:

sudo mkdir -p /etc/docker
sudo tee /etc/docker/daemon.json <<-'EOF'
{
  "exec-opts": ["native.cgroupdriver=systemd"],	
  "registry-mirrors": ["https://b9pmyelo.mirror.aliyuncs.com"],	
  "live-restore": true,
  "log-driver":"json-file",
  "log-opts": {"max-size":"500m", "max-file":"3"}
}
EOF

6. 重启docker进程

sudo systemctl daemon-reload
sudo systemctl restart docker

五、安装kubenetes

1. 添加阿里云的YUM软件源

由于kubernetes的镜像源在国外,非常慢,这里切换成国内的阿里云镜像源:

cat > /etc/yum.repos.d/kubernetes.repo << EOF
[kubernetes]
name=Kubernetes
baseurl=https://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64
enabled=1
gpgcheck=0
repo_gpgcheck=0
gpgkey=https://mirrors.aliyun.com/kubernetes/yum/doc/yum-key.gpg https://mirrors.aliyun.com/kubernetes/yum/doc/rpm-package-key.gpg
EOF

2. 安装kubeadm、kubelet和kubectl

由于版本更新频繁,这里指定版本号部署:

yum install -y kubelet-1.18.0 kubeadm-1.18.0 kubectl-1.18.0

为了实现Docker使用的cgroup drvier和kubelet使用的cgroup drver一致,建议修改"/etc/sysconfig/kubelet"文件的内容:

vim /etc/sysconfig/kubelet
# 修改
KUBELET_EXTRA_ARGS="--cgroup-driver=systemd"
KUBE_PROXY_MODE="ipvs"

设置为开机自启动即可,由于没有生成配置文件,集群初始化后自动启动:

systemctl enable kubelet

3. 查看k8s所需镜像

  • 查看k8s所需镜像:
kubeadm config images list

image20210629200057810.png

4. 部署k8s的Master节点

部署k8s的Master节点(192.168.158.128):
--apiserver-advertise-address=192.168.158.128 ip需指定自己环境的ip地址

# 由于默认拉取镜像地址k8s.gcr.io国内无法访问,这里需要指定阿里云镜像仓库地址
kubeadm init \
  --apiserver-advertise-address=192.168.158.128 \
  --image-repository registry.aliyuncs.com/google_containers \
  --kubernetes-version v1.18.0 \
  --service-cidr=10.96.0.0/12 \
  --pod-network-cidr=10.244.0.0/16

image20210630095944854.png

image20210630095954140.png

根据提示

mkdir -p $HOME/.kube
sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
sudo chown $(id -u):$(id -g) $HOME/.kube/config

5. 部署k8s的Node节点

根据提示,在192.168.18.101和192.168.18.102上添加如下的命令:

  kubeadm join 192.168.158.128:6443 --token jh32f5.rru0gyvo9h2853ix     --discovery-token-ca-cert-hash sha256:480a42ef88102d9fa1f3d8ed35b32adcf48abbf4ef009786fc6616103612d1df --ignore-preflight-errors=all

默认的token有效期为24小时,当过期之后,该token就不能用了,这时可以使用如下的命令创建token:

kubeadm token create --print-join-command
# 生成一个永不过期的token
kubeadm token create --ttl 0 --print-join-command

附录

1. 卸载k8s

kubeadm reset -f
modprobe -r ipip
lsmod
rm -rf ~/.kube/
rm -rf /etc/kubernetes/
rm -rf /etc/systemd/system/kubelet.service.d
rm -rf /etc/systemd/system/kubelet.service
rm -rf /usr/bin/kube*
rm -rf /etc/cni
rm -rf /opt/cni
rm -rf /var/lib/etcd
rm -rf /var/etcd
yum clean all
yum remove kube*

2. 卸载docker

卸载:

  1. 查询docker安装过的包:
yum list installed | grep docker
  1. 删除安装包:
    根据上步查询出的安装包,进行卸载
yum remove docker-ce.x86_64 ddocker-ce-cli.x86_64 -y
  1. 删除镜像/容器等信息
rm -rf /var/lib/docker

Q.E.D.


只有创造,才是真正的享受,只有拚搏,才是充实的生活。