k8s集群搭建（kubeadm方式）

2023-10-06 19:27:46

一、角色

master节点：k8s-master 192.168.10.201
node节点： k8s-node1 192.168.10.202
node节点： k8s-node2 192.168.10.203

二、系统初始化

1、修改主机名

$ hostnamectl set-hostname <hostname>
# 分别在各节点设置主机名
$ hostnamectl set-hostname k8s-master  
$ hostnamectl set-hostname k8s-node1
$ hostnamectl set-hostname k8s-node2

2、修改固定ip

$ vim /etc/sysconfig/network-scripts/ifcfg-ens32

TYPE="Ethernet"
PROXY_METHOD="none"
BROWSER_ONLY="no"
BOOTPROTO="static"
DEFROUTE="yes"
IPV4_FAILURE_FATAL="no"
IPV6INIT="yes"
IPV6_AUTOCONF="yes"
IPV6_DEFROUTE="yes"
IPV6_FAILURE_FATAL="no"
IPV6_ADDR_GEN_MODE="stable-privacy"
NAME="ens32"
UUID="af4dd3ea-54b8-4174-8357-ac866dc943d7"
DEVICE="ens32"
ONBOOT="yes"
IPADDR=192.168.10.201
GATEWAY=192.168.10.2
DNS1=192.168.10.2

3、关闭防火墙

$ systemctl stop firewalld
$ systemctl disable firewalld

4、关闭selinux

$ sed -i 's/enforcing/disabled/' /etc/selinux/config # 永久
$ setenforce 0 # 临时

5、关闭swap

$ swapoff -a # 临时
$ sed -ri 's/.*swap.*/#&/' /etc/fstab # 永久

6、在master设置hosts

$ cat >> /etc/hosts << EOF
192.168.10.201 k8s-master
192.168.10.202 k8s-node1
192.168.10.203 k8s-node2
EOF

7、将桥接的IPv4流量传递到iptables的链

$ cat > /etc/sysctl.d/k8s.conf << EOF
net.bridge.bridge-nf-call-ip6tables = 1
net.bridge.bridge-nf-call-iptables = 1
net.ipv4.ip_forward = 1
vm.swappiness=0
EOF

$ sysctl --system # 生效

8、kube-proxy开启ipvs的前置设置

cat > /etc/sysconfig/modules/ipvs.modules <<EOF
#!/bin/bash
modprobe -- ip_vs
modprobe -- ip_vs_rr
modprobe -- ip_vs_wrr
modprobe -- ip_vs_sh
modprobe -- nf_conntrack_ipv4
EOF

加载模块
chmod 755 /etc/sysconfig/modules/ipvs.modules && bash /etc/sysconfig/modules/ipvs.modules && lsmod | grep -e ip_vs -e nf_conntrack_ipv4

安装了ipset软件包
yum install ipset -y

安装管理工具ipvsadm
yum install ipvsadm -y

9、时间同步

$ yum install ntpdate -y
$ ntpdate time.windows.com

三、所有节点安装 Docker/kubeadm/kubelet

1、安装Docker

$ wget https://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo -O /etc/yum.repos.d/docker-ce.repo
$ yum -y install docker-ce-18.06.1.ce-3.el7
$ systemctl enable docker && systemctl start docker
$ docker --version

# 如果wget未安装先安装wget
$ yum install wget -y

2、添加阿里云YUM软件源

# 设置仓库地址,并修改docker的cgroup driver为systemd
$ cat > /etc/docker/daemon.json << EOF
{
"registry-mirrors": ["https://b9pmyelo.mirror.aliyuncs.com"],
"exec-opts": ["native.cgroupdriver=systemd"]
}
EOF

# 添加yum源
$ cat > /etc/yum.repos.d/kubernetes.repo << EOF
[kubernetes]
name=Kubernetes
baseurl=https://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64
enabled=1
gpgcheck=0
repo_gpgcheck=0
gpgkey=https://mirrors.aliyun.com/kubernetes/yum/doc/yum-key.gpg
https://mirrors.aliyun.com/kubernetes/yum/doc/rpm-package-key.gpg
EOF

# 重启docker
$ systemctl restart docker

3、安装kubeadm,kubelet和kubectl

$ yum makecache fast && yum install -y kubelet-1.19.8 kubeadm-1.19.8 kubectl-1.19.8

$ cat >/etc/sysconfig/kubelet <<EOF
KUBELET_CGROUP_ARGS="--cgroup-driver=systemd"
KUBE_PROXY_MODE="ipvs"
EOF

$ systemctl enable kubelet

四、部署 Kubernetes Master(192.168.10.201 上操作)

1、在192.168.10.201（k8s-master）上执行

$ kubeadm init \
--apiserver-advertise-address=192.168.10.201 \
--image-repository registry.aliyuncs.com/google_containers \
--kubernetes-version v1.19.8 \
--service-cidr=10.96.0.0/12 \
--pod-network-cidr=10.244.0.0/16

成功后记下如下内容,在k8s-node1和k8s-node2执行加入集群

kubeadm join 192.168.10.201:6443 --token 5btaip.was670oigzetkm1l \
    --discovery-token-ca-cert-hash sha256:642c30d2c18475f7af265177a620cd50b8890f1067b4afbd05cb3380d08b29cc

默认token有效期为24小时，当过期之后，该token就不可用了。这时就需要重新创建token，操作如下：

$ kubeadm token create --print-join-command

2、使用kubectl工具

$ mkdir -p $HOME/.kube
$ sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
$ sudo chown $(id -u):$(id -g) $HOME/.kube/config

$ kubectl get nodes

五、安装网络插件

$ kubectl apply -f https://raw.githubusercontent.com/coreos/flannel/master/Documentation/kube-flannel.yml

# 如果失败在hosts 中映射ip
199.232.28.133 raw.githubusercontent.com

查看是否搭建成功

kubectl get pods -n kube-system

六、测试

在Kubernetes集群中创建一个pod，验证是否正常运行

$ kubectl create deployment nginx --image=nginx
$ kubectl expose deployment nginx --port=80 --type=NodePort
$ kubectl get pod,svc

访问地址：http://NodeIP:Port

七、安装helm

Helm 客户端下载地址：https://github.com/helm/helm/releases
解压移动到/usr/bin/目录即可。

$ wget https://get.helm.sh/helm-v3.2.1-linux-amd64.tar.gz
$ tar -zxvf helm-v3.2.1-linux-amd64.tar.gz
$ mv linux-amd64/helm /usr/bin/

# 添加存储库
$ helm repo add stable http://mirror.azure.cn/kubernetes/charts
$ helm repo update

# 查看配置的存储库
$ helm repo list
$ helm search repo stable

# 删除存储库
$ helm repo remove aliyun

八、部署KubeSphere

# 准备工作
1、查看版本是否满足要求
2、查看硬件是否满足要求
3、检查集群中是否有默认 StorageClass
$ kubectl get sc
设置默认
如果没有执行一下代码
{
	安装OpenEBS
	$ kubectl create ns openebs
	$ kubectl apply -f https://openebs.github.io/charts/openebs-operator.yaml
	$ kubectl get sc
	# 设置默认 StorageClass
	$ kubectl patch storageclass openebs-hostpath -p '{"metadata": {"annotations":{"storageclass.kubernetes.io/is-default-class":"true"}}}'
}

# 1、安装(失败多试几次)
$ kubectl apply -f https://github.com/kubesphere/ks-installer/releases/download/v3.2.1/kubesphere-installer.yaml   
$ kubectl apply -f https://github.com/kubesphere/ks-installer/releases/download/v3.2.1/cluster-configuration.yaml

失败设置hosts
{
	查ip
	http://tool.chinaz.com/dns?type=1&host=www.github.com&ip=
	设置hosts
}



# 2、检查安装日志（等待安装完成）
$ kubectl logs -n kubesphere-system $(kubectl get pod -n kubesphere-system -l app=ks-install -o jsonpath='{.items[0].metadata.name}') -f

# 3使用 kubectl get pod --all-namespaces 查看所有 Pod 是否在 KubeSphere 的相关命名空间中正常运行。如果是，请通过以下命令检查控制台的端口（默认为 30880）：
$ kubectl get svc/ks-console -n kubesphere-system

# 4、确保在安全组中打开了端口 30880，并通过 NodePort (IP:30880) 使用默认帐户和密码 (admin/P@88w0rd) 访问 Web 控制台。

码农公寓