准备三台虚拟机基本配置2核2G的
10.0.0.120
10.0.0.121
10.0.0.122
以下是三台主机都需要配置的
1.添加hosts解析环境 cat <<EOF >/etc/hosts 10.0.0.120 master 10.0.0.121 node01 10.0.0.122 node02 EOF
设置主机name
hostnamectl set-hostname master
hostnamectl set-hostname node01
hostnamectl set-hostname node02
2.关闭防火墙和selinux sed -i ‘s/SELINUX=enforcing/SELINUX=disabled/g‘ /etc/selinux/config setenforce 0 systemctl disable firewalld systemctl stop firewall
3.关闭 swap 分区 swapoff -a sed -i ‘/ swap / s/^\(.*\)$/#\1/g‘ /etc/fstab
4.更新系统时间，时间同步 yum -y install ntpdate ntpdate cn.pool.ntp.org
5.修改网络配置 cat <<EOF > /etc/sysctl.d/kubernetes.conf net.bridge.bridge-nf-call-ip6tables = 1 net.bridge.bridge-nf-call-iptables = 1 net.ipv4.ip_forward = 1 EOF # 重新加载配置 sysctl -p sysctl --system # 加载网桥过滤模块 modprobe br_netfilter # 查看网桥过滤模块是否加载成功 lsmod | grep br_netfilter
6.配置ipvs功能,需要手动载入ipvs模块 在kubernetes中service有两种代理模型，一种是基于iptables的，一种是基于ipvs的（性能高一些） -安装ipset和ipvsadm yum install ipset ipvsadm -y -添加需要加载的模块写入脚本文件 cat <<EOF > /etc/sysconfig/modules/ipvs.modules #!/bin/bash modprobe -- ip_vs modprobe -- ip_vs_rr modprobe -- ip_vs_wrr modprobe -- ip_vs_sh modprobe -- nf_conntrack_ipv4 EOF chmod +x /etc/sysconfig/modules/ipvs.modules /bin/bash /etc/sysconfig/modules/ipvs.modules lsmod | grep -e ip_vs -e nf_conntrack_ipv4
7.安装docker wget https://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo -O /etc/yum.repos.d/docker-ce.repo 指定安装docker-ce-19.03.12 yum install docker-ce-19.03.12-3.el7.x86_64 -y 给docker添加一个配置文件 # Docker在默认情况下使用的Cgroup Driver为cgroupfs，而kubernetes推荐使用systemd来代替cgroupfs mkdir /etc/docker cat <<EOF > /etc/docker/daemon.json { "exec-opts": ["native.cgroupdriver=systemd"], "registry-mirrors": ["https://kn0t2bca.mirror.aliyuncs.com"] } EOF 启动docker systemctl restart docker systemctl enable docker 查看docker版本 docker version
8.配置kubernetes源 # 由于kubernetes的镜像源在国外，速度比较慢，这里切换成国内的镜像源 cat <<EOF>/etc/yum.repos.d/kubernetes.repo [kubernetes] name=Kubernetes baseurl=http://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64 enabled=1 gpgcheck=0 repo_gpgcheck=0 gpgkey=http://mirrors.aliyun.com/kubernetes/yum/doc/yum-key.gpg http://mirrors.aliyun.com/kubernetes/yum/doc/rpm-package-key.gpg EOF 安装kubeadm、kubelet和kubectl yum install -y --setopt=obsoletes=0 kubeadm-1.19.13 kubectl-1.19.13 kubelet-1.19.13 # 配置kubelet的cgroup cat << EOF >> /etc/sysconfig/kubelet KUBELET_CGROUP_ARGS="--cgroup-driver=systemd" KUBE_PROXY_MODE="ipvs" EOF 设置kubelet开机自启 systemctl enable kubelet
在安装kubernetes集群之前，必须要提前准备好集群需要的镜像，所需镜像可以通过下面命令查看适合的版本
kubeadm config images list 9.下载镜像脚本 #!/bin/bash images=( kube-apiserver:v1.19.13 kube-controller-manager:v1.19.13 kube-scheduler:v1.19.13 kube-proxy:v1.19.13 pause:3.2 etcd:3.4.13-0 coredns:1.7.0 ) for imageName in ${images[@]} ; do docker pull registry.cn-hangzhou.aliyuncs.com/google_containers/$imageName docker tag registry.cn-hangzhou.aliyuncs.com/google_containers/$imageName k8s.gcr.io/$imageName docker rmi registry.cn-hangzhou.aliyuncs.com/google_containers/$imageName done
----------------------------------------------------------------------------------------------------------------------------
master集群初始化
kubeadm init --kubernetes-version=v1.19.13 --pod-network-cidr=10.244.0.0/16 --service-cidr=10.96.0.0/12 --apiserver-advertise-address=10.0.0.120
定义POD的网段为: 10.244.0.0/16， apiserver地址就是master本机IP地址。
kubeadm init --help|grep 参数
# 创建必要文件
mkdir -p $HOME/.kube
sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
sudo chown $(id -u):$(id -g) $HOME/.kube/config
node节点上 # 将node节点加入集群 kubeadm join 10.0.0.120:6443 --token wqs939.3bniq15vbxwdxdvm --discovery-token-ca-cert-hash sha256:e7b43e6db265959f32fece155f6677b797c5207142e64aed86bbf8f8f328a3ef
# 查看集群状态 此时的集群状态为NotReady，这是因为还没有配置网络插件 [root@master ~]# kubectl get nodes NAME STATUS ROLES AGE VERSION master NotReady master 63s v1.19.13 node01 NotReady <none> 22s v1.19.13 node02 NotReady <none> 16s v1.19.13
在master上安装网络插件 kubernetes支持多种网络插件，比如flannel、calico、canal等等，任选一种使用即可，本次选择flannel > 下面操作依旧只在`master`节点执行即可，插件使用的是DaemonSet的控制器，它会在每个节点上都运行 git clone https://github.com/blackmed/kubernetes-kubeadm.git 注意：切换的下载目录下，找到flannel.yaml的文件（记得修改版本号） kubectl create -f flannel.yaml
[root@master ~]# kubectl get nodes NAME STATUS ROLES AGE VERSION master Ready master 36m v1.19.13 node01 Ready <none> 35m v1.19.13 node02 Ready <none> 35m v1.19.13 部署完成
在kubernetes集群中部署一个nginx程序，测试下集群是否在正常工作。 # 部署nginx [root@master ~]# kubectl create deployment nginx --image=nginx:1.20-alpine # 暴露端口 [root@master ~]# kubectl expose deployment nginx --port=80 --type=NodePort [root@master ~]# kubectl get service NAME TYPE CLUSTER-IP EXTERNAL-IP PORT(S) AGE kubernetes ClusterIP 10.96.0.1 <none> 443/TCP 45m nginx NodePort 10.104.160.122 <none> 80:31203/TCP 101s [root@master ~]# kubectl get pods NAME READY STATUS RESTARTS AGE nginx-5b7c575f67-kvj7n 1/1 Running 0 117s 浏览器验证服务 http://10.0.0.120:31203/