一、Docker 容器与虚拟机的区别
1.1隔离与共享
虚拟机通过添加 Hypervisor 层，虚拟出网卡、内存、CPU 等虚拟硬件，再在其上建立 虚拟机，每个虚拟机都有自己的系统内核。
而 Docker 容器则是通过隔离的方式，将文件系 统、进程、设备、网络等资源进行隔离，再对权限、CPU 资源等进行控制，最终让容器之间互不影响，
容器无法影响宿主机。容器与宿主机共享内核、文件系统、硬件等资源。
1.2性能与损耗
与虚拟机相比，容器资源损耗要少。 同样的宿主机下，能够建立容器的数量要比虚拟 机多。但是，虚拟机的安全性要比容器稍好，
要从虚拟机攻破到宿主机或其他虚拟机，需要 先攻破 Hypervisor 层，这是极其困难的。而 docker 容器与宿主机共享内核、文件系统等资源，
更有可能对其他容器、宿主机产生影响。
二、Docker 存在的安全问题
2.1Docker 自身漏洞
作为一款应用 Docker 本身实现上会有代码缺陷。CVE官方记录Docker历史版本共有超过20项漏洞。
黑客常用的攻击手段主要有代码执行、权限提升、 信息泄露、权限绕过等。目前 Docker 版本更迭非常快，
Docker 用户最好将 Docker 升级为 最新版本。
2.2 Docker 源码问题
Docker 提供了 Docker hub，可以让用户上传创建的镜像，以便其他用户下载，快速搭 建环境。但同时也带来了一些安全问题。例如下面三种方式：
（1）黑客上传恶意镜像 如果有黑客在制作的镜像中植入木马、后门等恶意软件，那么环境从一开始就已经不安全了，后续更没有什么安全可言。
（2）镜像使用有漏洞的软件 Docker Hub 上能下载的镜像里面，75%的镜像都安装了有漏洞的软件。所以下载镜像后，
需要检查里面软件的版本信息，对应的版本是否存在漏洞，并及时更新打上补丁。
（3）中间人攻击篡改镜像 镜像在传输过程中可能被篡改，目前新版本的 Docker 已经提供了相应的校验机制来预 防这个问题。
三、Docker 架构缺陷与安全机制
Docker 本身的架构与机制就可能产生问题，例如这样一种攻击场景，黑客已经控制了宿主机上的一些容器，或者获得了通过在公有云上建立容器的方式，然后对宿主机或其他容器发起攻击。
3.1 容器之间的局域网攻击
主机上的容器之间可以构成局域网，因此针对局域网的 ARP 欺骗、嗅探、广播风暴等攻 击方式便可以用上。
所以，在一个主机上部署多个容器需要合理的配置网络，设置 iptable 规则。
3.2 DDoS 攻击耗尽资源
Cgroups 安全机制就是要防止此类攻击的，不要为单一的容器分配过多的资源即可避免此类问题。
3.3 有漏洞的系统调用
Docker与虚拟机的一个重要的区别就是Docker与宿主机共用一个操作系统内核。
一旦宿主内核存在可以越权或者提权漏洞，尽管Docker使用普通用户执行，在容器被入侵时，攻击者还可以利用内核漏洞跳到宿主机做更多的事情。
3.4 共享root用户权限
如果以 root 用户权限运行容器，容器内的 root 用户也就拥有了宿主机的root权限。
四、Docker 安全基线标准
下面从内核、主机、网络、镜像、容器以及其它等 6 个方 面总结 Docker 安全基线标准。
4.1内核级别
（1）及时更新内核。
（2）User NameSpace（容器内的 root 权限在容器之外处于非高权限状态）。
（3）Cgroups（对资源的配额和度量）。
（4）SELiux/AppArmor/GRSEC（控制文件访问权限）。
（5）Capability（权限划分）。
（6）Seccomp（限定系统调用）。
（7）禁止将容器的命名空间与宿主机进程命名空间共享。
4.2 主机级别
（1）为容器创建独立分区。
（2）仅运行必要的服务。
（3）禁止将宿主机上敏感目录映射到容器。
（4）对 Docker 守护进程、相关文件和目录进行审计。
（5）设置适当的默认文件描述符数。
（文件描述符：内核（kernel）利用文件描述符（file descriptor）来访问文件。文件描述符是非负整数。
打开现存文件或新建文件时，内核会返回一个文件描述符。读写文件也需要使用文件描述符来指定待读写的文件）
（6）用户权限为 root 的 Docker 相关文件的访问权限应该为 644 或者更低权限。
（7）周期性检查每个主机的容器清单，并清理不必要的容器。
4.3 网络级别
（1）通过 iptables 设定规则实现禁止或允许容器之间网络流量。
（2）允许 Docker 修改 iptables。
（3）禁止将 Docker 绑定到其他 IP/Port 或者 Unix Socket。
（4）禁止在容器上映射特权端口。
（5）容器上只开放所需要的端口。
（6）禁止在容器上使用主机网络模式。
（7）若宿主机有多个网卡，将容器进入流量绑定到特定的主机网卡上。
4.4 镜像级别
（1）创建本地镜像仓库服务器。
（2）镜像中软件都为最新版本。
（3）使用可信镜像文件，并通过安全通道下载。
（4）重新构建镜像而非对容器和镜像打补丁。
（5）合理管理镜像标签，及时移除不再使用的镜像。
（6）使用镜像扫描。
（7）使用镜像签名。
4.5 容器级别
（1）容器最小化，操作系统镜像最小集。
（2）容器以单一主进程的方式运行。
（3）禁止 privileged 标记使用特权容器。
（4）禁止在容器上运行 ssh 服务。
（5）以只读的方式挂载容器的根目录系统。
（6）明确定义属于容器的数据盘符。
（7）通过设置 on-failure 限制容器尝试重启的次数，容器反复重启容易丢失数据。
（8）限制在容器中可用的进程树，以防止 fork bomb。（fork炸弹，迅速增长子进程，耗尽系统进程数量）
4.6 其他设置
（1）定期对宿主机系统及容器进行安全审计。
（2）使用最少资源和最低权限运行容器。
（3）避免在同一宿主机上部署大量容器，维持在一个能够管理的数量。
（4）监控 Docker 容器的使用，性能以及其他各项指标。
（5）增加实时威胁检测和事件响应功能。
（6）使用中心和远程日志收集服务
五、容器最小化
如果仅在容器中运行必要的服务，像 SSH 等服务是不能轻易开启去连接容器的。通常使用以下方式来进入容器。
[root@server1 ~]# docker exec -it a661258f6bfe bash
六、Docker remote api 访问控制
Docker的远程调用 API 接口存在未授权访问漏洞，至少应限制外网访问。建议使用 Socket 方式访问。
监听内网 ip，docker daemon 启动方式如下。
[root@server1 ~]# docker pull httpd
Using default tag: latest
latest: Pulling from library/httpd
852e50cd189d: Pull complete
67d51c33d390: Pull complete
b0ad2a3b9567: Pull complete
136f1f71f30c: Pull complete
01f8ace29294: Pull complete
Digest: sha256:fddc534b7f6bb6197855be559244adb11907d569aae1283db8e6ce8bb8f6f456
Status: Downloaded newer image for httpd:latest
docker.io/library/httpd:latest
[root@server1 ~]# docker images
REPOSITORY TAG IMAGE ID CREATED SIZE
httpd latest 0a30f4c29d25 2 weeks ago 138MB
[root@server1 ~]# vim /usr/lib/systemd/system/docker.service
###禁用14行并再下面添加一行
ExecStart=/usr/bin/dockerd -H unix:///var/run/docker.sock -H tcp://20.0.0.10:1213
[root@server1 ~]# systemctl daemon-reload
[root@server1 ~]# systemctl restart docker
[root@server1 ~]# netstat -antp | grep docker
tcp 0 0 20.0.0.10:1213 0.0.0.0:* LISTEN 68675/dockerd
[root@server1 ~]# iptables -F
[root@server1 ~]# setenforce 0
连接server1并查看镜像
[root@server2 ~]# docker -H tcp://20.0.0.10:1213 images
REPOSITORY TAG IMAGE ID CREATED SIZE
httpd latest 0a30f4c29d25 2 weeks ago 138MB
七、限制流量流向
使用防火墙过滤器限制 Docker 容器的源 IP 地址范围与外界通讯。
[root@server1 ~]# firewall-cmd --permanent --zone=public --add-rich-rule="rule family="ipv4" source address="20.0.0.0/24" reject"
大量问题是因为Docker容器端口外放引起的漏洞，除了操作系统账户权限控制上的问题，更在于对Docker Daemon的进程管理上存在隐患。
目前常用的Docker版本都支持Docker Daemon管理宿主iptables的，而且一旦启动进程加上-p host_port:guest_port的端口映射，
Docker Daemon会直接增加对应的FORWARD Chain并且-j ACCEPT，而默认的DROP规则是在INPUT链做的，对docker没法限制，
这就留下了很严重的安全隐患了。因此建议：
1.不在有外网ip的机器上使用Docker服务
2.使用k8s等docker编排系统管理Docker容器
3.宿主上Docker daemon启动命令加一个–iptables=false，然后把常用iptables写进文件里，再用iptables-restore去刷。
八、镜像安全
Docker 镜像安全扫描，在镜像仓库客户端使用证书认证，对下载的镜像进行检查。
通过与 CVE 数据库同步扫描镜像，一旦发现漏洞则通知用户处理，或者直接阻止镜像继续构建。
如果公司使用的是自己的镜像源，可以跳过此步；否则，至少需要验证 baseimage 的 md5 等特征值，确认一致后再基于 baseimage 进一步构建。 一般情况下，要确保只从受信任的库中获取镜像，并且不建议使用–insecure-registry=[] 参数，推荐使用harbor私有仓库。
九、Docker-TLS加密通讯
为了防止链路劫持、会话劫持等问题导致 Docker 通信时被中 间人攻击，c/s 两端应该通过加密方式通讯。
[root@server1 ~]# mkdir /tls
[root@server1 ~]# cd /tls
[root@server1 tls]# vim /etc/hosts
[root@server1 tls]# cat /etc/hosts
127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4
::1 localhost localhost.localdomain localhost6 localhost6.localdomain6
20.0.0.10 server1
###创建ca密钥
[root@server1 tls]# openssl genrsa -aes256 -out ca-key.pem 4096
Generating RSA private key, 4096 bit long modulus
.............................................................................................++
.............++
e is 65537 (0x10001)
Enter pass phrase for ca-key.pem:
Verifying - Enter pass phrase for ca-key.pem:
[root@server1 tls]# ls
ca-key.pem
###创建ca证书
[root@server1 tls]# openssl req -new -x509 -days 1000 -key ca-key.pem -sha256 -subj "/CN=*" -out ca.pem
Enter pass phrase for ca-key.pem:
[root@server1 tls]# ls
ca-key.pem ca.pem
###创建服务器私钥
[root@server1 tls]# openssl genrsa -out server-key.pem 4096
Generating RSA private key, 4096 bit long modulus
......................................................................................................................................................................................................++
......................................................................................................................................................................................++
e is 65537 (0x10001)
[root@server1 tls]# ls
ca-key.pem ca.pem server-key.pem
###签名私钥
[root@server1 tls]# openssl req -subj "/CN=*" -sha256 -new -key server-key.pem -out server.csr
[root@server1 tls]# ls
ca-key.pem ca.pem server.csr server-key.pem
###使用ca证书与私钥证书签名，输入密钥
[root@server1 tls]# openssl x509 -req -days 1000 -sha256 -in server.csr -CA ca.pem -CAkey ca-key.pem -CAcreateserial -out server-cert.pem
Signature ok
subject=/CN=*
Getting CA Private Key
Enter pass phrase for ca-key.pem:
[root@server1 tls]# ls
ca-key.pem ca.pem ca.srl server-cert.pem server.csr server-key.pem
###生成客户端密钥
[root@server1 tls]# openssl genrsa -out key.pem 4096
Generating RSA private key, 4096 bit long modulus
...++
.........................++
e is 65537 (0x10001)
[root@server1 tls]# ls
ca-key.pem ca.pem ca.srl key.pem server-cert.pem server.csr server-key.pem
###签名客户端
[root@server1 tls]# openssl req -subj "/CN=client" -new -key key.pem -out client.csr
[root@server1 tls]# ls
ca-key.pem ca.pem ca.srl client.csr key.pem server-cert.pem server.csr server-key.pem
###创建配置文件
[root@server1 tls]# echo extendedKeyUsage=clientAuth > extfile.cnf
[root@server1 tls]# cat extfile.cnf
extendedKeyUsage=clientAuth
###签名证书，输入密钥，需要（签名客户端，ca证书，ca密钥）
[root@server1 tls]# openssl x509 -req -days 1000 -sha256 -in client.csr -CA ca.pem -CAkey ca-key.pem -CAcreateserial -out cert.pem -extfile extfile.cnf
Signature ok
subject=/CN=client
Getting CA Private Key
Enter pass phrase for ca-key.pem:
[root@server1 tls]# ls
ca-key.pem ca.pem ca.srl cert.pem client.csr extfile.cnf key.pem server-cert.pem server.csr server-key.pem
###删除多余文件
[root@server1 tls]# rm -rf ca.srl client.csr extfile.cnf server.csr
[root@server1 tls]# ls
ca-key.pem ca.pem cert.pem key.pem server-cert.pem server-key.pem
[root@server1 tls]# vim /usr/lib/systemd/system/docker.service
###将14行改成
ExecStart=/usr/bin/dockerd --tlsverify --tlscacert=/tls/ca.pem --tlscert=/tls/server-cert.pem --tlskey=/tls/server-key.pem -H tcp://0.0.0.0:2376 -H unix:///var/run/docker.sock
[root@server1 tls]# systemctl daemon-reload
[root@server1 tls]# systemctl restart docker
[root@server1 tls]# netstat -antp | grep docker
tcp6 0 0 :::2376 :::* LISTEN 69418/dockerd
###三个文件复制到另一台主机
[root@server1 tls]# scp ca.pem root@20.0.0.20:/etc/docker/
The authenticity of host '20.0.0.20 (20.0.0.20)' can't be established.
ECDSA key fingerprint is SHA256:Ny8hymAk4gAOeqy7yNYj3VEVYPgb65Uvo22IuBMW2ls.
ECDSA key fingerprint is MD5:3c:8b:82:f7:c7:40:68:14:75:8e:22:03:89:83:af:0f.
Are you sure you want to continue connecting (yes/no)? yes
Warning: Permanently added '20.0.0.20' (ECDSA) to the list of known hosts.
root@20.0.0.20's password:
ca.pem 100% 1765 370.2KB/s 00:00
[root@server1 tls]# scp cert.pem root@20.0.0.20:/etc/docker/
root@20.0.0.20's password:
cert.pem 100% 1696 262.3KB/s 00:00
[root@server1 tls]# scp key.pem root@20.0.0.20:/etc/docker/
root@20.0.0.20's password:
key.pem 100% 3243 751.7KB/s 00:00
###再第二台机器上看文件是否复制过去了
[root@server2 ~]# ls /etc/docker/
ca.pem cert.pem daemon.json key.json key.pem
###验证
[root@server2 ~]# docker --tlsverify --tlscacert=/etc/docker/ca.pem --tlscert=/etc/docker/cert.pem --tlskey=/etc/docker/key.pem -H tcp://20.0.0.10:2376 version
Client: Docker Engine - Community
Version: 19.03.14
API version: 1.40
Go version: go1.13.15
Git commit: 5eb3275d40
Built: Tue Dec 1 19:20:42 2020
OS/Arch: linux/amd64
Experimental: false
error during connect: Get https://20.0.0.10:2376/v1.40/version: x509: cannot validate certificate for 20.0.0.10 because it doesn't contain any IP SANs
###出了报错，显示不完全。
###讲IP地址改为之前映射的主机名登录
[root@server2 ~]# vi /etc/hosts
[root@server2 ~]# cat /etc/hosts
127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4
::1 localhost localhost.localdomain localhost6 localhost6.localdomain6
20.0.0.10 server1
[root@server2 ~]# docker --tlsverify --tlscacert=/etc/docker/ca.pem --tlscert=/etc/docker/cert.pem --tlskey=/etc/docker/key.pem -H tcp://server1:2376 version
Client: Docker Engine - Community
Version: 19.03.14
API version: 1.40
Go version: go1.13.15
Git commit: 5eb3275d40
Built: Tue Dec 1 19:20:42 2020
OS/Arch: linux/amd64
Experimental: false
Server: Docker Engine - Community
Engine:
Version: 19.03.13
API version: 1.40 (minimum version 1.12)
Go version: go1.13.15
Git commit: 4484c46d9d
Built: Wed Sep 16 17:02:21 2020
OS/Arch: linux/amd64
Experimental: false
containerd:
Version: 1.3.7
GitCommit: 8fba4e9a7d01810a393d5d25a3621dc101981175
runc:
Version: 1.0.0-rc10
GitCommit: dc9208a3303feef5b3839f4323d9beb36df0a9dd
docker-init:
Version: 0.18.0
GitCommit: fec3683
###此时可以完全显示了
###下载镜像并在server1查看镜像
[root@server2 ~]# docker --tlsverify --tlscacert=/etc/docker/ca.pem --tlscert=/etc/docker/cert.pem --tlskey=/etc/docker/key.pem -H tcp://server1:2376 pull tomcat
Using default tag: latest
latest: Pulling from library/tomcat
756975cb9c7e: Pull complete
d77915b4e630: Pull complete
5f37a0a41b6b: Pull complete
96b2c1e36db5: Pull complete
27a2d52b526e: Pull complete
a867dba77389: Pull complete
0939c055fb79: Pull complete
0b0694ce0ae2: Pull complete
81a5f8099e05: Pull complete
c3d7917d545e: Pull complete
Digest: sha256:a319b10d8729817c7ce0bcc2343a6f97711c7870395019340d96b6aafd6ccbea
Status: Downloaded newer image for tomcat:latest
docker.io/library/tomcat:latest
[root@server1 tls]# docker images
REPOSITORY TAG IMAGE ID CREATED SIZE
tomcat latest e0bd8b34b4ea 2 weeks ago 649MB
httpd latest 0a30f4c29d25 2 weeks ago 138MB
2016 年的 8 月 Github 上大量泄露个人或企业各种账号密码，出现这种问题一般都使用 dockerfile 或者 docker-compose 文件创建容器。
如果这些文件中存在账号密码等认证信息， 一旦 Docker 容器对外开放，则这些宿主机上的敏感信息也会随之泄露。
因此可以通过以下 方式检查容器创建模板的内容。
# check created users
grep authorized_keys $dockerfile
# check OS users
grep "etc/group" $dockerfile
# Check sudo users
grep "etc/sudoers.d" $dockerfile
# Check ssh key pair
grep ".ssh/.*id_rsa" $dockerfile
# Add your checks in below