wget专注于下载文件
在centos系统下演示，一般系统自带，无需安装wget

下载文件

以服务器名称下载

wget httpbin.org/image/jpeg

以自定义名称下载

wget -O xx.png httpbin.org/image/png

限定速度

–limit-rate=200k

断点续传

-c

后台下载

-b

用户代理UA设置

-U

镜像

–mirror

下载页面中的相关资源

-p

递归下载所有链接

-r

镜像下载python文档的网站

wget -c --mirror -U "Mozilla" -p --convert-links http://docs.python-requests.org

这里就把相关数据下载下来了