Linux中的wget网络下载命令使用全解

语法： wget [选项]… [URL]…

长选项所必须的参数在使用短选项时也是必须的。

启动： -V, –version 显示 Wget 的版本信息并退出。 -h, –help 打印此帮助。 -b, –background 启动后转入后台。 -e, –execute=COMMAND 运行一个“.wgetrc”风格的命令。

日志和输入文件： -o, –output-file=FILE 将日志信息写入 FILE。 -a, –append-output=FILE 将信息添加至 FILE。 -d, –debug 打印大量调试信息。 -q, –quiet 安静模式 (无信息输出)。 -v, –verbose 详尽的输出 (此为默认值)。 -nv, –no-verbose 关闭详尽输出，但不进入安静模式。 -i, –input-file=FILE 下载本地或外部 FILE 中的 URLs。 -F, –force-html 把输入文件当成 HTML 文件。 -B, –base=URL 解析与 URL 相关的 HTML 输入文件 (由 -i -F 选项指定)。 –config=FILE Specify config file to use.

下载： -t, –tries=NUMBER 设置重试次数为 NUMBER (0 代表无限制)。 –retry-connrefused 即使拒绝连接也是重试。 -O, –output-document=FILE 将文档写入 FILE。 -nc, –no-clobber skip downloads that would download to existing files (overwriting them). -c, –continue 断点续传下载文件。 –progress=TYPE 选择进度条类型。 -N, –timestamping 只获取比本地文件新的文件。 –no-use-server-timestamps 不用服务器上的时间戳来设置本地文件。 -S, –server-response 打印服务器响应。 –spider 不下载任何文件。 -T, –timeout=SECONDS 将所有超时设为 SECONDS 秒。 –dns-timeout=SECS 设置 DNS 查寻超时为 SECS 秒。 –connect-timeout=SECS 设置连接超时为 SECS 秒。 –read-timeout=SECS 设置读取超时为 SECS 秒。 -w, –wait=SECONDS 等待间隔为 SECONDS 秒。 –waitretry=SECONDS 在获取文件的重试期间等待 1..SECONDS 秒。 –random-wait 获取多个文件时，每次随机等待间隔 0.5*WAIT…1.5*WAIT 秒。 –no-proxy 禁止使用代理。 -Q, –quota=NUMBER 设置获取配额为 NUMBER 字节。 –bind-address=ADDRESS 绑定至本地主机上的 ADDRESS (主机名或是 IP)。 –limit-rate=RATE 限制下载速率为 RATE。 –no-dns-cache 关闭 DNS 查寻缓存。 –restrict-file-names=OS 限定文件名中的字符为 OS 允许的字符。 –ignore-case 匹配文件/目录时忽略大小写。 -4, –inet4-only 仅连接至 IPv4 地址。 -6, –inet6-only 仅连接至 IPv6 地址。 –prefer-family=FAMILY 首先连接至指定协议的地址 FAMILY 为 IPv6，IPv4 或是 none。 –user=USER 将 ftp 和 http 的用户名均设置为 USER。 –password=PASS 将 ftp 和 http 的密码均设置为 PASS。 –ask-password 提示输入密码。 –no-iri 关闭 IRI 支持。 –local-encoding=ENC IRI (国际化资源标识符) 使用 ENC 作为本地编码。 –remote-encoding=ENC 使用 ENC 作为默认远程编码。 –unlink remove file before clobber.

目录： -nd, –no-directories 不创建目录。 -x, –force-directories 强制创建目录。 -nH, –no-host-directories 不要创建主目录。 –protocol-directories 在目录中使用协议名称。 -P, –directory-prefix=PREFIX 以 PREFIX/… 保存文件 –cut-dirs=NUMBER 忽略远程目录中 NUMBER 个目录层。

HTTP 选项： –http-user=USER 设置 http 用户名为 USER。 –http-password=PASS 设置 http 密码为 PASS。 –no-cache 不在服务器上缓存数据。 –default-page=NAME 改变默认页 (默认页通常是“index.html”)。 -E, –adjust-extension 以合适的扩展名保存 HTML/CSS 文档。 –ignore-length 忽略头部的‘Content-Length’区域。 –header=STRING 在头部插入 STRING。 –max-redirect 每页所允许的最大重定向。 –proxy-user=USER 使用 USER 作为代理用户名。 –proxy-password=PASS 使用 PASS 作为代理密码。 –referer=URL 在 HTTP 请求头包含‘Referer: URL’。 –save-headers 将 HTTP 头保存至文件。 -U, –user-agent=AGENT 标识为 AGENT 而不是 Wget/VERSION。 –no-http-keep-alive 禁用 HTTP keep-alive (永久连接)。 –no-cookies 不使用 cookies。 –load-cookies=FILE 会话开始前从 FILE 中载入 cookies。 –save-cookies=FILE 会话结束后保存 cookies 至 FILE。 –keep-session-cookies 载入并保存会话 (非永久) cookies。 –post-data=STRING 使用 POST 方式；把 STRING 作为数据发送。 –post-file=FILE 使用 POST 方式；发送 FILE 内容。 –content-disposition 当选中本地文件名时 允许 Content-Disposition 头部 (尚在实验)。 –auth-no-challenge 发送不含服务器询问的首次等待 的基本 HTTP 验证信息。

HTTPS (SSL/TLS) 选项： –secure-protocol=PR 选择安全协议，可以是 auto、SSLv2、 SSLv3 或是 TLSv1 中的一个。 –no-check-certificate 不要验证服务器的证书。 –certificate=FILE 客户端证书文件。 –certificate-type=TYPE 客户端证书类型，PEM 或 DER。 –private-key=FILE 私钥文件。 –private-key-type=TYPE 私钥文件类型，PEM 或 DER。 –ca-certificate=FILE 带有一组 CA 认证的文件。 –ca-directory=DIR 保存 CA 认证的哈希列表的目录。 –random-file=FILE 带有生成 SSL PRNG 的随机数据的文件。 –egd-file=FILE 用于命名带有随机数据的 EGD 套接字的文件。

FTP 选项： –ftp-user=USER 设置 ftp 用户名为 USER。 –ftp-password=PASS 设置 ftp 密码为 PASS。 –no-remove-listing 不要删除‘.listing’文件。 –no-glob 不在 FTP 文件名中使用通配符展开。 –no-passive-ftp 禁用“passive”传输模式。 –retr-symlinks 递归目录时，获取链接的文件 (而非目录)。

递归下载： -r, –recursive 指定递归下载。 -l, –level=NUMBER 最大递归深度 (inf 或 0 代表无限制，即全部下载)。 –delete-after 下载完成后删除本地文件。 -k, –convert-links 让下载得到的 HTML 或 CSS 中的链接指向本地文件。 -K, –backup-converted 在转换文件 X 前先将它备份为 X.orig。 -m, –mirror -N -r -l inf –no-remove-listing 的缩写形式。 -p, –page-requisites 下载所有用于显示 HTML 页面的图片之类的元素。 –strict-comments 用严格方式 (SGML) 处理 HTML 注释。

递归接受/拒绝： -A, –accept=LIST 逗号分隔的可接受的扩展名列表。 -R, –reject=LIST 逗号分隔的要拒绝的扩展名列表。 -D, –domains=LIST 逗号分隔的可接受的域列表。 –exclude-domains=LIST 逗号分隔的要拒绝的域列表。 –follow-ftp 跟踪 HTML 文档中的 FTP 链接。 –follow-tags=LIST 逗号分隔的跟踪的 HTML 标识列表。 –ignore-tags=LIST 逗号分隔的忽略的 HTML 标识列表。 -H, –span-hosts 递归时转向外部主机。 -L, –relative 只跟踪有关系的链接。 -I, –include-directories=LIST 允许目录的列表。 –trust-server-names use the name specified by the redirection url last component. -X, –exclude-directories=LIST 排除目录的列表。 -np, –no-parent 不追溯至父目录。

使用示例：1. 下载单个文件

下载过程中可以看到四项信息已经下载的比例，已经下载的大小，当前的下载速度，剩余的时间2. 使用一个大写O做参数表示另存为

这种方法适用于对应链接中没有显式文件名的情况。3. 指定下载速率

4. 断点下载wget -c完成未完成的下载下载一半时可以停下来，ctrl+c停顿，继续下载可以加入一个-c参数。注意：如果不加入-c，那么下载的文件会多出一个.1的后缀。5. 后台下载加上一个-b参数

为后台下载，下载经过写入到wget-log文件中。用

查看下载日志6. 模拟在浏览器下下载有的网站不允许客户在非浏览器环境下下载。使用–user-agent来设置

7. 测试下载链接方法:使用–spider试图做计划下载时候，需要先检查一下下载链接是否有效。

如果返回OK，则表示下载链接是正确的8、增加尝试次数方法：

如果网速有问题，下载大文件的时候可能会发生错误，默认wget尝试20次链接。如果尝试75次，可以

9、下载多个文件使用wget -i将多个下载链接写入到一个download-file-list.txt文件中，而后用

10、下载整站方法：用–mirror参数当你要下载一个完整站点并实现本地浏览的时候，

参数讲解：–mirror：设置这个参数用来建立本地镜像-p：下载所有html文件适合显示的元素–convert-links：下载完成后，将文档链接都转换成本地的-P ./LOCAL-DIR：保存所有的文件和目录到指定文件夹下11、下载时候禁止下载指定类型的文件例如下载站点时候，不打算下载gif动画图片。

12、记录下载日志方法：使用小写字母o

检查一下日志：

13、是第9条的增强版。可以限制下载容量

当下载的文件达到5兆的时候，停止下载。注意：如果不是对一个文件下载链接清单，对单个文件，这个限制不会生效的。14、和第11条正好相反，这条技巧是讲述如何仅仅下载指定类型的文件从一个网站中下载所有的pdf文件

15、使用wget完成ftp下载匿名ftp下载类似于http下载

即可。如果是需要输入用户名和密码，则是