shell:wget
2011-11-27 13:58
78 查看
格式:wget [参数列表] URL
-r 递归的下载,可用于下载整个网站,同时包括网站上所链接到的地址也会去下载
-l number 指定下载的层次:只下载两层,那么使用-l 2
-m 制作映像站点。wget会自动判断合适的参数来制作映像站点。此时,wget会登录到服务器上,读入robots.txt并按robots.txt的规定来执行。
-c 当文档特别大或网络特别慢的时候,往往一个文档还没有下载完,连接就已被切断,此时就需要断点续传。wget的断点续传是自动的,只需要使用-c参数
-t number 重试次数 -t 0,那么表示无穷次重试,直到连接成功。 -t 100 重试100次
-T 表示超时等待时间,例如-T 120,表示等待120秒连接不上就算超时。
-i 批量下载 可将要下载的url写入一个文档,执行 wget -i $file
--accept=LIST 能够接受的文档类型,
--reject=LIST拒绝接受的文档类型。
阅读更多
相关文章推荐
- linux shell wget下载远程目录
- 写一个shell脚本利用wget抓取股票历史数据
- shell实例浅谈之十三wget下载博客保存在本地
- shell(wget)模拟浏览器登录认证并下载文件
- Shell 命令 curl 和 wget 使用代理采集网页的总结大全
- shell脚本中常用的命令:wget、curl、ss、lsof、nmap、nc、netstat、telnet
- shell: wget、curl(libcurl)使用方法及其区别
- 写一个shell脚本利用wget抓取股票历史数据
- Linux系统常用Shell命令:wget介绍
- shell之wget
- Shell关于Wget命令的使用技巧
- shell——wget命令
- Shell curl 和 wget 使用代理IP
- Shell中的Wget 的用法
- shell——wget命令
- 初学shell,今天遇到由wget下载到本地的网页源代码的乱码问题,无聊的写了一个转码的脚本
- Shell curl 和 wget 使用代理IP
- shell_wget自动下载脚本
- Shell关于Wget命令的使用技巧
- Shell基础学习:关于Wget命令的使用技巧[zt]