使用wget命令批量下载网站目录下文件

  • A+
所属分类:Linux

记得在电影《社交网络》中,扎克伯格用被甩的当天晚上黑其他学校服务器下载他校女生照片的时候就用过这一招

批量下载http://demo.abc.com/path/to/file/ 路径下的所有文件

wget -nd -r -l1 --no-parent http://demo.abc.com/path/to/file/

注:-nd 不创建目录;-r 递归下载;-l1只下载当前目录下的文件;–no-parent 不下载父目录中的文件。

指定后缀下载,例如下载该目录下的所有.jpg和.bmp图片

wget -nd -r -l1 --no-parent -A.jpg -A.bmp http://demo.abc.com/path/to/file/

下载网站目录下除html之外的文件和目录,且不遵守robots.txt的限制。

wget -c -r -np -k -L --reject=html http://demo.abc.com/path/to/file/ -e robots=off

但是但是。。。没试过伪静态情况下是否搞的定,有空了试试

发表评论

:?: :razz: :sad: :evil: :!: :smile: :oops: :grin: :eek: :shock: :???: :cool: :lol: :mad: :twisted: :roll: :wink: :idea: :arrow: :neutral: :cry: :mrgreen: