wget批量下载需要用户名和密码登录的网站资源

之前写过wget下载整个网站和指定网站某个目录的教程,那指的全是不需要登录用户名和密码的那种网站。

我觉得我还得补充一下,写一篇遇到需要登录用户名和密码的这种网站该如何去用wget批量下载

上一篇可以看下linux wget批量下载整站的点这里看,本篇作为补充贴 。

其实windows下也可以wget需要装一下win版本的wget程序,使用起来和linux无差异

先看下目标网站吧

需要下载本页面的 v1.5.2目录

wget参数如下,登录用户名和密码,其实就是在wget后加了--http-user=用户名 --http-passwd=密码

wget --http-user=用户名  --http-passwd=密码 -c -r -np -k -L -p https://isip.piconepress.com/projects/tuh_eeg/downloads/tuh_eeg_seizure/v1.5.2/

参数详解:

-c 断点续传
-r 递归下载,下载指定网页某一目录下(包括子目录)的所有文件
-nd 递归下载时不创建一层一层的目录,把所有的文件下载到当前目录
-np 递归下载时不搜索上层目录,如wget -c -r doc.test.com/lib/install/
没有加参数-np,就会同时下载install的上一级目录lib下的其它文件
-k 将绝对链接转为相对链接,下载整个站点后脱机浏览网页,最好加上这个参数
-L 递归时不进入其它主机,如wget -c -r www.ivpsr.com
如果网站内有一个这样的链接:
www.ivpsr.com,不加参数-L,就会像大火烧山一样,会递归下载www.ivpsr.com网站
-p 下载网页所需的所有文件,如图片等
-A 指定要下载的文件样式列表,多个样式用逗号分隔
-i 后面跟一个文件,文件内指明要下载的URL

参数很是详细需要根据实际使用的时候自行搭配

THE END