wget获取整站
wget -m -e robots=off https://www.baidu.com
-m是克隆整个网站,-e robots=off是让wget忽视robots.txt
如果网站有中文路径,最好用以下命令
wget -r -p -np -k --restrict-file-names=nocontrol http://www.baidu.com
wget -m -e robots=off https://www.baidu.com
-m是克隆整个网站,-e robots=off是让wget忽视robots.txt
如果网站有中文路径,最好用以下命令
wget -r -p -np -k --restrict-file-names=nocontrol http://www.baidu.com