网站镜像命令-Linux website mirror command

命令备忘:

1. wget

wget -m -e robots=off -k -E "https://cgra-me.ece.utoronto.ca/docs/"
-m 镜像,整站抓取
-e robots=off 忽略robots协议,强制抓取
-k 将绝对URL链接转换为本地相对URL
-E 将所有text/html文档以.html扩展名保存

2. HTTrack

保持更新;

posted @ 2021-01-25 15:20  "Michael_Xu"  阅读(157)  评论(0编辑  收藏  举报