爬取网站所有目录文件

最近公司给了我一个项目，让我把卫星的所有数据全部下载下来。

 

 命令是：

wget -m -np -e robots=off https://services.swpc.noaa.gov/experimental/ --no-check-certificate    

模板

wget -m -np -e robots=off 网址 --no-check-certificate