摘要: Linux系统下利用wget命令把整站下载做镜像网站2011-05-28 18:13:01 |1次阅读 |评论:0条|itokit在linux下完整的用wget命令整站采集网站做镜像 的命令是及无视网站根目录下的robots.txt限制。并且可以模拟一个正常浏览者的信息下载该网站。C/C++ Cod... 阅读全文
posted @ 2016-01-16 02:53 archoncap 阅读(671) 评论(0) 推荐(0) 编辑