网站镜像命令-Linux website mirror command

2021-01-29 15:17:48 浏览数 (2)

命令备忘:

1. wget

代码语言:javascript复制
wget -m -e robots=off -k -E "https://cgra-me.ece.utoronto.ca/docs/"
代码语言:javascript复制
-m 镜像,整站抓取
-e robots=off 忽略robots协议,强制抓取
-k 将绝对URL链接转换为本地相对URL
-E 将所有text/html文档以.html扩展名保存

2. HTTrack

保持更新;

0 人点赞