命令备忘:
1. wget
代码语言:javascript复制wget -m -e robots=off -k -E "https://cgra-me.ece.utoronto.ca/docs/"
代码语言:javascript复制-m 镜像,整站抓取
-e robots=off 忽略robots协议,强制抓取
-k 将绝对URL链接转换为本地相对URL
-E 将所有text/html文档以.html扩展名保存
2. HTTrack
保持更新;
命令备忘:
1. wget
代码语言:javascript复制wget -m -e robots=off -k -E "https://cgra-me.ece.utoronto.ca/docs/"
代码语言:javascript复制-m 镜像,整站抓取
-e robots=off 忽略robots协议,强制抓取
-k 将绝对URL链接转换为本地相对URL
-E 将所有text/html文档以.html扩展名保存
2. HTTrack
保持更新;