分享wget扒站方法和思路 附赠分享两款神奇的扒站工具 Windwos版本和Mac OS版本

近期有部分童鞋私信我,想把某个网站全部扒下来,包括css和js文件,但是他在别的地方找的软件都不能正常把css和js扒下来,导致无法使用;

我记得我去年九月份在mjj坛子发过一次,今天在发一次吧,博客还没发过;

 

请勿用于非法用途,本站所演示的源站数据已删除,仅演示使用,并未公开开放下载,如有疑问,来信侵删!

 

手动方法

需要下载某个目录下面的所有文件,命令;

在下载时。有用到外部域名的图片或连接。如果需要同时下载就要用-H参数;

wget食用说明,可能部分童鞋不太懂,那就直接下载下面的软件吧

-c 断点续传;

-r 递归下载,下载指定网页某一目录下(包括子目录)的所有文件;

-nd 递归下载时不创建一层一层的目录,把所有的文件下载到当前目录;

-np 递归下载时不搜索上层目录,如wget -c -r www.xxx.org/pub/path/ 没有加参数;

-np,就会同时下载path的上一级目录pub下的其它文件;

-k 将绝对链接转为相对链接,下载整个站点后脱机浏览网页,最好加上这个参数;

-L 递归时不进入其它主机,如wget -c -r www.xxx.org/;

 

如果网站内有一个这样的链接: www.xxx.com,不加参数-L,就会像大火烧山一样,会递归下载www.xxx.com网站;

-p 下载网页所需的所有文件,如图片等;

-A 指定要下载的文件样式列表,多个样式用逗号分隔;

-i 后面跟一个文件,文件内指明要下载的URL;

 

Windwos软件

软件官网:https://cyotek-webcopy.en.softonic.com/

windwos扒站演示

填写源站网址,设置保存路径,然后点击copy开始扒!

分享wget扒站方法和思路 附赠分享两款神奇的扒站工具 Windwos版本和Mac OS版本 实用软件 第1张

点击copy后会运行如果网站页面较多资源较多的话可能出现假死状态,不要强制关闭,请耐心等待程序抓取完成

抓取完成!看看路径以及css或者其他的都是否一致

分享wget扒站方法和思路 附赠分享两款神奇的扒站工具 Windwos版本和Mac OS版本 实用软件 第2张

关于抓取时间的话,取决于你要扒的网站的大小,源站大且图片多的话,emmm那时间会久一点;

另外支持多开!

Mac OS软件

官网:http://ricks-apps.com/osx/sitesucker/index.html

汉化包:https://github.com/hlcc/Mac-App-translate/tree/master/SiteSucker

分享wget扒站方法和思路 附赠分享两款神奇的扒站工具 Windwos版本和Mac OS版本 实用软件 第3张

 

本文部分内容素材源自:hostloc

 

 


上一篇:

下一篇:

#重要通知#强烈建议各位朋友添加TG群订阅TG频道!防止失联! 重要资料全部更新发布在TG群/TG频道各位大佬请点击下方图片查看TG群和订阅频道没有TG,如何注册和使用?请点击此处查看TG群/频道/机器人 集合推荐大全

评论 2 条

发表评论

电子邮件地址不会被公开。 必填项已用*标注

*
*