洪运源码

在线扒站免费网站爬取工具汇总

开源的扒站系统,是利用wget来扒站的,所以点击提交任务一直转圈是正常现象,稍微等一会,就会收到扒站成功的提示,如果没有很久很久没有提示,再刷新页面。本地接口不用担心接口失效。

本工具永久免费使用!只需要一个浏览器,一键将目标网站的前端代码扒下来,自动将指定网页的HTML、CSS、JS、图片等前端资源分类,自动更改资源路径为本地路径,支持一键打包在线下载。

在线仿站工具-Wget.Fit:https://wget.fit/


离线存档工具

定位于网站离线存档的工具,也可以作为爬取工具使用,功能更为强大,但需要一定技术基础。


ArchiveBox:https://archivebox.io


Kiwix:https://www.kiwix.org


Conifer:https://conifer.rhizome.org


这几个都支持Headless Chromium,因此可以爬取ajax动态数据的网站。


当然技术人员也可以基于万能的爬虫框架Scrapy 自己开发一个。


在线扒站免费网站爬取工具汇总 链接:https://www.hycodes.cn/s/4538.html

返回顶部