🕷️ 网络爬虫新利器:URLFinder,探索网页深处的秘密!
License
MIT
Stars
2.7k
Forks
206

摘要
URLFinder是一款用Go语言开发的网页信息提取工具,能够快速爬取网页上的URL和API接口信息,支持多种抓取模式,具有强大的自定义功能和fuzz测试能力。
内容
大家好!今天给大家带来一款超给力的开源工具——URLFinder🔍。这是一款用Go语言编写的网页信息提取工具,能够快速爬取网页上的URL地址和JS文件里的API接口信息。支持批量抓取、深入抓取、安全抓取等多种模式,满足你对网页数据的各种需求。
使用URLFinder,你可以轻松提取页面中的JS、URL和敏感信息,发现那些隐藏的未授权API接口。执行流程简单,参数丰富,如自定义user-agent、baseurl路径、cookie等,还可以设置线程数和超时时间,适应不同的网络环境和需求。🚀
特别值得一提的是,URLFinder的fuzz功能,基于404目录和路径,随机组合碰撞出有效路径,解决路径拼接错误的问题。结果优先显示输入URL的顶级域名,排序清晰,让你一目了然。🌐
开发者持续更新,修复bug,新增功能,让URLFinder越来越强大。如果你对电脑软件、开源技术感兴趣,或者想提高工作效率,URLFinder绝对值得一试!👍
关键词
Go 爬虫 效率工具
分类
开源软件 网络爬虫 数据提取
正文到此结束