开源

🕷️ 网络爬虫新利器:URLFinder,探索网页深处的秘密!

logo

pingc0y/URLFinder

⭐️⭐️
logo


License

MIT

Stars

2.7k

Forks

206


项目图片

摘要

URLFinder是一款用Go语言开发的网页信息提取工具,能够快速爬取网页上的URL和API接口信息,支持多种抓取模式,具有强大的自定义功能和fuzz测试能力。

内容

大家好!今天给大家带来一款超给力的开源工具——URLFinder🔍。这是一款用Go语言编写的网页信息提取工具,能够快速爬取网页上的URL地址和JS文件里的API接口信息。支持批量抓取、深入抓取、安全抓取等多种模式,满足你对网页数据的各种需求。

使用URLFinder,你可以轻松提取页面中的JS、URL和敏感信息,发现那些隐藏的未授权API接口。执行流程简单,参数丰富,如自定义user-agent、baseurl路径、cookie等,还可以设置线程数和超时时间,适应不同的网络环境和需求。🚀

特别值得一提的是,URLFinder的fuzz功能,基于404目录和路径,随机组合碰撞出有效路径,解决路径拼接错误的问题。结果优先显示输入URL的顶级域名,排序清晰,让你一目了然。🌐

开发者持续更新,修复bug,新增功能,让URLFinder越来越强大。如果你对电脑软件、开源技术感兴趣,或者想提高工作效率,URLFinder绝对值得一试!👍

关键词

Go 爬虫 效率工具

分类

开源软件 网络爬虫 数据提取
正文到此结束
本文目录