xshuden/urlhunter

urlhunter镜像说明

镜像概述

urlhunter是一款基于Go语言开发的侦察工具，专注于搜索通过bit.ly、goo.gl等短链接服务暴露的URL。它整合了URLTeam团队每日公开的短链接匹配结果数据，帮助用户高效分析目标URL信息。

核心功能

1. 多模式URL搜索：支持单关键词子串匹配、多关键词AND逻辑匹配、正则表达式匹配
2. 灵活日期筛选：可选择最新数据、指定单日期数据或日期范围数据
3. 结果导出：支持将搜索结果保存到指定文件
4. 本地缓存优化：允许通过Torrent下载数据存档并本地读取，解决Archive.org下载限速问题

使用场景

• 网络情报收集：发现目标组织暴露的公开共享链接（如Google Docs、Trello）
• 漏洞赏金项目：寻找潜在敏感信息（如密码重置令牌、内部系统链接）
• 安全监控：跟踪目标域名相关的公开短链接风险

配置说明

参数解释

• -keywords：关键词来源（文本文件路径或直接输入），支持三种格式：
  • 单关键词：如"acme.com"（子串匹配）
  • 多关键词：如"acme.com,admin"（AND逻辑）
  • 正则表达式：如"regex 1\d{10}"（需以"regex "开头）
• -date：数据日期筛选，可选值：
  • latest：最新存档
  • 单日期：如"2020-11-20"
  • 日期范围：如"2020-11-10:2020-11-20"
• -o：输出文件路径，如"-o out.txt"

Docker部署示例

拉取镜像

bash
docker pull xshuden/urlhunter

基础使用（单关键词+指定日期）

bash
docker run -it xshuden/urlhunter -keywords acme.com -date 2020-11-20 -o output.txt

多关键词搜索

bash
docker run -it xshuden/urlhunter -keywords "acme.com,password_reset_token" -date latest -o sensitive_links.txt

正则表达式搜索

bash
docker run -it xshuden/urlhunter -keywords "regex docs\.google\.com/a/acme\.com" -date 2020-11-20 -o google_docs.txt

本地缓存使用（需提前下载存档到archive目录）

bash
docker run -v $(pwd)/archive:/app/archive -it xshuden/urlhunter -keywords acme.com -date 2020-11-20 -o output.txt