站点分层爬取

首页
批量模式可输入多个站点,依次爬取
请输入完整域名或URL,系统会从此页面开始爬取
层级越深,扫描页面越多
限制每个站点爬取的最大页面数量(最多100)

使用说明
  • 工具会在指定层级和数量限制内按照 BFS 方式爬取站内链接,自动过滤跨域页面。
  • 层级数 = 从首页出发的跳转次数,例如选择“第2层”表示会检测首页 + 一级链接 + 二级链接。
  • 建议根据站点规模合理设置“最大页面数”,避免对目标站点造成压力。
  • 结果列表显示 HTTP 状态、页面标题、提取到的站内链接数量,可导出 CSV 进一步分析。
温馨提示
  • 工具仅用于自查站点结构,请勿对未经授权的站点进行大规模扫描。
  • 若站点启用了防爬策略,部分页面可能返回 4xx/5xx,可适当降低频率或层级。
  • 可多次运行并调整层级/数量来覆盖更多页面。
  • 批量模式会依次处理多个站点,可通过“查看详情”按钮切换到任一站点的页面列表。