Spider Simulator · Baiduspider / bingbot / Googlebot

模拟搜索引擎蜘蛛抓取

输入网址，以百度、必应、Google、搜狗、神马蜘蛛的真实 UA 抓取一次，原样回显返回内容与状态码——你的页面在蜘蛛眼里长什么样，一眼看清。

5 大蜘蛛 UA 原样回显状态码 / 耗时免登录免费

Result · 抓取结果

抓取结果将显示在这里。输入网址后点「开始抓取」。

— 后台代理 · 原样回显

🕷

模拟搜索引擎蜘蛛抓取测试

站长工具完全免费 🌙 支持黑夜模式 🕷 5 大蜘蛛 UA 📄 原样回显抓取内容 ⚡ Enter 快速抓取 🕘 本地抓取历史

网站做了 UA 判断？想知道百度、Google 到底抓到了什么？
这个工具模拟各大搜索引擎蜘蛛的真实 UA，替蜘蛛去访问一次你的页面：
① 选蜘蛛：百度 / 必应 / Google / 搜狗 / 神马，五种 UA 一键切换；
② 填网址：输入完整 http(s) 地址，点「开始抓取」或按 Enter；
③ 看结果：HTTP 状态码、Content-Type、页面大小、耗时与蜘蛛视角的返回内容原样回显；
④ 留记录：最近 6 次抓取记入本地历史，点击可回填网址。
典型用法：排查cloaking 伪装（给蜘蛛和用户看不一样的内容）、确认蜘蛛返回的是 200 还是 403、对比不同蜘蛛抓到的标题差异。

类别站长 / SEO 工具

抓取方式本站后台以蜘蛛 UA 发起 GET 请求

快捷键Enter 快速抓取

隐私抓取记录仅存浏览器本地

核心特性

5 大蜘蛛真实 UA

原样回显返回内容

HTTP 状态码

Content-Type / 大小

抓取耗时统计

本地抓取历史

Enter 快捷抓取

深浅主题

关于这个工具

抓取链路：
① 前端校验：网址非空与格式检查，蜘蛛类型走白名单；
② 后台代理：请求由本站后台以对应蜘蛛 UA 发起 GET，目标站只会看到一次来自蜘蛛 UA 的访问；
③ 结果回显：状态码、响应头关键项与正文（超长截断）原样返回，不做改写；
④ 记录留存：网址、蜘蛛、状态码与时间写入浏览器本地历史。
它不做：不抓内网 / 本机地址，不执行页面 JS（蜘蛛拿到的也是静态 HTML），不做批量抓取。

怎么用

第 1 步
在工具条上选一种蜘蛛类型，默认百度蜘蛛。
第 2 步
输入要测试的完整网址，如 https://example.com/page。
第 3 步
点「开始抓取」或按 Enter，几秒内回显结果。
第 4 步
先看 HTTP 状态码与 Content-Type，再读正文里蜘蛛实际拿到的内容。
第 5 步
换一种蜘蛛再抓一次，对比两者差异；最近抓取可在「History」里回填。

更新记录

v1.0 2026-10-22 工具上线：支持百度 / 必应 / Google / 搜狗 / 神马五种蜘蛛 UA 模拟抓取，回显状态码、Content-Type、大小、耗时与正文，适配黑夜模式。

常见问题

为什么不同蜘蛛抓到的内容不一样？

两种可能：① 目标站做了 UA 判断（cloaking），给不同蜘蛛返回不同内容——这正是本工具要帮你发现的问题；② 页面内容随机或含广告位，两次请求本身就会有差异。
同一蜘蛛多抓几次再下结论。

会真的访问目标网站吗？

会。每次抓取就是一次真实的 HTTP GET 请求，以对应蜘蛛的 UA 发出。请仅用于测试你自己的网站或有权限的页面，不要高频抓取他人站点。

抓取会执行页面里的 JavaScript 吗？

不会。返回的是服务器响应的原始 HTML。蜘蛛视角工具回显的也是静态内容；如果你的站点依赖 JS 渲染，搜索引擎还需要渲染阶段，本工具不模拟这一步。

为什么提示抓取失败？

常见原因：网址写错（要带 https://）、目标站超时（20 秒上限）、证书异常、或目标站屏蔽了蜘蛛 UA（返回 403/412，这本身也是有价值的排查结论）。
另外本工具不支持抓取内网 / 本机地址。

支持哪些网址？

公网可访问的 http / https 地址。需要登录才能看的页面、内网地址、以及非 80/443 常规端口的地址无法保证抓取成功。

我的抓取记录会被保存吗？

服务器不保存任何抓取记录与页面内容，结果只回显给当次请求。
「History · 最近抓取」里的网址与状态摘要只存在你自己的浏览器 localStorage 中，点「清空」即彻底删除。

💬 留言板 0

全部留言需审核通过后展示

💬

还没有留言，来抢沙发吧！