我会只翻译这一段,保留原有 markdown 结构和信息密度,然后直接返回简体中文结果。## 什么是 SEO Scrubbox? SEO Scrubbox 是一款用于技术 SEO 分析、实时可视化爬取和页面级诊断的 Chrome 扩展。它将页面内检查与 HTTP 和渲染感知分析结合起来,使用户能够查看页面在 JavaScript 渲染前后的表现,同时检查 canonical、meta robots、重定向、结构化数据、hreflang 和 sitemap 发现等信号。
该产品面向需要直接在浏览器中检查抓取行为的 SEO 专业人士、开发者和技术营销人员。它还包含一个名为 ScrubberCrawl 的可视化爬虫,可在发现页面时映射站点结构,帮助用户查看内链、可索引性和抓取问题,而无需切换到单独的桌面爬取工具。
主要功能
- 带节点图视图的实时可视化爬虫:ScrubberCrawl 会在发现 URL 时构建实时站点图,并提供按目录路由或抓取深度排列的布局选项,方便用户从不同角度查看站点结构。
- 基于指标的节点样式和筛选:图表可将节点大小和颜色映射到状态码、可索引性、唯一入链/出链、字数和文件大小,并可按可索引性或 HTTP 状态进行筛选,以更快发现问题。
- 爬取历史、快照和 CSV 传输:之前的爬取会保存供后续查看,且爬取数据可导出为 CSV,或从 CSV 导入以在图表中可视化现有数据。
- 渲染感知页面检查:扩展会比较原始 view-source 与渲染输出,以检测 JavaScript 执行后 canonical、meta robots、Googlebot 指令、标题和元描述的差异。
- 页面覆盖层和信号:它可以直接在页面上高亮
rel="nofollow"链接和data-nosnippet元素,通过扩展图标显示可索引性状态,并检测 noindex、nofollow、none 和 X-Robots-Tag 信号。 - 深度审计控制:用户可以调整爬取速度、并发数、内部 URL 上限和 sitemap 上限;在 staging 模式下,还可传递会话 cookie 和授权头以访问受保护环境。
- Sitemap、链接和 hreflang 分析:该工具可从
robots.txt发现 sitemap,区分 sitemap index 和 URL set 结构,检查内链和重定向链,统计链接频次,隔离 JavaScript 注入的链接,并验证 hreflang 返回链接。 - 服务器与缓存诊断:它还会审计 CSP、HSTS 和 X-Content-Type-Options 等安全头,以及包括 Cache-Control、ETag、Vary 和 Brotli/Gzip 支持在内的缓存与压缩行为。
如何使用 SEO Scrubbox
安装 Chrome 扩展,然后打开要检查的页面或网站。可使用页面内检查获取快速信号,或启动 ScrubberCrawl 爬取页面、筛选图表并查看已发现的 URL。
如需更深入的审计,可调整爬取限制、延迟和并发数,然后检查重定向链、canonical、结构化数据、hreflang、sitemap 发现和服务器头。如果需要测试渲染后的行为,可切换 JavaScript 开启或关闭,并将渲染结果与原始源码进行比较。
使用场景
- 技术 SEO 审计:在网站审计期间查看 canonical 标签、meta robots 指令、重定向、sitemap 可见性和内链结构。
- JavaScript 渲染检查:比较源代码和渲染后的 HTML,查看脚本是否更改标题、描述、canonical 或抓取信号。
- 网站架构审查:使用实时图表了解抓取深度、目录结构,以及页面如何通过内链连接。
- 测试环境和受保护站点检查:通过 staging 模式传递有效的会话 cookie 和授权头,抓取预发布或受密码保护的页面。
- 结构化数据和国际 SEO 审查:检查 JSON-LD 是否存在,并验证 hreflang 状态码和互相返回链接。
常见问题
- SEO Scrubbox 会同时分析源代码和渲染后内容吗?会。产品说明写明它会显示原始 view-source 和完全渲染后的状态,并比较 JavaScript 渲染前后的信号。
- 它能抓取受保护的环境吗?可以,staging 模式据称支持活动会话 cookie 和授权头,适用于 staging 或受密码保护的网站。
- 它会导出抓取数据吗?会。可视化爬虫支持 CSV 导出和 CSV 导入,便于在图表视图中复用。
- 有抓取限制吗?说明中写明免费抓取上限为每次运行 500 个 URL。
- 它是否覆盖服务器和 header 检查?是的。产品包含安全 header、缓存行为和压缩信号检查。
替代方案
- 桌面站点爬虫:这类工具通常用于大规模 SEO 审计,可能提供更广泛的站点抓取报告,但不会把工作流集中在 Chrome 中。
- 基于浏览器的 SEO 检查扩展:这类工具专注于快速的页面级检查,与 SEO Scrubbox 类似,但可能提供较少的抓取图谱和 HTTP 审计功能。
- 面向开发者的 HTTP 调试工具:这类工具适合检查 header、重定向和渲染行为,但通常缺少 hreflang、noindex 信号和 sitemap 分析等 SEO 专项检查。
- 基于表格的抓取分析:将抓取数据导出为 CSV 并手动分析可用于报告,但无法提供这里描述的实时图谱、覆盖层或浏览器内诊断。
替代品
PromptScout
PromptScout 监测你在 ChatGPT、Gemini、Google AI Overviews 和 Perplexity 的品牌提及、竞争对手推荐与引用来源,并结合网站审计与提示简报。
Ably Chat
Ably Chat 提供聊天 API 和 SDK,用于自定义实时聊天应用:支持反应、在线/房间状态及消息编辑/删除,面向高并发场景。
ClayHog
ClayHog 是 AI 搜索可见度与 GEO 平台,监测 ChatGPT、Gemini、Perplexity、Claude、Google AI Overviews 对品牌的可见度、情感与引用。
AakarDev AI
AakarDev AI 是一个强大的平台,通过无缝的向量数据库集成简化 AI 应用程序的开发,实现快速部署和可扩展性。
beehiiv
beehiiv 一体化通讯与网站平台,提供发布、增长、分析与变现工具,帮助创作者与品牌在一个地方运营并提升收入。
DeepMotion
DeepMotion 是 AI 动作捕捉与人体追踪平台,可在浏览器中用视频(及文本)生成 3D 动画;并通过 Animate 3D API 便于开发集成。