深色模式
05 · 30 分钟站点体检
接入 GSC,确认你对搜索引擎"可见"
📚 系列导航:这是《SEO/GEO 入门》的第 5 篇(共 20 篇)。上一篇你定好了双轨 KPI 表,这一篇正式开工:花 30 分钟做一次站点体检,确认两类引擎都"看得见"你。下一篇:06 · 关键词与意图研究。
前四篇都在建认知,这一篇终于动手。先泼盆冷水:我见过写了半年内容一个收录都没有的站,也见过 robots.txt 一行配置把所有爬虫拒之门外的站——内容再好,引擎看不见就等于不存在。可见性是 1,关键词、内容、外链都是后面的 0。好消息是,检查这件事只要 30 分钟,今天就能做完。这一篇只干一件事:带你跑通首次站点体检——接入 GSC、五项检查、确认 AI 爬虫放行。
看完这一篇,你会拿到:
- 一个接入完成的 GSC 后台(你未来 15 篇最常打开的仪表盘)
- 一份五查体检结果:收录、sitemap、抓取错误、移动、HTTPS
- 一份 AI 爬虫放行清单:GPTBot、ClaudeBot、PerplexityBot 现状确认
- 一张按红绿标好的整改清单
01 接入 GSC:拉一份 Google 眼里的"征信报告"
Google Search Console 免费,是 Google 官方给站长的后台。打个比方,它就像你去银行拉的征信报告——你觉得自己信用如何不重要,报告上写的才算数;你的站被收了多少页、哪些页有问题,全在这里。
接入三步:① 打开 Search Console 添加资源(推荐"网域"级,DNS 加一条 TXT 记录验证;不方便动 DNS 就用"网址前缀"+ HTML 文件验证);② 验证通过后,在"站点地图"里提交你的 sitemap 地址;③ 等 1-3 天让数据积累。就这么多。
💡 一句话总结:GSC 是 Google 视角的征信报告——今天接入,1-3 天后你就有数据可看。
02 首次体检五查
数据出来后,逐项过五关:① 收录("网页索引"报告:多少页已收录、多少被排除及原因);② sitemap(状态是否"成功",发现的网址数对不对得上);③ 抓取错误(有没有大量 404、服务器错误);④ 移动可用性(手机上能不能正常浏览);⑤ HTTPS(证书有效且覆盖全站)。
每查一项标红或绿。红项别急着当场修,先全部记进整改清单——这份清单就是你后面几篇的施工顺序。
💡 一句话总结:五查一遍标红绿——体检的目的不是当场治病,是拿到一张有优先级的病历。
03 AI 爬虫放行:robots.txt 里的新客人
GEO 侧的可见性检查只有一处,但极易翻车:打开 你的域名/robots.txt,找有没有针对 GPTBot(OpenAI)、ClaudeBot(Anthropic)、PerplexityBot 的规则(2026 上半年的主流 AI 爬虫名单,各家以官方文档为准)。没写就是默认放行;写了 Disallow: / 就是全禁——很多建站模板默认全禁,你可能根本不知道。
更隐蔽的坑在下一层:robots 放行了,CDN 或防火墙却把 AI 爬虫当攻击拦掉。放行要验证到服务器日志层——在日志里搜爬虫的 UA 名字,有访问记录才算真放行。
💡 一句话总结:robots.txt 查规则、服务器日志验真伪——AI 爬虫放没放行,日志说了算。
04 动手:30 分钟体检全流程
任务:① 接入 GSC 并提交 sitemap;② 跑完五查,逐项标红绿;③ 打开 robots.txt 核对三个 AI 爬虫的规则,能看日志的再到日志里搜 UA 确认。
验收标准:一张 GSC 后台截图(sitemap 状态显示"成功")+ 一份 robots.txt 检查清单(三个爬虫各标"放行/禁止/未提及")+ 五查红绿表。
两种结果都正常:一片绿——地基没问题,明天直接进第 6 篇选战场;一堆红——反而该庆幸,这些红项就是流量上不去的真实原因,按"收录类 > 抓取类 > 体验类"排序修,每修一项都是实打实的提升。
05 小结
你现在应该能:独立接入 GSC 并提交 sitemap、跑完五查拿到红绿病历、确认三个主流 AI 爬虫的放行状态。
下一篇 06 · 关键词与意图研究:可见性确认了,该选战场了——找到"有人搜、你能赢"的那批词,别再凭感觉选题。
📎 实战案例
站主小林接入 GSC 第一天就发现模板默认 Disallow: / 把所有爬虫全禁了——他白写了半年。放行后两周收录数从 0 涨到 80。robots.txt 永远是第一个该看的文件。
踩坑
- 我帮朋友看站,模板默认
Disallow: /全禁爬虫,他白写了半年——robots.txt 永远第一个看。 - robots 里明明放行了 GPTBot,两周后日志里一次访问都没有——查出来是 CDN 的 bot 防护把它当攻击拦了,放行要验证到日志层。
- 我用 HTML 文件方式验证 GSC,后来换主题时文件被删,验证失效、数据断了 3 周——推荐 DNS 验证,一劳永逸。