9 月 15 日默认变更后，如何设置 Cloudflare 的 AI 爬虫政策
Cloudflare 在 2026 年 9 月 15 日把 AI 机器人流量拆分为 Search、Agent、Training 三类，靠广告变现的网站默认会屏蔽 Training 与 Agent。下面说明如何确认你的站点落在哪种状态，并逐类按需配置。
标签
技术 SEO
先读这篇
9 月 15 日默认变更后，如何设置 Cloudflare 的 AI 爬虫政策
标签
最新文章
Google 排名 API：实际返回什么，又拒绝返回什么
Google 没有公开任何返回排名的接口。我们测量了它真正的 API 返回什么：晚三天的数据、与实时 SERP 结果中位数相差 7.4 位的平均排名，以及一个对 Google 从未见过的 URL 也回答 NEUTRAL 的判定。
Google 排名监控：固定阈值为何失效，以及该校准什么
多数排名监控在下降三位时发出警报。在我们自己的 Search Console 数据中，106 个查询的中位查询波动达 7.45 位。以下是把嘈杂警报变成可用警报的校准方法。
SERP 波动：如何判断是你自己的问题还是搜索结果的问题
在我们自己的 Search Console 数据里，124 个查询在平常一天平均移动 4.17 位。在动手改写之前，这套 15 分钟的排查能把真正的问题和普通的星期二分开。
移动端与桌面端的 Google 排名为何不同（2026）
同一个查询词，移动端与桌面端排名最多相差 11 位。本文给出我们自己的 Search Console 数据、Google 按设备返回不同结果的原因，以及一套把它们拆开看的 Claude Code 工作流。
Google 排名因素 2026：从专家调研评论中提炼的 7 条实操要点
2026 年的排名因素调研已被到处总结，而这些总结都跳过了真正有用的部分。这里从专家评论中提炼出七条发现，每条都写明要改什么、怎么验证。
PageSpeed Insights 的 Agentic Browsing 检查怎么用
PageSpeed Insights 在性能和 SEO 之外新增了「Agentic Browsing（智能体浏览）」类别。本文带你完成一次检查、正确解读分数，并逐项说明六项审计的含义与修复方式。
站点迁移后排名下滑？迁移前后这套重定向与状态码检查怎么做
迁移后的排名下滑，问题通常不在内容结构，而在状态码与重定向链：301 叠 301、死循环、一堆 404，或爬虫看到的和浏览器看到的不一样。你需要两个时间点而不是手艺：迁移前基线 + 迁移后 24-72 小时复查。
买外链、换友链之前：10 秒验证那个域名还在被 Google 收录吗
买外链或交换友链以前，先确认这个域名还在被 Google 收录。10 秒新鲜度检查（site: + 时间筛选）能滤掉「还打得开、但已经不带信号」的外链——DR 和流量都会骗人，收录不会。
2026 年如何发现并修复关键词蚕食：Codex 工作流指南
一个 90 分钟的工作流：从 Search Console、爬取数据与排名监控工具中找出关键词蚕食，再用合并、规范化、差异化或删除来修复且不流失流量——内含完整 Codex 审计技能。
用 DeepSeek Harness 修复「Discovered / Crawled – Currently Not Indexed」的 URL
在 DeepSeek Harness 内运行 Search Console 索引流程: 用 dsh --profile headless 一次性的批次，或 Web UI 交互对话加上每周排程，两者都把清单提交到 Google Indexing API(每天 200 个 URL)。
用 Hermes Agent 修复「Discovered / Crawled – Currently Not Indexed」的 URL
把 Search Console 的索引工作交给 Hermes Agent 的流程: 抓取未索引 URL 清单、逐一检查页面、判断真正原因、核准修复队列、只把修复过的页面通过 Google Indexing API 提交。