9월 15일 기본값 변경 이후 Cloudflare AI 크롤러 정책 설정 방법
Cloudflare는 2026년 9월 15일 AI 봇 트래픽을 Search, Agent, Training 세 범주로 나누었고, 광고로 수익을 내는 사이트에서는 Training과 Agent가 기본적으로 차단됩니다. 내 사이트가 어디에 놓였는지 확인하고 각 범주를 의도대로 설정하는 방법을 정리했습니다.
태그
먼저 읽기
Cloudflare는 2026년 9월 15일 AI 봇 트래픽을 Search, Agent, Training 세 범주로 나누었고, 광고로 수익을 내는 사이트에서는 Training과 Agent가 기본적으로 차단됩니다. 내 사이트가 어디에 놓였는지 확인하고 각 범주를 의도대로 설정하는 방법을 정리했습니다.
태그
Google은 순위를 돌려주는 엔드포인트를 공개하지 않습니다. 그렇다면 실제 API는 무엇을 돌려주는지 측정했습니다. 사흘 늦은 데이터, 라이브 SERP와 중앙값 7.4위 어긋나는 평균 게재순위, 그리고 Google이 본 적 없는 URL에도 NEUTRAL이라 답하는 판정입니다.
대부분의 순위 모니터는 세 순위 하락에 경보를 냅니다. 자체 Search Console 데이터의 106개 쿼리에서 중앙값 쿼리는 7.45순위나 움직였습니다. 잡음뿐인 경보를 쓸 만한 경보로 바꾸는 보정 방법을 정리합니다.
자체 Search Console 데이터에서 124개 쿼리는 평범한 날에도 평균 4.17계단 움직였습니다. 무엇이든 고쳐 쓰기 전에, 진짜 문제와 평범한 하루를 갈라내는 15분짜리 트리아지를 소개합니다.
같은 쿼리에서도 모바일과 데스크톱 순위는 최대 11계단 벌어집니다. 자체 Search Console 데이터, 구글이 기기별로 다른 결과를 내놓는 이유, 그리고 둘을 분리하는 Claude Code 워크플로를 정리했습니다.
2026년 랭킹 요인 설문은 어디서나 요약됐고, 그 요약들은 모두 핵심 부분을 건너뜁니다. 전문가 댓글에서 7가지 발견을 뽑아 각각 무엇을 바꾸고 어떻게 확인할지까지 정리했습니다.
PageSpeed Insights에 성능·SEO와 나란히 '에이전트 브라우징' 카테고리가 추가되었습니다. 실행 방법, 분수 점수를 정확하게 읽는 법, 여섯 가지 감사의 의미와 수정 방법을 순서대로 안내합니다.
이전 후 트래픽 하락의 원인은 대개 콘텐츠나 구조가 아니라 상태 코드와 리다이렉트 체인입니다. 필요한 건 재능이 아니라 두 시점 — 이전 전 베이스라인과 이전 후 24~72시간 재점검. 한 번에 최대 20 URL을 호프별 시간과 함께, Googlebot과 브라우저 양쪽 시점에서.
백링크를 사거나 교환하기 전에, 해당 도메인이 여전히 Google에 인덱스되는지 확인하세요. site: + 시간 필터 10초 체크로 "열리는데 신호는 없는" 링크를 걸러냅니다 — DR도 트래픽도 속일 수 있지만 인덱스는 속이지 않습니다.
Google이 검색 결과에서 목적지 URL을 /goto 패스스루 링크로 숨깁니다.
Search Console, 크롤 데이터, 순위 트래커에서 키워드 카니발리제이션을 찾아 통합·카노니컬·차별화·삭제로 트래픽을 잃지 않고 수정하는 90분 워크플로우. 바로 쓰는 Codex 감사 스킬 포함.
DeepSeek Harness로 Search Console 인덱싱 파이프라인 실행: dsh --profile headless 원샷 배치, 또는 Web UI 대화 세션과 주간 스케줄. 둘 다 Google Indexing API(하루 200개)로 제출.
Search Console 인덱싱 작업을 Hermes Agent에 맡기는 워크플로: 미인덱스 URL 목록 가져오기, 각 페이지 검사, 원인 트리아지, 수정 큐 승인, 수정된 페이지만 Google Indexing API로 제출.