아티클FRESH EDIT
Cloudflare의 AI 크롤러 설정, 구글봇까지 막을 수 있대요
Cloudflare’s AI Crawler Rules Can Block Googlebot via @sejournal, @MattGSouthern
30초 요약
Cloudflare가 AI 크롤러를 검색, 에이전트, 학습용으로 나눠 관리하는 기능을 가져왔어요. 9월 15일부터 적용되는 기본값 때문에 학습용 크롤러를 차단하면 구글봇까지 같이 막힐 수 있어요.
빠르게 보기
- Cloudflare의 AI 크롤러 관리 기능 도입
- 9월 15일 적용되는 기본 설정 확인 필요
왜 볼만해?
검색 엔진 노출에 직접적인 영향을 주는 인프라 레벨의 변화예요.
내 일에 써먹기
우리 웹사이트 크롤러 차단 설정이랑 SEO 영향도를 같이 점검해 봐요.
에디터 한마디 · AI 학습 데이터로 쓰이는 건 막고 싶은데, 자칫 검색 노출까지 안 될 수 있어서 조심해야겠어요.
원문 출처Search Engine JournalCloudflare’s AI Crawler Rules Can Block Googlebot via @sejournal, @MattGSouthern
원문 읽으러 가기 →