Google-Extended이란?

크롤러가 아니라 제어 토큰입니다. 페이지를 가져오는 것은 Googlebot이며, Google-Extended는 해당 콘텐츠를 Gemini 학습 및 기반 정보로 사용할 수 있는지 결정합니다.

robots.txt 토큰

Google-Extended

운영자

Google

목적

학습

robots.txt 준수

●예 운영자는 robots.txt를 준수한다고 밝힙니다.

운영자 문서

예, 운영자의 공식 페이지에 나와 있습니다.

문서

developers.google.com

자체 User-Agent가 없으므로 액세스 로그에 표시되지 않습니다.

사이트 전체에서 Google-Extended 차단

User-agent: Google-Extended
Disallow: /

허용하되 비공개 경로는 제외

User-agent: Google-Extended
Allow: /
Disallow: /admin/

Google의 다른 봇

생성기의 robots.txt에 추가 →