AI 학습 거부가 한 줄로 완료? 주요 3사가 공통 규칙에 대응
機械翻訳 / Machine-translated
A
AI Friends
3日前・10分で読める
機械翻訳 / Machine-translated
@aifriends
AI Friends（https://aifriends.jp）のクロスポスト公式アカウント。AIツールの紹介・使い方・できることを、中学生でもわかるやさしい日本語で届けます。
"내 블로그를 AI 학습에 사용하지 않았으면 좋겠다"고 생각해도, 회사마다 설정이 달라 번거로웠던 분들이 많을 것입니다. 2026년 10월 30일, 그 번거로움을 줄여줄 공통 방식에 주요 AI 기업들이 대응을 발표했습니다.
2026년 10월 30일, Google 공식 블로그, OpenAI, Microsoft가 같은 날 발표했습니다. 내용은 사이트 운영자가 AI 학습 이용을 거부하기 위한 공통 신호에 대응한다는 것입니다.
이 신호를 제안한 것은 Anthropic의 케빈 켈리(Kevin Kelley) 씨입니다. IETF(인터넷 기술 규칙을 논의하는 단체)의 드래프트로 공개되었습니다.
기존에는 Google이라면 「Google-Extended」, OpenAI라면 「GPTBot」처럼 회사마다 별도의 설정이 필요했습니다. 5개 회사에 거부 의사를 전달하려면 5번 작성해야 했던 것입니다.
공통 신호가 생기면 한 곳에 작성하는 것만으로 의사를 전달할 수 있습니다.
robots.txt(크롤러라는 자동 순회 로봇에게 접근 가능한 위치를 알려주는 텍스트 파일)는 대부분의 사이트에서 이미 사용하고 있습니다. 이번 방식은 이 기존 파일을 활용합니다.
새로운 문법을 익힐 필요는 없습니다. 드래프트에 따르면 기존 규칙(RFC 9309)의 작성 방식을 그대로 사용합니다.
정책 토큰(용도를 나타내는 특별한 이름)으로 __usage_ai-training을 사용합니다. 사이트 전체에서 학습을 거부하는 예시는 다음과 같습니다.
User-Agent: __usage_ai-training
Disallow: /
일부만 허용하는 것도 가능합니다. 드래프트 예시에서는 사이트 전체를 거부하면서도 보도 관계자용 자료 페이지인 「/press-kit/」만 허용하고 있습니다.
User-Agent: __usage_ai-training
Disallow: /
Allow: /press-kit/
이 신호는 "학습에 사용하지 않았으면 한다"는 의사 표시이며, 크롤링(순회) 자체를 막는 명령이 아닙니다. 크롤링 제한은 기존과 마찬가지로 각 크롤러용 설정으로 진행합니다.
또한 모든 로봇을 지정하는 「User-Agent: *」 설정은 이 이름에 적용되지 않습니다. 전용 이름을 작성하지 않는 한 의사를 표시한 것으로 간주되지 않는 점에 주의해야 합니다.
대응 속도는 회사마다 다릅니다.
즉, 오늘 작성해도 즉시 모든 회사에 효력이 발생하는 것은 아닙니다. 당분간은 기존 설정과 공통 설정을 모두 유지하는 기간이 될 것입니다.
Microsoft 공식 블로그는 학습과 별도로 「그라운딩」 설정도 제공한다고 설명합니다. 그라운딩이란 AI가 답변을 생성할 때 사용자의 페이지를 정보 출처로 참조하는 것입니다.
학습은 AI의 내부를 변경하는 활용 방식입니다. 그라운딩은 질문이 있을 때마다 최신 페이지를 참조하는 활용 방식입니다. 비슷하지만 다른 개념입니다.
그라운딩은 페이지 단위로 다음 세 가지 중 하나를 선택합니다.
학습을 거부하는 지정은 페이지 단위라면 HTML에 다음과 같이 작성할 수 있습니다.
<meta name="Bingbot" content="ai-training:disallow">
일정도 정해져 있습니다. 2026년 12월 15일에 Bing Webmaster Tools에서 임시 설정이 시작되며, 2027년 3월 1일이 기한입니다. 이후 기존에 사용되던 NoArchive와 NoCache는 학습 및 답변 생성에 대한 의사 표시로 읽히지 않게 됩니다.
Microsoft는 그라운딩을 거부하면 AI 답변에서의 노출이 크게 줄어든다고 경고하고 있습니다. 다만 Bing 검색 순위에는 영향을 주지 않는다고 합니다.
기존의 Google-Extended나 GPTBot은 회사별 전용 이름이었습니다. 새로운 신호는 회사에 관계없는 「용도」의 이름입니다. 이것이 가장 큰 차이점입니다.
단, 대체가 아닙니다. 드래프트와 각 사의 발표 모두에서 회사별 설정은 계속 유효하다고 밝히고 있습니다. 회사마다 세부적으로 조정하고 싶은 경우에는 기존 설정을 사용할 수 있습니다.
배경에는 출판사 측의 강한 압박이 있습니다. 2026년 7월에는 Cloudflare가 "AI 크롤러는 비용을 지불하거나 차단당하거나"라는 방침을 내놓았습니다.
한국에서도 뉴스 사이트, 블로그, 기업 미디어 운영자와 관련이 있습니다. 국내 언론사 사이트는 이전부터 robots.txt를 통해 무단 학습에 대한 거부 의사를 표명해 왔습니다. 회사별 설정을 여러 개 관리해 온 담당자에게는 번거로움이 줄어드는 소식입니다.
예를 들어, 10명이 사내 블로그를 운영하는 회사를 생각해 봅시다. 기존에는 "Google과 OpenAI 설정을 확인하고, 새로운 AI 회사가 나오면 또 추가하고…"라는 작업이 담당자의 업무였습니다. 공통 이름 하나를 작성해 두면 기본 방침은 그것으로 전달됩니다.
개인 블로거의 경우는 더 간단합니다. WordPress의 robots.txt에 2줄을 추가하는 것만으로 "학습에는 사용하지 말아 주세요"라는 의사를 각 사에 전달할 수 있습니다.
이미지나 일러스트를 공개하는 크리에이터는 경로(path) 단위로 지정하는 방식이 됩니다. 작품을 넣어둔 폴더만 지정하는 형태입니다. 이미 학습된 데이터가 삭제되는 것은 아님을 기억해 두시기 바랍니다.
검색 결과에 대한 영향도 정리합니다. 이번 신호는 학습만을 대상으로 하며, Google이나 Bing의 검색 결과에서 사이트가 사라지는 일은 없다고 설명되어 있습니다.
추천하는 순서는 다음과 같습니다.
반대로, AI 답변에 자신의 사이트가 노출되길 원하는 분은 아무것도 하지 않아도 됩니다. 기본 상태는 「허용」입니다.
아닙니다. Microsoft는 2027년 2월 1일, Google은 2027년, OpenAI는 앞으로 수개월 이내로 대응 시기가 다릅니다. 작성해도 즉시 효력이 발생하지 않는 회사가 있습니다.
삭제하지 마세요. 각 사 모두 기존 설정은 계속 유효하다고 설명하고 있습니다. 공통 설정은 그 위에 추가하는 형태를 권장합니다.
사라지지 않습니다. 이 신호의 대상은 학습뿐이며, Google이나 Bing의 검색 결과에는 영향을 주지 않는다고 설명되어 있습니다. 다만 Microsoft의 그라운딩을 거부하면 AI 답변에서의 노출은 줄어듭니다.
삭제되지 않습니다. 이 방식은 앞으로의 이용에 대한 의사 표시입니다. 과거에 사용된 데이터의 삭제는 보장되지 않습니다.
아직입니다. IETF 드래프트 단계이며, IETF는 승인하지 않았습니다. 향후 내용이 변경될 가능성이 있습니다.
먼저 자신의 사이트 robots.txt를 열어 현재 설정을 확인해 보세요.
이 글은 AI Friends 의 크로스포스트입니다.