MS, 웹 콘텐츠 AI 학습·답변 활용 따로 설정…기존 차단 표시는 내년 3월 종료

마이크로소프트가 10월 30일 웹 콘텐츠의 AI 모델 학습과 AI 답변 작성 시 근거 활용을 별도로 선택하는 방식을 발표했다. 새 설정은 2027년 2월 1일부터 자사 크롤러가 페이지를 다시 읽을 때 적용할 예정이다. 기존 설정에 의존해 온 웹사이트 운영자는 3월 1일 이전에 새 표시로 옮겨야 한다.

학습 거부와 답변 근거 제외는 다른 선택

마이크로소프트 빙의 공식 설명에 따르면 모델 학습은 콘텐츠를 생성형 AI 모델의 매개변수 변경에 쓰는 행위다. 답변 근거 활용(grounding)은 AI가 답을 만들 때 웹페이지 내용을 참고하는 것이다. 학습을 거부하면서도 AI 답변의 출처로 쓰이는 것은 허용할 수 있다. 어느 쪽도 지정하지 않으면 마이크로소프트는 허용으로 취급한다.

학습 선호는 웹사이트의 robots.txt 파일에서 사이트 전체나 경로별로 표현할 수 있다. 개별 페이지의 메타 태그나 HTTP 응답 헤더로 다르게 지정할 수도 있으며, 페이지 설정이 robots.txt 설정보다 우선한다. 답변 근거 활용은 페이지별로만 설정한다. 전부 막는 선택 외에 마이크로소프트 자체 서비스에서는 허용하되 제3자에게 제공하는 근거 서비스에서는 제외하는 선택지도 제시했다.

이용 방침은 빙의 일반 검색 결과에 실릴 자격과 별개다. 다만 마이크로소프트는 AI 답변의 근거 사용을 제한하면 AI 서비스에서 브랜드 노출이 줄 수 있다고 설명했다. 검색·답변 노출이나 대가 지급을 보장하는 설정도 아니다.

기존 NoArchive·NoCache는 전환 필요

마이크로소프트는 기존 NoArchive·NoCache 표시를 AI 학습·답변 근거 활용에 관한 선호로 더는 해석하지 않는 시점을 2027년 3월 1일로 안내했다. 새 설정을 감지한 사이트에선 그 전이라도 남아 있는 기존 표시를 무시한다. 답변 근거 활용을 계속 제한하려면 페이지에 새 표시를 하고 빙 웹마스터 도구에 임시 전환 선호도 등록해야 한다고 밝혔다. 임시 등록은 페이지를 다시 읽거나 2027년 9월 30일이 되면 끝난다.

학습용 공통 신호를 적는 기술 초안은 robots.txt의 User-Agent: __usage_ai-training 그룹을 사용한다. 이 표시는 AI 학습 이용에 관한 의사이며 크롤러의 방문을 막는 명령이 아니다. IETF에 올라온 문서도 확정 표준이 아닌 개인 제출 초안이다. 구글 역시 2027년 초 지원 의사를 밝혔지만 각 회사의 적용 시점과 세부 방식은 다르다.

대표 이미지: AI 생성 이미지 / 데이마크

자료: 마이크로소프트 빙 블로그, 「Your content, your choice: clearer preferences for training and grounding」(2026-10-30) https://blogs.bing.com/search/2026/10/your-content-your-choice-clearer-preferences-for-training-and-grounding/
IETF 개인 제출 초안, 「Machine-Readable Training Preference Signal」(2026-10-30) https://www.ietf.org/archive/id/draft-kelley-aipref-training-preference-signal-00.txt
구글 일반 크롤러 문서(2026-10-30 변경 기록) https://developers.google.com/crawling/docs/crawlers-fetchers/google-common-crawlers?hl=en