웹사이트 한 번 설정하면 AI 학습 거부…오픈AI가 지원할 새 공통 신호의 한계

오픈AI가 2026년 10월 30일 웹사이트 운영자가 자신의 글과 이미지가 생성형 AI의 기초 모델 학습에 쓰이기를 원하는지 더 간단하게 표시할 수 있는 공통 신호를 지원하겠다고 발표했다. 지금까지는 AI 회사마다 서로 다른 웹 수집 로봇 이름과 규칙을 확인해야 했지만, 새 방식이 자리 잡으면 하나의 선택을 여러 참여 업체에 전달할 수 있다. 다만 당장 모든 AI 회사에 적용되는 강제 규칙은 아니다. 오픈AI는 ‘앞으로 몇 달 안에’ 지원할 계획이라고 밝혔고, 관련 규격 역시 아직 논의 중인 초안이다.

이 소식을 이해할 때 가장 중요한 질문은 단순하다. “내 웹사이트의 콘텐츠를 AI 학습에 쓰지 말라고 한 번만 표시할 수 있게 되는가?” 답은 ‘그 방향으로 가는 중요한 첫걸음이지만, 지금 즉시 완성된 거부권이 생긴 것은 아니다’이다. 공통 신호를 실제로 읽고 따르는 회사에만 효력이 있고, 이미 학습에 사용된 자료를 모델에서 지우는 기능도 아니다. 검색 노출, 답변 작성 때의 실시간 인용, 기초 모델 학습은 서로 다른 사용 방식이어서 한 설정이 모든 이용을 막는다고 오해해서도 안 된다.

무엇이 발표됐나

오픈AI의 공식 발표는 웹사이트의 robots.txt 파일에 담기는 공통 신호를 존중하겠다는 내용이다. robots.txt는 웹사이트 운영자가 검색엔진이나 자동 수집 프로그램에 어느 공간을 읽어도 되는지 알리는 공개 안내문에 가깝다. 방문객 눈에는 잘 보이지 않지만 검색엔진과 각종 자동 수집기가 사이트에 들어올 때 먼저 확인하는 대표적인 약속 체계다.

기존에는 회사별로 다른 수집 로봇을 구분해야 했다. 예를 들어 같은 웹사이트라도 검색 결과에 노출하기 위한 수집, 챗봇 답변에서 최신 정보를 찾기 위한 수집, 차세대 모델을 학습시키기 위한 수집이 서로 다른 이름과 규칙으로 운영될 수 있다. 운영자는 업체별 문서를 읽고 원하는 사용은 허용하면서 원하지 않는 사용만 차단해야 했다. 작은 언론사, 개인 블로그, 창작자 사이트에는 이 관리 자체가 부담이었다. 새 공통 신호의 목표는 ‘생성형 AI의 기초 모델 학습’에 관한 선택을 여러 참여 업체에 한 번에 알리는 것이다.

여기서 ‘기초 모델 학습’은 챗봇이 새 능력을 갖도록 대량의 자료를 분석해 모델 내부의 수많은 숫자 값을 조정하는 과정을 뜻한다. 사용자가 오늘 질문했을 때 AI가 특정 웹페이지를 찾아 읽고 링크를 보여 주는 검색 기능과는 다르다. 이번 신호는 모든 자동 접근을 금지하는 만능 스위치가 아니라, 학습이라는 특정 용도에 대한 의사를 전달하는 장치다.

오픈AI는 새 신호가 기존 통제를 대체하지 않는다고 분명히 밝혔다. 이미 제공하고 있는 회사별 수집 로봇 설정은 계속 유지되고 존중된다. 따라서 사이트 운영자가 오늘 당장 해야 할 일은 기존 설정을 지우는 것이 아니다. 새 규격의 실제 적용 시점과 세부 문서가 나올 때까지 현재 정책을 유지하면서 변화 내용을 확인하는 편이 안전하다.

왜 지금까지는 복잡했나

웹의 기본 질서는 오랫동안 ‘공개된 페이지는 자동 수집될 수 있다’는 전제 위에서 발전했다. 검색엔진은 이 구조를 이용해 수많은 페이지를 찾아 색인을 만들었고, 사이트 운영자는 검색 유입을 얻는 대신 검색 로봇의 접근을 허용했다. 생성형 AI가 등장하면서 같은 자동 수집이라도 경제적 의미가 달라졌다. 검색엔진은 대체로 원문으로 이용자를 보내지만, 생성형 AI는 여러 자료에서 학습한 뒤 자체 답변을 내놓는다. 언론사와 창작자는 자신의 콘텐츠가 모델 성능을 높이는 재료가 되면서도 원문 방문과 수익은 줄어들 수 있다고 우려해 왔다.

문제는 의사를 표현하는 방법이 조각나 있었다는 점이다. 한 회사에는 학습용 로봇을 막고 검색용 로봇은 허용할 수 있지만, 다른 회사는 이름과 정책이 다르다. 새 회사가 생기거나 로봇 이름이 바뀌면 규칙도 다시 손봐야 한다. 콘텐츠 관리 시스템을 직접 다루기 어려운 개인 창작자에게는 사실상 선택권이 있어도 행사하기 힘든 상태였다.

공통 신호는 이 관리 비용을 낮추려는 시도다. 여러 휴대전화 충전기에 공통 규격이 생기면 이용자가 제조사마다 다른 케이블을 준비할 필요가 줄어드는 것과 비슷하다. 다만 충전 단자 규격은 제품에 물리적으로 적용되지만, AI 학습 선호 신호는 업체가 자발적으로 존중해야 작동한다. 신호를 무시하는 수집기까지 기술적으로 차단해 주는 방화벽은 아니다.

웹사이트 운영자에게 실제로 달라지는 점

이번 변화가 제대로 자리 잡으면 가장 큰 이익은 선택의 단순화다. 언론사, 온라인 커뮤니티, 쇼핑몰, 학교, 연구기관, 개인 창작자가 회사별 정책을 일일이 추적하는 부담이 줄어든다. 특히 직원이 많지 않은 작은 조직은 법무·개발 인력을 따로 두지 않고도 자신의 기본 입장을 표시하기 쉬워진다.

둘째, ‘웹에 공개했으니 모든 2차 이용에 동의했다’는 식의 모호함이 줄어들 수 있다. 공개와 학습 동의는 같은 개념이 아니다. 식당 메뉴를 길거리에서 볼 수 있게 붙여 두었다고 해서 누군가 그 디자인과 사진을 다른 상품 개발에 자유롭게 활용해도 된다는 뜻은 아니다. 공통 신호는 적어도 사이트 운영자가 학습 이용에 어떤 입장인지 기계가 읽을 수 있는 형태로 남긴다.

셋째, 서비스 선택이 더 세밀해질 가능성이 있다. 운영자는 검색엔진을 통한 발견 가능성은 유지하면서 기초 모델 학습에는 반대할 수 있다. 반대로 자신의 자료가 널리 학습되어 브랜드나 지식이 확산되는 편이 유리하다고 판단하는 곳은 허용할 수 있다. 모든 사이트에 하나의 정답이 있는 것이 아니라, 선택을 실행하기 쉬워지는 것이 핵심이다.

일반 이용자에게도 간접적인 변화가 있다. AI 회사가 콘텐츠 이용 조건을 더 명확하게 구분하면, 어떤 답변이 학습된 일반 지식에서 나왔고 어떤 답변이 현재 웹 검색과 출처 인용에서 나왔는지 설명할 필요가 커진다. 장기적으로는 챗봇이 원문을 보여 주는 방식, 언론사와의 사용료 계약, 창작자 보상 체계에도 영향을 줄 수 있다. 그러나 이번 발표만으로 수익 배분 제도가 만들어진 것은 아니다.

한 번 표시하면 모든 문제가 해결되는 것은 아니다

첫 번째 한계는 자발성이다. 오픈AI는 자신이 공통 신호를 존중하겠다고 약속했지만, 인터넷의 모든 AI 개발사와 데이터 수집업체가 같은 약속을 한 것은 아니다. 새 신호가 실질적인 업계 규칙이 되려면 더 많은 회사가 참여하고, 실제 운영에서 약속을 지키는지 확인할 수 있어야 한다.

두 번째는 시행 시점이다. 오픈AI의 발표는 현재 완료된 기능 안내가 아니라 향후 지원 약속이다. 회사는 몇 달 안에 적용하고 세부 내용을 다시 알리겠다고 했다. 지금 파일에 새로운 문구를 적는다고 즉시 오픈AI의 모든 시스템이 그 뜻을 처리한다고 단정할 수 없다. 공식 구현 문서가 공개되기 전에는 기존 회사별 통제를 병행해야 한다.

세 번째는 과거 데이터다. 학습 거부 신호는 앞으로의 수집과 사용에 대한 의사를 전달하는 데 초점이 있다. 이미 과거 학습 데이터에 들어간 자료를 찾아 제거하거나, 이미 만들어진 모델의 기억을 되돌리는 절차와는 별개다. 특정 콘텐츠가 실제로 학습에 사용됐는지 확인하는 일도 여전히 쉽지 않다.

네 번째는 법적 효력이다. 관련 규격은 인터넷 기술 표준을 논의하는 IETF의 작업과 연결되어 있지만, 현재 공개된 문서는 확정된 국제표준이나 법률이 아니다. IETF 초안은 논의를 위한 작업 문서이며 내용이 바뀌거나 대체될 수 있다. 신호를 무시했을 때 어떤 법적 책임이 생기는지는 국가의 저작권법, 계약, 약관, 향후 판결과 규제에 따라 달라진다.

다섯 번째는 ‘학습’의 범위다. AI 회사는 기초 모델 학습, 모델 평가, 안전성 연구, 검색 색인, 답변을 위한 일시적 읽기처럼 여러 목적으로 콘텐츠를 다룬다. 공통 신호가 가리키는 범위를 명확히 하지 않으면 운영자는 자신이 모든 이용을 거부했다고 생각하고 회사는 일부 용도만 제외했다고 해석할 수 있다. 규격 문구보다 실제 회사 정책과 설명이 중요한 이유다.

저작권 논쟁과는 어떻게 연결되나

오픈AI는 같은 날 AI 학습에 저작물을 사용하는 것이 미국 저작권법상 공정 이용에 해당한다는 자사의 입장을 담은 별도 글도 공개했다. 두 발표를 함께 보면 회사의 전략이 드러난다. 한편으로는 기존 법리상 AI 학습이 허용된다고 주장하면서, 다른 한편으로는 웹사이트 운영자가 학습 선호를 더 쉽게 표시하도록 지원하겠다는 것이다.

이 둘은 모순처럼 보일 수 있지만 법적 허용 여부와 사업자가 자발적으로 제공하는 선택권은 다른 층위의 문제다. 어떤 이용이 법적으로 가능하더라도 회사가 신뢰와 생태계 유지를 위해 더 넓은 통제를 제공할 수 있다. 반대로 선택 도구를 제공한다고 해서 회사가 과거의 모든 학습이 불법이었다고 인정한 것도 아니다.

창작자 입장에서는 공통 신호가 환영할 만한 변화이지만 보상 문제의 답은 아니다. 학습을 허용한 창작자에게 어떤 대가가 돌아가는지, 집단 라이선스가 만들어질지, AI가 원문과 매우 비슷한 결과를 낼 때 누가 책임지는지는 남아 있다. 언론사 입장에서도 학습 거부와 검색 유입 감소 사이의 선택이 생길 수 있다. AI 검색이 주요 정보 통로가 될수록 완전히 차단하는 것이 사업적으로 불리할 가능성도 있다.

일반 독자가 구분해야 할 세 가지

이 소식을 볼 때 ‘수집’, ‘학습’, ‘검색 답변’을 구분하면 과장을 피할 수 있다.

수집은 자동 프로그램이 웹페이지를 읽고 가져가는 행위다.
학습은 대량의 자료를 이용해 모델의 내부 능력을 바꾸는 과정이다.
검색 답변은 사용자의 질문 시점에 웹을 찾고 내용을 요약하거나 링크를 제시하는 기능이다.

한 사이트가 학습을 거부해도 검색 결과에 계속 나타날 수 있고, 반대로 검색용 로봇까지 막으면 AI 검색이나 일반 검색에서 발견되기 어려워질 수 있다. 새 공통 신호의 가치도 바로 이 용도를 더 잘 나눠 표현하는 데 있다. ‘AI 차단 버튼’이라고 부르면 실제 범위를 지나치게 넓게 이해하게 된다.

앞으로 확인할 변화

첫 번째 확인 시점은 오픈AI가 약속한 실제 구현 공지다. 어떤 문구를 읽는지, 기존 수집 로봇 설정과 충돌할 때 무엇을 우선하는지, 변경 사항이 언제부터 반영되는지가 나와야 한다. 발표 제목만 보고 기존 설정을 바꾸기에는 아직 이르다.

두 번째는 참여 업체의 범위다. 공통 규격의 힘은 이름이 아니라 채택률에서 나온다. 주요 AI 회사뿐 아니라 데이터 중개업체와 소규모 모델 개발사까지 같은 신호를 존중해야 사이트 운영자의 관리 부담이 실제로 줄어든다.

세 번째는 투명성이다. 업체가 신호를 존중한다고 선언하는 것만으로는 충분하지 않다. 언제 수집했는지, 어떤 목적에 썼는지, 거부 설정 변경 후 얼마 만에 반영하는지 확인 가능한 절차가 필요하다. 독립 감사나 분쟁 처리 방식도 뒤따라야 한다.

이번 발표의 핵심은 AI 학습과 웹 공개를 같은 동의로 취급하던 관행에서 조금 벗어났다는 데 있다. 웹사이트 운영자가 한 번의 공통 표시로 여러 회사에 의사를 전달하는 방향은 분명 진전이다. 그러나 현재 단계는 완성된 권리 집행 체계가 아니라 자발적 기술 규격에 대한 지원 약속이다. 일반 이용자와 창작자가 기억할 사실은 두 가지다. 새 신호는 ‘앞으로 몇 달’에 걸쳐 적용될 예정이며, 기존 콘텐츠가 자동으로 삭제되거나 모든 AI 이용이 즉시 중단되는 기능은 아니다.