최근 과학계에서 AI로 생성된 허위 자료가peer-reviewed 저널을 비롯한 학술 출판물에까지 유입되면서 심각한 문제가 되고 있다. 가짜 인용문, 편집되지 않은 AI 응답, 비논리적인 도표 등이 편집자나 동료 검토자를 통과하는 경우가 빈발하고 있지만, 이 같은 문제의 책임 소재는 명확하지 않은 경우가 많았다.

이 같은 흐름 속에서 물리학과 천문학 분야의 대표적 프리프린트 서버인 arXiv가 AI로 생성된 부적절한 콘텐츠 제출자에 대한 강력한 제재를 도입하기로 했다. arXiv는 오는 8월 21일부터 AI로 생성된 허위 자료를 제출한 사용자에 대해 1년간의 게재 금지 조치를 취하고, 이후 재게재 시 모든 논문에 대해 동료 검토(peer review)를 필수화할 계획이다.

arXiv의 AI 규제 정책과 배경

이 정책 발표는 오리건 주립대학교 명예교수이자 arXiv의 편집 자문위원회 및moderation 팀에서 활동 중인 Thomas Dietterich에 의해 소셜 미디어를 통해 처음 공개됐다. Dietterich는 AI로 생성된 허위 자료가 과학계에 심각한 위협으로 작용하고 있음을 강조하며, 사전 예방적 규제가 필요하다고 밝혔다. 다만, arXiv의 공식 입장은 아직 확인되지 않았다고 덧붙였다.

arXiv는 1991년 설립된 이래 물리학, 수학, 컴퓨터 과학 분야의 프리프린트를 공개하는 플랫폼으로, 전 세계 연구자들에게 중요한 정보 교류의 장으로 자리매김해 왔다. 그러나近年来 AI 도구들이 급속도로 발전하면서, 일부 연구자들이 편의를 위해 AI를 과도하게 활용하거나甚至 허위 자료를 생성하는 사례가 늘어나고 있는 실정이다.

과학계의 AI 규제 움직임 확산

arXiv의 이번 조치는 과학계 전반에서 AI 오남용에 대한 규제가 본격화되고 있음을 보여주는 대표적 사례다. 지난해에는 NatureScience를 비롯한 주요 저널들이 AI 생성 콘텐츠에 대한 명확한 가이드라인을 발표한 바 있으며, 일부 저널은 AI 도구 사용을 전면 금지하기도 했다. 또한, 미국 국립과학재단(NSF)과 유럽연구위원회(ERC)도 AI 생성 자료에 대한 투명성 강화를 요구하는 정책을 추진 중이다.

AI 기술이 발전할수록 그 오남용 가능성도 커지고 있지만, 과학계는 AI가 연구의 질을 높이는 데 기여할 수 있도록 규제와 가이드라인을 마련하는 데 주력하고 있다. arXiv의 이번 조치는 이러한 노력의 일환으로 평가된다.