AI가 가짜 시민으로 민주주의를 위협하는 ‘스웜’으로 진화하다

AI는 더 이상 단순한 챗봇이나 밈 생성기가 아니다. 최신 연구에 따르면, 대규모 언어 모델(LLM)과 자율 에이전트로 구성된 AI ‘스웜’이 전 세계적으로 민주주의를 위협하는 가짜 정보 캠페인을 확산시키고 있다고 사이언스(Science) 저널에 발표됐다.

AI가 조작하는 ‘가짜 여론’의 실체

연구팀은 AI가 ‘인구 규모 수준(population-wide level)’에서 여론을 조작할 수 있는 가능성을 분석했다. 특히 AI ‘스웜’이란, 수많은 자율 AI 도구가 실제 인간처럼 행동하며 소셜미디어와 온라인 커뮤니티를 장악하는 시스템을 의미한다. 연구에 따르면, 2017년 28개국에서 시작된 조직적 소셜미디어 조작이 현재 70개국으로 확산됐으며, 브라질과 아일랜드 선거에서는 이미 AI 기반 가짜 정보가 민주주의를 위협하는 사례로 나타났다.

연구진은 “LLM의 추론 능력과 다중 에이전트 아키텍처가 결합되면서, AI는 스스로 협력해 커뮤니티에 침투하고 합의를 조작할 수 있게 됐다”고 경고했다. 이는 단순히 봇 네트워크가 아니라, 자율적으로 활동하는 AI 집단으로 진화한 것이다.

규제 공백과 ‘자유 표현’ 논쟁

AI 기반 여론 조작을 규제하는 것은 쉽지 않다. 일부 AI 봇 네트워크는 ‘자유 표현’의 일환으로 포장되어 공개적으로 운영되며, 벤처 캐피털로부터 수백만 달러의 투자를 받고 있다. 이미 AI 이전에도 소셜미디어 플랫폼의 무책임한 운영은 미얀마 로힝야 학살과 같은 참사를 초래했으며, AI는 이 문제를 한층 심각하게 만들고 있다.

현재 전 세계적으로 우파 세력이 AI를 활용해 이민자나 복지 수혜자를 겨냥한 분노 조장 캠페인을 펼치고 있으며, 이는 AI 기반 가짜 정보가 현실에 미치는 영향을Preview로 보여준다. 전문가들은 “AI가 가짜 정보를 생산하고 확산시키는 속도가 인간의 대응 능력을 훨씬 앞지르고 있다”며 우려를 표명했다.

AI 윤리 문제와 Indigenous lands의 데이터 센터 건설

AI의 위험성은 데이터 수집과 활용 방식에서도 드러난다. Indigenous lands(원주민 영토)에서 데이터 센터를 건설하는 기술 기업들의 행태는 Indigenous lands의 권리를 침해한다는 비판을 받고 있다. 이는 AI가 민주주의를 위협하는 것 이상으로, 사회 정의와 인권 문제로까지 이어지고 있다.

전문가들은 “AI가 가짜 시민으로 민주주의를 위협하는 시대가 도래했다”며 규제와 윤리적 통제가 시급하다고 강조했다. 그러나 현재로서는 정치적 의지가 부족한 실정이다.

주요 findings

  • AI ‘스웜’이 70개국에서 조직적 소셜미디어 조작에 활용되고 있으며, 그 규모와 복잡성이 급격히 증가하고 있다.
  • 브라질과 아일랜드 선거에서 AI 기반 가짜 정보가 민주주의를 위협하는 사례로 나타났다.
  • AI 봇 네트워크가 ‘자유 표현’으로 포장되어 공개적으로 운영되며, 벤처 캐피털로부터 투자를 받고 있다.
  • AI 이전에도 소셜미디어의 무책임한 운영은 미얀마 로힝야 학살을 초래했으며, AI는 이 문제를 가중시키고 있다.
  • AI 기반 가짜 정보는 우파 세력에 의해 이민자나 복지 수혜자를 겨냥한 분노 조장 캠페인으로 활용되고 있다.
출처: Futurism