메타 AI 이미지 탐지 도구, 자체 생성 이미지 일부 판별 실패 - 로이터 분석

로이터 통신 분석 결과, 메타(Meta)가 최근 공개한 인공지능(AI) 이미지 탐지 도구가 일부 편집된 자사 생성 이미지를 식별하지 못하는 것으로 나타났습니다. 이는 주요 선거가 있는 해에 딥페이크와 같은 조작된 콘텐츠를 식별하는 데 있어 기술적 과제가 남아있음을 시사합니다.

로이터 통신 분석 결과

로이터 통신은 메타의 이미지 생성 모델 '뮤즈 이미지(Muse Image)'로 만든 이미지 40개를 분석했습니다. 그 결과, 탐지 도구는 원본 AI 생성 이미지는 모두 정확히 식별했지만, 이미지 크기를 3분의 1에서 절반가량으로 잘라낸 후에는 55%를 식별하는 데 실패했습니다.

메타는 이 탐지 도구가 '콘텐츠 씰(Content Seal)'이라는 비가시성 워터마킹 시스템을 통해 작동한다고 설명했습니다. 이 기술은 뮤즈 이미지가 생성하는 모든 이미지에 내장되어, 잘라내기와 같은 일반적인 편집 후에도 메타의 AI 모델이 생성했는지 여부를 확인할 수 있도록 설계되었습니다.

기술적 한계와 시장의 우려

로이터 통신의 분석 결과에 대해 메타 측은 해당 도구가 아직 '미리보기(preview)' 버전임을 언급했습니다. 또한 워터마크가 일반적인 편집에도 유지되도록 설계되었지만, 이미지가 심하게 잘릴 경우 신호가 손실될 수 있다고 밝혔습니다.

Ad

이러한 한계는 메타에만 국한된 것이 아닙니다. 구글(Google)과 오픈AI(OpenAI)와 같은 경쟁사들도 자사의 탐지 도구가 이미지 변형 기술에 완벽하게 대응할 수는 없다고 인정한 바 있습니다. 이는 온라인상에서 AI를 이용한 허위 정보 확산을 막는 것이 얼마나 어려운 과제인지를 보여줍니다.

전문가 시각

AI 이미지 포렌식 전문가인 시웨이 류 뉴욕주립대 교수는 워터마크 기반 시스템의 한계를 지적했습니다. 그는 "워터마크가 손상되지 않으면 매우 효과적일 수 있지만, 잘라내기, 크기 조정, 심한 압축 등 신호를 약화시키는 모든 수정은 워터마크 설계 방식에 따라 효율성을 감소시킬 수 있다"고 설명했습니다.

앞서 지난 3월, 메타의 감독위원회는 회사에 플랫폼 전반에 걸쳐 "기만적인 AI 생성 콘텐츠의 확산"에 대처하고 더 강력한 탐지 도구에 투자할 것을 권고한 바 있습니다. 이번 분석 결과는 해당 분야에 대한 지속적인 기술 개발과 투자가 필요함을 강조합니다.