[단독] 넘쳐나는 벗방·딥페이크… 월 234만명 찾는 ‘치지직’ 콘텐츠 ‘이용 제한’은 0건

[단독] 넘쳐나는 벗방·딥페이크… 월 234만명 찾는 ‘치지직’ 콘텐츠 ‘이용 제한’은 0건

김예슬 기자
입력 2024-10-07 19:18
수정 2024-10-07 19:18
  • 기사 읽어주기
    다시듣기
  • 글씨 크기 조절
  • 댓글
    0
별도인증 없이 미성년자 시청 가능
네이버 AI 모니터링 ‘한계’ 지적도
“즉각 필터링하는 모니터링 인력을 ”
이미지 확대
네이버 메인 화면에서 찾아볼 수 있는 치지직 로고. 이정헌 더불어민주당 의원실·치지직 제공
네이버 메인 화면에서 찾아볼 수 있는 치지직 로고. 이정헌 더불어민주당 의원실·치지직 제공


‘게임 리뷰’라고 적힌 한 채널에 별도의 성인 인증 없이 접속하니 스트리머(채널 운영자)가 가슴 부위를 노출한 채 선정적인 춤을 추고 있었다. 영상 하단에 온라인 게임 영상이 재생되고 있었지만, 이른바 ‘벗방’(노출 방송)을 전송하기 위한 ‘눈속임’에 불과했다. ‘생활 습관 개선 1일차’라고 적힌 또 다른 채널에 들어가니 애니메이션 캐릭터의 주요 부위만 가린 딥페이크 이미지가 채널 상단에 걸려있었다. 역시 10대도 시청할 수 있었고, 끝날 때까지 유해 콘텐츠라며 경고받는 일은 없었다. 방송 이후 해당 콘텐츠를 네이버에 신고하려 했지만 스트리머가 이미 영상을 삭제한 터라 신고는 불가능했다.

일부 스트리머의 선정적인 방송으로 시범 서비스 때부터 논란을 불러일으켰던 네이버의 인터넷 생방송(스트리밍) 플랫폼 ‘치지직’(CHZZK)의 유해 콘텐츠 모니터링이 제대로 작동하고 있지 않은 것으로 파악됐다. 지난달에만 약 234만명이 방문한 치지직은 숲(SOOP·옛 아프리카TV)과 국내 스트리밍 업계에서 점유율 1·2위를 다투고 있는 플랫폼이다. 지난 3월 기준 10대 이하 이용자 비율만 해도 38%에 달한다.

이미지 확대
치지직 내 모든 영상을 삭제 처리한 스트리머 채널. 문제되는 영상을 삭제 처리하면 신고 및 제재가 어렵다. 이정헌 더불어민주당 의원실·치지직 제공
치지직 내 모든 영상을 삭제 처리한 스트리머 채널. 문제되는 영상을 삭제 처리하면 신고 및 제재가 어렵다. 이정헌 더불어민주당 의원실·치지직 제공


서울신문이 7일 이정헌 더불어민주당 의원실을 통해 받은 자료를 보면, 지난 5월 정식 출범한 치지직 채널 중 ‘이용 제한’ 조치를 받은 채널은 단 한 곳도 없었다. 네이버는 자체적으로 플랫폼 운영 정책에 따라 성적 행위나 언행, 폭력 및 가혹 행위 등을 유해 콘텐츠로 분류해 이용 제한을 내린다. 치지직의 경우 자체적으로 개발한 인공지능(AI) 기반 음란 콘텐츠 필터링 기술인 ‘그린아이’를 통해 방송하고 녹화된 영상에 대한 모니터링을 진행한다.

업계와 전문가들은 그동안 치지직에서 이용 제한 조치를 받을 정도의 유해 콘텐츠가 단 한 건도 없었다는 점을 납득하기 어렵다고 지적했다. 염흥열 순천향대 정보보호학과 교수는 “기술이 부족해서 발생한 문제라기보다는 허점이 있다고 봐야 한다”며 “유해 콘텐츠를 판단하는 기준값을 보다 촘촘하게 설정해 놓았다면 많은 건이 적발됐을 것”이라고 지적했다.

이미지 확대
네이버에 따르면 인공지능(AI)가 실시간으로 플랫폼 내 유해 콘텐츠를 적발하고 있지만, 선정적인 논란을 부를 수 있는 콘텐츠 가운데 일부 영상에만 연령 제한이 걸려 있음을 볼 수 있다. 이정헌 더불어민주당 의원실·치지직 제공
네이버에 따르면 인공지능(AI)가 실시간으로 플랫폼 내 유해 콘텐츠를 적발하고 있지만, 선정적인 논란을 부를 수 있는 콘텐츠 가운데 일부 영상에만 연령 제한이 걸려 있음을 볼 수 있다. 이정헌 더불어민주당 의원실·치지직 제공


이와 관련해 네이버는 치지직에서 이용 제한 외에도 주의 조치 등을 통해 유해 콘텐츠 몇 건이 적발됐는지 공개가 어렵다는 입장이다. 네이버 관계자는 “현재까지 이용 제한 조처를 내린 채널은 시범 서비스 당시인 지난 1월 성기 노출, 욱일기 노출로 논란이 된 2건”이라며 “신고를 기반으로 하는 주의는 계속 증가하고 있다”고 답했다.

현재 네이버는 유해 콘텐츠 노출 가능성이 큰 치지직에 대한 전담 부서를 별도로 두지 않고 있다. 전체 서비스에서 검토가 필요하다고 판단된 콘텐츠를 모니터링할 뿐이다. 유사한 플랫폼인 숲이 서버 안에 모든 영상을 일주일 동안 보관하고, 100명의 모니터링 인력을 바탕으로 24시간 실시간 모니터링하는 부서를 별도로 운영하는 것과는 대조적이다. 네이버 관계자는 “모니터링 인력 현황 등은 외부에 따로 공개하지 않는다”고 했다. 이에 대해 이재성 중앙대 인공지능연구소 소장은 “미성년자 등에게 유해 콘텐츠가 노출되지 않도록 즉각적으로 필터링하는 모니터링 인력이 필요하다”고 말했다.
Copyright ⓒ 서울신문. All rights reserved. 무단 전재-재배포, AI 학습 및 활용 금지
close button
많이 본 뉴스
1 / 3
광고삭제
광고삭제
위로