editoy logo

Civitai: AI 딥페이크 시장의 어두운 그림자

2/1/2026

토킹 포인트

  • AI 생성 콘텐츠 마켓플레이스인 Civitai에서 특정 여성의 딥페이크 제작을 위한 맞춤형 파일 거래가 이루어지고 있다는 사실 확인.
  • Civitai는 딥페이크 콘텐츠 요청을 인지하고 있지만, 사용자 신고에 의존하는 소극적인 관리 시스템 운영 중.
  • 벤처 캐피털 Andreessen Horowitz의 투자에도 불구하고, Civitai는 불법적인 콘텐츠 확산 방지에 미흡한 대응 보임.
  • 딥페이크 관련 법적 책임 소재가 불분명하며, 아동 성 학대물과 달리 성인 딥페이크에 대한 규제 및 관심 부족 현상 심화.

시황 포커스

  • 딥페이크 수요의 존재: 사용자들은 유명 인물(찰리 다멜리오, 그레이시 아브람스 등)의 딥페이크 이미지 생성 도구를 적극적으로 요청하고 있음. 특히, 특정 인물의 전신, 문신, 헤어스타일 변경 등 정교한 딥페이크 제작을 희망하는 경향이 있음.
  • 여성 대상 딥페이크 편중: 딥페이크 요청의 90% 이상이 여성 인물을 대상으로 함. 특히, 성적인 콘텐츠(NSFW)를 포함한 딥페이크 수요가 두드러지게 나타남.
  • LoRA 파일의 중요성: 딥페이크 제작 요청의 86%가 기존 AI 모델을 특정 스타일로 조정하는 LoRA 파일 형태임. 이는 딥페이크 제작 기술이 특정 플랫폼을 넘어 확산될 가능성을 시사함.
  • NSFW 콘텐츠 수요 증가: 2024년 말부터 NSFW 콘텐츠 요청이 전체 요청의 과반수를 차지하며 증가 추세에 있음. 이는 성적인 콘텐츠에 대한 수요가 꾸준히 존재함을 보여줌.
  • 플랫폼 거버넌스의 불일치: 플랫폼 내 ‘실존 인물 유사성’ 고지율이 일반 콘텐츠(SFW)는 86%인 반면, 성적인 콘텐츠(NSFW)는 58%로 낮아짐. 플랫폼의 콘텐츠 규제 적용에 일관성이 부족함.
  • 의뢰 집중 현상: 상위 20%의 사용자가 전체 의뢰의 약 50%를 주도하며, 특정 사용자층의 수요가 시장을 견인하고 있음.
  • 금전적 보상과 경쟁의 영향: 금전적 보상이 제공되고 경쟁이 이루어지는 환경에서 NSFW 콘텐츠 및 딥페이크 시장이 성장하고 있음. 이는 생성 AI 콘텐츠 시장의 상업화 가능성을 보여줌.

트렌드 키워드

  • 딥페이크 (Deepfake, Deepfakes):

    인공지능 기술을 이용하여 특정 인물의 얼굴이나 목소리를 다른 영상이나 음성에 합성하는 기술

    1 / 5
    Civitai에서는 유명인의 딥페이크 제작을 위한 파일들이 거래되고 있으며, 이는 개인의 명예를 훼손하고 심각한 피해를 야기할 수 있습니다.
  • LoRA (Low-Rank Adaptation):

    기존 AI 모델을 특정 스타일이나 콘텐츠를 생성하도록 미세 조정하는 데 사용되는 파일 형식

    사용자들은 LoRA 파일을 구매하여 Stable Diffusion과 같은 AI 모델이 원본으로는 생성하지 못했던 콘텐츠를 만들 수 있습니다.
  • NSFW (Not Safe For Work):

    직장이나 공공장소에서 보기 부적절한 콘텐츠를 의미하는 약어. 주로 성적인 콘텐츠나 폭력적인 콘텐츠를 지칭

    1 / 2
    Civitai 플랫폼에서 NSFW 콘텐츠 요청이 증가하고 있으며, 이는 플랫폼의 관리 문제점을 드러냅니다.
  • 섹션 230 (Section 230):

    미국의 통신 품위법에 포함된 조항으로, 인터넷 플랫폼이 사용자가 생성한 콘텐츠에 대해 책임을 지지 않도록 보호

    섹션 230은 기술 기업에게 법적 보호를 제공하지만, 불법적인 콘텐츠 확산을 방조하는 경우에는 그 보호가 제한될 수 있습니다.
  • 벤처 캐피털 (Venture Capital):

    초기 단계의 기업에 투자하는 자본

    Andreessen Horowitz는 Civitai에 5백만 달러를 투자했지만, 플랫폼의 문제점에 대한 적극적인 해결책을 제시하지 못하고 있습니다.벤처 캐피털
  • ASMR (Autonomous Sensory Meridian Response):

    특정 시각적, 청각적 자극에 반응하여 느껴지는 기분 좋은 떨림

    ASMR 영상을 제작하는 아티스트들의 딥페이크 제작 요청도 발견되었으며, 이는 개인의 사생활 침해 문제로 이어질 수 있습니다.
  • 맞춤형 AI (Bespoke AI):

    특정 목적이나 요구사항에 맞춰 개발된 인공지능

    Civitai는 사용자들이 자신만의 맞춤형 AI 모델을 만들고 공유할 수 있는 플랫폼을 제공하지만, 이 과정에서 불법적인 콘텐츠가 생성될 가능성이 높습니다.
  • AI 모델 (AI Model):

    특정 작업을 수행하도록 훈련된 컴퓨터 프로그램으로, 데이터 분석, 패턴 인식, 예측 등 다양한 기능을 수행

    1 / 3
    Stable Diffusion과 같은 AI 모델은 Civitai를 통해 유통되는 LoRA 파일을 통해 다양한 콘텐츠를 생성할 수 있습니다.