[카테고리:] 미분류

  • 🔌 API 기반 텍스트 → 입 모양 (Lip Sync) 서비스/프로젝트

    ✅ 1. Replica Studios API

    • 특징: TTS + 자동 리핑 + 표정 애니메이션을 API로 제공
    • 입력: 텍스트 (음성 자동 생성)
    • 출력: 입 모양 애니메이션 데이터 (Unity/Unreal용 .anim, .json 등)
    • 적합 용도: 실시간 캐릭터 대사, VTuber, 게임 NPC
    • API Docs: https://replicastudios.docs.apiary.io/
    • URL: https://replicastudios.com/

    ✅ 2. Didimo API

    • 특징: 캐릭터 생성 + 음성 합성 + 입 모양 포함된 애니메이션 API
    • 입력: 텍스트, 음성, 사진
    • 출력: glTF, FBX, Unity 패키지 등
    • 강점: REST API 기반, 상업적 이용 가능
    • API Docs: https://dev.didimo.co/

    ✅ 3. Altered Studio API

    • 특징: AI 음성변조 + 리핑 포함된 캐릭터 보이스 API
    • 입력: 텍스트
    • 출력: 오디오 + 입 모양 JSON
    • API Docs: 사전 신청 필요
    • 특이사항: 리얼타임 활용 사례 있음

    ✅ 4. Speech Graphics API (SGX)

    • 특징: AAA급 게임 수준의 고정밀 입모양 생성 API (Unity/UE 호환)
    • 입력: 텍스트 또는 음성
    • 출력: 입 모양 애니메이션 (.json, .fbx)
    • 특징: viseme뿐만 아니라 얼굴 전체 표정 포함
    • 상용 라이선스
    • URL: https://speech-graphics.com/

    ✅ 5. Papercup API

    • 특징: 영상 더빙 + 자동 입 모양 보정 (음성 인식 기반)
    • 입력: 영상, 텍스트
    • 출력: 입 모양이 맞춰진 영상
    • 강점: 방송/유튜브 콘텐츠에 적합
    • API 제공 여부: B2B 협의

    ✨ 보너스: 오픈소스 API로 커스텀 가능

    TTS API + Rhubarb CLI 서버 구성

    • Google TTS API (텍스트 → 오디오)
    • Rhubarb lip-sync (오디오 → 입 모양 JSON)
    • FastAPI 등으로 감싸면 커스텀 API 구성 가능

    📋 비교 요약

    플랫폼텍스트 입력오디오 생성리핑 출력API 제공비고
    Replica Studios✅ (FBX/JSON)무료 체험 있음
    Didimo캐릭터 생성 포함
    Altered Studio음성 스타일 변경도 지원
    Speech Graphics최고급 품질 (유료)
    Papercup제한적영상 더빙 중심

    🔧 추천 조합 (실용도 기준)

    • 빠른 API 통합: Replica Studios 또는 Didimo
    • 고급 커스터마이징: Speech Graphics
    • 비용 적고 직접 제어: Google TTS + Rhubarb + FastAPI (직접 구축)