✅ 1. Replica Studios API
- 특징: TTS + 자동 리핑 + 표정 애니메이션을 API로 제공
- 입력: 텍스트 (음성 자동 생성)
- 출력: 입 모양 애니메이션 데이터 (Unity/Unreal용 .anim, .json 등)
- 적합 용도: 실시간 캐릭터 대사, VTuber, 게임 NPC
- API Docs: https://replicastudios.docs.apiary.io/
- URL: https://replicastudios.com/
✅ 2. Didimo API
- 특징: 캐릭터 생성 + 음성 합성 + 입 모양 포함된 애니메이션 API
- 입력: 텍스트, 음성, 사진
- 출력: glTF, FBX, Unity 패키지 등
- 강점: REST API 기반, 상업적 이용 가능
- API Docs: https://dev.didimo.co/
✅ 3. Altered Studio API
- 특징: AI 음성변조 + 리핑 포함된 캐릭터 보이스 API
- 입력: 텍스트
- 출력: 오디오 + 입 모양 JSON
- API Docs: 사전 신청 필요
- 특이사항: 리얼타임 활용 사례 있음
✅ 4. Speech Graphics API (SGX)
- 특징: AAA급 게임 수준의 고정밀 입모양 생성 API (Unity/UE 호환)
- 입력: 텍스트 또는 음성
- 출력: 입 모양 애니메이션 (.json, .fbx)
- 특징: viseme뿐만 아니라 얼굴 전체 표정 포함
- 상용 라이선스
- URL: https://speech-graphics.com/
✅ 5. Papercup API
- 특징: 영상 더빙 + 자동 입 모양 보정 (음성 인식 기반)
- 입력: 영상, 텍스트
- 출력: 입 모양이 맞춰진 영상
- 강점: 방송/유튜브 콘텐츠에 적합
- API 제공 여부: B2B 협의
✨ 보너스: 오픈소스 API로 커스텀 가능
▶ TTS API + Rhubarb CLI 서버 구성
- Google TTS API (텍스트 → 오디오)
- Rhubarb lip-sync (오디오 → 입 모양 JSON)
- FastAPI 등으로 감싸면 커스텀 API 구성 가능
📋 비교 요약
플랫폼 | 텍스트 입력 | 오디오 생성 | 리핑 출력 | API 제공 | 비고 |
---|---|---|---|---|---|
Replica Studios | ✅ | ✅ | ✅ (FBX/JSON) | ✅ | 무료 체험 있음 |
Didimo | ✅ | ✅ | ✅ | ✅ | 캐릭터 생성 포함 |
Altered Studio | ✅ | ✅ | ✅ | ✅ | 음성 스타일 변경도 지원 |
Speech Graphics | ✅ | ✅ | ✅ | ✅ | 최고급 품질 (유료) |
Papercup | ✅ | ✅ | ✅ | 제한적 | 영상 더빙 중심 |
🔧 추천 조합 (실용도 기준)
- 빠른 API 통합:
Replica Studios
또는Didimo
- 고급 커스터마이징:
Speech Graphics
- 비용 적고 직접 제어:
Google TTS + Rhubarb + FastAPI
(직접 구축)