πŸ”Œ API 기반 ν…μŠ€νŠΈ β†’ μž… λͺ¨μ–‘ (Lip Sync) μ„œλΉ„μŠ€/ν”„λ‘œμ νŠΈ

βœ… 1. Replica Studios API

  • νŠΉμ§•: TTS + μžλ™ 리핑 + ν‘œμ • μ• λ‹ˆλ©”μ΄μ…˜μ„ API둜 제곡
  • μž…λ ₯: ν…μŠ€νŠΈ (μŒμ„± μžλ™ 생성)
  • 좜λ ₯: μž… λͺ¨μ–‘ μ• λ‹ˆλ©”μ΄μ…˜ 데이터 (Unity/Unreal용 .anim, .json λ“±)
  • 적합 μš©λ„: μ‹€μ‹œκ°„ 캐릭터 λŒ€μ‚¬, VTuber, κ²Œμž„ NPC
  • API Docs: https://replicastudios.docs.apiary.io/
  • URL: https://replicastudios.com/

βœ… 2. Didimo API

  • νŠΉμ§•: 캐릭터 생성 + μŒμ„± ν•©μ„± + μž… λͺ¨μ–‘ ν¬ν•¨λœ μ• λ‹ˆλ©”μ΄μ…˜ API
  • μž…λ ₯: ν…μŠ€νŠΈ, μŒμ„±, 사진
  • 좜λ ₯: glTF, FBX, Unity νŒ¨ν‚€μ§€ λ“±
  • 강점: REST API 기반, 상업적 이용 κ°€λŠ₯
  • API Docs: https://dev.didimo.co/

βœ… 3. Altered Studio API

  • νŠΉμ§•: AI μŒμ„±λ³€μ‘° + 리핑 ν¬ν•¨λœ 캐릭터 보이슀 API
  • μž…λ ₯: ν…μŠ€νŠΈ
  • 좜λ ₯: μ˜€λ””μ˜€ + μž… λͺ¨μ–‘ JSON
  • API Docs: 사전 μ‹ μ²­ ν•„μš”
  • νŠΉμ΄μ‚¬ν•­: λ¦¬μ–Όνƒ€μž„ ν™œμš© 사둀 있음

βœ… 4. Speech Graphics API (SGX)

  • νŠΉμ§•: AAAκΈ‰ κ²Œμž„ μˆ˜μ€€μ˜ κ³ μ •λ°€ μž…λͺ¨μ–‘ 생성 API (Unity/UE ν˜Έν™˜)
  • μž…λ ₯: ν…μŠ€νŠΈ λ˜λŠ” μŒμ„±
  • 좜λ ₯: μž… λͺ¨μ–‘ μ• λ‹ˆλ©”μ΄μ…˜ (.json, .fbx)
  • νŠΉμ§•: viseme뿐만 μ•„λ‹ˆλΌ μ–Όκ΅΄ 전체 ν‘œμ • 포함
  • μƒμš© λΌμ΄μ„ μŠ€
  • URL: https://speech-graphics.com/

βœ… 5. Papercup API

  • νŠΉμ§•: μ˜μƒ 더빙 + μžλ™ μž… λͺ¨μ–‘ 보정 (μŒμ„± 인식 기반)
  • μž…λ ₯: μ˜μƒ, ν…μŠ€νŠΈ
  • 좜λ ₯: μž… λͺ¨μ–‘이 λ§žμΆ°μ§„ μ˜μƒ
  • 강점: 방솑/유튜브 μ½˜ν…μΈ μ— 적합
  • API 제곡 μ—¬λΆ€: B2B ν˜‘μ˜

✨ λ³΄λ„ˆμŠ€: μ˜€ν”ˆμ†ŒμŠ€ API둜 μ»€μŠ€ν…€ κ°€λŠ₯

β–Ά TTS API + Rhubarb CLI μ„œλ²„ ꡬ성

  • Google TTS API (ν…μŠ€νŠΈ β†’ μ˜€λ””μ˜€)
  • Rhubarb lip-sync (μ˜€λ””μ˜€ β†’ μž… λͺ¨μ–‘ JSON)
  • FastAPI λ“±μœΌλ‘œ 감싸면 μ»€μŠ€ν…€ API ꡬ성 κ°€λŠ₯

πŸ“‹ 비ꡐ μš”μ•½

ν”Œλž«νΌν…μŠ€νŠΈ μž…λ ₯μ˜€λ””μ˜€ 생성리핑 좜λ ₯API μ œκ³΅λΉ„κ³ 
Replica Studiosβœ…βœ…βœ… (FBX/JSON)βœ…λ¬΄λ£Œ μ²΄ν—˜ 있음
Didimoβœ…βœ…βœ…βœ…μΊλ¦­ν„° 생성 포함
Altered Studioβœ…βœ…βœ…βœ…μŒμ„± μŠ€νƒ€μΌ 변경도 지원
Speech Graphicsβœ…βœ…βœ…βœ…μ΅œκ³ κΈ‰ ν’ˆμ§ˆ (유료)
Papercupβœ…βœ…βœ…μ œν•œμ μ˜μƒ 더빙 쀑심

πŸ”§ μΆ”μ²œ μ‘°ν•© (μ‹€μš©λ„ κΈ°μ€€)

  • λΉ λ₯Έ API 톡합: Replica Studios λ˜λŠ” Didimo
  • κ³ κΈ‰ μ»€μŠ€ν„°λ§ˆμ΄μ§•: Speech Graphics
  • λΉ„μš© 적고 직접 μ œμ–΄: Google TTS + Rhubarb + FastAPI (직접 ꡬ좕)

μ½”λ©˜νŠΈ

λ‹΅κΈ€ 남기기

이메일 μ£Όμ†ŒλŠ” κ³΅κ°œλ˜μ§€ μ•ŠμŠ΅λ‹ˆλ‹€. ν•„μˆ˜ ν•„λ“œλŠ” *둜 ν‘œμ‹œλ©λ‹ˆλ‹€