기존 영상을 대량으로 재더빙하고 입 모양을 맞춰야 한다면 2026년 기준 기본 선택지는 Sync Labs다. 다만 4K 클로즈업이 필요하거나 고개 회전 장면에서 재생성을 자주 하면 최저가 선택은 아니다. 립싱크 API는 데모 영상보다 입력 소스가 무엇인지에 따라 골라야 한다.
먼저 구분해야 할 립싱크 작업 유형
립싱크 도구는 서로 대체할 수 없는 세 부류로 나뉜다. 사진 한 장과 음성을 받아 얼굴을 움직이는 토킹 포토, 이미 촬영한 영상의 입 모양만 새 오디오에 맞춰 다시 그리는 실사 영상 리타이밍, 그리고 스크립트와 아바타를 바탕으로 발표자 영상 전체를 만드는 디지털 휴먼 플랫폼이다. 이 분류를 잘못 고르는 일이 가장 비싼 실수다.
인물 사진과 보이스오버를 넣는다면 Hedra Character 3나 D-ID의 토킹 포토가 맞다. MP4와 교체할 오디오 트랙을 보낸다면 Sync Labs 또는 HeyGen Lip Sync API(POST /v3/lipsyncs)를 봐야 한다. 스크립트만 주고 완성된 발표자 영상을 기대한다면 순수 립싱크 엔드포인트가 아니라 HeyGen 아바타, Synthesia, Tavus를 비교하는 문제다. 움직이는 영상에 사진용 모델을 쓰거나, 정지 인물 사진에 영상 리타이밍 모델을 평가하면 “립싱크 품질이 형편없다”는 결론에 이르기 쉽다.
초당 단가가 아닌 완성본 1분당 비용으로 비교
초당 가격만 보면 구독료, 해상도 등급, 과금 단위, 재생성 비용이 가려진다. 아래 표는 2026년 11월 초 기준 벤더 문서의 정가를 세전 완성 영상 1분 기준으로 환산한 것이다. 별도 표기가 있는 경우 실제 청구서에는 플랜 이용료가 추가된다.
| API / 모델 | 적용한 정가 | 완성 영상 1분당 약 비용 | 중요한 플랜 조건 |
|---|---|---|---|
| Sync Labs lipsync-1.9 | 25fps 기준 $0.025/초 | 약 $1.50 | Hobbyist 월 $5, 1분 제한, Creator 미만은 워터마크 |
| Sync Labs lipsync-2 | 512×512 기준 $0.04–$0.05/초 | 약 $2.40–$3.00 | Creator 월 $19부터 워터마크 제거, 5분 제한 |
| Sync Labs lipsync-2-pro | $0.067–$0.083/초 | 약 $4.00–$5.00 | Growth 월 $49, 10분 제한 |
| Sync Labs sync-3, 네이티브 4K | $0.107–$0.133/초 | 약 $6.40–$8.00 | Scale 월 $249, 30분 제한, Scale 물량에서는 실효 약 $0.04/초 |
| HeyGen Speed (PAYG API) | $0.84/분 | $0.84 | 구독 불필요, 크레딧 유효기간 12개월 |
| HeyGen Precision (PAYG API) | $1.74/분 | $1.74 | 측면 얼굴, 가림, 화자 전환 대응 |
| Hedra Character 3, 540p / 720p / 1080p | 초당 $0.025 / $0.05 / $0.0625 | $1.50 / $3.00 / $3.75 | 유료 플랜은 상업적 사용 가능, 단일 생성 최대 10분 |
| D-ID Pro (상업용) | 연간 결제 시 월 $16, 15분 포함 | 전량 사용 시 약 $1.07 | Lite $4.70은 개인용 전용 및 워터마크, 15초 단위 올림 과금 |
| 셀프호스팅 LatentSync 1.6 | GPU 비용만, 클라우드 추정 약 $0.01/초 | 약 $0.60 + 인건비 | v1.6에서 약 18GB VRAM 필요, 학습 해상도 512×512 |
| 셀프호스팅 MuseTalk 1.5 | GPU 비용만 | GPU 비용 + 인건비 | 256×256 얼굴 영역, Tesla V100에서 30fps, MIT 코드 및 상업 사용 가능으로 명시된 가중치 |
실제 순위를 바꾸는 가격 함정은 세 가지다. 첫째, D-ID Lite는 표면적으로 분당 약 $0.47이지만 개인용 전용이고 워터마크가 붙는다. 상업 작업은 포함 시간을 모두 쓴다는 기준으로 분당 약 $1.07인 Pro부터 시작한다. 둘째, HeyGen과 일부 크레딧 판매 업체는 플랜에 따라 크레딧 잔액만 공개하고 크레딧-초 변환식을 공개하지 않는다. 물량 계약 전에는 이 환산 기준을 문서로 받아야 한다. 셋째, 영상 리타이밍 도구는 모두 길이 기준으로 과금한다. 10분 영상을 구간별로 나눠도 총비용은 같지만, 문제가 생긴 구간만 다시 렌더링할 수 있다.
배치 처리와 SDK 기준으로 본 API별 특징
Sync Labs: 기존 영상 리타이밍의 가장 강력한 기본값
Sync Labs는 원본 영상과 대상 오디오를 받아 재동기화한 MP4를 반환한다. REST API와 Python·TypeScript SDK, 작업 ID, 폴링, 웹훅 콜백을 제공한다. 모델은 초안용 lipsync-1.9부터 일반 작업용 lipsync-2, 고급 및 전문가급 클로즈업용 lipsync-2-pro와 sync-3까지 이어진다. 표정이 있는 짧은 클립용 react-1도 있으며 초당 약 $0.167이다. 더빙은 별도 과금으로, 엔트리 등급은 오디오 1분당 $6.00, Scale은 $4.80이다. 무료 계정은 월 3회의 공유 생성과 회당 최대 15초를 제공한다. Scale에서는 배치당 최대 500개 생성, 동시 작업 15개를 지원한다. 영상 길이 제한은 Hobbyist의 1분부터 Scale의 30분까지 늘어나며, 워터마크는 Creator 이상에서 제거된다. 직접 번역한 오디오는 어떤 언어든 넣을 수 있다. 29개 언어라는 더빙 수치는 Sync 자체 더빙 제품에만 적용되는 제한이다.
이미 보유한 영상을 수십~수백 개 단위로 다국어 재더빙하는 작업이라면 Sync Labs를 고르면 된다. 다만 초안에 최상위 모델을 쓸 필요는 없다. sync-3의 초당 비용은 lipsync-1.9의 약 5배다.
HeyGen: 품질 옵션을 갖춘 가장 저렴한 종량제 토킹헤드 API
HeyGen의 Lip Sync API는 MP4, MOV, WEBM 영상과 MP3 또는 WAV 오디오, 혹은 입력 스크립트를 받는다. 한 번의 배치 호출로 최대 100개 영상을 처리할 수 있다. 분당 $0.84의 Speed 모드는 정면을 보는 단일 화자 영상에 적합하다. 분당 $1.74의 Precision은 측면 얼굴, 카메라 앵글 변화, 화자 전환, 입 가림을 겨냥하며 화면에 보이는 모든 얼굴을 동기화한다. 무료 플랜은 720p·워터마크 조건으로 최대 1분짜리 영상 1~3개를 제공한다. 유료 플랜의 길이 한도는 Creator와 Pro에서 30분, Business에서 60분, Enterprise에서 5시간이다. 짧은 클립은 약 2~5분 내에 결과가 나오며, 긴 영상이나 고해상도 출력에는 10~20분이 걸린다. API 크레딧은 이제 구독 없이 종량제로 구매할 수 있다. 종량제 크레딧은 12개월 후 만료되며, 기존 플랜 크레딧은 30일 후 만료된다.
이미 HeyGen 아바타 워크플로를 사용 중이거나 토킹헤드용 API의 최저 분당 진입가가 필요하다면 HeyGen이 좋다. 다만 움직임이 있는 영상이라면 Precision 비용을 잡아야 한다. 벤더 설명상 Speed는 초안용 모드다.
Hedra Character 3: 사진 한 장으로 만드는 영상에는 강점, 리타이밍 엔진은 아님
Hedra Character 3는 텍스트·이미지·오디오를 함께 받는 옴니모달 영상 모델이다. 인물 사진 한 장과 녹음 하나로 눈 깜빡임과 고개 기울임이 포함된 말하는 퍼포먼스를 만들며, 한 번에 최대 10분까지 생성할 수 있다. 과금은 540p, 720p, 1080p 해상도에 따라 직접 결정된다. Studio 플랜은 월 300크레딧 무료 제공부터 시작하며 Lite는 약 $10, Creator는 약 $30, Professional은 약 $75다. 유료 등급에서는 상업적 사용이 가능하다. 문서화된 일급 배치 엔드포인트는 없고 처리량은 계정 동시성에 묶인다. 공개 문서는 폴링을 제공하지만 문서화된 웹훅 경로는 제시하지 않는다.
시작 자산이 사진이고 결과물이 스타일화된 또는 애니메이션 발표자라면 Hedra가 적합하다. 이미 촬영한 영상을 대량 재더빙하는 백엔드로는 고르지 않는 편이 좋다. 그 작업은 Sync Labs의 영역이다.
VEED Fabric 1.0: 벤더 자체 테스트에서 가장 빠르지만 가격은 프리미엄
VEED는 Fabric 1.0을 초당 $0.15, 720p 출력으로 제시한다. VEED가 같은 작업에서 수행한 자체 벤치마크에서는 Fabric이 63초를 기록했고, Hedra는 91초, Kling V2 Pro는 139초, Creatify Aurora는 166초, HeyGen은 167초, Omnihuman v1.5는 118초였다. 이 벤더 테스트만 놓고 보면 Fabric이 가장 빠르다. 반면 이 글에서 초당 단가는 가장 비싸며, 분당 환산한 HeyGen 대비 약 5~10배다. Hedra는 Fabric 가격의 대략 절반으로만 설명된다. 사실감 평가는 벤더 주장으로 받아들여야 한다. 해당 페이지는 테스트 자산, 시행 횟수, 편차, 수치화된 정확도 점수를 공개하지 않았고, 강력한 모델도 샘플 검증이 필요하다고 인정한다. 그래도 수백 개 클립에서 처리 시간이 누적되는 환경이라면 63초와 167초의 차이는 초당 $0.05 절감보다 중요해질 수 있다.
D-ID와 오픈소스 모델: 가격보다 먼저 라이선스를 확인할 것
D-ID Pro는 공개된 산식 기준으로 상업 라이선스가 가능한 토킹 포토 옵션 가운데 가장 저렴하다. 연간 결제 기준 월 $16에 15분이 포함된다. 번역 길이 제한은 Lite부터 Advanced까지 5분이며, Enterprise에서만 30분으로 늘어난다. 월 $108의 Advanced는 커스텀 로고 출력과 수동 검수를 추가한다. LatentSync 1.6는 512×512로 학습하며, guidance_scale을 1.0~3.0 사이에서 조절해 싱크의 타이트함과 흔들림 사이를 선택한다. MuseTalk 1.5는 256×256 얼굴 영역에서 단일 Tesla V100으로 30fps를 유지하고 중국어·영어·일본어를 지원한다. 다만 제작진은 콧수염과 입술 형태에서 정체성 보존 성능이 떨어진다고 언급한다. Wav2Lip은 제품이 아니라 여전히 벤치마크에 가깝다. README는 LRS2로 학습한 모델의 상업적 사용을 제한하며, 상업 사용자는 Sync Labs를 안내한다.
물량이 늘면 어디서 문제가 터지나
벤치마크 표는 깔끔한 토킹헤드를 시험한다. 실제 제작 영상에는 측면 얼굴, 입을 가리는 손, 노래, 언어 전환이 들어온다. 더 비싼 등급으로 올린다고 이런 문제가 자동으로 해결되지는 않는다. 특히 강한 자음 구간은 반드시 풀 해상도로 확인해야 한다. 반복적으로 나오는 결함은 다음과 같다.
- 작은 얼굴에서 나타나는 치아 깜빡임과 뭉개진 입 안쪽
- 파열음에서 발생하는 턱 튐, 측면 앵글에서의 턱선 왜곡
- 측면 얼굴의 드리프트와 워핑, 입 위를 무언가 가로지를 때 생기는 가림 아티팩트
- 음소 매퍼가 잡아내지 못하는 너무 조용한 원본 오디오
- 배치가 진행될수록 얼굴이 다른 사람처럼 보이는 정체성 및 배경 드리프트
여러 파이프라인을 운용하는 한 VFX 실무자는 이렇게 요약했다.
"Só I work in VFX and we found a combination of Lipsync 2 by Sync Labs, Heygen and some custom techniques to fool the models is working ok." — u/OlivencaENossa, r/StableDiffusion
다국어 출력도 두 번째 함정이다. 한 테스터는 같은 오디오 레퍼런스 워크플로가 영어에서는 작동했지만 아랍어에서는 무너졌고, 입술이 입과 따로 움직였다고 평가했다. 시도한 옵션 중 Sync 3가 가장 나았지만 전문 작업에 쓸 수준은 아니었다. 영어·스페인어·프랑스어 외 언어로 더빙을 출시한다면, 제품 설명의 지원 언어 수를 믿기보다 언어별 원어민 검수 비용을 잡아야 한다.
"Unfortunately it's not that good and quite often the lips move separately from the mouth." — u/Illuminateehee, r/seedance2pro
실효 비용은 요금표뿐 아니라 운영 계층에서 결정되는 경우가 많다. 여기서 다룬 상용 시스템 네 곳은 모두 비동기 방식이다. 미디어를 제출하고 작업 ID를 받은 뒤 폴링하거나 웹훅을 기다리고, 출력 URL을 가져온다. 하루 수백 개 클립을 처리한다면 확장 전에 실패 또는 재시도 작업이 크레딧을 차감하는지, 멱등성을 지원하는지 각 벤더에 확인해야 한다. 배치 전체에서 같은 결함이 반복되면 프레이밍, 앵글, 얼굴 크기, 가림 같은 공통 원본 문제일 가능성이 높으므로 재제출보다 입력부터 진단하는 편이 낫다. HeyGen 리테일 플랜은 물량 계약 전에 해당 플랜에서 실제 렌더링 시간을 시험해야 한다. 무료 플랜 사용자는 30초 렌더링에 50분이 걸렸다고 기록했다.
"Man on free plan for 30 sec video it took 50 minutes to make - terrible" — u/Afraid_Cod_6441, r/heygen
프레임레이트 끊김은 다른 부분이 아무리 설득력 있어도 결과물을 무효로 만든다. MuseTalk과 LatentSync는 모두 25fps로 학습했으므로, 첫 배치가 반려된 뒤가 아니라 계약 전에 결과물의 프레임 케이던스와 리샘플링 정책을 확인해야 한다.
직접 구축과 구매 사이, 그리고 상용 배포의 법적 기준
셀프호스팅의 손익분기점은 대부분 팀이 반나절 안에 계산할 수 있다. Crazyrouter의 공개 비용 모델은 Sync Labs와 셀프호스팅 Wav2Lip의 교차점을 월 30초 영상 500개 근처로 본다. 100개에서는 약 $240 대 $50, 1,000개에서는 $2,400 대 $200, 10,000개에서는 $24,000 대 $800이다. 다만 이는 엔지니어링 인건비, 스토리지, 모니터링, 재시도 비용을 제외한 수치다. GPU 운영을 감당할 DevOps 인력이 있다는 가정도 들어간다. 셀프호스팅을 공짜라고 부르기 전에 초기 설정 1주와 이후 드라이버·모델 유지보수 비용을 더해야 한다. LatentSync 1.6는 v1.6에서 18GB VRAM을 요구하며, MuseTalk 1.5는 라이브 용도에서 가장 가볍게 실행된다.
라이선스는 일부 ‘무료’ 옵션을 처음부터 제외시킨다. Wav2Lip은 LRS2로 학습한 가중치로 상업 배포를 할 수 없다. LivePortrait의 코드는 MIT지만, 사용 중인 InsightFace 탐지 모델은 교체하기 전까지 연구용 전용이다. 블로그 글이 아니라 실제 배포할 리포지터리의 라이선스 파일을 확인해야 한다.
첫 유료 렌더링 전에 법적 기준도 통과시켜야 한다. EU AI Act의 투명성 의무는 이미 적용 중이다. 기존 시스템에 대한 Article 50(2)의 기계 판독 가능 표시 의무는 2026년 12월 2일 준수 기한이 언급된다. 합성 영상에는 화면상 표기와 출처 메타데이터를 함께 넣어야 한다. 권리를 보유한 얼굴과 음성만 사용하고, 복제 대상의 동의 기록도 보관해야 한다.
이 사이트의 관련 글: MuseTalk 립싱크 비용 리뷰, 영상 생성 API 가격 산정 기준, 페이스 스왑 API 비교.
FAQ
2026년 프로덕션용으로 가장 좋은 립싱크 API는 무엇인가?
기존 영상을 대량 리타이밍한다면 모델별 요금, SDK, 웹훅, 배치 처리 편의성 때문에 Sync Labs가 가장 강력한 기본값이다. HeyGen은 아바타 워크플로 안에서 토킹헤드를 만들 때, Hedra는 사진 한 장으로 영상을 만들 때 더 좋은 선택이다.
완성 영상 1분 기준으로 가장 저렴한 립싱크 API는?
공개 산식이 있는 상용 옵션 중에는 분당 $0.84의 HeyGen Speed가 가장 낮다. 그다음은 Hedra 540p와 분당 약 $1.00–$1.50인 D-ID Pro다. Sync Labs 초안용 lipsync-1.9는 약 $1.50부터 시작하며, sync-3는 플랜 비용 전 기준 $8.00을 넘는다.
HeyGen에서는 Speed와 Precision 중 무엇을 써야 하나?
정면 단일 화자와 초안에는 Speed, 측면 앵글·움직이는 카메라·가림·화자 전환에는 Precision을 쓰면 된다. Precision은 분당 비용이 대략 두 배다.
기존에 촬영한 움직이는 영상을 리타이밍할 수 있나, 아니면 사진만 애니메이션할 수 있나?
Sync Labs와 HeyGen Lip Sync는 사용자가 제공한 영상을 리타이밍한다. Hedra Character 3와 D-ID 토킹 포토는 정지 인물 사진을 움직인다. 움직이는 피사체, 제스처, 카메라 움직임은 모든 벤더에서 가장 어려운 리타이밍 사례로 남아 있다.
API로 실시간 립싱크를 쓸 수 있나?
여기서 평가한 API는 비동기 방식이다. 제출 후 폴링하거나 웹훅을 기다리고 결과물을 가져와야 한다. 이 목록의 어느 벤더도 프로덕션 품질의 스트리밍 립싱크를 문서화하지 않았다.
Wav2Lip이나 다른 오픈소스 모델을 상업적으로 사용할 수 있나?
Wav2Lip이 공개한 가중치는 상업적 사용을 금지한다. 따라서 상업 파이프라인에서는 LatentSync나 MuseTalk을 셀프호스팅하거나 유료 API를 사용한다. 배포할 커밋의 라이선스 파일은 항상 다시 확인해야 한다.
하루 수백 개 영상으로 확장하기 전에 무엇을 점검해야 하나?
동시성 제한, 큐 처리 방식, 폴링 대체 수단을 갖춘 웹훅 지연, p95 렌더링 시간, 프레임레이트 보존, 재생성 과금, 원어민이 평가한 언어별 품질을 확인해야 한다.
작업 유형별 최종 추천
| 작업 유형 | 추천 | 추천 이유 |
|---|---|---|
| 보유 영상을 재더빙, 수십~수백 개 클립 | Sync Labs lipsync-2, 핵심 장면은 sync-3 | 배치 친화 API, 웹훅, 모델별 가격 체계 |
| 아바타 워크플로 안의 토킹헤드 | HeyGen, 최종본은 Precision | 가장 낮은 종량제 분당 진입가, 100개 영상 배치 호출 |
| 사진 한 장과 오디오로 만드는 스타일화된 발표자 | 720p Hedra Character 3 | 사진 입력에 특화, 최대 10분 생성 |
| 빠른 처리 완료가 중요한 지연시간 민감 작업 | 유료 파일럿 후 VEED Fabric 1.0 | VEED 공개 테스트에서 가장 빠른 처리 시간, 실제 영상의 사실감은 먼저 검증 필요 |
| 프로토타입과 사내 설명 영상 | D-ID Pro | 가장 저렴한 상업용 토킹 포토 산식 |
| GPU 운영 인력이 있는 지속적 대량 물량 | LatentSync 1.6 / MuseTalk 1.5 셀프호스팅 | 월 약 500개 클립에서 손익분기, 동의 및 EU 표시 의무 유지 |
가장 어려운 영상 60초짜리 하나를 두 개 업체에서 먼저 돌려보자. 풀 해상도에서 치아, 턱, 측면 얼굴 안정성, 프레임 케이던스를 채점한 뒤, 승자의 완성 영상 분당 비용에 월 물량과 초기 20% 재생성 가정을 곱하면 된다. 이후에는 파일럿에서 측정한 실제 재생성률로 이 가정을 대체하면 된다.