음악은 이미 완성되었고, 가수의 이미지도 이미 확정되었습니다. 다음 단계는 화면 속 인물이 이 노래를 부르게 하려면 어떻게 해야 할까요?

지속적으로 음악 콘텐츠를 게시하는 크리에이터에게 매번 처음부터 모든 화면을 촬영하거나 생성하는 것이 항상 가장 적합한 경로는 아닙니다. 또 다른 접근 방식은 기존 공연 소스를 유지하고, 립싱크 적응을 전문 처리 단계에 맡긴 뒤 편집을 통해 새로운 작품을 완성하는 것입니다.

Ace Data Cloud Kling Lip Sync는 바로 이 단계를 대상으로 합니다: 요구 사항을 충족하는 짧은 동영상과 오디오를 결합하여 새로운 립싱크 클립을 생성합니다. 그 가치는 “한 번에 무제한 길이의 동영상을 생성하는 것”이 아니라, 소스 재활용, 비용 추정 및 프로그래밍 방식의 처리를 더 쉽게 구성할 수 있게 하는 데 있습니다.

이 글은 공개된 연동 문서를 기반으로 한 제작 방안이며, 실측 사례가 아닙니다. 본문의 비용은 문서상 단가를 기준으로 계산한 예시이며, 촬영, 기본 동영상 생성, 오디오 처리, 저장, 편집 또는 재생성 비용은 포함하지 않습니다. 기능과 가격은 실제 호출 시의 서비스 설명을 기준으로 합니다. 표지와 본문의 이미지는 모두 AI로 생성된 콘셉트 이미지 또는 프로세스 도식이며, Kling Lip Sync의 실측 출력이나 제품 인터페이스 스크린샷이 아닙니다.

1. 매번 처음부터 시작하는 대신, 하나의 공연 영상에서 시작하기

이미지 설명

당신이 오리지널 음악 스타 IP를 운영하고 있다고 가정해 보겠습니다: 인물의 스타일링, 녹음실 환경 및 공연 스타일은 이미 확정되었으며, 서로 다른 노래의 후렴구 클립, 짧은 동영상 및 MV를 지속적으로 게시하고자 합니다.

제작 프로세스는 두 층으로 나눌 수 있습니다:

  • 공연 소스 층: 인물, 의상, 카메라 및 신체 동작을 준비합니다.
  • 립싱크 적응 층: 각 노래의 보컬 클립에 따라 해당 화면을 처리합니다.

이렇게 하면 이미 만족스러운 공연 소스가 후속 작품에 활용될 기회를 얻을 수 있으며, 매번 기본 화면을 새로 제작할 필요가 없습니다. 재활용에 적합한지는 여전히 테스트 클립을 통해 표정, 동작 및 노래 분위기의 일치 정도를 확인해야 합니다.

Kling 공식 Lip Sync 가이드는 더빙 또는 노래 오디오를 업로드하는 사용 방식을 명확히 포함하므로, 이 경로는 말하는 영상뿐만 아니라 노래 클립에도 사용할 수 있습니다.

2. Ace Data Cloud의 네 가지 실용적 장점

1. 두 가지 동영상 입력 방식으로 기존 소스 프로세스에 쉽게 연동

Ace Data Cloud의 래퍼는 두 가지 입력 경로를 지원합니다:

입력 방식 적용 가능한 소스 주요 제약 사항
video_id 이미 생성된 Kling 동영상 최근 30일 내 생성, 5초 또는 10초
video_url 공개적으로 접근 가능한 외부 동영상 MP4 / MOV, 2~10초, 100MB 이하; 720p / 1080p, 한 변 720~1920픽셀

video_id와 video_url 중 하나만 선택할 수 있으며, 동시에 전달할 수 없습니다. 외부 동영상 입력은 규격에 맞는 실사 소스에 연동 경로를 제공하지만, 이것이 임의의 촬영 콘텐츠가 동일한 효과를 얻을 수 있다는 뜻은 아닙니다. 우선 단일 인물, 선명한 정면 소스를 검증하는 것을 권장합니다.

인물 이미지만 있다면, 먼저 이미지-투-비디오 프로세스를 사용해 기본 클립을 준비한 뒤 립싱크 처리를 진행할 수도 있습니다. 기본 화면 생성은 독립적인 단계이므로 예산에 별도로 포함해야 합니다.

2. 단일 단계 래퍼로 일반적인 작업의 연동 단계 축소

Ace Data Cloud는 POST /kling/lip-sync를 제공하며, audio2video 모드를 통해 동영상과 구동 오디오를 제출합니다. 기존 노래가 있는 경우 먼저 텍스트로 변환할 필요가 없으며, 립싱크 처리를 위해 노래를 다시 합성할 필요도 없습니다.

구분해야 할 점은 다음과 같습니다: 이것은 Ace Data Cloud가 일반적인 시나리오를 위해 제공하는 단일 단계의 편리한 래퍼이며, Kling 공식의 “얼굴 인식 → Advanced Lip Sync” 다단계 인터페이스의 필드 미러링도 아니고, Avatar 2.0도 아닙니다.

연동 시에는 이 인터페이스의 파라미터와 길이 제한을 사용해야 하며, 다른 제품의 기능 설명을 직접 적용해서는 안 됩니다.

3. 성공 호출당 고정 과금으로 예산을 더 직관적으로 산정

현재 연동 문서에 따르면, Kling Lip Sync는 성공한 호출당 고정으로 2.45 Credits를 소모합니다. 파라미터 검증에 실패한 4xx 요청은 과금되지 않으며, 작업 조회는 무료입니다.

기본 동영상이 이미 있는 프로젝트의 경우, 먼저 클립 수를 추정할 수 있습니다:

립싱크 예산 = 성공 처리 횟수 × 2.45 Credits

누적 처리 시간 각 클립 10초, 한 번에 통과한다고 가정 립싱크 소모량
30초 3회 7.35 Credits
60초 6회 14.70 Credits
180초 18회 44.10 Credits
300초 30회 73.50 Credits

위 내용은 문서상 단가를 기준으로 한 산술적 추정이며, 한 번에 위와 같은 긴 동영상을 생성할 수 있다는 의미는 아닙니다. 악구 단위로 더 많은 짧은 구간으로 나누거나 동일한 구간에 대해 여러 후보를 생성하면 소모량도 증가합니다. 작업이 성공했으나 결과가 창작 요구 사항에 도달하지 못한 경우, 다시 생성하면 새로운 비용이 발생할 수 있습니다.

소스 재활용의 비용상 이점은 모든 작업이 다른 플랫폼보다 저렴하다고 주장하는 데 있는 것이 아니라, 기본 화면을 반복 제작해야 하는 필요를 줄이는 데서 나옵니다.

Credits의 실제 화폐 비용은 구매한 요금제와 정산 조건에 따라 달라지며, 다른 플랫폼의 크레딧과 직접 동일시할 수 없습니다.

4. 비동기 작업 및 콜백으로 일괄 처리 구성에 용이

인터페이스는 async: true 또는 callback_url을 지원합니다. 비동기 제출 후 작업 ID가 반환되며, /kling/tasks를 통해 조회하거나 콜백 결과를 기다릴 수 있습니다. 개발팀의 경우, 이는 “클립 대기열 등록 → 작업 제출 → 상태 기록 → 결과 수집 → 수동 검수” 프로세스를 구축하는 데 사용할 수 있습니다. 그러나 비동기는 무제한 동시성을 의미하지 않으며, 여전히 속도 제한 요구 사항을 준수해야 합니다. 작업이 아직 처리 중인 경우, 맹목적으로 반복 제출하지 말고 기존 작업을 계속 조회해야 합니다.

Ace Data Cloud Kling Lip Sync 비동기 작업 아키텍처: 클립 대기열, 제출, 작업 ID, 조회 또는 콜백, 결과 수집, 수동 검수 및 편집 내보내기

그림 1|비동기 처리 아키텍처 개요(AI 생성): 처리 중에는 기존 작업을 계속 조회하고, 성공 후 결과를 수집하여 수동 검수합니다. 비동기는 무제한 동시성을 의미하지 않습니다.

3. 한 곡의 권장 제작 프로세스

짧은 클립에서 완전한 MV까지: 원본 공연 비디오와 노래 보컬을 구간별로 립싱크하고, 출력 클립을 원곡 타임라인으로 되돌려 편집

그림 2|뮤직 비디오 제작 프로세스 개요(AI 생성): 짧은 클립을 각각 처리한 후 후반 편집을 통해 완성 작품을 만들며, 인터페이스가 한 번에 긴 비디오를 생성한다는 의미는 아닙니다.

1. 노래에 적합한 원본 소재 준비

동일한 10초 비디오만 반복하는 대신, 소규모 소재 라이브러리를 구축하는 것이 좋습니다.

  • 벌스: 자연스럽고 절제된 상반신 퍼포먼스.
  • 코러스: 감정이 더 강하고 신체 리듬감이 적절한 퍼포먼스.
  • 간주: 호흡하거나 먼 곳 또는 무대 원경을 바라보는 장면.
  • 예비: 같은 스타일의 클로즈업과 서로 다른 샷 크기.

촬영 시 입이 최대한 보이도록 유지하고, 마이크와 팝 필터가 입술을 가리지 않도록 합니다. 먼저 고정 카메라, 안정적인 조명 및 한 명이 정면을 보는 화면을 사용한 뒤, 점차 더 복잡한 샷을 테스트합니다. 문서 역시 선명한 정면, 단일 인물 입력을 권장합니다.

2. 구동 오디오 준비

이미 완성된 곡이 있는 경우, 깨끗한 메인 보컬을 우선 테스트하고 원본 전체 MP3는 최종 오디오 트랙으로 보관하는 것이 좋습니다. 분리된 보컬의 속도나 원래 타임라인 위치를 변경하지 마십시오.

인터페이스는 MP3, WAV, M4A, AAC를 지원하며, 파일은 5MB를 초과할 수 없고 오디오 길이는 해당 비디오 길이를 초과해서는 안 됩니다. 곡 자르기는 제출 전에 완료해야 하며, 이 인터페이스의 파라미터 표에는 전체 곡의 시작 및 종료 시간을 선택하는 필드가 없습니다.

3. 악구별로 비디오와 오디오 매칭

다음 구조에 따라 클립을 관리할 수 있습니다.

클립 번호 | 곡 시작점 | 곡 종료점 | 원본 비디오 | 구동 보컬 | 작업 ID | 출력 비디오

호흡, 휴지 또는 샷 전환 지점에서 우선 분할하고, 10초를 채우기 위해 긴 음을 두 구간으로 자르는 일은 피하십시오. 소재를 재사용하는 경우, 이전 라운드의 립싱크 완성본을 계속 반복 가공하는 대신 매번 가능한 한 처리되지 않은 원본 비디오를 사용하십시오.

4. 인터페이스 호출 및 결과 확인

아래는 설명용 요청 예시입니다. YOUR_PUBLIC_VIDEO_URL 및 YOUR_PUBLIC_AUDIO_URL은 자리 표시자이며, 제약 조건을 충족하고 접근 가능한 실제 소재 링크로 반드시 교체해야 합니다. 예시는 실행된 작업이 아닙니다.

curl -X POST 'https://api.acedata.cloud/kling/lip-sync' \
  -H "authorization: Bearer ${API_KEY}" \
  -H 'content-type: application/json' \
  -d '{
    "mode": "audio2video",
    "video_url": "YOUR_PUBLIC_VIDEO_URL",
    "audio_type": "url",
    "audio_url": "YOUR_PUBLIC_AUDIO_URL",
    "async": true
  }'

작업 ID를 얻은 후, 문서에 따라 동일한 작업을 조회합니다:

curl -X POST 'https://api.acedata.cloud/kling/tasks' \
  -H "authorization: Bearer ${API_KEY}" \
  -H 'content-type: application/json' \
  -d '{"action":"retrieve","id":"YOUR_TASK_ID"}'

검수 시에는 가사 발음, 긴 음, 무음 구간, 얼굴 안정성 및 마이크 주변 화면을 중점적으로 관찰합니다. 인터페이스가 성공을 반환했다고 해서 바로 최종 게시 가능 상태로 간주하지 마십시오.

5. 원곡 타임라인으로 돌아가 완성 작품 편집

여러 번 호출하여 얻은 것은 독립적인 클립이지, 자동으로 연장되는 원테이크 비디오가 아닙니다. 결과를 원곡의 해당 위치에 되돌려 놓고, 프레임 레이트와 해상도를 통일한 뒤 하나의 연속된 전체 곡을 최종 오디오 트랙으로 사용합니다.

실제 출력 길이를 확인해야 하며, 각 구간이 모두 사전 설정 길이와 정확히 같다고 가정하지 마십시오. 통합 문서의 반환 예시에는 4.966초와 같은 길이 값이 포함되어 있습니다.

립싱크 클립 사이의 이음새는 클로즈업, 상반신, 무대 원경을 번갈아 사용하여 처리할 수 있습니다. 입이 잘 보이지 않는 샷까지 기계적으로 모두 립싱크 처리할 필요는 없습니다.

4. 경계를 먼저 이해해야 장점을 올바른 곳에 활용할 수 있습니다

  • 긴 비디오 연장기가 아닙니다: 현재 외부 비디오는 한 번에 2~10초를 입력하며, 긴 작품은 구간별 처리와 편집이 필요합니다.
  • 얼굴 교체 또는 완전한 캐릭터 훈련 인터페이스가 아닙니다: 다른 가상 스타 이미지를 원한다면, 먼저 해당하는 기본 소재 제작을 완료해야 합니다.
  • 신체 퍼포먼스를 다시 구성한다고 보장하지 않습니다: 동작과 표정이 곡에 맞는지 여부는 여전히 제작자가 소재를 선택해야 합니다.
  • 클립 간 자동 연속성을 보장하지 않습니다: 같은 동작이 반복되거나 시작과 끝의 자세가 갑자기 바뀌는 문제는 소재 라이브러리와 편집을 통해 해결해야 합니다.
  • 문서상의 기능이 소재 실측 통과를 의미하지는 않습니다: 실사 인물, 복잡한 가림, 빠른 가사 및 높은 음의 긴 음은 모두 먼저 샘플을 제작해 보는 것이 좋습니다. 상기 시간 및 인터페이스 범위는 현재 연동 문서를 기준으로 하며, 촬영, 콘티 및 검수 부분은 제작 제안입니다。

실제 인물의 초상, 녹음 및 노래를 사용하기 전에 համապատասխան 권한을 취득해야 하며, 합성 콘텐츠 표시에 관한 게시 플랫폼의 요구 사항을 준수해야 합니다. 소재 링크에는 충분한 작업 접근 유효 기간이 있어야 하지만, 비공개 스토리지 자격 증명을 노출하거나 프런트엔드에 API 키를 삽입해서는 안 됩니다.

5. 하나의 30초 테스트 영상으로, 당신의 제작 프로세스를 검증하세요

첫 번째 라운드에서는 세 구간만 테스트하는 것을 권장합니다:

  1. 입이 가려지지 않은 10초 분량의 연기 소재를 준비합니다.
  2. 해당 길이에 맞는 세 구간의 보컬을 선택합니다: 일반 가사, 비교적 빠른 가사, 롱톤을 각각 한 구간씩.
  3. 각각 처리 요청을 제출하고, 립싱크, 연기 매칭 및 얼굴 안정성을 비교합니다.
  4. 결과를 원곡 타임라인에 배치하여 편집과 영상·음성 동기화를 검증합니다.
  5. 통과가 확인된 후에야 소재 라이브러리를 확장하고, 일괄 제출 및 완전한 MV 제작을 진행합니다.

Ace Data Cloud Kling Lip Sync의 실용적 가치는 크리에이터가 기존 소재를 기반으로 새로운 립싱크 버전을 추가할 수 있게 하고, 개발 팀이 명확한 인터페이스, 과금 및 작업 메커니즘으로 이 단계를 구성할 수 있게 하는 데 있습니다.

짧은 영상 하나에서 재사용 가능한 제작 프로세스 한 세트까지, 먼저 검증한 후 확장하는 것이 처음부터 전체 연기를 다시 제작하는 것보다 프로젝트 리스크를 더 쉽게 통제할 수 있습니다.

매개변수, 입력 규격 및 연동 방식을 알아보려면 Kling Lip Sync 통합 가이드를 참조하고, Ace Data Cloud 콘솔을 통해 연동 자격 증명을 관리하세요.


제품 설명: 본문은 Ace Data Cloud가 제공하는 Kling Lip Sync 연동 래퍼를 소개합니다. Kling은 해당 권리자의 제품 및 상표이며, 본문은 양측 간의 공식 협력 또는 보증 관계가 있음을 암시하지 않습니다. 가격 및 기능은 실제 호출 시의 서비스 설명을 기준으로 합니다.