Kling 2.6 모션 컨트롤로 댄스 애니메이션 제작: 설정 및 립싱크 팁

춤이 가장 어려운 이유

솔직하게 말해봅시다 — 춤은 모든 것을 동시에 밀어붙입니다: 리듬, 균형, 땅과의 접촉, 그리고 프레임 하나라도 틀리면 이상해 보이는 작은 표현적 변화. Motion Control은 명확한 의도, 걷기 사이클, 머리 회전, 카메라 팬을 좋아합니다. 춤은 의도적으로 복잡합니다. 두 가지 통증 지점이 계속 나타났습니다:

접촉 프레임: 발이 심어지는 순간, 어떤 드리프트도 가짜로 보입니다. 작은 이징도 얼음 스케이트장처럼 보일 수 있습니다.
계층 혼동: 모델은 더 많이 움직이기 때문에 손을 따르는 경향이 있습니다. 춤에서는 엉덩이가 형태를 이끕니다: 손이 따릅니다. 모델이 먼저 손을 추적하면, 면발처럼 흔들리는 팔과 잃어버린 중심을 얻게 됩니다.

저는 춤을 물리 문제처럼 다루기 시작했습니다. 코어와 땅을 먼저 생각하고 장식은 마지막. 그 사고방식의 전환이 어떤 단일 설정보다 더 도움이 되었습니다.

권장 설정 (fps / 스텝 / 강도)

이것들은 마법의 숫자가 아닙니다. 이것들은 저를 낭비되는 실행에서 지켜낸 보호대입니다.

FPS: 그루브와 무게감 있는 것은 24fps. 선명한 터짐이나 빠른 핸드워크가 필요하면 30fps. 60fps가 더 매끄러워 보였지만 타이밍 편집을 더 번거롭게 했고, 모델이 유지하고 싶던 액센트를 “부드럽게 만드는” 경우가 있었습니다.
스텝: 중간에서 높음. 1-2초 클립은 28-36 스텝, 3-5초 클립은 40-48 스텝으로 착지했습니다. ~24 스텝 아래에서는 더 많은 손 드리프트와 발목 노이즈를 봤습니다. ~48 이상에서는 스타일이 선명해졌지만 미세한 진동이 다시 살금거렸습니다.
Motion Control 강도: 0.6-0.7로 시작하세요. 가이드 모션이 확실할 때(참조 스켈레톤 또는 추적된 신체) 0.8로 올립니다. 모델이 뻣뻣해 보이거나 패브릭/머리카락을 해결할 수 없으면 0.5-0.55로 떨어뜨립니다.
시드 규율: 분위기가 좋아지면 시드를 잠그세요. 타이밍 조정 중에 다시 굴리면 무엇이 변했는지 파악하기 어렵습니다.

작은 참고: 강한 실루엣이 있는 클립은 더 낮은 디노이즈(0.35-0.45)로, 헐렁한 옷은 더 높은 디노이즈(0.5-0.6)로 실행했습니다. 더 낮은 디노이즈는 형태를 보존했고, 더 높은 디노이즈는 패브릭 시뮬레이션이 부스스한 것 대신 의도적으로 보이도록 도움이 되었습니다.

춤을 위한 신체 부위 우선 순위

가장 도움이 된 것은 Kling에게 먼저 신경 쓸 것을 알려주는 것이었습니다. 가능할 때, 저는 신체 부위 가중치를 대략 이렇게 설정했습니다:

엉덩이/골반: 1.0 (균형의 앵커)
발/발목: 0.9 (접촉 정직성)
척추/가슴: 0.8 (에너지 전달)
머리: 0.7 (따름, 이끌지 않음)
손/팔뚝: 0.6 (스타일, 항법 아님)

가중치를 직접 설정할 수 없으면, 여전히 힌트를 줄 수 있습니다:

코어를 주요하게 만드는 프롬프트를 사용하세요: “무게를 엉덩이를 통해,” “접지된 풋워크,” “몸통의 선명한 액센트.”
참조 비디오에서 엉덩이/발 우선순위로 자르세요. 손 클로즈업은 모델을 편향시킵니다.
신발을 보이고 바닥과 대비되게 유지하세요. 손실된 모서리 = 미끄러운 발.

이렇게 하면 전체 클립이 더 차분해졌습니다. 팔도 여전히 플레어가 있었지만, 신체는 더 이상 드리프트하지 않았습니다.

비트 정렬 방법

저는 초 단위로 생각하는 것을 멈추고 마디 단위로 생각하기 시작했습니다. 제가 사용한 간단한 루프는 여기 있습니다:

비트 표시: 저는 노래를 DAW에 (또는 심지어 CapCut에) 떨어뜨리고 1과 3에서 비트를 표시했습니다. 메트로놈 클릭을 내보냅니다.
프리롤: 첫 번째 히트 전에 4-6프레임의 정지를 추가했습니다. 없으면, 첫 번째 움직임은 종종 늦게 착지했습니다.
앵커 무브: 마디당 하나의 신체 이벤트를 선택했습니다(예: 비트 1에 엉덩이 터짐, 3에 발 심기). 프롬프트에 썼습니다: “엉덩이 팝이 비트 1에 착지합니다: 발 심기는 3에.”
8초에 자르기: 여분을 렌더링하고 8카운트에 끝나도록 자르기. 루프가 더 깔끔했고, TikTok 컷이 더 쉬웠습니다.

움직임이 프레임 또는 2개 정도 빠졌으면, fps (24 → 23.976)를 살짝 조정하거나 오디오를 약간 늘렸습니다. 작은 변화가 모든 것을 다시 렌더링하지 않고 보이는 드리프트를 수정했습니다.

립싱크 타이밍 팁

춤 클립의 립싱크는 머리가 움직이기 때문에 용서할 수 없습니다. 도움이 된 것:

프리 쿠션: 음절보다 1-2프레임 전에 입을 시작하세요. 댄서는 종종 소리 전에 얼굴을 준비합니다.
머리 흔들림 제한: 입이 발이 잠기는 동안 방황하지 않도록 머리 모션 강도를 약간 낮추세요.
모음 강조: 자음은 빠릅니다: 모음은 견딥니다. 저는 “깨끗한 열린 모음, 미묘한 자음”을 프롬프트했습니다. 한눈에 더 잘 읽혔습니다.
컷어웨이 관용: 라인이 잠기지 않으면, 힘든 음절에서 손 또는 바닥 히트로 자르고 돌아옵니다. 단편형 콘텐츠에서는 아무도 신경 쓰지 않습니다.

저는 또한 보컬을 침대보다 1-2dB 위로 유지했습니다. 음소 모서리를 들을 수 없으면, 정렬할 수 없습니다.

6가지 춤 프롬프트 템플릿

이것들은 멋진 것이 아닙니다. 제가 재사용한 꾸준한 출발점입니다.

“솔로 힙합 그루브, 엉덩이를 통한 무게감, 깨끗한 발 심기, 느슨한 어깨: 매 마디 비트 1의 액센트: 중간 샷 카메라: 접지, 최소한의 손 플레어: 24fps, 모션 강도 0.7.”
“선명한 격리와 함께 터지는 콤보: 1과 3에 가슴 터짐, 손은 보조: 풋워크는 바닥에 고정: 미끄러짐 없음: 선명한 실루엣, 밝은 바닥의 검은 신발: 30fps, 중간 스텝.”
“현대 구절, 흐르는 몸통, 고정된 골반, 의도적인 발 접촉: 비트 1에서 천천한 흡입: 움직임을 이끌지 않는 가벼운 패브릭 자국: 24fps, 더 낮은 디노이즈.”
“하우스 풋워크 포커스: 뒤꿈치와 발가락 관절: 중립적인 몸통: 미묘한 머리: 8카운트에서 루프: 보이는 바닥 격자가 있는 와이드 샷: 모션 강도 0.75.”
“K-pop 후렴곡 스니펫: 동기화된 팔이지만 엉덩이가 주도: 전 후렴곡에 미소가 치다: 모음에 우선 순위를 두는 립싱크: 24fps: 카메라 고정: 신발/바닥의 높은 대비.”
“비트 4에 브레이크 스텝 프리즈: 명확한 무게 이동: 손목 느슨함: 손 지배력 피하기: 30fps: 프리롤을 위한 추가 프레임: 7-8초로 자르기.”

필요할 때 음악 큐(“2에서 스네어,” “1에서 베이스 드롭”)를 바꿨습니다. 요점은 모델에게 무엇이 중요한지, 무엇을 편하게 할 수 있는지 말하는 것입니다.

진동 / 발 미끄러짐 수정

미끄러짐은 바닥이 모호할 때 가장 나빴습니다. 제 수정, 순서대로:

바닥 모서리를 만드세요: 미묘한 격자, 테이프 X, 또는 질감 있는 판자를 추가하세요. 모델은 볼 수 있는 표면을 존경합니다.
짧은 움직임, 강한 심기: 저는 심기를 설명했습니다: “뒤꿈치 내려, 무게 정착, 미끄러짐 없음.” 그것이 도움이 되었습니다.
모션 스텝을 약간 올리고, 디노이즈를 약간 떨어뜨리세요. 그것은 부스스한 것으로 변하지 않고 미세한 물결을 줄였습니다.
엉덩이를 먼저 잠그세요: 엉덩이가 안정적이면, 발은 더 이상 추적을 멈춥니다.
미세 줌을 자르세요: 부드러운 푸시인은 슬라이드를 명백하게 만들었습니다. 정적이거나 매우 느린 달리가 더 잘 작동했습니다.

미끄러짐이 지속되면, 더 높은 강도로 0.5-1초 꼬리를 다시 실행하고 꿰맸습니다. 두 번의 렌더링이 한 번의 완벽한 렌더링을 이겼습니다.

TikTok / Reels을 위해 내보내기

의도적으로 내보내기를 따분하게 유지했습니다:

종횡비: 1080×1920에서 9:16. 4K를 추적할 이유가 없습니다.
FPS: 소스와 일치 (24 또는 30). 느낌을 바꾸지 않으면 편집기가 60으로 자동 적응하도록 하지 마세요.
코덱: H.264, 높은 비트레이트 (짧은 클립의 경우 15-20Mbps). HEVC는 괜찮아 보였지만 구형 휴대폰에서 검토하기가 더 느렸습니다.
기간: 5-12초 루프가 가장 깔끔하게 작동했습니다. 움직임이 단일 8카운트에 살았을 때 7-8초로 자르기.
캡션: 가사 또는 카운트를 위해 최소한의 캡션을 태웁니다 (“1 • 2 • 3 • 4”). 뷰어는 그것에 대해 생각하지 않더라도 정렬을 느낍니다.

마지막 한 가지: 무음 버전도 내보냅니다. 일부 플랫폼은 오디오를 이상하게 재압축하고, 오디오가 없는 사본을 보유하면 늦은 스크램블을 방지합니다.

반복되는 재시도와 이 프롬프트를 테스트할 때 예측할 수 없는 모션을 줄이기 위해, 저희는 모든 춤 클립을 WaveSpeed에서 실행했습니다. 그것은 저희가 빠르게 반복하고, 시드를 잠그고, 카메라와 피사체 행동을 일관되게 유지할 수 있게 해주었습니다. 따라서 설정 번거로움 대신 창의적인 조정에 집중할 수 있습니다. 확인해 보세요! 이것은 승리 랩이 아닙니다. 그것은 Kling 2.6 Motion Control을 춤을 위해 신뢰할 수 있도록 느끼게 한 스택일 뿐입니다: 코어 먼저, 바닥이 보여, 비트 표시, 그리고 신체와 싸우지 않는 설정. 같은 작은 불편함에 직면하고 있다면, 다른 모델을 쫓기 전에 엉덩이-그 다음-발 접근 방식을 시도해보세요. 명백해 보입니다. 저는 여전히 느린 방식으로 그것을 배워야 했습니다.