WaveSpeedAI

如何在 Seedance 2.0 中使用參考影片複製動作與鏡頭移動

使用參考影片引導 Seedance 2.0 中的動作與鏡頭移動,附準備清單及「參考被忽略」問題的修正方法。

By Dora2 min read
如何在 Seedance 2.0 中使用參考影片複製動作與鏡頭移動

想要創作像 Seedance 2.0 一樣的電影級影片? 立即試用 WaveSpeed Cinematic Video Generator,現在就能生成 Seedance 2.0 等級的電影級影片。

嗨,我是 Dora。上週,我嘗試改用一段短短的參考影片。內容很平凡——只是我的手、素色背景、穩定的光線。Seedance 2.0 捕捉到了動作的方式,是我用文字描述所無法做到的。結果不是即刻的魔法,但感覺輕盈多了。猜測少了,腦中的拉扯也少了。

就是從那時起,我開始認真思考:什麼時候用 Seedance 2.0 參考影片才真的值得,什麼時候純文字依然夠用。

想完整了解 Seedance 2.0 的工作流程、模式與參考影片處理方式,請參閱 Seedance 2.0 完整指南

參考影片值得用的時機(對比純文字)

當時機、動作軌跡或鏡頭的能量比細節裝飾更重要時,參考影片就能發揮真正的價值。

幾個讓我立刻看出效果的場景:

  • 微型姿態:馬克杯的轉動、拇指的輕敲、一個剛好落在第三拍而非第二拍半的點頭。文字能描述,但參考影片直接展示了。
  • 舞蹈編排:我嘗試了一段 7 秒的步行鏡頭,結尾時肩膀微微下沉。用文字提示時,每次渲染的步態都有差異;用參考影片後,節奏固定了,我能專注在風格調整上。
  • 鏡頭運動:緩慢的推鏡頭說起來簡單,做起來卻奇怪地難以精確。參考影片給了模型一條清晰的曲線可以跟隨。
  • 節拍對齊:製作與鼓擊同步的短產品循環時,即使我更換視覺風格,影片也能讓擊點保持對齊。

純文字仍然更適合我的情境:

  • 較寬鬆的概念:氛圍片、環境循環、隱喻場景。我不需要精確的動作控制,文字更快。
  • 大幅度的風格跳躍:當我想讓模型自由發揮時,參考影片反而可能過度限制感覺。我會先用純文字,等節奏出現問題再加入小段參考影片。

如果你的輸出取決於特定節拍、手部位置或鏡頭感,Seedance 2.0 參考影片路徑通常值得採用。如果你在探索氛圍,我會先用文字,直到知道自己真正想鎖定什麼再說。

參考影片準備清單(長度、剪輯、壓縮、清晰度)

我不再把參考影片當成「素材」,而是把它視為「用像素傳達的指令」。指令越清晰,結果越好。以下是我這週整理出的簡短準備清單:

長度

  • 3 到 8 秒是我的甜蜜點。短於 2 秒往往模糊,長於約 10 秒,模型則較難確定該優先處理什麼。
  • 裁剪頭尾。我剪掉準備動作,讓畫面從乾淨的起點開始。

剪輯

  • 單一連續鏡頭。不要剪輯,不要跳切。如果需要變化,我為每個影片單獨渲染。
  • 保持動作「只有一個想法」。要嘛主體動,要嘛鏡頭動,不要同時,除非真的必要。

壓縮

  • 避免過度壓縮的螢幕錄影。我以原始幀率匯出輕量但清晰的 H.264
  • 注意平面區域的宏塊和色帶:它們可能在生成畫面中以紋理形式出現。

清晰度

  • 素色背景、穩定光線。我使用啞光表面和單一柔光,避免閃爍。
  • 清晰的輪廓。如果主體與背景融合,模型就只能猜測。
  • 穩定的節奏。拍攝時我會在心中默數,保持自己不在中途加速。

這聽起來有點繁瑣,但能避免我後來追著問題跑。一個簡單、平淡的影片能讓 Seedance 2.0 更有信心,而這讓我也更從容。

搭配參考影片的提示詞寫法(什麼要明說,什麼可以留白)

搭配 Seedance 2.0 的參考影片,我提示的內容更少,但更精準。影片負責動作,我告訴模型什麼要嚴格保留,什麼可以重新詮釋。

我明確指定的內容

  • 風格膠囊:一段描述外觀與感覺的短句。例如:「柔和日光、中性調色板、陶瓷釉面細節、淺景深。」這就足以引導方向,而不會與參考影片產生衝突。
  • 主體身份:如果需要一個馬克杯,我說「陶瓷馬克杯、米白色、輕微斑點」。如果需要人物,我給出穩定的描述(髮長、服裝色調),但避免與影片衝突的過度細節。
  • 鏡頭意圖:「細微推鏡」或「固定三腳架」。如果我的影片有推鏡,我會說出來,讓模型知道這是刻意的,而非抖動。
  • 節奏錨點:「在最後姿勢停留 0.5 秒。」這幫助結尾的節拍不再漂移。

我留白不說的內容

  • 精確的微觀軌跡。參考影片已經傳達了,我不在文字中重複描述——那只會造成混亂。
  • 細微的時間點。我避免說「在第 12 幀……」,除非是在除錯。影片本身已經將時間編碼得足夠好。

有用的提示詞句型

  • 「尊重參考影片的動作,重新詮釋紋理與色彩。」這告訴模型哪裡要忠實,哪裡可以發揮。
  • 「保持輪廓與節奏,允許風格變化。」當我在測試外觀而不想失去形態時很好用。
  • 「忽略參考影片的背景,替換為【素色/漸層】。」這防止了不想要的背景滲入。

讓我踩坑的地方

  • 過度描述。當我列出五個風格形容詞時,模型有時會放棄動作去滿足外觀要求。三個似乎是漂移前的上限。
  • 動詞矛盾。說「靜止鏡頭」但參考影片有推鏡,渲染結果就會搖晃。我學到了:要嘛調整影片,要嘛接受那個動作。

簡言之:讓 Seedance 2.0 的參考影片在動作上做主力。用文字來描繪表面、設定邊界。

修復階梯(依序執行)

測試 Seedance 2.0 參考影片的三天裡,我在桌上放了一份簡單的階梯清單。當某個地方看起來不對,我就依序往下走。大多數問題在第二或第三步就解決了。

如果動作抖動

  1. 重新剪輯影片至單一清晰的動作
  • 我在頭尾各削掉 4 到 6 幀,去除手部的細微調整動作。
  1. 減少視覺雜訊
  • 素色上衣、更簡單的背景、更柔和的光線。抖動通常來自模型試圖還原閃爍或紋理。
  1. 穩定來源影片,而非輸出
  • 如果有無意的手持晃動,我重新拍攝時把攝影機固定好。對輸出做後製穩定會模糊細節。
  1. 縮短參考影片長度
  • 對於細緻動作,我用 3 到 5 秒效果更好。長影片容易鼓勵漂移。
  1. 調整提示詞層級
  • 我加上「優先保持一致的動作路徑」,並移除多餘的風格形容詞。衝突少了,抖動也少了。

如果鏡頭運動被忽略

  1. 讓動作在影片中更明顯
  • 我稍微誇大了推鏡,並讓主體保持在中央。細微的動作容易被當成晃動。
  1. 去除競爭性的動作
  • 如果主體旋轉又加上推鏡,我選一個。單一想法的影片轉化效果更可靠。
  1. 在提示詞中明確說明
  • 一句話:「尊重參考影片的推鏡。」通常就夠了。
  1. 剪輯到最強的片段
  • 我剪到中間動作最乾淨的 2 到 3 秒。模型對這段的跟隨效果更好。
  1. 重新拍攝時加入參考線
  • 我在桌面邊緣貼上膠帶,讓視差效果更明確。之後生成結果對意圖的掌握更準確。

如果風格漂移

  1. 減少風格形容詞
  • 我只保留兩到三個:光線、調色板、材質提示。削減其餘內容減少了與動作的拉扯。
  1. 加入單張風格參考圖(而非完整影片)
  • 一張靜態圖片來建議紋理或色調有幫助,只要它不與動作影片矛盾即可。
  1. 簡化影片中的服裝和背景
  • 繁複的圖案會滲入輸出成為「風格」。素色上衣和素色牆壁讓外觀對提示詞保持開放。
  1. 使用一致的種子與設定重新渲染
  • 當我需要一個系列時,我在每次嘗試之間保持生成參數穩定。聽起來理所當然,但確實有效。
  1. 先鎖定動作,再調整風格
  • 我先做一個好的動作渲染,然後在上面迭代風格。漂移減少了,因為我不再要求模型同時解決兩個問題。

關於耐心的一點說明:這在第一次渲染時並沒有幫我省時間。但到了第三次渲染,我改動的地方更少,也不再那麼在意機制了。這是值得的。

參考影片的版權與授權說明(實用清單)

簡短、實用、不可妥協。參考影片感覺像「我的東西」,因為是我拍的,但有幾個需要注意的地方。

  • 畫面中有人:取得明確同意。如果臉孔可見,或可透過聲音或刺青辨識身份,就要詢問。書面授權更好,並留存記錄。
  • 未成年人:除非有明確的監護人簽署同意書及保留的理由,否則我不使用含有未成年人的參考影片。
  • 私人場所:某些空間禁止商業拍攝。請確認場館規定,包括攝影棚、健身房、博物館。
  • 商標與標誌:避免顯著的第三方商標、藝術品或包裝,它們可能被帶入輸出畫面。
  • 音樂與螢幕:背景電視或音樂可能產生版權問題。我在安靜的房間、關掉螢幕的環境下拍攝。
  • 旁觀者:即使模糊了也算數。我盡量選擇能控制背景的地點拍攝。
  • 授權鏈:如果參考影片是別人拍的,授權很重要。「在網路上找到的」不構成授權。
  • 後設資料與記錄:我保存日期、授權備忘和影片版本。未來的我會感謝這份紙本軌跡。

Seedance 2.0 的參考影片不能消除基本的法律要求,它只是讓借用自己的動作變得更容易。

我想以一個小小的觀察作結:當動作已經決定好,我就不再追逐新奇感了。工作變得更安靜。不是更少創意,只是更穩定。我能接受這樣的狀態。


想要創作像 Seedance 2.0 一樣的電影級影片? 立即試用 WaveSpeed Cinematic Video Generator,現在就能生成 Seedance 2.0 等級的電影級影片。


試用 Seedance 2.0 Mini — 更快、更省成本的版本,僅為標準價格的 50%:Seedance 2.0 Mini API。 第一次接觸 Seedance 2.0?Seedance 2.0 API

分享