8 款 Higgsfield Genjutsu 替代工具:AI 影片角色替換與動作轉移

12 分鐘

淡薄荷綠與藍色漸層背景的封面,介紹八款 Higgsfield Genjutsu 替代工具

Higgsfield Genjutsu 最近受到關注,因為它能讓新角色演出大家熟悉的場景。Motion Transfer 可以把參考影片中的動作套用到照片裡的角色;Object Swap 則可以只替換畫面中的某個元素,例如外套或道具。以下介紹八款 Genjutsu 替代工具,讓你用自己的素材試試這些剪輯手法。

八款工具快速比較

  1. DomoAI — 把參考影片中演員的動作套用到自己的角色。 適合在同一個工作區製作角色影片並轉換風格。
  2. Viggle — 套用現成的動作範本,讓角色動起來。 適合改編舞蹈短片。
  3. Runway — 先在關鍵影格預覽新角色的外觀,再將修改套用至整段影片。 適合逐鏡頭調整畫面。
  4. Kapwing — 更換角色後,直接在同一個編輯器加入字幕和音訊。 適合完成社群影片的後製。
  5. WaveSpeed — 透過託管 API 替換影片角色。 適合將重複的生成工作自動化。
  6. Wan-Animate — 下載模型權重,在自己的 GPU 上執行角色替換。 適合自行部署。
  7. Luma — 使用 Ray3.2 Modify Video 保留原有表演,同時改變場景的視覺風格。 適合重塑實拍鏡頭的風格。
  8. Kling AI — 用動作參考影片控制角色圖片的動作。 適合以真人表演帶動靜態角色。

1. DomoAI|將影片動作轉移到自己的角色

介紹 AI 影片生成器的 DomoAI 官網首頁

將參考影片和角色照片上傳至角色轉影片。影片提供動作,照片決定角色外觀。如果只需要其中一段,可以在上傳時直接裁剪,省去另開剪輯軟體的步驟,也能減少花在多餘片段上的點數。

選擇 Kling 4.0 並載入一段參考影片和兩張角色圖的操作畫面

例如,要讓吉祥物揮手,可以選取演員舉手的片段,搭配一張手臂清楚入鏡的吉祥物圖片。如果要修改參考圖,可以先用 AI 圖片編輯器調整,再從歷史紀錄或素材庫選取更新後的圖片。

挑好要保留的片段後,可以用影片風格轉換做出動畫版本,或用影片畫質提升將解析度提高至最高 4K。兩者都是獨立步驟,只要處理準備分享的那一版即可。

適合對象: 想在同一個工作區準備角色圖片、套用自己拍攝的動作,再完成影片後製的創作者。

主要限制: 即使沿用同一段參考影片,每次更換角色或服裝都需要重新生成。

價格與使用方式: 下表為年繳方案的月均價格。Standard 以上方案可在支援的模型使用 Relax 模式。上方示範的 Kling 4.0 使用 Fast 模式點數。

方案每月價格(美元)點數
Basic$9每月 600 點
Standard$29每月 2,200 點
Pro(基本級距)$99每月 8,000 點
Team(3 席)每席 99 美元每月共用 24,000 點

2. Viggle|用動作範本改編角色短片

Viggle 官網首頁

Viggle 的 Mix 工具能將角色圖片與動作影片結合。你可以上傳自己的片段,也可以選用現成範本,讓新角色跳一支熟悉的舞,或重新演繹熱門迷因。

如果已經有角色,卻還沒決定要演什麼,可以直接瀏覽動作範本,挑出符合角色個性的表演。同一段動作也能用來製作多個短片版本。

Mix 結合角色圖片和動作影片,Multi 可讓同一段影片採用多張角色圖片,Motion Control 則將參考動作套在靜態圖片中的角色。各模式的控制選項不同,選擇時要看實際任務。

開發者還可使用獨立的 Viggle-Animate 進行角色替換。其 API 規格和價格與一般使用者在 App 中使用 Mix 的條件不同。

適合對象: 想製作角色短片、舞蹈改編或動作範本影片,尤其還需要尋找合適表演的創作者。

主要限制: 如果重點是精修特定鏡頭,範本能調整的部分可能不夠。購買點數前請先確認 Mix、Multi 等模式是否適用;支援多角色也不代表每段複雜的互動都能順利重現。

價格與使用方式: 下表為 Viggle AI 年繳方案,API 用量另計。

方案每月價格(美元)點數
免費$0每日更新
Pro$7.99每月 80 點
Live$15.99每月 200 點
Max$63.99每月 800 點

3. Runway|在現有素材中調整角色

介紹創作工具的 Runway 官網首頁

Runway 適合換角後還要調整畫面其他部分的專案。搭載 Aleph 2.0 的 Edit Studio 可修改現有影片中的人物、物件和背景。你可以先在關鍵影格微調外觀,再將變更套用到整段影片。

服裝、輪廓和站位都能先在單張影格確認。靜態畫面好看並不保證動起來也自然,但你可以在完整算圖前先定下角色造型。

替一小段真人影片換角時,新角色在構圖中的位置可能和臉部一樣重要。影格預覽有助於確認這些細節,適合想親自指導畫面,而不只是選取動作範本的創作者。

目前 Edit Studio 文件介紹的是 Single edit 模式。Multi-edit 和 Expand 標示為即將推出,因此選購時應以目前可用的控制項為準。

適合對象: 想直接在鏡頭中檢查角色造型,再繼續局部編輯的創作者,以及已經使用 Runway 的製作團隊。

主要限制: 編輯影格會多一道工序。如果只是快速製作一系列範本短片,未必需要這麼細的控制。關鍵影格確認後,仍要檢查整段影片的連貫性。

價格與使用方式: 下表為個人方案年繳價格。用 Aleph 2.0 編輯 10 秒影片,光是影片生成就會用到 280 點,生成關鍵影格另計。

方案每月價格(美元)點數
免費$0一次性 125 點
Standard$12每月 625 點
Pro$28每月 2,250 點
Max$76每月 9,500 點

4. Kapwing|在同一個編輯器換角並完成後製

顯示影片創作輸入框的 Kapwing 首頁

Kapwing 適合換角後還有剪輯需求的專案。Kai 能將多份參考素材交給 Seedance 2.5,編輯器則可處理字幕、尺寸調整、片段組接與音訊剪輯。

角色圖片決定外觀,參考影片提供動作,另外的圖片可補充場景或服裝設定。想圍繞新角色重建整個場景時,用不同素材分別指定會比較方便。

Kapwing 示範過以兩份角色設定圖和一段動作參考重現雙人場景。這是多素材換角的例子,但無法據此推算所有雙人場景的成功率,尤其當角色交錯、接觸或互相遮擋時。

生成後,可以在同一個工作區配樂、加字幕並調整成發布所需的長寬比。直接在時間軸加入音軌即可,不必靠生成模型重現整段配樂。

製作系列影片時,可以把生成結果與發布前的版面、音訊調整放在一起處理。

適合對象: 需要換角,並用剪輯工具完成社群影片的個人與小型團隊。

主要限制: 多素材生成也可能改變角色以外的畫面,而且比單張角色圖搭配一段影片需要更多準備。如果已有慣用的剪輯器,部分功能可能重複。

價格與使用方式: 以下付費方案為年繳價格。換角前請先查看所選模型的預估點數。

方案每月價格(美元)點數
免費$010
Pro$16每月 1,000 點
Business$50每月 4,000 點
Enterprise客製報價客製報價

5. WaveSpeed|託管模型與 API 串接

介紹 AI 媒體生成平台的 WaveSpeed 首頁

WaveSpeed 可讓你試用不同託管模型,或把角色生成串接到應用程式。它提供動作控制和物件替換的選項,支援瀏覽器及 API。你可以先用網頁測試,再決定是否值得開發串接。

平台代管多個動作模型,省去逐一安裝的步驟。能接受的輸入、控制選項與生成條件,取決於你選擇的模型和 API 端點。

大量製作時,開發者可設計流程,自動提交核准的角色圖片與來源影片、追蹤任務,再收集輸出檔案。這套批次流程需要自行串接開發。

WaveSpeed 的價值在於模型選擇與程式化生成。字幕、片段排序和成片包裝可能仍要交給製作流程中的其他工具。

適合對象: 需要選擇託管模型,或想透過 API 自動化的開發者、熟悉技術的創作者與團隊。

主要限制: 仍要了解各模型的規格。一個動作控制端點的限制未必適用於其他模型,物件替換和動作轉移的用途也有差異。模型越多,需要評估的選項也越多。

價格與使用方式: Seedance 2.5 Motion Control 依參考影片長度計費,不足一秒進位,以 4 至 30 秒計算。下表為牌價,執行前請確認該次報價。

解析度每秒10 秒影片
480p$0.22$2.20
720p$0.44$4.40
1080p$1.10$11.00

6. Wan-Animate|可自行部署的角色替換模型

Wan-AI 在 Hugging Face 發布的 Wan2.2-Animate-14B 官方模型頁

Wan-Animate 適合想自行管理生成環境的人。Wan2.2-Animate-14B 提供可下載的模型權重和推論程式碼,用於角色動畫與替換。你可以將模型放進自己設定的製作流程中執行。

動畫模式用參考表演帶動角色圖片;替換模式則用於更換影片中的人物。官方提供前處理與推論說明,可用於建置本機或租用 GPU 的環境。

環境建好後,可依團隊需求安排輸入檔、任務佇列與輸出儲存位置,反覆製作時能自行掌控流程。

前處理、環境設定、GPU 容量與輸出管理都需要自行負責,也要有人能排查失敗任務和維護軟體。如果改用託管服務,部分工作由供應商承擔,但價格與限制應分開評估。

適合對象: 有合適運算資源,且確實需要自行維護角色替換流程的技術型創作者或團隊。

主要限制: 如果只想上傳素材並下載成片,自行部署的前置工作較多。模型權重不含剪輯工作區或長期基礎設施支援,處理速度也視設備與工作量而定。

價格與使用方式: 自行部署沒有固定的單支影片價格,成本取決於硬體與算圖時間。

成本項目需考量的費用
模型存取可下載的權重與推論程式碼
運算GPU 租用時間或自有硬體的運作成本
儲存存放權重、參考影片與輸出所需空間

7. Luma|用 Ray3.2 Modify Video 改變實拍表演的風格

顯示創作提示詞輸入框的 Luma 首頁

如果喜歡原本的演技和運鏡,但想改變場景外觀,可以試試 Luma。把實拍素材交給 Ray3.2 Modify Video,再描述新的服裝或場地。例如,演員走進排練室的動作,可以變成穿著戲服走進片場的登場鏡頭。

適合對象: 想改變實拍表演的視覺風格,並允許周圍環境跟著角色一起改變的專案。

主要限制: 風格轉換可能影響整個畫面。如果背景必須維持原樣,請檢查演員移動時輪廓周圍的細節。

價格與使用方式: 下表為 Ray3.2 影片轉影片的基本 SDR 費率,範例是單次生成 5 秒影片的點數。

解析度每秒點數5 秒影片
草稿36180
540p48240
720p72360
1080p144720

8. Kling AI|用 Motion Control 讓靜態角色動起來

Kling AI 英文官網首頁,以船上鋼琴家介紹 Kling 4.0

在 Kling AI 的 Motion Control 中,搭配角色圖片與示範動作的影片。例如要讓角色在台上鞠躬,就選擇拍下完整鞠躬過程的影片,並搭配能看清軀幹的角色圖。直接用表演指定節奏,就不必逐個動作寫提示詞。

適合對象: 已有角色設計,想用實拍表演引導肢體動作的創作者。

主要限制: 圖片需要清楚呈現動作會用到的身體部位。只有臉部特寫時,模型能用來生成全身轉身的細節很有限。

價格與使用方式: 下表為 Kling 3.0 Motion Control 的 API 費率。網頁版會另外顯示該次生成的預估點數。

輸出每秒 API 點數5 秒影片
720p0.94.5
1080p1.26

想用參考影片和角色圖片在同一個平台開始製作,可以參考 DomoAI 的 Genjutsu 替代方案,查看素材輸入方式、範例與可用工具。

最新文章