HeyGen 把「你是誰」和「你長什麼樣」拆開,同一個分身橫跨 175 種語言
摘要
錄 15 秒鏡頭前短片,就能得到一個換場景、換衣服、換語言都還站得住的分身。關鍵不在臉做得更好,而在把身份訊號跨幀聚合起來,並且與外觀分開存放。
推薦- 軟體名稱
- HeyGen
- 版本
- 20260916
- 開源
- 非開源
- 作業系統
- Web
- 更新時間
- 2026-10-06 06:56
要做一條出鏡影片,真正吃掉時間的往往不是內容本身,而是那幾件重複的事:架燈、補妝、換三套衣服,再把同一段話對著鏡頭重說一遍。數位人想省掉的正是這一環,但它過去幾年總卡在同一個位置——單看一幀還行,連成一段就露餡:換個背景臉會飄,說長一點口型開始錯位,語種一多更是直接崩。
HeyGen 是這條賽道裡迭代較快的平台之一。它目前主推的 Avatar V 在官方頁面上的說法很直接:錄一段 15 秒的鏡頭前短片,就能得到一個跨場景保持一致的分身,並且能講 175 種以上語言與方言。數位人從「像」到「是」,中間隔的其實就是這句話裡的兩個詞——一致,與跨語言。
數位人好不好用,看的從來不是單幀
Avatar V 官方頁把角色一致性放在第一條能力上,措辭也不繞:一致性是區分「能用的分身」和「噱頭」的那條線。頁面對它的定義是,同一張臉、同一套微表情、同一種氣質,在一段 30 秒短片和一段 10 分鐘課程模組裡都成立,不漂移、不帶偽影、不掉進恐怖谷。

這句話背後是一個技術路線的切換。Avatar V 之前的做法基本是從一張照片出發去驅動一張臉,參考圖只有一幀,模型能拿到的身份資訊就那麼多;Avatar V 改成在整段參考影片的上下文視窗上工作,讓模型自己去挑錄製素材裡資訊量更大的那些時刻。
把身份從外觀裡拆出來
官方頁對新一代模型的解釋是:它把「你是誰」和「你長什麼樣」拆成兩件事。模型學的是你移動、做手勢、表達情緒的具體方式,學到之後這段動作可以被套用到任意一個版本的你身上。落到使用上就是——錄製一次,穿什麼、在哪錄都不重要,之後可以讓分身出現在任意背景、任意服裝、任意造型裡。

具體做法是選擇性注意力:模型從多幀裡提取嘴部幾何、臉部輪廓結構與表情過渡模式這類身份訊號,同時主動壓掉那些姿態、光照或遮擋不佳的幀。這樣聚合出來的身份表示是跨幀、帶時間資訊的。官方把它針對的問題叫身份漂移——單幀條件模型裡參考身份和生成結果會逐漸分叉,而這套做法聲稱不需要額外微調或補充參考輸入就能在場景、機位和長影片時長上維持穩定。
官方給的量化口徑是長影片一致性可穩定超過 30 分鐘,生成時對影片時長與畫質不設上限;訓練則拆成三步:先在同一個場景內學會忠實複製臉部外觀,再跨場景微調去補上背景、光照與姿態分布的差異,最後用帶人類偏好獎勵訊號的強化學習去拉高身份相似度。

Video Agent:一句話出成片,而且渲染後還能改
分身解決的是「你出鏡」這件事,另一條並行的產品線解決的是「片子從哪來」。Video Agent 的用法是一段提示詞直接生成成片,官方強調它不只產出一顆說話的人頭,而是把動態圖形、視覺疊加、說明性動畫與 B-roll 素材一起組織進敘事裡——腳本、配音、畫面、轉場這幾步都在同一次生成裡完成。

更有意思的是可編輯性。官方寫明每一個動態元素在渲染完成之後仍然可編輯:文字、位置、顏色、時間軸、布局,都能在 AI Studio 裡直接改,不需要為了改一行字把整條影片重新渲染一遍。另外它也提供發布前的預覽,可以按場景拆解創意、用自然語言繼續調整。這兩點合起來,才是它和「一次生成、不滿意只能重來」的分野。
影片翻譯換掉的不只是聲音
多語言是數位人最自然的延伸場景,也是 HeyGen 起家時最有辨識度的一塊。官方翻譯頁的流程是:上傳本地影片或貼上一條線上影片連結,選好引擎與目標語種,之後由平台完成翻譯、配音與口型對齊,不需要重拍,也不需要人工對口型。過程中會保留原說話人的音色、口型與表情。

操作層面有一個細節值得記:單次可以選擇最多 10 種語言同時翻譯,也就是說一條母版可以並行鋪開多個語種,而不是一門一門地排隊。品牌側的控制也做了專門設計,升級後的術語表支援強制翻譯、受保護術語與發音校正,可以建術語集合、改譯文,用一段影片生成多個語言版本;影片集合還能配一個多語言播放器,方便直接嵌到頁面或 LMS 裡。
身份驗證不是補丁,而是前置條件
數位人這個品類繞不開信任問題。HeyGen 的做法是把身份驗證放在建立環節最前面:每一個自訂分身都要求被拍攝者本人完成鏡頭前的身份驗證,沒有驗證就沒有分身,被拍攝者提出的刪除請求始終會被執行。內容側則是機器學習掃描加人工複核兩道,官方明確劃出的紅線包括暴力、政治競選與傷害未成年人。
各檔位實際給什麼
免費方案每月可以生成 3 條影片、單條上限 1 分鐘,適合先驗證效果;Creator 每月 29 美元起,把單條時長放開到 30 分鐘、支援 1080p 匯出與聲音複製,語言覆蓋也升到 175 種以上;Pro 每月 49 美元起,主要差別在 4K 匯出與更快的處理速度;Business 每月 149 美元起,增加自訂分身數量、席位管理與協作能力。團隊規模越大,這套按席位加積分的設計越需要提前估算用量。
從產品結構看,HeyGen 把「生成分身」「生成成片」「翻譯本地化」這三件原本分散在不同工具裡的事放進了同一條流水線,這是它相對完整的部分;需要留意的是額度與並發按檔位限制,重資產團隊在選檔前應該先按實際出片頻率算一遍積分消耗。
數位人真正的門檻從來不是單幀像不像,而是跨場景、跨時長、跨語言之後還像不像。Avatar V 把身份從外觀裡拆出來處理,解決的正是一致性;Video Agent 與影片翻譯則把從腳本到多語種成片的路一起補齊。