現在很多人都會使用 AI 生成影片，不過現在 AI 生成出的影片有時人物無法保持一致性，常常生成到最後影片中的人物就長不一樣了。中國字節跳動近日宣布一款人類動畫框架「DreamActor-M1」，DreamActor-M1 只需要一張圖片和一段影片，就能將圖片中的人物替換的影片中，讓人物擁有像真人的動作行為，且生成出的影片能夠全程保持人物特徵和一致性。
只需一張圖片與影片！DreamActor-M1 框架打造連貫自然的人體動作動畫
現在圖片生成和影片生成玩法更多，你能夠使用圖片生成工具生成一個人物，再使用圖片生成工具讓人物變的可動。不過現在的生成技術還不太穩定，常常發生圖片轉影片後人物外觀特徵不一致、動作不連貫、生成出的人物動作不像真人等等的問題。中國字節跳動團隊提出基於 Dit 的人物動畫框架「DreamActor-M1」，DreamActor-M1 能夠根據使用者提供的文字、動作提示或靜態姿勢等資料來合成自然連貫的人體動作動畫。
DreamActor-M1 除了能夠生成出自然連貫的人體動作以外，同時還能確保生成出的人物保持臉部特徵、外觀的一致性。嘴巴大開、微笑、皺眉等等的動作都能保持人物本身的外貌。
不管是全身還是半身的動作影片都能保留整體特徵，不會出現面部表情或身體動作崩壞的問題。DreamActor-M1 有提供自家與其他動作框架的對比，大家可以看看效果：
有了 DreamActor-M1 框架，使用者只需要拍一段動作影片，接著套上生成的人物圖片就可以完成一段影片作品。DreamActor-M1 也提供錄音檔驅動的臉部動畫，讓使用者可以為自己創作的人物進行多語言口型同步的效果。
對 DreamActor-M1 感興趣的朋友可以前往 DreamActor-M1 介紹網頁瞭解更多有關該框架的詳細介紹：