美圖數字人驅動算法2

美圖數字人驅動算法2是廈門鴻天創視科技有限公司旗下的深度合成服務算法。該算法套用於數字人視頻生成場景,服務於企業端客戶,根據輸入的文本及人像圖像或視頻,生成數字人形象的視頻。

2024年2月,國家網際網路信息辦公室發布第四批境內深度合成服務算法備案清單,美圖數字人驅動算法2在列。

基本介紹

  • 中文名:美圖數字人驅動算法2
  • 角色:服務技術支持者
  • 開發主體:廈門鴻天創視科技有限公司
  • 備案號:350203289021201230025
算法原理,運行機制,套用場景,算法目的,

算法原理

通過對用戶輸入的照片或視頻進行內容理解,基於內容理解結果將用戶上傳的內容進行藝術化的重新生成,從而自動生成數字人形象。之後通過表情驅動、唇形驅動、人體驅動、人手驅動一些列算法的捕捉,從而達到數字人動作與內容一致的效果。

運行機制

1.用戶需要先上傳合規的圖像或視頻,基於用戶上傳的合規內容,通過人臉屬性檢測模型獲取人物個體的人臉屬性。2.基於獲取的人臉屬性,用戶可以進行一定程度的微調,如:捏臉、換裝等操作,生成數字人形象。3、通過表情驅動、唇形驅動、人體驅動、人手驅動一系列算法的捕捉,從而達到數字人動作與視頻內容或用戶直拍內容一致的效果,用以生成視頻或視頻流。4.基於風險審核模型,過濾並攔截不合規的生成內容,保證生成的作品的安全性。

套用場景

DreamAvatar

算法目的

該算法主要用於提升用戶對於創意生產的使用體驗,實現功能主要為用戶輸入照片或視頻後後,生成數字人形象,為用戶提供更高效、優質的趣味玩法體驗。

相關詞條

熱門詞條

聯絡我們