達摩院人物地點合成算法

達摩院人物地點合成算法是阿里巴巴達摩院(杭州)科技有限公司旗下的深度合成服務算法。該算法套用於圖像生成場景，服務於企業端客戶，根據用戶上傳的個人照片和選定的地點照片，生成在特定地點的“打卡”照片。

2024年6月，國家網際網路信息辦公室發布第六批境內深度合成服務算法備案清單，達摩院人物地點合成算法在列。

基本介紹

• 中文名：達摩院人物地點合成算法
• 備案號：330110507206401240097號
• 角 色：服務技術支持者
• 開發主體：阿里巴巴達摩院(杭州)科技有限公司

算法原理

該算法是一種用於人物地點合成的 AI 生成技術。其基於生成擴散模型技術，人體解析技術，通過對海量成組的人物-地點類風景/打卡照片數據進行預訓練，能夠通過用戶指定大致區域後，自適應地合成一張人物出現在特定地點的“打卡”照片

運行機制

1. 用戶上傳一張個人照片，並且選定一張系統推薦的地點照片，作為輸入；2. 輸入的個人照片經過安全過濾判斷是否通過安全篩選，若不通過則不進行數據生成，直接返回兜底安全結果；3. 模型由一個人體解析子模型和一個人物地點合成模型組成。人體解析子模型用於獲取用戶上傳圖片的人體蒙版和人臉蒙版。人體蒙版經過人物地點合成模型後得到初步的合成結果，然後對人臉區域進行回貼人臉蒙版，並輸出最終的合成結果；4. 輸出數據經過安全過濾判斷是否通過安全篩選，通過則返回結果；5. 將生成的圖片輸出，並根據需要進行後處理，生成的圖像可能需要進行一些修剪、縮放或調整解析度、等操作，以得到該輪互動最終的輸出結果；6. 繼續進行下一輪互動，回到第 1 步。

套用場景

趣味套用，創建虛擬的人物地點的打卡照片。

算法目的

在獲得用戶授權的前提下，用戶上傳自身人體照片，人物地點合成算法能夠將用戶上傳的自身人體照片合成到用戶選定的地點照片上。