基本介紹
- 中文名：阿里雲視覺智慧型開放平台圖像修復生成算法
- 算法類型：生成合成類(深度合成)
- 算法備案主體：通義雲啟（杭州）信息技術有限公司(曾用名：杭州耘點科技有限公司)
- 備案主體角色：服務技術支持者
- 算法備案編號：網信算備330106003156001240033號
算法簡介,算法原理,運行機制,套用場景,算法目的,
算法簡介
“阿里雲視覺智慧型開放平台圖像修復生成算法”套用於圖像生成場景，服務於企業端客戶，修復或提升用戶上傳圖像的畫質，生成新圖像。
2024年4月，“阿里雲視覺智慧型開放平台圖像修復生成算法”已履行備案手續。
算法原理
基於生成式大模型，阿里雲圖像修復生成算法能夠自動分析多種類型的輸入圖像，顯著提升輸出圖像畫質，尤其適合小尺寸圖像和低質量圖像的處理修復，把圖像細節拉滿，使圖像變得更加清晰。提出一種pixel-aware的注意力機制強化ControlNet對於像素級信息的感知，利用Stable Diffusion的生成式模型實現對低清晰度輸入圖片的修復，輸出圖片具有更加真實、更自然的細節生成能力。
運行機制
給定輸入的低清晰度圖片，Degradation Removal模組會先進行對噪聲、模糊等降質因素進行基礎的去除，輸出結果通過ControlNet分支後通過pixel-aware的注意力融合到Stable Diffusion的UNet網路中進行疊代去噪，最終通過Decoder將潛空間特徵解碼為RGB高清晰度圖片。
套用場景
1.老舊圖片的修復：存量的老舊影視資源往往存在較為嚴重的質量問題，不符合現階段的觀影需求，運用本技術可以實現質的提升，使老舊圖片煥發新生。
2.影視製作：在影視製作中，因為拍攝條件的限制，新增的拍攝圖片總是會存在各類質量問題，包括但不限於模糊、噪聲等等。本技術可以將這些圖片的質量進行提升，有效降低了二次拍攝成本，提升觀影體驗。
3.娛樂性個人拍攝製作：用戶可以將自己拍攝的圖片通過本技術進行清晰度的提升，達到更加優秀的觀看效果。
算法目的
本算法的目的是幫助用戶便捷地提升圖片的質量，提供更佳的視覺效果。特別是通過修復老舊照片，可以幫助人們找回記憶，增進感情。
本服務也會在合成結果的左下角處添加“Generated by AI”的水印內容，效果如備案示意圖所示。
