白澤(人民中科跨模態視頻搜尋引擎)

白澤，是人民日報社傳播內容認知國家重點實驗室與人民中科共同發布的面向內容安全的跨模態視頻搜尋引擎。

基本介紹

• 中文名：白澤
• 類別：跨模態視頻搜尋引擎

發展歷程

2021年11月24日，人民日報社傳播內容認知國家重點實驗室與人民中科共同發布了面向內容安全的跨模態視頻搜尋引擎——“白澤”。

功能特點

“白澤”搜尋界面

“白澤”引擎，基於跨模態視頻檢索的策略，其跨模態引擎可實現單模態語義理解、多模態信息融合、跨模態語義關聯，補全單一模態信息不足的現狀，打破模態間信息孤島。

“白澤”引擎將文字、圖片、語音和視頻等不同模態信息映射到一個統一特徵表示空間，以視頻為核心，學習多個模態間統一的距離度量，跨越文字、語音、視頻等多模態內容的語義鴻溝，自動關聯多模態間關鍵要素。

在此背景下，“白澤”引擎無需配置傳統內容搜尋所需的複雜匹配規則，通過自然語言描述即可快速檢索出相同語義的視頻，在不需要依賴大規模算力的情況下，有效應對新事件和突發事件，資源復用率高。

此外，面向內容安全，“白澤”結合對境內外多平台內容的檢索，可跨平台實現文本搜圖片、文本搜視頻、圖片搜視頻、視頻搜視頻、圖片搜文字、視頻搜文字等功能。