大數據智慧型採集平台

大數據智慧型採集平台

大數據智慧型採集平台是一種用於計算機科學技術領域的計算機及其配套設備,於2016年12月12日啟用。

基本介紹

  • 中文名:大數據智慧型採集平台
  • 產地:中國
  • 學科領域:計算機科學技術
  • 啟用日期:2016年12月12日
  • 所屬類別:計算機及其配套設備 > 數據採集及工作站 > 數據採集及工作站
技術指標,主要功能,

技術指標

支持政府部門中社會信用數據採集:如與企業相關的工商、稅務證照、納稅等數據; 支持政府部門中跨行業信用數據採集:如建築行業中建委的質量數據,電梯行業中質檢局的質檢數據; 支持跨區域的公共資源交易平台或大數據中心的社會信用及投標信用等相關數據採集; 支持政府採購管理過程中的各種結構化信息(如:關係資料庫、XML等); 支持自定義採購信息接入標準,支持多種不同的採購套用接入模式; 支持政府採購中心的招投標檔案採集,包括WORD、PDF、圖片形式的文檔; 支持銀行信用報告檔案採集,包括紙質檔案、PDF或圖片檔案等; 支持多種非結構化數據類型:WORD、EXCEL、TXT、CSV、圖片等; 實現文檔去重,能夠快速準確地判斷與政府採購文本或資料庫中是否存在相同或相似內容的記錄,同時找出所有的重複記錄; 支持網上資源採集,如各行業的相關資質要求; 支持通過網路採集政府採購信用領域相關數據,建立網路內容採集規則; 支持對政府採購信用相關網站進行信息採集(如企業資質數據、圖片、文檔、等)、收集、採集,進行網站複製、拷貝,進行業務信息整合、資源整合。

主要功能

實現採集、提取個人信用、商業信用、金融信用、政府信用等相關的結構化和非結構化的基礎信用數據,包括:來自政府內部各業務系統的信用數據、來自外部業務系統的信用數據、套用網路爬蟲技術對政府採購信息相關數據進行採集的非結構化數據。 一、網路爬蟲 任務制定,根據業務需要定製業務資料庫的採集任務; 運行監控,實時監控數據採集情況; 數據預覽,預覽採集獲取的相關信息。 二、結構化採集 DB採集任務,制定任務用於抽取遠程資料庫數據信息; 運行監控,實時監控數據採集情況; 數據預覽,預覽採集獲取的相關信息。

相關詞條

熱門詞條

聯絡我們