八爪魚採集器

八爪魚採集器(軟著登字00547832號，2014SR149170)是深圳數闊信息技術有限公司研發的一款業界領先的網頁採集軟體，具有使用簡單，功能強大等諸多優點。

基本介紹

• 軟體名稱：八爪魚採集器 
• 軟體平台：windows 
• 最近更新時間：2021年6月23日 
• 軟體語言：JavaScript ，C# 
• 開發商：深圳數闊信息技術有限公司
• 軟體版本：版本：8.3.2  
• 軟體大小：56.2 MB 
• 創始人：劉寶強 

簡介

八爪魚採集器是一款全網通用的網際網路數據採集器，模擬人瀏覽網頁的行為，通過簡單的頁面點選，生成自動化的採集流程，從而將網頁數據轉化為結構化數據，存儲於EXCEL或資料庫等多種形式。並提供基於雲計算的大數據云採集解決方案，實現數據採集。是數據一鍵採集平台。

八爪魚採集器以分散式雲計算平台為核心，結合智慧型識別算法，可視化的操作界面。從不同的網站或者網頁獲取標準化數據。幫助需要從網頁獲取信息的客戶，數據自動化標準化採集、導出，提高效率。

八爪魚採集器作為數據收集工具，服務於國內企業/單位。是一個四種語言版本的採集軟體，覆蓋漢語，英語，日語，西班牙語。

產品功能

01. 採集全行業、全場景、全類型數據

操作界面

採集可存儲的任務數無上限，實現全行業、全場景、全類型的網際網路數據採集。

全行業:電商、新聞、社交媒體、招投標、金融、房產等全行業的網際網路數據採集。行業網站已做好可用的模板。

全場景:列表頁、詳情頁、搜尋頁、瀑布流頁、登錄、多層點擊、下拉框、IP切換、驗證碼自動識別等場景採集。

全類型:支持文字、連結、圖片、視頻、音頻、Html源碼、Json格式等多種數據類型的採集。

02. 高速採集大規模數據

使用高性能的雲服務集群，提供多節點高並發採集能力，能夠完成大規模數據的採集。

高性能:企業版可使用獨立的、高性能的雲服務集群，無需排隊即可開始數據採集。

快速度:提供30/100雲節點高並發採集能力，能完成大規模數據的採集。如果當前雲節點不夠用，還可擴容。

03. 實時採集新增數據

支持設定靈活的定時採集策略+多節點高並發採集+自動去重/條件觸發等功能，實時採集各個數據源的新增數據。

定時採集策略:按照網站更新頻率和單次更新數據量，設定合理的定時策略，支持極高頻率的定時。同時相同更新頻次的網站可歸為一組，進行分組定時。

多節點高並發:根據定時策略，將賬號內的雲節點合理分配給數據源，以完成每個數據源新增數據的採集。

自動去重/條件觸發:新採集到的數據自動與原來採集到的數據對比去重和設定採集觸發條件，滿足條件的數據才會被採集，實現採集新增數據。

04. 提供API接口，採集結果同步

提供高負載高吞吐的API接口，可將採集結果秒級同步到企業資料庫或內部系統中。除了API外，提供自動入庫功能。

數據導出API:提供高負載吞吐靈活的API接口，支持邊採集邊導出，將採集結果同步數據到企業的資料庫或內部系統中。

自動入庫:除了API調用數據外，還提供數據自動入庫功能，幾步設定即可實現數據自動入庫。

任務控制API:提供任務控制API接口，無需啟動客戶端即可控制任務啟停、修改任務參數。

05. 支持SaaS版本與私有化部署版本

提供線上SaaS版本的軟體服務，下載客戶端即可使用。同時支持將整套採集系統部署到企業本地，搭建企業自己的大數據採集系統。

線上SaaS版本:在官網下載客戶端，登錄賬號後即可使用。軟體的各項功能與官網實時同步更新，使用過程中需聯網運行。

採集任務與數據均存儲在雲端伺服器，可隨時查詢、導出，或運行新的採集任務。

私有化部署版本:企業私有化部署，可部署在隔離區域網路環境。提供定製化部署方案，滿足多種數據安全級別。支持軟體OEM，去除八爪魚Logo，定製品牌Logo，突出品牌信息。

支持永久授權，區別於線上SaaS版按使用時長付費，私有化部署版一次授權，終身使用。

涵蓋線上版本的全部功能。 具備多種管理許可權：伺服器集群資源管理、用戶許可權管理、任務調配管理，數據監控管理。 具備各種數據API和SDK接口。

支持二次開發，除成熟的採集功能外，還提供二次開發服務，包括但不限於系統集成、數據清洗、數據全文檢索、數據可視化展示和數據分析套用。

產品服務

全流程一對一服務

在合作的全流程中為用戶提供一對一服務，幫助掌握八爪魚相關技能，推進項目上線。

售前測試

售前客戶經理一對一與用戶確認採集需求、協助製作採集任務、測試採集效果、評估項目工作量等。

線上培訓

提供一對一的個性化線上培訓課程，幫助客戶和客戶的團隊掌握八爪魚相關技能，推進項目上線。

售後支持

客戶經理為您提供一對一的售後支持，解決問題、為用戶最佳化採集任務、回響用戶需求。