吉林省松訊信息技術有限責任公司-長(cháng)春軟件(jiàn)定制開(kāi)發-長(cháng)春數據處理

行業(yè)現狀

采集難度較大

數據多(duō)來源于機(jī)器(qì)設備數據、企業(yè)信息化數據和産業(yè)鏈相(xiàng)關數據，包含基礎的數據，結構化行為(wèi)數據以及其他非結構化數據，采集工(gōng)具單一(yī)性導緻無法控制同步應用中的多(duō)個(gè)數據采集系統，采集難度增大

采集精準度低(dī)

采集工(gōng)具爬取多(duō)個(gè)網站時，爬蟲腳本過多(duō)，出現重複勞動的情況；單一(yī)數據采集工(gōng)具無法同時在多(duō)平台實現精準數據采集與運行，數據采集、爬取頻率受到(dào)限制

擴展維護成本較高(gāo)

現有數據采集産品大多(duō)隻面向自(zì)家生(shēng)産的傳感器(qì)等設備，想要重新創建一(yī)個(gè)采集器(qì)，需要後台創建或重新在新的機(jī)器(qì)上(shàng)部署軟件(jiàn)、創建采集器(qì)；開(kāi)發人員(yuán)變動後維護變得很困難，成本高(gāo)

采集設備兼容性差

私有協議無法實現互聯互通(tōng)，各類型傳感器(qì)和數據采集模塊間存在參數、配置、通(tōng)信協議等的異構性，使得數據采集兼容性不高(gāo)

解決方案

靈活采集

基于适配器(qì)模式，可根據需求，進行定制化驅動開(kāi)發，一(yī)個(gè)系統即可控制同步應用中多(duō)個(gè)數據采集系統
精準采集

業(yè)界領先的自(zì)動數據采集技(jì)術(shù)Agent數據采集、網絡爬蟲等，可最大程度提高(gāo)數據采集的絕對精度
高(gāo)擴展性

使用跨平台開(kāi)發框架Qt；添加自(zì)定義驅動或自(zì)定義爬蟲進行擴展、創建新采集器(qì)，滿足不同情況采集需求
多(duō)兼容性

分布式架構，适配器(qì)模式。編寫适應的驅動即可加載到(dào)DCA進行數據采集工(gōng)作，多(duō)DCA串聯滿足不同采集場景

方案優勢

《數據采集》解決方案包括數據采集代理DCA和網絡爬蟲管理工(gōng)具兩部分，其中DCA可采集傳感器(qì)、工(gōng)控機(jī)、PLC、數據庫、主機(jī)等數據，分布式架構進行數據采集，滿足大規模、大範圍數據采集的需求；網絡爬蟲管理工(gōng)具可采集網頁數據。可滿足不同場景下(xià)數據采集：如環境傳感器(qì)的數據采集、能(néng)耗數據采集、大數據采集與分析等，根據應用場景實現定制化擴展。

産品架構

吉佳通(tōng)達數據采集方案具有采集覆蓋面廣、采集方式多(duō)樣、擴展性強等優點。采用TCP方式、UDP方式、串口方式、驅動方式以及爬蟲方式進行數據采集；根據不同需求采集不同網頁數據，包括結構化數據和非機(jī)構化數據，為(wèi)大數據分析計算(suàn)提供數據支持。

應用成效

該解決方案中數據采集代理DCA和網絡爬蟲管理工(gōng)具的應用。數據采集代理DCA采用獨特的适配器(qì)模式，通(tōng)過加載對應的适配器(qì)驅動，可以适配任意通(tōng)信協議，以達到(dào)對各式各樣的數據采集功能(néng)，适應性廣泛。網絡爬蟲管理工(gōng)具可有效解決爬蟲腳本的管理問題：查看(kàn)爬蟲腳本運行情況，是否執行完畢，以及啓動爬蟲腳本。可以通(tōng)過添加自(zì)定義驅動或自(zì)定義爬蟲來進行擴展，滿足不同情況下(xià)數據采集的需求。

相(xiàng)關應用

為(wèi)各行各業(yè)提供不同的數據特色解決方案，幫助用戶在不同應用下(xià)解決不同使用大數據問題

産品-數據采集代理DCA

數據采集

采集難度較大

采集精準度低(dī)

擴展維護成本較高(gāo)

采集設備兼容性差

免費(fèi)報(bào)價