力控工業大數據平臺FSpaceX平臺是一套基于Hadoop的,采用分布式架構設計的數據處理及分析平臺。該平臺能夠提供基于多源異構數據采集與存儲,以及數據清洗與過濾、數據倉庫建設、多類型算法應用、綜合分析可視化等功能。力控科技擁有專業的大數據應用團隊,能夠為用戶提供綜合分析相關的業務需求,包括:梳理業務應用、數據采集、數據存儲、數據計算、分析挖掘,及可視化展現的解決方案規劃。在本平臺的應用中,首先需要明確建設目標、設定建設原則,并制定建設方案,最后采用應用本產品進行平臺功能的開發、測試及部署。在平臺產品成功部署后的應用過程中,平臺還能夠將數據與生產痛點進行綜合分析,并通過不斷的學習進化,改善相關的決策模型,為管理者提供科學的優化決策建議。
工業大數據平臺FSpaceX
產品族譜
力控工業大數據平臺FSpaceX隸屬于力控產品家族中的工業互聯網類產品,該產品定位于提供對工業大數據進行處理和分析的平臺,為企業解決從客商到制造等整個產品全生命周期各個環節所產生的各類數據應用痛點問題,以達到提升企業的經濟效益及競爭能力。
產品簡介
產品架構
力控工業大數據平臺FSpaceX的整體架構通常被劃分為三個層次,即:數據工廠、算法引擎,以及數據可視化。數據工廠主要實現異構數據的采集、稽核及存儲,數據采集可實現基于工業通信網關、實時數據庫、關系型業務數據庫等多種異構數據庫數據之上的融合;數據稽核主要是對接收的數據進行校驗,提供性、空值、數據類型及準確性驗證;數據存儲采用HBase、Greenplum、Redis以及其它數據庫組合應用的數據存儲與分析方式,構建分布式存儲架構,可動態增加存儲節點,具有可伸縮、多副本、高容錯、高吞吐量等特性。
算法引擎提供Spark分布式計算框架,基于Hadoop集群實現資源的高效利用, 實現數據實時計算、海量數據分析挖掘的功能。支持機器學習庫MLib,支持包括分類、聚類、協同過濾、降維在內的通知學習算法和工具類。
數據可視化提供了數據集、動靜態值集組件、數據篩選、數據格式轉換等建模功能,并支持拖拽操作、豐富圖表、圖表聯動、上卷下鉆、個性化排版、定時郵件、GIS及多媒體集成等功能。
產品特點
支持OT/IT融合的數據采集
FSpaceX工業大數據平臺支持了市面主流工業協議及通用協議,與平臺或監控系統之間支持工業協議、OPC、MQTT、Rest API等多種靈活的數據鏈接方式。同樣,對數據庫友好性方面,支持與多種數據庫、關系數據庫以及MongoDB/Hbase等NoSQL數據庫的對接。
在數據傳輸方面,支持全量/增量/定時各種數據采集傳輸模式,能夠采用ETL方式接入數據,數據接入過程可以進行清洗和整合等預處理,滿足對原始數據的處理需求。
數據管理與儲存
FSpaceX工業大數據平臺支持對生產流程數據,如:實時數據、設計數據、歷史數據等工業大數據進行高比率壓縮以及高效存儲,以此構建合理的數據存貯模式。數據的存儲和管理采用了高性能的MPP架構,具備完善的全增量數據加載,能夠勝任大規模批量計算、高并發查詢、復雜的自主分析和查詢。此外,還支持秒級數據的實時加載,秒級甚至亞秒級的數據查詢能力。
數據的存儲是隨時間動態變化的,不同類型數據往往不只存儲于一個存儲空間內,而且需要看具體的業務場景和數據價值,比如實時數據不只是在MPP存儲中,也可以在Redis內存中,存儲類型包括Redis內存管理、MPP磁盤存儲、Hadoop文件擴展存儲等。
數據分析與挖掘
針對數據挖掘過程中直接與數據相關的部分,通過應用SEMMA方,將數據挖掘的核心過程分為:抽樣獲取數據、數據探索、數據預處理(數據清洗-去掉臟數據、數據集成-集中、數據變換-規范化、數據規約-精簡)、挖掘建模(分類、聚類、關聯、預測)、模型評價與發布幾個階段。
數據可視化
FSpaceX工業大數據平臺還提供了數據的可視化功能,能夠在此之上進行管理駕駛艙等可視化應用的開發,幫助企業靈活地進行數據分析,洞察業務。
核心優勢
- 可實現異構數據的接入,包括時序、圖像、文件等數據;
- 擁有數據清洗能力,提供多元的數據清洗與處理;
- 支持數據歸檔,基于大數據構建企業數據倉庫及存儲方案;
- 擁有人工智能算法模型,提供面向生產調度優化等智能算法(機器學習、遺傳學等);
- 內置豐富圖表組件,采用可視化工具靈活地進行多維分析;
- 支持私有化部署方案,確保企業內部核心數據資產安全可靠。