DINFO

CharlseShan 2016-03-17

展開全文

DINFO-OEC非結構化大數據分析挖掘平臺

是中科鼎富（北京）科技發(fā)展有限公司研發(fā)的大數據產品，具有非結構化文本大數據的分析、挖掘的超凡能力，是企業(yè)實施大數據戰(zhàn)略的強大利器，也是業(yè)界首款完全面向業(yè)務建模的非結構化大數據分析挖掘平臺。DINFO-OEC平臺致力于解決機器學習算法與業(yè)務的自動映射，提供業(yè)務建模與業(yè)務計算能力，幫企業(yè)實現非結構化大數據的落地。

大數據中80%都是非結構化大數據

非結構化大數據因其中的業(yè)務對象、對象之間的關系等都蘊含在文本內容中，而文本內容來源繁多、表達方式靈活多樣、存在著大量的歧義性，因此無法使用傳統(tǒng)的BI工具等進行分析，無法直接服務于業(yè)務，實現業(yè)務價值。所以說非結構化大數據是大數據處理的難點和熱點。

DINFO-OEC非結構化大數據分析挖掘平臺能實現業(yè)務建模，自動調用自然語言處理、深度學習、文本挖掘等算法，對非結構化大數據中進行智能處理，輸出多維度的業(yè)務標簽，將無序的非結構化信息轉換為滿足業(yè)務需求的結構化數據。

DINFO-OEC平臺能處理任何來源的非結構化信息和半結構化信息

來自于互聯(lián)網的社會化媒體信息。
來自于企業(yè)內部的業(yè)務文檔，支持的文檔格式包括：Html網頁、Office系列文檔（doc、docx、ppt、pptx、xls、xlsx）、Txt、Pdf等。
來自于IT系統(tǒng)的機器數據（比如log日志等）。
來自于業(yè)務系統(tǒng)的業(yè)務數據（比如客服工單等）。

DINFO-OEC非結構化大數據分析挖掘平臺的推出應該說填補了業(yè)界的技術空白，其首創(chuàng)的面向業(yè)務的自主業(yè)務建模能力、內置的處于業(yè)界領先水平的概念技術、關聯(lián)計算和統(tǒng)計計算能力以及多語種免編程自動適配能力，使得DINFO-OEC平臺在文本分析挖掘的能力處于業(yè)界領先地位，并且在行業(yè)領域得到了廣泛的認可和成功的應用。

DINFO-OEC非結構化大數據分析挖掘平臺的四大能力

建模能力

中科鼎富獨創(chuàng)的“本體O-要素E-概念C”三位一體的分析挖掘模型，能把紛繁復雜的業(yè)務規(guī)則和靈活多樣的語言表達習慣進行統(tǒng)一建模，從本體、要素和概念三個維度構建分析挖掘模型，有效地將“業(yè)務”描述與自然語言的表達進行分離，使得業(yè)務人員可以專注于自己擅長的業(yè)務需求及業(yè)務規(guī)則的建模，而無需考慮自然語言的歧義性、表達的多樣性和復雜性等。

多算法支持能力

DINFO-OEC平臺支持智慧語義感知算法，提供強大的自然語言理解相關分析算法，包括內容分類、聚類、主題分析、語義分析、實體識別、啟發(fā)式搜索引擎、推薦引擎、摘要引擎等。

DINFO-OEC平臺還內置了強大的分析挖掘算法，包括：

概念計算（C計算）：提供概念的抽取、概念表達式挖掘和概念表達式匹配算法，概念計算是DINFO-OEC平臺獨有的領先計算技術
統(tǒng)計計算（S計算）：開放的架構，除了提供常用的統(tǒng)計挖掘算法，也支持新的算法加入，weka、deep learning、word2vec等算法均可以插件形式加入，而且支持調用IBM SPSS、SAS、TeraData等常用BI工具中的算法
關聯(lián)計算（R計算）：提供概念關聯(lián)發(fā)現算法，支持多種領先的關聯(lián)計算，比如語義關聯(lián)、謂詞計算、概念關聯(lián)和頻繁項集關聯(lián)等，其中的三元組關聯(lián)技術算法目前是業(yè)界領先的算法，提供了對象屬性之間通過評價等概念的關聯(lián)，也就是（對象，屬性，評價）的關聯(lián)計算

多語種支持能力

系統(tǒng)內置了多語種分析挖掘算法：利用一套算法流程，實現多語種支持，語種擴展性好。新增加語種，不用修改算法。
多語種復用的能力：平臺支持多語種業(yè)務規(guī)則保持一致的能力。業(yè)務規(guī)則（對應系統(tǒng)的本體樹）的維護，只需維護中文簡體版，無須維護其他語種的本體樹，大大減少本體樹維護工作量
跨語種建模能力：平臺支持用中文簡體版，書寫其他語種的本體樹規(guī)則。修改、維護本體樹類別，無須掌握其他語種。

臺集成能力

平臺集成能力

支持主流的Hadoop平臺:支持Map/Reduce計算，支持HDFS、Hbase等存取。支持的Hadoop平臺包括Apache Hadoop、IBM BigInsights、華為FusionInsights、EMC Pivotal HD和Cloudera等，并在銀行業(yè)具有成功集成上線經驗。
支持SOA集群架構:支持與Oracle、Mysql、DB2等主力數據庫產品集成。
支持BI工具集成:包括與IBM SPSS/COGNOS、TereData Aster、SAP、SAS和 Oracle等的集成，并支持Spark集成。