moD企業(yè)信息化的基石

OMDT－企業(yè)信息化的基石單位：時間：MODT－企業(yè)信息化的基石單位:北京芳草元源數(shù)據(jù)技術有限公司一、企業(yè)信息系統(tǒng)現(xiàn)狀二、傳統(tǒng)思維的企業(yè)信息系統(tǒng)集成（傳統(tǒng)思維集成）

三、互聯(lián)網(wǎng)＋思維的信息系統(tǒng)集成（新思維集成）四、MODT在企業(yè)信息系統(tǒng)集成中的作用五、芳草MODT的特點六、MODT和傳統(tǒng)的數(shù)據(jù)倉庫的比較MODT－企業(yè)信息化的基石一、企業(yè)信息系統(tǒng)現(xiàn)狀經(jīng)過幾十年的建設，多數(shù)企業(yè)都建立了適合企業(yè)生產(chǎn)和管理的信息系統(tǒng)，如：CAD、CAM、CAPP、CAE、PDM、ANSYS、MES等工業(yè)生產(chǎn)軟件，和OA、ERP、CRM、HR等工業(yè)管理軟件，這些信息系統(tǒng)在企業(yè)的生產(chǎn)、加工、實驗、工藝、模型、標準、規(guī)范、圖紙、產(chǎn)品知識庫、人力資源、財務、技術、辦公等領域，發(fā)揮了重大作用。一、企業(yè)信息系統(tǒng)現(xiàn)狀門戶安全CAD數(shù)據(jù)1CAE數(shù)據(jù)3CAM數(shù)據(jù)2MES數(shù)據(jù)4HR數(shù)據(jù)6ERP數(shù)據(jù)5OA數(shù)據(jù)7……其它硬件網(wǎng)絡計算機輔助設計計算機輔助制造計算機輔助工程制造機制企業(yè)資源計劃人力資源辦公現(xiàn)存信息系統(tǒng)結構圖一、企業(yè)信息系統(tǒng)現(xiàn)狀企業(yè)現(xiàn)有信息系統(tǒng)的困惑系統(tǒng)開發(fā)、上線時間各異各業(yè)務系統(tǒng)開發(fā)商不同1、各業(yè)務系統(tǒng)獨立采用的技術、方案各有所長采集的數(shù)據(jù)分別標識各業(yè)務信息系統(tǒng)的數(shù)據(jù)標識不統(tǒng)一各業(yè)務信息系統(tǒng)分別采集數(shù)據(jù)一、企業(yè)信息系統(tǒng)現(xiàn)狀企業(yè)現(xiàn)有信息系統(tǒng)的困惑2、數(shù)據(jù)重復采集

數(shù)據(jù)標識不一致數(shù)據(jù)或沒有標準，或標準不統(tǒng)一提供支持服務的公司不相同

一、企業(yè)信息系統(tǒng)現(xiàn)狀企業(yè)現(xiàn)有信息系統(tǒng)的困惑技術方案及軟件不一致3、互聯(lián)共享遇到瓶頸一、企業(yè)信息系統(tǒng)現(xiàn)狀二、傳統(tǒng)思維的企業(yè)信息系統(tǒng)集成（傳統(tǒng)思維集成）

三、互聯(lián)網(wǎng)＋思維的信息系統(tǒng)集成（新思維集成）四、MODT在企業(yè)信息系統(tǒng)集成中的作用五、芳草MODT的特點六、MODT和傳統(tǒng)的數(shù)據(jù)倉庫的比較MODT－企業(yè)信息化的基石二、傳統(tǒng)思維的企業(yè)信息系統(tǒng)集成（傳統(tǒng)思維集成）1、現(xiàn)行信息系統(tǒng)集成的思路現(xiàn)行的企業(yè)信息系統(tǒng)的集成，大多是“上下整合”的思路。“上整合”

“下整合”

是通過云計算技術，把企業(yè)信息系統(tǒng)所需要的硬件設備和基礎軟件整合起來，減少通用軟硬件的重復，降低投資成本，在硬件、網(wǎng)絡和基礎軟件方面，實現(xiàn)了有效統(tǒng)一。是企業(yè)應用信息系統(tǒng)層面的整合，通過在各應用信息系統(tǒng)之上搭建平臺，實現(xiàn)各業(yè)務信息系統(tǒng)的協(xié)同。二、傳統(tǒng)思維的企業(yè)信息系統(tǒng)集成（傳統(tǒng)思維集成）2、現(xiàn)行信息系統(tǒng)集成方案圖門戶安全其它網(wǎng)絡CAD數(shù)據(jù)1CAE數(shù)據(jù)3CAM數(shù)據(jù)2MES數(shù)據(jù)4HR數(shù)據(jù)6ERP數(shù)據(jù)5OA數(shù)據(jù)7……計算機輔助設計計算機輔助制造計算機輔助工程制造機制企業(yè)資源計劃人力資源辦公云計算平臺整合平臺二、傳統(tǒng)思維維的企業(yè)信息息系統(tǒng)集成（（傳統(tǒng)思維集集成）3、現(xiàn)行信息系系統(tǒng)集成方案案的困惑（主主要來自上整整合）應用系統(tǒng)多且且復雜，梳理理難度大原信息系統(tǒng)開開發(fā)單位多，，協(xié)調(diào)有難度度原信息系統(tǒng)數(shù)數(shù)據(jù)標識不致致，統(tǒng)一難度度大整合工作量大大資金需求大（（一般都在1000萬以上，或更更多）有可能將原信信息系統(tǒng)推倒倒重來一、企業(yè)信息息系統(tǒng)現(xiàn)狀二、傳統(tǒng)思維維的企業(yè)信息息系統(tǒng)集成（（傳統(tǒng)思維集集成）三、互聯(lián)網(wǎng)＋＋思維的信息息系統(tǒng)集成（（新思維集成成）四、MODT在企業(yè)信息系系統(tǒng)集成中的的作用五、芳草MODT的特點六、MODT和傳統(tǒng)的數(shù)據(jù)據(jù)倉庫的比較較MODT－企業(yè)信息化化的基石1、新思維集成成思路互聯(lián)網(wǎng)＋思維維的企業(yè)信息息系統(tǒng)的集成成，即新思維集成成的思路是：：“下下整合”。第二個“下整合”第一個“下整合”

與傳統(tǒng)思維的的集成基本相相同，是通過過云計算技術，把企業(yè)信息息系統(tǒng)所需要要的硬件設備和基礎軟件整合起來。是企業(yè)應用信息息系統(tǒng)層面的整合，但是是，整合的不不是各業(yè)務信信息系統(tǒng)，而而是支撐業(yè)務務信息系統(tǒng)的的元數(shù)據(jù)。通過統(tǒng)一定定義標識各應應用信息系統(tǒng)統(tǒng)的元數(shù)據(jù)，實現(xiàn)各各業(yè)務信息系系統(tǒng)的協(xié)同。。三、互聯(lián)網(wǎng)＋＋思維的信息息系統(tǒng)集成（（新思維集成成）三、互聯(lián)網(wǎng)＋＋思維的信息息系統(tǒng)集成（（新思維集成成）2、新思維集成成方案框架圖圖網(wǎng)絡門戶安全其它CAD數(shù)據(jù)1CAE數(shù)據(jù)3CAM數(shù)據(jù)2MES數(shù)據(jù)4HR數(shù)據(jù)6ERP數(shù)據(jù)5OA數(shù)據(jù)7……計算機輔助設計計算機輔助制造計算機輔助工程制造機制企業(yè)資源計劃人力資源辦公MODTAPPAPPAPPAPPAPPAPPAPPAPPAPP……CPS云計算平臺門戶安全CAD數(shù)據(jù)1CAE數(shù)據(jù)3CAM數(shù)據(jù)2MES數(shù)據(jù)4HR數(shù)據(jù)6ERP數(shù)據(jù)5OA數(shù)據(jù)7……其它硬件網(wǎng)網(wǎng)絡計算機輔助設計計算機輔助制造計算機輔助工程制造機制企業(yè)資源計劃劃人力資源辦公現(xiàn)存信息系統(tǒng)統(tǒng)結構圖（信信息系統(tǒng)沒有有集成）現(xiàn)行信息系統(tǒng)統(tǒng)集成方案圖圖門戶安全其它網(wǎng)絡CAD數(shù)據(jù)1CAE數(shù)據(jù)3CAM數(shù)據(jù)2MES數(shù)據(jù)4HR數(shù)據(jù)6ERP數(shù)據(jù)5OA數(shù)據(jù)7……計算機輔助設計計算機輔助制造計算機輔助工程制造機制企業(yè)資源計劃人力資源辦公云計算平臺整合平臺三、互聯(lián)網(wǎng)＋＋思維的信息息系統(tǒng)集成（（新思維集成成）3、新思維集成成方案的特點點1234將信息系統(tǒng)的的集成內(nèi)容由由系統(tǒng)整合轉(zhuǎn)轉(zhuǎn)為數(shù)據(jù)整合合將集成路徑由由“上整合”轉(zhuǎn)為“下整合”新思維集成方方案的核心部部分由：云計算、CPS、MODT、原業(yè)務系統(tǒng)統(tǒng)、創(chuàng)新APP、門戶等六部分組成成。將數(shù)據(jù)集成方方式分為兩層層：自動化層層和信息化層層自動化層由CPS（信信息物理系統(tǒng)統(tǒng)）統(tǒng)一完成成信息化層由OMDT（（源元數(shù)據(jù)））統(tǒng)一完成三、互聯(lián)網(wǎng)＋＋思維的信息息系統(tǒng)集成（（新思維集成成）4、新思維集成成與傳統(tǒng)思維維集成的比較較1234保留了企業(yè)的的原信息系統(tǒng)統(tǒng)，避免推倒倒重來給企業(yè)業(yè)生產(chǎn)管理帶帶來的損失統(tǒng)一了企業(yè)自自動化層面和和信息化層面面的數(shù)據(jù)，加加快了企業(yè)信信息系統(tǒng)集成成的進度適度內(nèi)部開放放的企業(yè)基礎礎數(shù)據(jù)，使企企業(yè)新系統(tǒng)開開發(fā)更便捷，，使基于互聯(lián)聯(lián)網(wǎng)＋的應用用開發(fā)成為可可能。企業(yè)原信息系系統(tǒng)的整合，，和新信息系系統(tǒng)的開發(fā)成成本，將大幅幅度降低。（（1000萬以下）一、企業(yè)信息息系統(tǒng)現(xiàn)狀二、傳統(tǒng)思維維的企業(yè)信息息系統(tǒng)集成（（傳統(tǒng)思維集集成）三、互聯(lián)網(wǎng)＋＋思維的信息息系統(tǒng)集成（（新思維集成成）四、MODT在企業(yè)信息系系統(tǒng)集成中的的作用五、芳草MODT的特點六、MODT和傳統(tǒng)的數(shù)據(jù)據(jù)倉庫的比較較MODT－企業(yè)信息化化的基石四、OMDT在企業(yè)信息系系統(tǒng)集成中的的作用1、MODT是什么？MODT―――MetaOriginalDaTa，元源數(shù)據(jù)其中：◆MetaDaTa，元數(shù)據(jù)，是是對原始數(shù)據(jù)據(jù)進行解釋的的數(shù)據(jù)◆MODT，元源數(shù)據(jù)，專指對原始數(shù)據(jù)的統(tǒng)統(tǒng)一資源描述述通俗地講：◆MODT，包含元數(shù)據(jù)，或原始數(shù)據(jù)的數(shù)據(jù)字典可以表征原始始數(shù)據(jù)四、MODT在企業(yè)信息系系統(tǒng)集成中的的作用2、OMDT在信息信息系系統(tǒng)集成中的的作用解決了數(shù)據(jù)統(tǒng)統(tǒng)一的標識問題解決了數(shù)據(jù)統(tǒng)一采集的方方法創(chuàng)新了企業(yè)信信息系統(tǒng)集成成的思路降低了企業(yè)信信息系統(tǒng)集成成的成本加快了企業(yè)實實現(xiàn)智慧車間間、智慧工廠的進程MODT在信息信息系統(tǒng)集成中的的作用為企業(yè)適應互互聯(lián)網(wǎng)＋的工工業(yè)生產(chǎn)環(huán)境境，提供了轉(zhuǎn)型和和創(chuàng)新發(fā)展的的數(shù)據(jù)支撐一、企業(yè)信息息系統(tǒng)現(xiàn)狀二、傳統(tǒng)思維維的企業(yè)信息息系統(tǒng)集成（（傳統(tǒng)思維集集成）三、互聯(lián)網(wǎng)＋＋思維的信息息系統(tǒng)集成（（新思維集成成）四、MODT在企業(yè)信息系系統(tǒng)集成中的的作用五、芳草MODT的特點六、MODT和傳統(tǒng)的數(shù)據(jù)據(jù)倉庫的比較較MODT－企業(yè)信息化化的基石五、芳草MODT的特點芳草MODT是北京芳草元源數(shù)據(jù)技技術有限公司，根據(jù)據(jù)“海量非結構構化數(shù)據(jù)管理理標準”，開發(fā)的適應應企業(yè)信息系系統(tǒng)集成在源源數(shù)據(jù)采集、、定義、分類類、管理方面面的軟件產(chǎn)品品。該系統(tǒng)實現(xiàn)對對多源異構數(shù)數(shù)據(jù)的統(tǒng)一集集成管理，支支持海量多源源異構數(shù)據(jù)上上的查詢分析析，分別經(jīng)過過合成數(shù)據(jù)集集和真實數(shù)據(jù)據(jù)集的測試，，是國家863項目的成果之之一。1、芳草MODT五、芳草MODT的特點2、芳草MODT的系統(tǒng)架構（（一）由原始數(shù)據(jù)抽抽取元數(shù)據(jù)并上傳傳數(shù)據(jù)集成服務器數(shù)據(jù)校驗、填填充度檢查，數(shù)據(jù)解解析元數(shù)據(jù)管理系統(tǒng)數(shù)據(jù)加載和導入原始數(shù)據(jù)存放放于源系統(tǒng)數(shù)據(jù)訪問接口口數(shù)據(jù)訪問接口口數(shù)據(jù)訪問接口口數(shù)據(jù)訪問接口口五、芳草OMDT的特點2、芳草OMDT的系統(tǒng)架構（（二）查詢請求查詢結果匯總總分布式查詢引引擎原始數(shù)據(jù)存放放于源系統(tǒng)數(shù)據(jù)訪問接口口數(shù)據(jù)訪問接口口元數(shù)據(jù)管理系統(tǒng)子節(jié)點維護概要圖和統(tǒng)計計信息訪問請求/結果五、芳草MODT的特點3、芳草MODT的技術方案（（一）使用元數(shù)據(jù)描述異構的原始數(shù)數(shù)據(jù)元數(shù)據(jù)格式：：xmlDTD對異構的原始始數(shù)據(jù)進行統(tǒng)統(tǒng)一的資源描描述規(guī)范原始數(shù)據(jù)的類類型視頻、文本、、網(wǎng)頁、圖片片、傳感器數(shù)數(shù)據(jù)等原始數(shù)據(jù)的存存儲管理方案案關系型(mysql,oracle等)非關系型(hadoop,hive,spark等)五、芳草MODT的特點3、芳草MODT的技術方案（二）基于元數(shù)據(jù)的的多源異構數(shù)數(shù)據(jù)集成方案元數(shù)據(jù)抽取源系統(tǒng)主動抽抽取觸發(fā)器日志解析被動抽取數(shù)據(jù)訪問接口口五、芳草MODT的特點3、芳草MODT的技術方案（二）基于元數(shù)據(jù)的的多源異構數(shù)數(shù)據(jù)集成方案案元數(shù)據(jù)集成使用數(shù)據(jù)上傳傳工具--定時上傳、數(shù)數(shù)據(jù)更新時上上傳自動校驗、解解析、加載五、芳草MODT的特點3、芳草MODT的技術方案（三）面向海量數(shù)據(jù)據(jù)的分布式查查詢系統(tǒng)五、芳草MODT的特點4、芳草MODT的特色（一））對多源異構數(shù)數(shù)據(jù)的支持存儲在不同地地域、不同數(shù)數(shù)據(jù)管理系統(tǒng)統(tǒng)的數(shù)據(jù)不同領域、不不同結構的數(shù)數(shù)據(jù)元數(shù)據(jù)自動集集成上傳、校驗、、解析、加載載和管理五、芳草MODT的特點4、芳草MODT的特色（二））良好的可擴展展性數(shù)據(jù)規(guī)模系統(tǒng)集群松耦合式的數(shù)數(shù)據(jù)管理不改變原始數(shù)數(shù)據(jù)無需拷貝原始始數(shù)據(jù)數(shù)據(jù)加載時間間短五、芳草MODT的特點5、芳草MODT的性能（一））數(shù)據(jù)集成系統(tǒng)統(tǒng)：安全性不改變原始數(shù)數(shù)據(jù)各源系統(tǒng)自定定義并實現(xiàn)原原始數(shù)據(jù)訪問問接口集成效效率數(shù)據(jù)上上傳--網(wǎng)絡帶帶寬數(shù)據(jù)解解析--多線程程+定時器器數(shù)據(jù)加加載--使用HTTP協(xié)議五、芳芳草MODT的特點點5、芳草MODT的性能能（二））分布式式查詢詢引擎擎：容錯性性--系統(tǒng)的的可用用性元數(shù)據(jù)據(jù)分布布式存存儲于于集群群的HDFS，數(shù)據(jù)據(jù)自動動備份份集群中中子節(jié)節(jié)點的的維護護（新新增、、刪除除、狀狀態(tài)監(jiān)監(jiān)控））存儲能能力目前系系統(tǒng)管管理10億條真真實web元數(shù)據(jù)據(jù)分布式式查詢詢引擎擎支持持TB級別元元數(shù)據(jù)據(jù)的查查詢分分析檢索效效率精準搜搜索0.1s內(nèi)五、芳芳草MODT的特特點點6、芳芳草MODT的部部署署環(huán)環(huán)境境8~20個個機器器節(jié)點點，，其其中中一一個個master節(jié)節(jié)點點，，其其余余為為slave節(jié)節(jié)點點。。Master節(jié)節(jié)點點起起到到協(xié)協(xié)調(diào)調(diào)調(diào)調(diào)配配作作用用，，不不作作為為存存儲儲數(shù)數(shù)據(jù)據(jù)的的節(jié)節(jié)點點。。下下面面是是單單個個節(jié)節(jié)點點的的硬硬件件和和軟軟件件配配置置。。硬件件配配置置：：CPU：：Intel(R)Core(TM)2DuoCPUT7700@2.40GHz;處處理理器器：：4核;內(nèi)內(nèi)存存：：32GB;硬硬盤盤：：720GB軟件件環(huán)環(huán)境境：：操作作系系統(tǒng)統(tǒng)：：CentOS6.4；；Hive1.1.0;Presto0.6.2;FusionDB1.0一、、企企業(yè)業(yè)信信息息系系統(tǒng)統(tǒng)現(xiàn)現(xiàn)狀狀二、、傳傳統(tǒng)統(tǒng)思思維維的的企企業(yè)業(yè)信信息息系系統(tǒng)統(tǒng)集集成成（（傳傳統(tǒng)統(tǒng)思思維維集集成成））三、、互互聯(lián)聯(lián)網(wǎng)網(wǎng)＋＋思思維維的的信信息息系系統(tǒng)統(tǒng)集集成成（（新新思思維維集集成成））四、MODT在企企業(yè)業(yè)信信息息系系統(tǒng)統(tǒng)集集成成中中的的作作用用五、、芳芳草MODT的特特點點六、MODT和傳傳統(tǒng)統(tǒng)的的數(shù)數(shù)據(jù)據(jù)倉倉庫庫的的比比較較MODT－企企業(yè)業(yè)信信息息化化的的基基石石五、、芳芳草MODT的特特點點六MODT和傳傳統(tǒng)統(tǒng)的的數(shù)數(shù)據(jù)據(jù)倉倉庫庫的的比比較較數(shù)據(jù)據(jù)倉倉庫庫1.面向向主主題題：：針針對對某某一一種種業(yè)業(yè)務務就就要要建建立立一一個個數(shù)數(shù)據(jù)據(jù)倉倉庫庫。。不能能快快速速適適應應變變化化，，傳傳統(tǒng)統(tǒng)的的數(shù)數(shù)據(jù)據(jù)倉倉庫庫業(yè)務務主題題是是較較少少變變化化的的，，其其應應對對變變化化的的方方式式是是對對數(shù)數(shù)據(jù)據(jù)源源到到前前端端展展現(xiàn)現(xiàn)的的整整個個流流程程中中的的每每個個部部分分進進行行修修改改，，然然后后重重新新加加載載數(shù)數(shù)據(jù)據(jù)，，甚甚至至重重新新計計算算數(shù)數(shù)據(jù)據(jù)，，導導致致其其適適應應變變化化的的周周期期較較長長。因因此此在大大數(shù)數(shù)據(jù)據(jù)時時代代，，分分析析處處在在變變化化的的業(yè)業(yè)務務環(huán)環(huán)境境中中，，數(shù)據(jù)據(jù)倉倉庫庫的的模式式將將難難以以適適應應新新的的需需求求數(shù)據(jù)據(jù)大大量量重重復復，，不不同同的的業(yè)業(yè)務務系系統(tǒng)統(tǒng)要要有有自自己己的的一一些些數(shù)數(shù)據(jù)據(jù)倉倉庫庫，，在在很很多多的的業(yè)業(yè)務務的的數(shù)數(shù)據(jù)據(jù)倉倉庫庫中中的的數(shù)數(shù)據(jù)據(jù)有有很很多多的的重重復復。。五、芳草MODT的特點MODT和傳統(tǒng)的的數(shù)據(jù)倉倉庫的比較數(shù)據(jù)倉庫庫2.數(shù)據(jù)遷移移代價大大：在數(shù)據(jù)源源層和分分析層之之間引入入一個存存儲管理理層，可可以提升升數(shù)據(jù)質(zhì)質(zhì)量并針針對查詢詢進行優(yōu)優(yōu)化，但但也付出出了較大大的數(shù)據(jù)據(jù)遷移代代價和執(zhí)執(zhí)行時的的連接代代價五、芳草MODT的特點MODT和傳統(tǒng)的的數(shù)據(jù)倉倉庫的比較數(shù)據(jù)倉庫庫3.存儲容量量的限制制：數(shù)據(jù)量在在不斷變變化，可可能會由由TB級級升至PB級，，并仍在在持續(xù)爆爆炸式增增長，而而傳統(tǒng)的的數(shù)據(jù)倉倉庫的容容量是有有限的。。4.系統(tǒng)的硬硬件成本本：硬件平臺臺的變化化，傳統(tǒng)統(tǒng)的數(shù)據(jù)據(jù)倉庫部部署在高高端服務務器上。。一旦數(shù)數(shù)據(jù)的增增加勢必必要增加加高端服服務器。。高端服務務器的價價格相當當高。而由中低低端硬件件(甚至普通通的pc機)構成的大大規(guī)模機機群平臺臺，成本本則大幅幅度的降降低，現(xiàn)現(xiàn)今企業(yè)業(yè)越來越越多將應應用層由由高端服服務器轉(zhuǎn)轉(zhuǎn)向了由由中低端端硬件構構成的大大規(guī)模機機群平臺臺五、芳草MODT的特點MODT和傳統(tǒng)的的數(shù)據(jù)倉倉庫的比較數(shù)據(jù)倉庫庫5.高負載下下查詢速速度：在大量數(shù)數(shù)據(jù)，訪訪問人數(shù)數(shù)多的情情況下，，訪問速速度很慢慢，甚至至系統(tǒng)會會崩潰，，因為訪訪問接口口單一。。五、芳草MODT的特點MODT和傳統(tǒng)的的數(shù)據(jù)倉倉庫的比較MODT1.統(tǒng)一管理理數(shù)據(jù)：：不同的業(yè)業(yè)務系統(tǒng)統(tǒng)完全可可以從MODT中取出他他們想要要的