基于人工智能的非結(jié)構(gòu)化數(shù)據(jù)目錄及知識(shí)服務(wù)體系構(gòu)建

基于人工智能的非結(jié)構(gòu)化數(shù)據(jù)目錄及知識(shí)服務(wù)體系構(gòu)建-目錄-CONTENTS背景|現(xiàn)狀及需求1能力應(yīng)用3解決方案2背景|現(xiàn)狀分析

公司業(yè)務(wù)多元化及業(yè)務(wù)領(lǐng)域縱深發(fā)展，數(shù)據(jù)體量規(guī)模巨大(20%結(jié)構(gòu)化數(shù)據(jù)+80%非結(jié)構(gòu)化數(shù)據(jù)），增速快，對(duì)存儲(chǔ)和管理安全帶來挑戰(zhàn)；結(jié)構(gòu)化數(shù)據(jù)，在全生命周期各環(huán)節(jié)有成熟的技術(shù)方案管理和控制；非結(jié)構(gòu)化數(shù)據(jù)管理粗放，僅涉及上傳、下載、存儲(chǔ)，在深化應(yīng)用及數(shù)據(jù)分析方面沒有展開，數(shù)據(jù)資源目錄缺失，分類統(tǒng)計(jì)能力弱，數(shù)據(jù)生命周期無法管理；

公司包括總部下發(fā)在內(nèi)的各業(yè)務(wù)系統(tǒng)的非結(jié)構(gòu)化數(shù)據(jù)相對(duì)獨(dú)立，基本是在各自業(yè)務(wù)系統(tǒng)及場(chǎng)景內(nèi)使用，對(duì)其他業(yè)務(wù)系統(tǒng)不開放，非結(jié)構(gòu)化數(shù)據(jù)的共享機(jī)制和能力缺失，非結(jié)構(gòu)化數(shù)據(jù)孤島依然嚴(yán)重；非結(jié)構(gòu)化數(shù)據(jù)體量巨大管理粗放數(shù)據(jù)孤島嚴(yán)重背景|需求分析

人工智能平臺(tái)建設(shè)完成，具備相關(guān)模型開發(fā)和訓(xùn)練能力，能夠?yàn)閿?shù)據(jù)標(biāo)注、結(jié)構(gòu)化信息提取等提供支撐，具備為公司非結(jié)構(gòu)化數(shù)據(jù)的識(shí)別管理和深化應(yīng)用的基礎(chǔ)。具備管理應(yīng)用基礎(chǔ)數(shù)據(jù)資產(chǎn)盤活及價(jià)值利用需求

盤活公司非結(jié)構(gòu)化數(shù)據(jù)資產(chǎn)，擴(kuò)展非結(jié)構(gòu)化數(shù)據(jù)的使用場(chǎng)景和范圍，促進(jìn)價(jià)值提升，提升公司整體數(shù)據(jù)資產(chǎn)的使用效率。完備業(yè)務(wù)系統(tǒng)知識(shí)體系

完善各業(yè)務(wù)單元知識(shí)體系，增強(qiáng)業(yè)務(wù)單元知識(shí)儲(chǔ)備能力，更好促進(jìn)業(yè)務(wù)工作的開展，提升整體效率和綜合競(jìng)爭(zhēng)能力。方案目標(biāo)|構(gòu)建基于人工智能的非結(jié)構(gòu)化數(shù)據(jù)目錄及知識(shí)服務(wù)體系

貼合各業(yè)務(wù)系統(tǒng)的非結(jié)構(gòu)化數(shù)據(jù)服務(wù)能力內(nèi)部下發(fā)非結(jié)構(gòu)化數(shù)據(jù)的承接、處理和反饋能力提升海量非結(jié)構(gòu)化數(shù)據(jù)的統(tǒng)一管理、細(xì)顆粒度的權(quán)限控制、深層次的應(yīng)用挖掘文檔知識(shí)提煉、工作協(xié)同、智能化分析與服務(wù)在線易用的非結(jié)構(gòu)化數(shù)據(jù)目錄人工智能平臺(tái)的算力承接基本準(zhǔn)則|公司信息化管理要求

基于業(yè)務(wù)構(gòu)建文檔分類、文檔組織、文檔流轉(zhuǎn)，開展全面的文檔生命周期管理;非結(jié)構(gòu)化數(shù)據(jù)目錄內(nèi)知文檔管理容賦能識(shí)創(chuàng)新將內(nèi)容通過業(yè)務(wù)集成、內(nèi)容應(yīng)用等方式融入業(yè)務(wù)場(chǎng)景，打通業(yè)務(wù)與內(nèi)容，實(shí)現(xiàn)業(yè)務(wù)賦能;基于內(nèi)容飛輪架構(gòu)、助力知識(shí)創(chuàng)新體系建設(shè)，實(shí)現(xiàn)知識(shí)賦能，數(shù)據(jù)驅(qū)動(dòng);文檔管理內(nèi)容賦能知識(shí)創(chuàng)新-目錄-CONTENTS背景|現(xiàn)狀及需求1能力應(yīng)用3解決方案2解決方案|系統(tǒng)架構(gòu)結(jié)構(gòu)化處理|數(shù)據(jù)治理數(shù)據(jù)結(jié)構(gòu)化—數(shù)據(jù)治理摘要標(biāo)簽清洗治理識(shí)別非結(jié)構(gòu)化數(shù)據(jù)資源目錄圖片庫類別1類別2......類別N對(duì)應(yīng)關(guān)系a對(duì)應(yīng)關(guān)系b對(duì)應(yīng)關(guān)系對(duì)應(yīng)關(guān)系n文檔庫類別1類別2......類別N對(duì)應(yīng)關(guān)系a對(duì)應(yīng)關(guān)系b對(duì)應(yīng)關(guān)系對(duì)應(yīng)關(guān)系n語音庫類別1類別2......類別N對(duì)應(yīng)關(guān)系a對(duì)應(yīng)關(guān)系b對(duì)應(yīng)關(guān)系對(duì)應(yīng)關(guān)系n視頻庫類別1類別2......類別N對(duì)應(yīng)關(guān)系a對(duì)應(yīng)關(guān)系b對(duì)應(yīng)關(guān)系對(duì)應(yīng)關(guān)系n......A業(yè)務(wù)系統(tǒng)|非結(jié)構(gòu)化數(shù)據(jù)資源用戶角色|用戶權(quán)限B業(yè)務(wù)系統(tǒng)|非結(jié)構(gòu)化數(shù)據(jù)資源用戶角色|用戶權(quán)限N業(yè)務(wù)系統(tǒng)|非結(jié)構(gòu)化數(shù)據(jù)資源用戶角色|用戶權(quán)限數(shù)據(jù)源獲取提煉

業(yè)務(wù)運(yùn)營(yíng)數(shù)據(jù)賦能文檔外發(fā)安全協(xié)作移動(dòng)辦公業(yè)務(wù)系統(tǒng)調(diào)用非法內(nèi)容管控知識(shí)網(wǎng)絡(luò)

用戶畫像

文檔對(duì)象

概念對(duì)象

業(yè)務(wù)對(duì)象知識(shí)圖譜知識(shí)抽取服務(wù)模型訓(xùn)練服務(wù)知識(shí)標(biāo)注服務(wù)意圖理解能力知識(shí)搜索能力個(gè)性推薦能力內(nèi)容資源知識(shí)庫C知識(shí)庫知識(shí)庫A知識(shí)庫B知識(shí)庫N智能推薦文檔知識(shí)化知識(shí)中心主體知識(shí)卡片知識(shí)文檔卡片個(gè)性推薦知識(shí)社區(qū)支撐支撐解決方案|數(shù)據(jù)源獲取-數(shù)據(jù)歸集

體系文件（企業(yè)知識(shí)、法規(guī)規(guī)范、各類單據(jù)等）應(yīng)用系統(tǒng)文件（審批單、財(cái)務(wù)報(bào)銷單、圖紙、項(xiàng)目資料、技術(shù)資料、產(chǎn)品資料等）離散文件（各類記錄、郵件、參考資料、工作文件）數(shù)據(jù)來源A業(yè)務(wù)系統(tǒng)

非結(jié)構(gòu)化數(shù)據(jù)資源B業(yè)務(wù)系統(tǒng)

非結(jié)構(gòu)化數(shù)據(jù)資源N業(yè)務(wù)系統(tǒng)

非結(jié)構(gòu)化數(shù)據(jù)資源......數(shù)據(jù)探查分析業(yè)務(wù)系統(tǒng)適配器|捕獲工具|集成開發(fā)工具

遵循：不影響應(yīng)用系統(tǒng)|各類標(biāo)準(zhǔn)規(guī)范|保證數(shù)據(jù)質(zhì)量|安全和經(jīng)濟(jì)原則主業(yè)務(wù)文件|附屬文件|關(guān)聯(lián)文件|數(shù)據(jù)權(quán)限等從業(yè)務(wù)系統(tǒng)“拉取”|業(yè)務(wù)系統(tǒng)“主動(dòng)推送”數(shù)據(jù)存儲(chǔ)非結(jié)構(gòu)化數(shù)據(jù)統(tǒng)一存儲(chǔ)池

通過歸集服務(wù)將省網(wǎng)各業(yè)務(wù)單元系統(tǒng)中非結(jié)構(gòu)化數(shù)據(jù)進(jìn)行歸集集成，實(shí)現(xiàn)各系統(tǒng)非結(jié)構(gòu)化數(shù)據(jù)的統(tǒng)一存儲(chǔ)管理，并按照歸集策略進(jìn)行自動(dòng)/定期-不定期的更新。數(shù)據(jù)質(zhì)量問題反饋解決方案—非結(jié)構(gòu)化數(shù)據(jù)的結(jié)構(gòu)化處理|數(shù)據(jù)治理

結(jié)構(gòu)化的圖片數(shù)據(jù)倉庫原始圖片庫類別1類別2......類別N語音識(shí)別、語義理解、文本摘要等對(duì)應(yīng)/映射類型：AAA標(biāo)題：BBBB摘要：CCCCC結(jié)構(gòu)化數(shù)據(jù)

結(jié)構(gòu)化的語音數(shù)據(jù)倉庫原始語音庫類別1類別2......類別N文字識(shí)別|人像抓取標(biāo)簽、分類、元數(shù)據(jù)管理對(duì)應(yīng)/映射姓名：陳朋濤

性別：男身份證號(hào)碼：XXXXXXXXXXXXXXX；結(jié)構(gòu)化數(shù)據(jù)圖片數(shù)據(jù)文字識(shí)別|文本摘要NLP等對(duì)應(yīng)/映射類型：招標(biāo)文件標(biāo)題：XX項(xiàng)目招標(biāo)文件摘要：XXX結(jié)構(gòu)化數(shù)據(jù)

結(jié)構(gòu)化的文檔數(shù)據(jù)倉庫原始圖片庫類別1類別2......類別N文檔數(shù)據(jù)語音數(shù)據(jù)圖像識(shí)別、語音識(shí)別等對(duì)應(yīng)/映射類型：AAA標(biāo)題：BBBB摘要：CCCCC結(jié)構(gòu)化數(shù)據(jù)

結(jié)構(gòu)化的視頻數(shù)據(jù)倉庫原始視頻庫類別1類別2......類別N視頻數(shù)據(jù)音頻數(shù)據(jù)數(shù)據(jù)清洗、治理解決方案|非結(jié)構(gòu)化數(shù)據(jù)目錄構(gòu)建資源屬性分類涉密屬性分類共享屬性分類層級(jí)屬性分類”非結(jié)構(gòu)化“資源目錄基礎(chǔ)資源部門資源涉密資源非涉密資源無條件共享有條件共享不予共享部門信息資源信息資源信息資源分類、信息資源名稱、信息資源代碼、信息資源提供方、信息資源提供方代碼、信息資源摘要、信息資源格式、信息項(xiàng)信息、共享屬性、開放屬性....元數(shù)據(jù)管理結(jié)構(gòu)化的圖片倉庫結(jié)構(gòu)化的文檔倉庫結(jié)構(gòu)化的語音倉庫結(jié)構(gòu)化的視頻倉庫數(shù)據(jù)訪問數(shù)據(jù)獲取非結(jié)構(gòu)化數(shù)據(jù)資源目錄是對(duì)業(yè)務(wù)單元非結(jié)構(gòu)化數(shù)據(jù)資源進(jìn)行統(tǒng)一梳理和整合，通過信息資源屬性、涉密屬性、共享屬性、層級(jí)屬性等類別進(jìn)行構(gòu)建，依托元數(shù)據(jù)及結(jié)構(gòu)化后數(shù)據(jù)資源倉庫實(shí)現(xiàn)數(shù)據(jù)資源的訪問和獲取。解決方案|非結(jié)構(gòu)化數(shù)據(jù)服務(wù)應(yīng)用非結(jié)構(gòu)化數(shù)據(jù)目錄字典/結(jié)構(gòu)數(shù)據(jù)資源共享平臺(tái)A業(yè)務(wù)應(yīng)用單元數(shù)據(jù)申請(qǐng)審批通過A業(yè)務(wù)應(yīng)用單元申請(qǐng)部門|應(yīng)用說明非結(jié)構(gòu)化數(shù)據(jù)申請(qǐng)清單相關(guān)審批部門，如管理員、信息安全管理部門等數(shù)據(jù)審批“非結(jié)構(gòu)化”數(shù)據(jù)資源目錄圖片庫類別1類別2......類別N對(duì)應(yīng)關(guān)系a對(duì)應(yīng)關(guān)系b對(duì)應(yīng)關(guān)系對(duì)應(yīng)關(guān)系n文檔庫類別1類別2......類別N對(duì)應(yīng)關(guān)系a對(duì)應(yīng)關(guān)系b對(duì)應(yīng)關(guān)系對(duì)應(yīng)關(guān)系n語音庫類別1類別2......類別N對(duì)應(yīng)關(guān)系a對(duì)應(yīng)關(guān)系b對(duì)應(yīng)關(guān)系對(duì)應(yīng)關(guān)系n視頻庫類別1類別2......類別N對(duì)應(yīng)關(guān)系a對(duì)應(yīng)關(guān)系b對(duì)應(yīng)關(guān)系對(duì)應(yīng)關(guān)系n數(shù)據(jù)訪問接口—權(quán)限控制數(shù)據(jù)共享解決方案—基于非結(jié)構(gòu)化數(shù)據(jù)的知識(shí)體系構(gòu)建-知識(shí)價(jià)值洞察

整合、治理、洞察非結(jié)構(gòu)化數(shù)據(jù)數(shù)據(jù)價(jià)值挖掘路徑，基于業(yè)務(wù)主題落地，實(shí)現(xiàn)數(shù)據(jù)的整合、治理、洞察，進(jìn)而實(shí)現(xiàn)資產(chǎn)化、知識(shí)化。底層數(shù)據(jù)源整合終端、業(yè)務(wù)系統(tǒng)、存儲(chǔ)上的所有非結(jié)構(gòu)化數(shù)據(jù)。文檔管理、內(nèi)容賦能在非結(jié)構(gòu)化數(shù)據(jù)生成時(shí)即時(shí)治理。知識(shí)體系利用知識(shí)圖片、自然語言處理等人工只能技術(shù)洞察非結(jié)構(gòu)化數(shù)據(jù)。數(shù)據(jù)整合數(shù)據(jù)治理數(shù)據(jù)洞察解決方案—知識(shí)圖譜網(wǎng)絡(luò)的技術(shù)實(shí)現(xiàn)

知識(shí)獲取知識(shí)構(gòu)建知識(shí)存儲(chǔ)通過非結(jié)構(gòu)化數(shù)據(jù)資源目錄及結(jié)構(gòu)化后的數(shù)據(jù)進(jìn)行知識(shí)提煉。相關(guān)技術(shù)包括：分詞、詞性標(biāo)注、情感分析、實(shí)體識(shí)別、實(shí)體消歧、實(shí)體關(guān)系抽取、事件抽取等。利用計(jì)算機(jī)能處理的符號(hào)來表示人類在客觀世界中所獲得的知識(shí)，包括基于語義網(wǎng)的知識(shí)表示、基于連續(xù)向量的知識(shí)表示。將已有知識(shí)存入圖數(shù)據(jù)庫或其他大數(shù)據(jù)存儲(chǔ)介質(zhì)，定義標(biāo)準(zhǔn)接口，接入各種數(shù)據(jù)包括實(shí)體和關(guān)系，并建立動(dòng)態(tài)更新和動(dòng)態(tài)掃描機(jī)制。通過圖分析、圖挖掘等機(jī)器學(xué)習(xí)算法，建立知識(shí)質(zhì)檢的關(guān)聯(lián)，以人可以理解的方式予以表現(xiàn)，挖掘復(fù)雜關(guān)系背后的深層次知識(shí)。相關(guān)技術(shù)包括統(tǒng)計(jì)挖掘、時(shí)序分析、知識(shí)檢索等。知識(shí)分析、挖掘知識(shí)應(yīng)用在知識(shí)基礎(chǔ)上，進(jìn)行機(jī)器思維、邏輯推理、求解問題，在前提和輸入之下得出結(jié)論。相關(guān)技術(shù)包括基于邏輯規(guī)則、基于知識(shí)表示、基于機(jī)器學(xué)習(xí)的推理等。數(shù)據(jù)管理圖譜構(gòu)建圖譜挖掘圖譜分析圖譜服務(wù)圖譜應(yīng)用結(jié)構(gòu)化治理圖構(gòu)建圖挖掘圖分析圖服務(wù)圖應(yīng)用知識(shí)圖譜網(wǎng)絡(luò)的技術(shù)實(shí)現(xiàn)解決方案—知識(shí)中心的構(gòu)建

內(nèi)容資源知識(shí)中心知識(shí)卡片、知識(shí)主題、知識(shí)文件知識(shí)網(wǎng)絡(luò)基于業(yè)務(wù)標(biāo)簽的知識(shí)主題自動(dòng)生成；文檔與知識(shí)主題自動(dòng)歸集；基于標(biāo)簽的知識(shí)主題與知識(shí)文檔推薦；基于用戶畫像的知識(shí)主題與知識(shí)文檔推薦；文檔統(tǒng)一管理統(tǒng)一文檔知識(shí)庫文檔智能檢索、圖譜智能檢索；精準(zhǔn)知識(shí)與圖片搜索簡(jiǎn)化知識(shí)整理知識(shí)主動(dòng)找人文檔知識(shí)化|智能分析推薦-目錄-CONTENTS背景|現(xiàn)狀及需求1能力應(yīng)用3解決方案2能力應(yīng)用|非結(jié)構(gòu)化數(shù)據(jù)資源目錄服務(wù)能力

建立公司范圍、多維度、完整的非結(jié)構(gòu)化數(shù)據(jù)資源目錄，實(shí)現(xiàn)公司非結(jié)構(gòu)化數(shù)據(jù)資源統(tǒng)一管理，規(guī)范數(shù)據(jù)流轉(zhuǎn)與開放，促進(jìn)非結(jié)構(gòu)化數(shù)據(jù)可視可用，形成統(tǒng)一的非結(jié)構(gòu)化數(shù)據(jù)信息服務(wù)能力，滿足不同業(yè)務(wù)系統(tǒng)用戶個(gè)性化的非結(jié)構(gòu)化數(shù)據(jù)訪問需求。為業(yè)務(wù)系統(tǒng)提供方便快捷的非結(jié)構(gòu)化數(shù)據(jù)檢索和使用的能力，最大限度的保障數(shù)據(jù)安全，防止數(shù)據(jù)泄密。通過統(tǒng)一的數(shù)據(jù)訪問共享流程，實(shí)現(xiàn)非結(jié)構(gòu)化數(shù)據(jù)集中化、精益化管理，滿足數(shù)據(jù)管理部門數(shù)據(jù)溯源、數(shù)據(jù)審計(jì)、數(shù)據(jù)風(fēng)險(xiǎn)管控等方面的需求。非文件索引服務(wù)結(jié)構(gòu)化數(shù)據(jù)資源錄目非結(jié)構(gòu)化數(shù)據(jù)資源可視化統(tǒng)一的數(shù)據(jù)訪問共享服務(wù)非結(jié)構(gòu)化數(shù)據(jù)溯源數(shù)據(jù)授權(quán)|安全服務(wù)能力應(yīng)用|非結(jié)構(gòu)化數(shù)據(jù)的全生命周期管理非結(jié)構(gòu)化數(shù)據(jù)全生命周期管理，基于與業(yè)務(wù)活動(dòng)一致的流程設(shè)計(jì)，實(shí)現(xiàn)非結(jié)構(gòu)化數(shù)據(jù)從創(chuàng)建到使用流轉(zhuǎn)，再到最后歸檔銷毀的管理。獲取體系文件應(yīng)用系統(tǒng)文件離散文件A業(yè)務(wù)系統(tǒng)

非結(jié)構(gòu)化數(shù)據(jù)資源N業(yè)務(wù)系統(tǒng)

非結(jié)構(gòu)化數(shù)據(jù)資源......數(shù)據(jù)探查分析分類統(tǒng)一資源池團(tuán)隊(duì)協(xié)作空間文檔庫歸檔庫業(yè)務(wù)導(dǎo)向智能內(nèi)容分析及檢索摘要標(biāo)簽搜索元數(shù)據(jù)識(shí)別統(tǒng)一管理規(guī)范加持使用統(tǒng)一存管可見易用安全合規(guī)高效協(xié)作文檔不丟失文檔外發(fā)安全協(xié)作移動(dòng)辦公業(yè)務(wù)系統(tǒng)調(diào)用非法內(nèi)容管控?cái)?shù)據(jù)賦能業(yè)務(wù)運(yùn)營(yíng)歸檔到期歸檔庫歸檔庫歸檔庫延續(xù)|修訂|廢止|刪除能力應(yīng)用|智能知識(shí)搜索經(jīng)過業(yè)務(wù)知識(shí)關(guān)系優(yōu)化的知識(shí)精準(zhǔn)搜索推薦；基于知識(shí)網(wǎng)絡(luò)的精準(zhǔn)知識(shí)搜索推薦搜索意圖匹配：搜索關(guān)鍵詞與知識(shí)標(biāo)簽直接及間接匹配度越高，越接近用戶搜索意圖，推薦越精準(zhǔn)。能力應(yīng)用|智能以圖搜圖經(jīng)過機(jī)器學(xué)習(xí)訓(xùn)練的圖片智能檢索、相似度排行、關(guān)鍵詞圖譜鏈接等。能力應(yīng)用—構(gòu)建公司私域數(shù)據(jù)知識(shí)網(wǎng)絡(luò)-打造知識(shí)大腦業(yè)務(wù)關(guān)系模型文檔知識(shí)模型知識(shí)主題|標(biāo)簽客戶系統(tǒng)|項(xiàng)目管理系統(tǒng)|服務(wù)系統(tǒng)文檔知識(shí)庫知識(shí)主題、知識(shí)文檔知識(shí)網(wǎng)絡(luò)知識(shí)服務(wù)項(xiàng)目圖譜

項(xiàng)目1

項(xiàng)目2

項(xiàng)目3

項(xiàng)目4關(guān)系A(chǔ)關(guān)系C關(guān)系B關(guān)系D客戶圖譜

客戶2

客戶1

客戶3

客戶4關(guān)系A(chǔ)關(guān)系C關(guān)系B關(guān)系D供應(yīng)商圖譜

友商1

友商2

友商3

友商4關(guān)系A(chǔ)關(guān)系C關(guān)系B關(guān)系D合同規(guī)則知識(shí)庫

條款1

條款2

條款3

條款4關(guān)系A(chǔ)關(guān)系C關(guān)系B關(guān)系D結(jié)構(gòu)專業(yè)圖譜

結(jié)構(gòu)1

結(jié)構(gòu)2

結(jié)構(gòu)3

結(jié)構(gòu)4關(guān)系A(chǔ)關(guān)系C關(guān)系B關(guān)系D找客戶內(nèi)部市場(chǎng)文檔外部市場(chǎng)文檔找項(xiàng)目?jī)?nèi)部項(xiàng)目文檔外部相關(guān)項(xiàng)目找供應(yīng)商入圍供應(yīng)商分析外部市場(chǎng)信息精準(zhǔn)知識(shí)搜索與智能推薦省網(wǎng)私域數(shù)據(jù)知識(shí)網(wǎng)絡(luò)能力應(yīng)用|構(gòu)建千人千面的知識(shí)中心軟件設(shè)計(jì)師王飛我的主題