數(shù)字化轉(zhuǎn)型的本質(zhì)與解決方案

從信息化到數(shù)字化及轉(zhuǎn)型本質(zhì)信息化是企業(yè)為了提升效率、降低成本利用信息技術(shù)實現(xiàn)單點業(yè)務(wù)或辦公能力的工具和流程改造。比如辦公自動化OA、財務(wù)系統(tǒng)、人力資源管理系統(tǒng)等。企業(yè)的信息化解決了局部的效率問題，但也帶來了新的問題：系統(tǒng)與系統(tǒng)之間彼此隔離，數(shù)據(jù)形成孤島，信息難以共享，所以不得不去做集成。由于數(shù)據(jù)存儲于各個系統(tǒng)的數(shù)據(jù)庫中，每個系統(tǒng)的架構(gòu)、開發(fā)語言、數(shù)據(jù)模型、數(shù)據(jù)存儲、術(shù)語語義等都可能存在不同和差別，使系統(tǒng)間數(shù)據(jù)共享和復(fù)用變得困難，也造成了重新造輪子、重復(fù)建設(shè)。為了實現(xiàn)這些單體豎井系統(tǒng)之間的數(shù)據(jù)共享和復(fù)用，我們做了多年的集成。但信息共享和集成從數(shù)據(jù)庫層DBLink，到業(yè)務(wù)層DAO，到中間件消息總線，再到服務(wù)層企業(yè)服務(wù)總線等等，都是一種加層補丁的方式，使系統(tǒng)之間的補丁越來越多，性能越來越差，數(shù)據(jù)越來越亂。所以我們又不得不去做數(shù)據(jù)治理。元數(shù)據(jù)管理系統(tǒng)、主數(shù)據(jù)管理系統(tǒng)、數(shù)據(jù)質(zhì)量系統(tǒng)等等不斷的建設(shè)，但也沒見得數(shù)據(jù)質(zhì)量有多大的提升，問題依舊，事倍功半。雖然說數(shù)據(jù)可以通過ETL等手段匯聚到數(shù)據(jù)倉庫、大數(shù)據(jù)平臺或者數(shù)據(jù)湖，但并沒有從根本上解決企業(yè)的系統(tǒng)建設(shè)方式和系統(tǒng)架構(gòu)體系。不過數(shù)據(jù)的匯聚使對數(shù)據(jù)的深度分析和洞察成為可能。通過對數(shù)據(jù)的分析和洞察，找到業(yè)務(wù)對象之間的關(guān)系和聯(lián)系，就可能從這些關(guān)系和聯(lián)系中找到新的業(yè)務(wù)機會，就是數(shù)字化和轉(zhuǎn)型的過程。數(shù)據(jù)集成和匯聚是一種方式和路徑，也是一種習(xí)慣了的簡單方式，但這種方式往往面臨著重復(fù)建設(shè)、代價高昂。還有一種方式是徹底地重構(gòu)，按照新的企業(yè)架構(gòu)分步驟分階段逐步地重構(gòu)替換或者新建。新的架構(gòu)可以采用微服務(wù)架構(gòu)實現(xiàn)系統(tǒng)融合，以企業(yè)主數(shù)據(jù)為核心實現(xiàn)“數(shù)據(jù)融合”。使數(shù)據(jù)在產(chǎn)生的地方就標(biāo)準(zhǔn)化和規(guī)范化，消除眾多的數(shù)據(jù)處理流程和步驟。重構(gòu)是徹底的轉(zhuǎn)型，但無法一步到位，需要根據(jù)投入、人力、時間、業(yè)務(wù)需求等實際情況逐步進(jìn)行重構(gòu)替換、補充新建來構(gòu)建新的企業(yè)架構(gòu)體系，需要對整個發(fā)展路徑和路線圖有清晰的認(rèn)識和了解，對架構(gòu)師和管理人員要求非常高，他們需要有能力來把控整個路徑和進(jìn)展，能及時的解決在重構(gòu)轉(zhuǎn)型過程中遇到的問題。不過實際情況，往往集成和重構(gòu)兩種方式并行，既要充分利用現(xiàn)有的信息系統(tǒng)，也需要考慮在替換老舊系統(tǒng)的過程中將企業(yè)架構(gòu)更新?lián)Q代，兼顧效率與成本。有人把數(shù)字化分為三個階段：信息數(shù)字化、流程數(shù)字化和業(yè)務(wù)數(shù)字化。其實都是表象，沒有觸及數(shù)字化的核心本質(zhì)。為什么要數(shù)字化？當(dāng)然最根本是為了效率和成本。要提升效率，降低成本，就需要不斷尋找新的機遇。機遇從哪里來？可以從數(shù)據(jù)中來。但每個單體豎井的系統(tǒng)數(shù)據(jù)有限，數(shù)據(jù)之間的關(guān)系簡單，這就需要和其他系統(tǒng)的數(shù)據(jù)集成或者統(tǒng)一匯聚到一個地方（比如數(shù)倉、數(shù)據(jù)湖等），然后可以對這些數(shù)據(jù)進(jìn)行清洗、轉(zhuǎn)換、去冗、補齊等操作，使之符合數(shù)據(jù)分析、數(shù)據(jù)運算和模型訓(xùn)練等要求。通過對數(shù)據(jù)的計算和分析，找到數(shù)據(jù)之間的隱藏的關(guān)系，可能就意味著新的機會。比如說，通過對原來各個單體系統(tǒng)中客戶行為的分析，從而對客戶有個相對全面的了解，也就是客戶畫像，根據(jù)客戶畫像表現(xiàn)出的客戶特點，有針對性的提供服務(wù)，投其所好，則成功的概率更大。數(shù)字化轉(zhuǎn)型，并不是簡單的使業(yè)務(wù)數(shù)字化，而是利用技術(shù)去分析、洞察業(yè)務(wù)數(shù)據(jù)之間的關(guān)系和隱藏的價值。以數(shù)據(jù)驅(qū)動，需要將數(shù)據(jù)以標(biāo)準(zhǔn)化、規(guī)范化、高質(zhì)量進(jìn)行整合在一起，最簡單的方式就是不去做轉(zhuǎn)換，使數(shù)據(jù)從源頭、從產(chǎn)生的地方就遵循同樣的標(biāo)準(zhǔn)和規(guī)范，也就不會有質(zhì)量問題，無需數(shù)據(jù)質(zhì)量平臺。隨著業(yè)務(wù)系統(tǒng)的逐步重構(gòu)和替換，從而實現(xiàn)“數(shù)據(jù)融合”、“業(yè)務(wù)融合”、“應(yīng)用融合”、“基礎(chǔ)設(shè)施融合”、以及“組織融合”，在完成過程“系統(tǒng)融合”能力中實現(xiàn)企業(yè)全局?jǐn)?shù)字化和轉(zhuǎn)型。數(shù)字化不是目的，利用數(shù)據(jù)進(jìn)行分析洞察從而獲得數(shù)據(jù)表面之下更多的認(rèn)知、發(fā)現(xiàn)更多的潛在機會并嘗試這些機會，才是數(shù)字化轉(zhuǎn)型的根本目的。所以轉(zhuǎn)型可以有兩種方式：集成和重構(gòu)。利用云計算、大數(shù)據(jù)、人工智能等技術(shù)，實現(xiàn)基礎(chǔ)設(shè)施資源、數(shù)據(jù)、人力等的整合和融合。重構(gòu)方式可以從根本上解決數(shù)據(jù)質(zhì)量問題，提供足夠多的高質(zhì)量數(shù)據(jù)，消除數(shù)據(jù)因質(zhì)量問題對機器學(xué)習(xí)、深度學(xué)習(xí)模型的影響，但非一日之功。集成可以利用已有的系統(tǒng)和資源，快速實現(xiàn)數(shù)據(jù)的匯聚。通過對數(shù)據(jù)深度洞察，找到數(shù)據(jù)之間的關(guān)系和聯(lián)系、趨勢和規(guī)律，從而指導(dǎo)企業(yè)嘗試新的業(yè)務(wù)模式、運營模式等。因此可以說，數(shù)字化轉(zhuǎn)型的本質(zhì)是以數(shù)據(jù)為要素、技術(shù)為工具，實現(xiàn)對數(shù)據(jù)的分析和洞察，找到數(shù)據(jù)之間的關(guān)系、聯(lián)系、趨勢等，比如風(fēng)險控制中關(guān)聯(lián)交易分析等，從而支持和促進(jìn)企業(yè)業(yè)務(wù)、流程、組織架構(gòu)等的變革和創(chuàng)新。信息化解決了單體工具與效率問題，數(shù)字化構(gòu)建起了業(yè)務(wù)應(yīng)用體系，打通了數(shù)據(jù)之間的關(guān)系，數(shù)字化轉(zhuǎn)型則深度分析和洞察數(shù)據(jù)之間的關(guān)系，找到數(shù)據(jù)變化趨勢和規(guī)律，并有效利用這些數(shù)據(jù)關(guān)系、趨勢和規(guī)律促進(jìn)企業(yè)業(yè)務(wù)的變革、創(chuàng)新。數(shù)字化轉(zhuǎn)型解決方案數(shù)字化轉(zhuǎn)型的本質(zhì)是利用數(shù)字化技術(shù)實現(xiàn)業(yè)務(wù)的數(shù)字化變革，促進(jìn)業(yè)務(wù)的創(chuàng)新、模式的創(chuàng)新等。數(shù)字化技術(shù)有很多，如何利用這些數(shù)字化技術(shù)、能否用好這些數(shù)字化技術(shù)是實現(xiàn)業(yè)務(wù)的數(shù)字化變革的前提和基礎(chǔ)。數(shù)字化轉(zhuǎn)型不是建幾套系統(tǒng)，不再是點的突破，而是體系的建設(shè)，包括戰(zhàn)略、業(yè)務(wù)、應(yīng)用、數(shù)據(jù)、基礎(chǔ)設(shè)施、安全等多面一體的建設(shè)。云計算、大數(shù)據(jù)、人工智能、區(qū)塊鏈、容器、微服務(wù)、中臺、DevOps等等技術(shù)解決的都是某一方面的問題，而數(shù)字化轉(zhuǎn)型需要融合這些技術(shù)特點來從全局設(shè)計解決方案。比如說云計算解決了算力問題；大數(shù)據(jù)增強了數(shù)據(jù)處理能力，為人工智能機器學(xué)習(xí)、深度學(xué)習(xí)提供了必要的大量的數(shù)據(jù)要素；人工智能基于云計算強大的算力和大數(shù)據(jù)足量的數(shù)據(jù)則可以進(jìn)行深入的學(xué)習(xí)和驗證；區(qū)塊鏈增強了分布式安全能力；容器為云原生應(yīng)用提供了彈性伸縮、環(huán)境一致性能力；微服務(wù)架構(gòu)提供了單體應(yīng)用分解的思路和架構(gòu)方法；中臺提供了企業(yè)級應(yīng)用分層和復(fù)用思路的架構(gòu)方法；DevOps糅合了開發(fā)運維一體化、文化和組織的建設(shè)思路。數(shù)字化轉(zhuǎn)型過程中還有眾多的技術(shù)，需要將這些技術(shù)進(jìn)行整合和融合，將企業(yè)內(nèi)業(yè)務(wù)、數(shù)據(jù)、應(yīng)用、基礎(chǔ)設(shè)施、安全、技術(shù)和企業(yè)戰(zhàn)略作為一個整體系統(tǒng)看待，以系統(tǒng)化、系統(tǒng)工程的思維來設(shè)計和建設(shè)。云原生體系從上面討論我們也可以知道，云提供算力，大數(shù)據(jù)提供數(shù)據(jù)要素，人工智能提供算法，容器提供彈性運行環(huán)境，微服務(wù)、中臺提供了架構(gòu)方法，DevOps提供了組織協(xié)作方法，還有安全、穩(wěn)定性和韌性等方法共同支撐著企業(yè)一體化融合業(yè)務(wù)應(yīng)用系統(tǒng)的建設(shè)，支撐業(yè)務(wù)、流程和組織的轉(zhuǎn)型。云原生體系對于整合和融合這些技術(shù)和能力提供了一種相對完善的、可落地的解決方案（稱之為云原生融合架構(gòu)），其中基于容器技術(shù)構(gòu)建的容器云和容器化PaaS平臺提供了運行時彈性、可擴(kuò)展的環(huán)境；使用云計算IaaS服務(wù)提供算力，可支持多云異構(gòu)資源調(diào)度管理，實現(xiàn)基礎(chǔ)設(shè)施資源自服務(wù)能力；以企業(yè)主數(shù)據(jù)為骨架，構(gòu)建企業(yè)數(shù)據(jù)架構(gòu)體系（如圖2），實現(xiàn)唯一可信數(shù)據(jù)源。以主數(shù)據(jù)為骨架構(gòu)建企業(yè)數(shù)據(jù)架構(gòu)數(shù)據(jù)庫、大數(shù)據(jù)平臺、數(shù)倉、數(shù)據(jù)湖等平臺為數(shù)據(jù)基礎(chǔ)設(shè)施，實現(xiàn)數(shù)據(jù)自服務(wù)能力，支撐數(shù)據(jù)可復(fù)用服務(wù)（數(shù)據(jù)中臺服務(wù)）；以消息平臺、認(rèn)證平臺、權(quán)限平臺、監(jiān)控平臺等中間件平臺為基礎(chǔ)實現(xiàn)技術(shù)可復(fù)用能力，為中臺架構(gòu)中臺可復(fù)用服務(wù)（技術(shù)中臺服務(wù)）提供中間件基礎(chǔ)設(shè)施平臺支撐；服務(wù)的設(shè)計則可以以云應(yīng)用12要素和15要素為設(shè)計原則，以微服務(wù)架構(gòu)分解單體業(yè)務(wù)系統(tǒng)或設(shè)計分布式業(yè)務(wù)系統(tǒng)，以中臺架構(gòu)分層分布式業(yè)務(wù)系統(tǒng)，可以簡單的將企業(yè)的一體化融合業(yè)務(wù)系統(tǒng)分為前、中、后臺（企業(yè)級分層），而融合系統(tǒng)中的每個組件也可以分為前、中、后臺（應(yīng)用級分層），基于中臺分層架構(gòu)的應(yīng)用又可以以微服務(wù)架構(gòu)來進(jìn)行分拆和部署于容器化PaaS平臺，實現(xiàn)組件服務(wù)的按需彈性伸縮；通過標(biāo)準(zhǔn)化聲明式API實現(xiàn)應(yīng)用之間的協(xié)同，以API網(wǎng)關(guān)實現(xiàn)API服務(wù)的管理和治理；PaaS平臺內(nèi)部服務(wù)的治理可以使用服務(wù)網(wǎng)格，不過服務(wù)網(wǎng)格也是一種加層的方式，會額外帶來不必要的延時，簡單的方式是在實現(xiàn)服務(wù)時按照服務(wù)設(shè)計原則主動暴露必要的鏈路信息，以便實現(xiàn)鏈路跟蹤和性能監(jiān)控，使其具備可見性、可觀測性同時兼顧性能；以DevOps方法論實現(xiàn)研發(fā)運維一體化和組織架構(gòu)優(yōu)化，DevOps的核心是協(xié)調(diào)研發(fā)和運維的利益關(guān)系，其實也提供了一種協(xié)調(diào)各團(tuán)隊和部門之間關(guān)系的思路，從而可以通過工具擴(kuò)展實現(xiàn)業(yè)務(wù)、項目、應(yīng)用等的全生命周期管理，避免局部的、單點的、中斷的功能設(shè)計；在完成一體化系統(tǒng)融合之后，需要以混沌工程的思想持續(xù)的增強系統(tǒng)的抗脆弱性、韌性、穩(wěn)定性、安全性；安全性要求涉及系統(tǒng)的每個節(jié)點每個方面，比如網(wǎng)絡(luò)、容器、鏡像、應(yīng)用、認(rèn)證、權(quán)限等等，需要持續(xù)的增強安全能力，確保數(shù)據(jù)和系統(tǒng)是安全可信的；云原生融合架構(gòu)支持基于移動的用戶體驗提出了數(shù)字化時代的用戶體驗需求，滿足客戶隨時、隨地、隨需的訪問需求。云原生融合架構(gòu)以系統(tǒng)工程的思想將企業(yè)的戰(zhàn)略、業(yè)務(wù)、數(shù)據(jù)、應(yīng)用、基礎(chǔ)設(shè)施、安全等作為一個復(fù)雜的系統(tǒng)來考慮，應(yīng)用云、數(shù)據(jù)、人工智能等科技手段實現(xiàn)體系化的數(shù)據(jù)、應(yīng)用、基礎(chǔ)設(shè)