南航SVC大數(shù)據(jù)支撐案例

南航SVC大數(shù)據(jù)支撐案例提綱

進(jìn)一步的工作

系統(tǒng)架構(gòu)

技術(shù)選型考慮

案例說明

數(shù)據(jù)分散，形成數(shù)據(jù)孤島；無法統(tǒng)一共享。13456278高端系統(tǒng)旅客資料大客戶旅客資料呼叫旅客資料客艙旅客資料電子客票旅客資料離港旅客資料銷售旅客資料客戶統(tǒng)一視圖系統(tǒng)（SVC）CustomerLoyalty投訴SeatingInventoryCheck-inFlightDataIrregularOperationsSchedulesGeneralInformationWeight&BalanceTicketingReservations3rdParty呼叫中心B2C離港行李查詢中轉(zhuǎn)客艙DWET高端大客戶?？蚐VC通瓣過S辭V食C系代統(tǒng)折統(tǒng)淋一積客償戶腳數(shù)麥據(jù)集濁中蘋訪辯問薪效綁率漏不嗽高座，軌系迎統(tǒng)艙穩(wěn)憶定肝性綁不綢足班，冬投構(gòu)資船大對。S世V哥C初礎(chǔ)期快探樣索S廈V慢C架愚構(gòu)怕優(yōu)灰化儲思過考譽(yù)及敵技驗術(shù)盯選碌型R驚M閃D碎B主宵要方技街術(shù)撞難閉題擴(kuò)拜展趨困罩難并講發(fā)居讀摸寫陸慢成煤本辯高靈（模小芹型緊機(jī)+存羞儲輪）無牧法奶支丘撐押海嶺量柏數(shù)臂據(jù)N攝o堡S松Q蕉L的走優(yōu)躺點(diǎn)N御o夕S少Q(mào)皮L的咳不倡足大溜數(shù)敲據(jù)黑量高立性雕能耐、袍高薯可喝用彈謙性兆擴(kuò)亭展腫能似力靈音活疊的槽數(shù)霞據(jù)懲模眾型低恩成鎮(zhèn)本不弄完跡全婆支潛持S撤Q距L不齡支登持劈燕事避務(wù)不漫支孩持律多拒表科關(guān)數(shù)聯(lián)不拳支煤持嚷聚疤合梨查償詢無寨法求保起證件數(shù)枝據(jù)惑一困致安性優(yōu)蘿點(diǎn)遷羞移逆成晨本扇底方攪案弱成私熟縫穩(wěn)獻(xiàn)定能辱很螺好目的范支刻撐足事客務(wù)能質(zhì)保樂證競數(shù)賄據(jù)智的孔完戚整莫性能蘿提娛供惠較隙高犬的T獸P顫S滿境足穿業(yè)耐務(wù)袍性閱能押要紙求開核發(fā)互成去本腥低貪，斯技物術(shù)連風(fēng)線險士低有敗較堵好押的稅擴(kuò)庭展跟性我奏們哨的翠選窗擇并長發(fā)牽訪蒸問權(quán)量轉(zhuǎn)高蠅，哈速忘度鴉快筍，叔穩(wěn)壞定匆高貌效葉，佩系慰統(tǒng)碎投殿資臨小賣。系成統(tǒng)助部剝署年架包構(gòu)數(shù)休據(jù)惕庫小叉型虜機(jī)C檔光恩纖改交爬換意機(jī)光末纖科交換換凝機(jī)B檔磁煤盤襯陣足列磁左盤疲陣旬列B檔數(shù)偽據(jù)彎庫制軟與件S常V夕C主單備供兩征套C箱B技D主葵備亭兩行套小詳型穿機(jī)哥方憐案匯尿總6睜0川0萬數(shù)辮據(jù)繪庫P是C壟s痛e統(tǒng)r嘉v抹e嚇r數(shù)擇據(jù)日庫瘋軟被件S勾V夜C主久備呆兩紹套飼，C唱B陣D主搶備營兩殲套匯列總3另5萬分碑布放式志方涉案并粘發(fā)氧訪材問毒量丟高啦，衰速稅度敘快更，調(diào)穩(wěn)晝定抵高島效晃，糕系攔統(tǒng)懂投伍資看小羽。投擊資材比逗較結(jié)差果當(dāng)比螺較選遵擇h腹a效d先o聽o興p前+壺h分i隨v烘e做答分健析吃平沾臺高喚效捕率宿：通逗過奮分例發(fā)譽(yù)數(shù)駛據(jù)效，h跪a痛d抱o蒙o鵝p可弟以邁在貓數(shù)牽據(jù)遞所脾在柳的均節(jié)帝點(diǎn)蔑上介并遣行故地妨處今理,處肅理乘非喝常凳的塔快狡速鞏。高衡擴(kuò)禁容咱能梨力壤：服隙務(wù)蚊器排群父總邁計蝴可鳳達(dá)電數(shù)鳴千骨個鈔節(jié)駁點(diǎn)五，荷能系可禽靠只地泛存量儲亞和屈處鄙理P刃B級羅數(shù)律據(jù)欄。成近本嫩低仇：使宜用愛普蟻通飛機(jī)側(cè)器輩組呢成華的乒服穗務(wù)塊器耕群亡來攪分擦發(fā)末以繼及儉處拜理孔數(shù)朝據(jù)鉛。可千靠持性鋤：h超a嘩d任o議o范p能護(hù)自外動軟地巡壽維溪護(hù)愁數(shù)婦據(jù)吵的展多尋份削復(fù)殘制洗，災(zāi)并來且訊在醒任吉務(wù)鞠失政敗與后宏能妨自芽動宮地肆重城新叫部申署掀計獎算梢任墨務(wù)感?？绾銎截溑_亂：J擺A晨V昂A實遇現(xiàn)爽支執(zhí)持徑各溫種才平獵臺過并卷支隱持沸多集種銀語亮言件的M紛a螺p飾R裕e四d衰u找c忠e搏.A表(我3茅0億)民+臭B公(疑2億)表A表棵做嘩聚姑合寒統(tǒng)建計湖查丑詢四，歪時灑間5分1耽2秒憤；A表永做憐數(shù)墊據(jù)預(yù)清褲洗期，虎時僻間1卻2分0醒7秒A表黎與B表j茶o嘗i毫n后邁做去聚賀合芽統(tǒng)膜計汁查門詢?nèi)?，鑒時竄間1徒4分3敗6秒測頌試宰結(jié)可果數(shù)陶據(jù)綢分純析蠻平障臺潮架址構(gòu)業(yè)腿務(wù)襲數(shù)初據(jù)忙庫業(yè)定務(wù)胳系面統(tǒng)數(shù)據(jù)接口大虧數(shù)蹄據(jù)謙處靠理厲集壓群任務(wù)調(diào)度平臺管理器元數(shù)據(jù)管理安全管理任務(wù)管理集群管理平臺管理平臺監(jiān)控HiveDevoloper文件管理處理結(jié)果導(dǎo)出ETL工具高速數(shù)據(jù)存取通用數(shù)據(jù)訪問數(shù)據(jù)統(tǒng)一管理可配置化無需編程業(yè)務(wù)處理與hadoop分離12345交斬易飲數(shù)崗據(jù)文紗件/郵盟件木數(shù)娛據(jù)客闖戶輛數(shù)單據(jù)設(shè)勿備/運(yùn)術(shù)行甜數(shù)誼據(jù)大葵數(shù)妨據(jù)戰(zhàn)處缺理藝平裁臺D聲a皆t繩a紙n鏟o較d綁eD剝a跡t器a蓬n省o迫d需eD摩a草t繼a模n映o窗d甲eD音a帽t陣a兵n體o咐d碗eN食a捉m墊e螺n艱o奸d暢eH拉D即F治SE城T咸L數(shù)翁據(jù)A掛1A教2A勉1A沈2A采1A惹2M努a仿p杠R緣瑞e絲式d嫩u井c競e任秀務(wù)繼管系理導(dǎo)與入導(dǎo)循入數(shù)歸據(jù)固清烏洗H普a蓄d久o音o畏p可企以愛存德貯P努B級哲別滑的否數(shù)五據(jù)賣，裂并松且窮每撤個暑文途件解在乖不端同冷的容機(jī)緊器老上招有2份犬或3份王備杏份僻，欣這稱樣白即躍使味一趣臺渣機(jī)盯子標(biāo)故溫障網(wǎng)，冒將糠不健會郊影辛響私系耕統(tǒng)下的旦可灑用枝性勞。大測數(shù)蚊據(jù)胡處勺理晶平遞臺大疼數(shù)哈據(jù)倡存哨儲淹問售題錘的劃解恰決M層y滑S岔q要lH敘a侍d堅o歐o悶p集項群E染T散L工宰具平痰臺誘數(shù)溉據(jù)透轉(zhuǎn)隆換正服賀務(wù)3、匙轉(zhuǎn)慌換耍任暫務(wù)戀調(diào)沙用4、效數(shù)標(biāo)據(jù)付轉(zhuǎn)鮮換1、反數(shù)逐據(jù)可導(dǎo)喇入B浩I分移析B便I系帶統(tǒng)報伍表統(tǒng)查收詢數(shù)鎮(zhèn)據(jù)泄源S賢V巧CC繳B害DF賣F嬌P2、險數(shù)片據(jù)頭導(dǎo)丸入H森i添v房誠em宵a緣瑞p應(yīng)r鞏e臥d5濕.位1、竹報際表泛生蘆成5馳.杏2、墓特悄殊伸報驢表正生工成6煙、報岡表纏導(dǎo)厘出B寶I分備析牲效妻率駝的曉解壞決構(gòu)蹦建摔開羞源屋數(shù)胸?fù)?jù)烏服露務(wù)形平哨臺分藝布眾式庫數(shù)欲據(jù)暴庫未中樹間件數(shù)烘據(jù)蠅庫感節(jié)星點(diǎn)數(shù)扣據(jù)府庫嫁節(jié)驗點(diǎn)數(shù)旦據(jù)瓦庫陰節(jié)鞠點(diǎn)數(shù)殘據(jù)五庫礦節(jié)蝦點(diǎn)可龜擴(kuò)振容課至1絕0縣2燙4個具節(jié)廢點(diǎn)界奏面遮化羨配糧置按需狂擴(kuò)疲容靈搞活疫緩陡存翠機(jī)譽(yù)制海：注請解諷式刊、配旅置嫂式疲、編植程徒式畢、A登O遣P攔擔(dān)截在旋應(yīng)面用譯和籌底譯層許數(shù)曠據(jù)查源沃之乒間暮，們構(gòu)酒建縮慧一橡層壺代盜理玻，桌統(tǒng)變一磚數(shù)秧據(jù)摟層退；垂梁直真切蛛分逆：癥數(shù)火據(jù)噴按訂業(yè)誘務(wù)躬劃哨分霜存皆儲挽在口不秋同歉的彈數(shù)次據(jù)納庫蜓，拒表蔽間井關(guān)頁聯(lián)時密訪切脅的剛表炒劃斯分紙在湖一量起告，豈例光如存同嚷一材模脈塊歌的雄表堪。水拳平酷切桂分飾：嚴(yán)將青同盯一記個芽表多中稱的叉不巾同幼數(shù)跡據(jù)衰拆黑分憶到妙不絲式同壩的裁數(shù)上據(jù)客庫夾中綢；統(tǒng)礙一扛數(shù)延據(jù)已訪毛問A途P松I：乘隱狡藏符后世端滾復(fù)規(guī)雜美數(shù)譜據(jù)涉分洲布江細(xì)耍節(jié)辮，浴數(shù)鳥據(jù)理庫綿操何作繡看浮起撥來氧就上像榜是肌在困同蓮一貍數(shù)母據(jù)晌庫戚中樹；建設(shè)目標(biāo)通過分布式集群實現(xiàn)分庫分表，解決大數(shù)據(jù)支撐問題；利用Galera，在客戶端與MySQL服務(wù)器之間抽象出一層“統(tǒng)一數(shù)據(jù)中間層”，統(tǒng)一數(shù)據(jù)中間層包含HA功能，以簡化MySQL的高可用環(huán)境的構(gòu)建；實現(xiàn)集群自動管控功能，包括節(jié)點(diǎn)增減、監(jiān)控等；實現(xiàn)數(shù)據(jù)服務(wù)云統(tǒng)瞇一議數(shù)容據(jù)拉服雖務(wù)氣平下臺氧中慈間拆層數(shù)基據(jù)喬服怠務(wù)陷平駛臺望架爸構(gòu)容圖易渠引絮起:重匙復(fù)添研北究法魄律桂問宅題包補(bǔ)版倦本談沖耳突系享統(tǒng)創(chuàng)不壞穩(wěn)扣定技禁術(shù)捏無伶法柱積狼累對呀人寄員吸要籮求境高研騎發(fā)君成振本施高后笨續(xù)畜維頃護(hù)豎成尊本跌高分卸享誓：開葵源技蹤蝶術(shù)膊統(tǒng)促一奮管柴理找的積必答要縮慧性平俯臺層視潮圖賣層框狐架續(xù)層中蛋間萄件籃層j瘦s：q頁u箱e播r隱y、d仍w拘r、s端w圾a狗t命o、G喝W尾T、p易r此o中t密o欄t蜓y陣p猛e…吩…U云I控套件俘：D碼h間t的m判l(wèi)、j若q啄u看e呼r煎y效U鉗I、E爺x妹t儀J鏟s、e亭a擴(kuò)s欺y寶u村i特…盯…J解S居P：v姿e滴l頂o殖c密i孫t咽y、t壯a(bǔ)蜘g、J玻F況S丙…錄…M知V羨C：s苗t浸r勸u典t座s母1、s陷t庭r賄u裳t修s脫2、s堆p除r傳i必n喜g、w另e續(xù)b預(yù)w波o昂r悠k影…隆…O錘R抖M：h方i所b繪e敘r術(shù)n鳴a陰t殃e、i辭b狗a村t岔i誓s、p疑e詳r壁s電i更s燭t歪…鋪…組配件揭：論日澇志凍類魂、獄工朗作巴流道類畏、X艱M臨L解悲釋線類踩、遇安聰全光類投、假緩爪存堆池蠟類主、凡接放口叼服崗務(wù)灑類喊、距數(shù)報據(jù)詢傳朱輸款類…閃…容狂器價：t巧o匹m皺c歸a硬t、j畝b悠o滾s再s、j括e賤t主t滋y、a芝p須a飲c練h、n囑g挎i抽n戚x…春…消堪息壁：a坦c態(tài)t樹i歷v始e收M仆q、m鐘u裹l幸e、o臉p蹦e歐n沫E漂S交B撕…艙.集杰群迅管游理：z傘o闖o納k霞e盛e揉p孩e旅r、h寶e素a暫r訂t羨b叼e階a之t、l臣v畫s、g俯a乓n笛g穴l緩i獎a、N跌a漠g羽i漲o雨s芬…仍…D塵B：m胡y脆s泉q嘴l、P勸o廚s筐t旅g督r杯e省S兵Q腫L稼…床…N句o歡S刷Q栽L鏟:華h機(jī)a膠d知o船o言p、m遮o泄n并g殲o秤D漢B、h執(zhí)i誕v葛e、p攤i錫g太…衣…工小具逼：K階e撕t擺t串l析e、s冊q沈o候o絡(luò)p、d臥a石t友a(bǔ)焦x、c坡o初b軌a截r、M梢y況f快o市x印…夜.彈.…舅…開源技術(shù)推廣和應(yīng)用開源社區(qū)積極推廣，提升項目交付能力，降低IT成本…逐步完善和擴(kuò)展，形成技術(shù)積累基于開源社區(qū)實現(xiàn)四大統(tǒng)一對選定的技術(shù)逐步優(yōu)化和擴(kuò)展功能開源技術(shù)統(tǒng)一選型公用包統(tǒng)一管理開發(fā)框架統(tǒng)一封裝通用組件統(tǒng)一研發(fā)分幣享獄：俯開芬源戲技獸術(shù)乒管卵理肉策柳略分栗享賤：開童源抗技狂術(shù)法管濾理遺方風(fēng)法公梅用臘開絞源顛包蒼用m添a坑v旺e幻玉n進(jìn)酷行州統(tǒng)精一旅管靜理滅，換形晉成喪企裝業(yè)艇開咐源宮庫占抵領(lǐng)頃開雙源隆技勢術(shù)渡前違沿節(jié)街約荒成泛本把、額滿忠足孝業(yè)血務(wù)撐需貢求開染源奔技以術(shù)泥統(tǒng)言一盯選純型開女發(fā)少框庸架盛統(tǒng)撇一槐封唉裝通糊用圖組溫件腳統(tǒng)莊一萄研害發(fā)產(chǎn)品評估技能評估法律評估ROI評估研發(fā)團(tuán)隊企業(yè)開源軟件庫優(yōu)化完善MVC框架持久化框架UI框架開發(fā)規(guī)范開發(fā)工具推廣實施實湖現(xiàn)嘆工艷具撥化仁、猾模陸塊痰化戚、篩規(guī)其范趁化技術(shù)選型組件開發(fā)組件推廣組件完善組件梳理逐步積累實現(xiàn)重用降低成本提高質(zhì)量分專享工：剖開租源制技倍術(shù)宰的強(qiáng)推駱進(jìn)居策蘆略開工源燦實漸驗青室技術(shù)選型、架構(gòu)設(shè)計、技術(shù)研究、產(chǎn)品研發(fā).開源技術(shù)研發(fā)工作：將技術(shù)推廣到每個項目組，每個程序員，讓大家都用起來。技術(shù)推廣：提升交付能力：通過積累開源技術(shù)能力，達(dá)到降低成本，提高效率的目的。分析技術(shù)需求、設(shè)定技術(shù)目標(biāo)、制定技術(shù)規(guī)范。規(guī)劃與設(shè)計：去IOE化降低成本解決性能和大數(shù)據(jù)問題簡化開源技術(shù)降低難度技術(shù)規(guī)劃與推廣分劇享只：頓組抖織限機(jī)潑構(gòu)腎設(shè)座計技凡術(shù)狂小曠組（京虛桑擬優(yōu)團(tuán)供隊希）開宜源實袋驗隊室研掛發(fā)斗團(tuán)打隊公孟司拘領(lǐng)弦導(dǎo)項蛇目粒經(jīng)沫理胸團(tuán)技隊需漁求亦提膝出技替術(shù)該發(fā)若展浸規(guī)懲劃規(guī)途范乒制淋訂技焦術(shù)石評羨審開鉤源價項禽目吃驗絞收開連源濾產(chǎn)鋪品擔(dān)研乘究日、居測床試房誠、挪封峰裝懷、房誠開頃發(fā)…呀…架構(gòu)師團(tuán)隊實施推廣團(tuán)隊架構(gòu)師技字術(shù)門評喇估技砌術(shù)魔選胃型技記術(shù)臣目設(shè)標(biāo)中制絮訂架懼構(gòu)圣設(shè)扇計開氣源仰管嗚理技賀術(shù)博文堡檔梯編論寫技牲術(shù)敞培限訓(xùn)技氏術(shù)縫網(wǎng)型站兵維捆護(hù)項慮目弦技壓術(shù)丟支腔持技直術(shù)呀戰(zhàn)韻略調(diào)銀配霜資榴源南濤航您推利進(jìn)引軟色件重開輔源夜化體成伯果1建各立喜以殿五汗大殘數(shù)述據(jù)動核罵心壓為奇基門礎(chǔ)的雙開棟源槐化S岔O庭A平侮臺通五過谷開膚源叛化降，君已潑經(jīng)刺完棵成氧旅略客紛信減息肺、繭旅率客蹲行露為分、蒼運(yùn)柳行伸控狀制信挖息炒三大舅核心表數(shù)肆據(jù)吸庫及面跳向S廚O乘A核怒心創(chuàng)服刻務(wù)嬸平切臺困。2移惱動挨化澇、整芝合絹業(yè)啄務(wù)辛應(yīng)厘用周端在司