系統(tǒng)后臺批量業(yè)務(wù)處理精細(xì)化管理

1、成果上報申請書（同2010年）成果名稱系統(tǒng)后臺批量業(yè)務(wù)處理精細(xì)化管理成果申報單位成果承擔(dān)部門/分公司項目負(fù)責(zé)人姓名項目負(fù)責(zé)人聯(lián)系電話和email成果專業(yè)類別*業(yè)務(wù)支撐所屬專業(yè)部門*業(yè)務(wù)支撐線條成果研究類別*新產(chǎn)品開發(fā)省內(nèi)評審結(jié)果*（按填寫說明4）關(guān)鍵詞索引（35個）應(yīng)用投資產(chǎn)品版權(quán)歸屬單位對企業(yè)現(xiàn)有標(biāo)準(zhǔn)規(guī)范的符合度：（按填寫說明5）如果該成果來源于研發(fā)項目，請?zhí)顚懷邪l(fā)項目的年度、名稱和類型（類型包括：集團(tuán)重點研發(fā)項目、集團(tuán)聯(lián)合研發(fā)項目、省公司重點研發(fā)項目、其他研發(fā)項目），可填寫多個：研發(fā)項目年度：2010年至2011年，名稱系統(tǒng)后臺批量業(yè)務(wù)處理精細(xì)化管理，類型：其他研發(fā)項目成果簡介：簡要描述成

2、果目的和意義，解決的問題，取得的社會和經(jīng)濟(jì)效益。系統(tǒng)后臺批量業(yè)務(wù)處理是指“部署于系統(tǒng)后臺，定時執(zhí)行，對批量的用戶或系統(tǒng)數(shù)據(jù)進(jìn)行處理的作業(yè)計劃”，如：后臺資費(fèi)到期、包年續(xù)簽、返費(fèi)、費(fèi)用提醒等等業(yè)務(wù)均是通過后臺批處理實現(xiàn)。這些批處理如果得不到很好的管理，則批處理得不到正確、及時的執(zhí)行，一旦出現(xiàn)此種情況，就會對相應(yīng)的業(yè)務(wù)產(chǎn)生重大影響，舉例來說：如果2月1日的資費(fèi)到期批處理沒有正常執(zhí)行，則會有幾萬甚至幾十萬的用戶出現(xiàn)資費(fèi)錯誤的情況，而一旦用戶資費(fèi)錯誤，則會造成計費(fèi)錯誤、用戶誤停機(jī)等等嚴(yán)重問題。所以，系統(tǒng)后臺的批處理是業(yè)務(wù)支撐系統(tǒng)的關(guān)鍵構(gòu)成部分之一，其重要程度絲毫不亞于前臺業(yè)務(wù)操作功能，對批處理的管理要

3、求我們做到更加精細(xì)、嚴(yán)格。我省后臺批處理極其繁多（達(dá)到200多種），實現(xiàn)了多種業(yè)務(wù)功能，但長久以來均缺少有效的管理方式：各種批處理分散設(shè)置于多處、各自為政，調(diào)度、運(yùn)行、結(jié)果等情況雜亂無章、無跡可尋，無統(tǒng)一的時間計劃安排，無統(tǒng)一的資源分配安排，進(jìn)而導(dǎo)致了極易產(chǎn)生資源沖突、影響營業(yè)生產(chǎn)的現(xiàn)象，另外，每次系統(tǒng)升級、維護(hù)停機(jī)等過程中，均需要大范圍梳理、確認(rèn)，耗費(fèi)了大量人力資源。基于以上背景黑龍江省提出了“系統(tǒng)后臺批處理精細(xì)化管理”項目，改變對業(yè)務(wù)支撐系統(tǒng)批處理的管理技術(shù)及模式。項目完成后，徹底解決了上述問題，系統(tǒng)后臺批量業(yè)務(wù)處理得到有效管理，能夠及時、穩(wěn)定、按部就班的完成業(yè)務(wù)處理，大幅提升用戶業(yè)務(wù)數(shù)據(jù)

4、處理的準(zhǔn)確性、及時性；另外，系統(tǒng)的信息收集功能也為業(yè)務(wù)功能優(yōu)化提供了數(shù)據(jù)信息基礎(chǔ)，為提升業(yè)務(wù)支撐系統(tǒng)整體的處理性能、保障系統(tǒng)運(yùn)行奠定了基礎(chǔ)。省內(nèi)試運(yùn)行效果：描述成果引入后在本省試運(yùn)行方案、取得的效果、推廣價值和建議等。通過在我省近6個月的試運(yùn)行，收效顯著：（1）可實現(xiàn)集中化、可視化管理各系統(tǒng)、主機(jī)部署的批處理作業(yè)得到集中，實現(xiàn)了便捷的設(shè)置、調(diào)整，可直觀統(tǒng)計到批處理作業(yè)的時間分布信息以及調(diào)度信息。（2）從整體角度設(shè)置、管理全部批處理通過對集中后的全部批處理作業(yè)的設(shè)置時間、執(zhí)行時長等信息進(jìn)行分析，發(fā)現(xiàn)了系統(tǒng)批處理作業(yè)的“熱點”，通過對設(shè)置時間進(jìn)行調(diào)整，將“熱點”消除，避免了對業(yè)務(wù)支撐系統(tǒng)的整體產(chǎn)生

5、影響，對系統(tǒng)整體起到了優(yōu)化作用。另外，諸如數(shù)據(jù)庫維護(hù)性啟動等操作過程中，不再需要所有應(yīng)用管理人員再大范圍梳理、確認(rèn)操作對批處理的影響，只要根據(jù)管理功能中的設(shè)置情況確認(rèn)哪些需要暫停處理、哪些需要補(bǔ)充處理即可，節(jié)省了大量時間、人力資源。（3）減少投資通過試用，成果所起到的作用已完全滿足我省的需要，原采購bmc的control-m工具計劃已經(jīng)取消，為公司節(jié)約了投資開支近300萬元。文章主體（3000字以上，可附在表格后）：根據(jù)成果研究類別，主體內(nèi)容的要求有差異，具體要求見表格后的“填寫說明6”。一、 業(yè)務(wù)及功能簡介:系統(tǒng)后臺批量業(yè)務(wù)處理是指“部署于系統(tǒng)后臺，定時執(zhí)行，對批量的用戶或系統(tǒng)數(shù)據(jù)進(jìn)行處理的

6、作業(yè)計劃”，如：后臺資費(fèi)到期、包年續(xù)簽、返費(fèi)、費(fèi)用提醒等等業(yè)務(wù)均是通過后臺批處理實現(xiàn)。我省后臺批處理極其繁多，實現(xiàn)了多種業(yè)務(wù)功能，這些批處理如果得不到很好的管理，則批處理得不到正確、及時的執(zhí)行，一旦出現(xiàn)此種情況，就會對相應(yīng)的業(yè)務(wù)產(chǎn)生重大影響，舉例來說：如果2月1日的資費(fèi)到期批處理沒有正常執(zhí)行，則會有幾萬甚至幾十萬的用戶出現(xiàn)資費(fèi)錯誤的情況，而一旦用戶資費(fèi)錯誤，則會造成計費(fèi)錯誤、用戶誤停機(jī)等等嚴(yán)重問題。所以，系統(tǒng)后臺的批處理是業(yè)務(wù)支撐系統(tǒng)的關(guān)鍵構(gòu)成部分之一，其重要程度絲毫不亞于前臺業(yè)務(wù)操作功能，對批處理的管理要求我們做到更加精細(xì)、嚴(yán)格。二、 原有系統(tǒng)實現(xiàn)流程及存在的問題：我省營業(yè)系統(tǒng)的后臺批處理處

7、于多主機(jī)部署、多人管理，無統(tǒng)一執(zhí)行計劃的狀態(tài)之下，此種情況會造成批處理作業(yè)執(zhí)行的時間處于無計劃狀態(tài)，相互之間會產(chǎn)生交叉，從而會導(dǎo)致同一時刻有多作業(yè)并行執(zhí)行的情況，可能造成系統(tǒng)資源的沖突問題。原部署是采用aix操作系統(tǒng)的crontab功能來設(shè)置批處理作業(yè)的執(zhí)行，見下圖：其設(shè)置方法極不利于明確各作業(yè)的部署、時間安排情況，同時作業(yè)的調(diào)度、執(zhí)行等情況信息也無法通過crontab設(shè)置來直觀體現(xiàn)，作業(yè)是否被調(diào)度成功需分析相應(yīng)的日志方可得出結(jié)論，如果有的作業(yè)沒有產(chǎn)生日志，則無從掌握作業(yè)是否已經(jīng)被調(diào)度。各種批處理分散設(shè)置于多處、各自為政，調(diào)度、運(yùn)行、結(jié)果等情況雜亂無章、無跡可尋，無統(tǒng)一的時間計劃安排，無統(tǒng)一的

8、資源分配安排，進(jìn)而導(dǎo)致了極易產(chǎn)生資源沖突、影響營業(yè)生產(chǎn)的現(xiàn)象。多主機(jī)部署、多人管理模式，在進(jìn)行系統(tǒng)維護(hù)性停機(jī)、升級期間，需要多人來分析、確認(rèn)多主機(jī)上布置的作業(yè)與停機(jī)、升級操作是否產(chǎn)生沖突，如果不確認(rèn)，則會產(chǎn)生某些批處理因停機(jī)、升級而未被執(zhí)行的情況，因此需消耗很大的人力資源來完成重復(fù)性的分析、確認(rèn)工作。造成上述問題的關(guān)鍵問題就是：對批處理未做到統(tǒng)一的精細(xì)化管理。三、 優(yōu)化后的實現(xiàn)流程：欲解決上述問題，則需工具化實現(xiàn)統(tǒng)一管理、統(tǒng)一調(diào)度后臺批處理，經(jīng)綜合討論、分析，我們設(shè)計出如下方案：對所有批量業(yè)務(wù)處理的“任務(wù)信息”，實現(xiàn)集中配置、任務(wù)集中分配、運(yùn)行情況集中跟蹤、信息集中收集的管理模式；對所有批量業(yè)

9、務(wù)處理的“任務(wù)實施”，實現(xiàn)“被動”接收任務(wù)、任務(wù)實施、任務(wù)進(jìn)展情況及信息反饋等被管理模式?！叭蝿?wù)實施”過程受“任務(wù)信息管理方”管控，以此實現(xiàn)任務(wù)的統(tǒng)一調(diào)度、管理。具體實現(xiàn)方案及流程：1、采用c/s架構(gòu)實現(xiàn)管理與調(diào)度；2、基于數(shù)據(jù)庫（oracle）實現(xiàn)配置內(nèi)容的存儲，配置內(nèi)容統(tǒng)一納入表管理，要包含下述信息：批處理序號、批處理狀態(tài)（啟用、暫停、廢棄）、批處理狀態(tài)設(shè)置時間、批處理名稱、批處理管理人、設(shè)置執(zhí)行年、設(shè)置執(zhí)行月、設(shè)置執(zhí)行周、設(shè)置執(zhí)行日、設(shè)置執(zhí)行小時、設(shè)置執(zhí)行分鐘、執(zhí)行狀態(tài)（待執(zhí)行或正在執(zhí)行）、最后一次運(yùn)行時間、下一次執(zhí)行時間、手動執(zhí)行標(biāo)志（手動立即、非手動立即執(zhí)行）、手動執(zhí)行時間設(shè)置、運(yùn)行

10、主機(jī)、運(yùn)行主機(jī)ip、運(yùn)行主機(jī)登錄用戶、調(diào)用shell目錄、調(diào)用shell名稱、調(diào)用shell輸出日志目錄、調(diào)用shell輸出日志名稱等必須信息。設(shè)置截圖如下：3、開發(fā)server程序，要實現(xiàn)對配置內(nèi)容的解讀、調(diào)度位置識別、調(diào)度操作人（系統(tǒng)用戶）識別、任務(wù)分配、啟動判定、啟動結(jié)果處理、執(zhí)行結(jié)果處理、“下次執(zhí)行時間”預(yù)測等功能；4、開發(fā)client端程序，要實現(xiàn)本地時間信息向server端反饋、任務(wù)信息接收、任務(wù)啟動（實施）、任務(wù)啟動結(jié)果反饋、任務(wù)執(zhí)行結(jié)果反饋等功能；5、server與client端通過socket通信以及多線程技術(shù)實現(xiàn)對話、多并發(fā)處理，以滿足復(fù)雜多樣、不同執(zhí)行時長、不同啟動時間設(shè)

11、置的批處理要求。設(shè)計實現(xiàn)流程圖如下：四、 優(yōu)化后達(dá)到的效果（1）可實現(xiàn)集中化、可視化管理各系統(tǒng)、主機(jī)部署的批處理作業(yè)得到集中，實現(xiàn)了便捷的設(shè)置、調(diào)整，可直觀統(tǒng)計到批處理作業(yè)的時間分布信息以及調(diào)度信息。目前系統(tǒng)已經(jīng)承載了我省233個后臺批量業(yè)務(wù)處理功能，對這些業(yè)務(wù)真正做到了集中、有效的管理，不再是散亂、無序的管理狀態(tài)。（2）從整體角度設(shè)置、管理全部批處理通過對集中后的全部批處理作業(yè)的設(shè)置時間、執(zhí)行時長等信息進(jìn)行分析，發(fā)現(xiàn)了系統(tǒng)批處理作業(yè)的“熱點”，通過對設(shè)置時間進(jìn)行調(diào)整，將“熱點”消除，避免了對業(yè)務(wù)支撐系統(tǒng)的整體產(chǎn)生影響，對系統(tǒng)整體起到了優(yōu)化作用，從系統(tǒng)上線至今，根據(jù)系統(tǒng)自行收集的各業(yè)務(wù)功能運(yùn)行

12、數(shù)據(jù)，我中心分析并有重點的對十多個效率低、占用資源大、消耗時間長的業(yè)務(wù)功能進(jìn)行了優(yōu)化，大幅提升了業(yè)務(wù)功能的效率、降低了系統(tǒng)整體資源消耗、提升了業(yè)務(wù)支撐系統(tǒng)的整體受力性能。另外，諸如數(shù)據(jù)庫10g升級、容災(zāi)應(yīng)急演練、日常維護(hù)性重啟數(shù)據(jù)庫等工作中，已經(jīng)不再需要所有應(yīng)用管理人員再大范圍梳理、確認(rèn)操作對批處理的影響，只要根據(jù)管理功能中的設(shè)置情況確認(rèn)哪些需要暫停處理、哪些需要補(bǔ)充處理即可，節(jié)省了大量時間、人力資源。（3）投資效益本管理系統(tǒng)的設(shè)計、開發(fā)等均為我公司自行完成，投資小，且擁有完全知識產(chǎn)權(quán)。另外，通過試用，成果所起到的作用已完全滿足我省的需要，原采購bmc的control-m工具計劃已經(jīng)取消，為公

13、司節(jié)約了投資開支300萬元以上?！俺晒蠄笊暾垥钡奶顚懻f明：1、“成果專業(yè)類別”指：核心網(wǎng)、無線、傳輸、ip、網(wǎng)管、業(yè)務(wù)支撐、管理信息系統(tǒng)、市場研究、數(shù)據(jù)業(yè)務(wù)、數(shù)據(jù)網(wǎng)絡(luò)、通信電源、空調(diào)、其他。2、“成果研究類別”指：超前研究、新產(chǎn)品開發(fā)、相關(guān)網(wǎng)絡(luò)解決方案、現(xiàn)有業(yè)務(wù)優(yōu)化、其他。3、“所屬專業(yè)部門”指：完成該成果的單位在省公司或地市分公司所屬的專業(yè)部門線條?？商顚懀阂?guī)劃計劃線條、網(wǎng)絡(luò)線條、業(yè)務(wù)支撐線條、管理信息系統(tǒng)線條、數(shù)據(jù)線條、市場線條、集團(tuán)客戶線條、其他。4、“省內(nèi)評審結(jié)果”指：優(yōu)秀、通過。5、“對企業(yè)現(xiàn)有標(biāo)準(zhǔn)規(guī)范的符合度”指：列舉該成果使用并符合的中國移動統(tǒng)一發(fā)布的企業(yè)標(biāo)準(zhǔn)的名稱和編號，詳

14、細(xì)描述該成果在現(xiàn)有的企業(yè)標(biāo)準(zhǔn)基礎(chǔ)上所需新增的功能要求（如業(yè)務(wù)流程的改變、設(shè)備新增的功能要求等）。6、“文章主體”：根據(jù)不同科技成果分類實施不同的主體要求，具體如下：1）超前研究類成果主體包括： 背景情況 技術(shù)特點分析 標(biāo)準(zhǔn)化情況 其他運(yùn)營商應(yīng)用情況（可選） 技術(shù)發(fā)展趨勢 引入策略分析2）相關(guān)網(wǎng)絡(luò)解決方案類成果主體包括： 背景情況 技術(shù)方案：概述、網(wǎng)絡(luò)解決方案（如果涉及到網(wǎng)絡(luò)方面的改造，信令改造，路由改造等，應(yīng)有詳細(xì)的描述）、設(shè)備及系統(tǒng)改造/建設(shè)要求、碼號資源需求 效果（解決了哪些問題） 本省應(yīng)用推廣情況3）新產(chǎn)品開發(fā)類成果主體包括： 業(yè)務(wù)及功能簡介：業(yè)務(wù)概述、業(yè)務(wù)主要功能介紹 技術(shù)實現(xiàn)方案：包括業(yè)務(wù)實現(xiàn)組網(wǎng)結(jié)構(gòu)圖、相關(guān)系統(tǒng)（平臺、終端）功能和要求、業(yè)務(wù)實現(xiàn)流程、碼號要求等 業(yè)務(wù)申請和開通：包括用戶范圍及業(yè)務(wù)使用范圍、業(yè)務(wù)申請與注銷等 業(yè)務(wù)商務(wù)模式及資費(fèi)：包括商務(wù)模式、業(yè)務(wù)資費(fèi)模式、業(yè)務(wù)收費(fèi)方式等 市場前景分析