系統(tǒng)后臺批量業(yè)務處理精細化管理

1、成果上報申請書（同2010年）成果名稱系統(tǒng)后臺批量業(yè)務處理精細化管理成果申報單位成果承擔部門/分公司項目負責人姓名項目負責人聯(lián)系電話和email成果專業(yè)類別*業(yè)務支撐所屬專業(yè)部門*業(yè)務支撐線條成果研究類別*新產(chǎn)品開發(fā)省內評審結果*（按填寫說明4）關鍵詞索引（35個）應用投資產(chǎn)品版權歸屬單位對企業(yè)現(xiàn)有標準規(guī)范的符合度：（按填寫說明5）如果該成果來源于研發(fā)項目，請?zhí)顚懷邪l(fā)項目的年度、名稱和類型（類型包括：集團重點研發(fā)項目、集團聯(lián)合研發(fā)項目、省公司重點研發(fā)項目、其他研發(fā)項目），可填寫多個：研發(fā)項目年度：2010年至2011年，名稱系統(tǒng)后臺批量業(yè)務處理精細化管理，類型：其他研發(fā)項目成果簡介：簡要描述成

2、果目的和意義，解決的問題，取得的社會和經(jīng)濟效益。系統(tǒng)后臺批量業(yè)務處理是指“部署于系統(tǒng)后臺，定時執(zhí)行，對批量的用戶或系統(tǒng)數(shù)據(jù)進行處理的作業(yè)計劃”，如：后臺資費到期、包年續(xù)簽、返費、費用提醒等等業(yè)務均是通過后臺批處理實現(xiàn)。這些批處理如果得不到很好的管理，則批處理得不到正確、及時的執(zhí)行，一旦出現(xiàn)此種情況，就會對相應的業(yè)務產(chǎn)生重大影響，舉例來說：如果2月1日的資費到期批處理沒有正常執(zhí)行，則會有幾萬甚至幾十萬的用戶出現(xiàn)資費錯誤的情況，而一旦用戶資費錯誤，則會造成計費錯誤、用戶誤停機等等嚴重問題。所以，系統(tǒng)后臺的批處理是業(yè)務支撐系統(tǒng)的關鍵構成部分之一，其重要程度絲毫不亞于前臺業(yè)務操作功能，對批處理的管理要

3、求我們做到更加精細、嚴格。我省后臺批處理極其繁多（達到200多種），實現(xiàn)了多種業(yè)務功能，但長久以來均缺少有效的管理方式：各種批處理分散設置于多處、各自為政，調度、運行、結果等情況雜亂無章、無跡可尋，無統(tǒng)一的時間計劃安排，無統(tǒng)一的資源分配安排，進而導致了極易產(chǎn)生資源沖突、影響營業(yè)生產(chǎn)的現(xiàn)象，另外，每次系統(tǒng)升級、維護停機等過程中，均需要大范圍梳理、確認，耗費了大量人力資源。基于以上背景黑龍江省提出了“系統(tǒng)后臺批處理精細化管理”項目，改變對業(yè)務支撐系統(tǒng)批處理的管理技術及模式。項目完成后，徹底解決了上述問題，系統(tǒng)后臺批量業(yè)務處理得到有效管理，能夠及時、穩(wěn)定、按部就班的完成業(yè)務處理，大幅提升用戶業(yè)務數(shù)據(jù)

4、處理的準確性、及時性；另外，系統(tǒng)的信息收集功能也為業(yè)務功能優(yōu)化提供了數(shù)據(jù)信息基礎，為提升業(yè)務支撐系統(tǒng)整體的處理性能、保障系統(tǒng)運行奠定了基礎。省內試運行效果：描述成果引入后在本省試運行方案、取得的效果、推廣價值和建議等。通過在我省近6個月的試運行，收效顯著：（1）可實現(xiàn)集中化、可視化管理各系統(tǒng)、主機部署的批處理作業(yè)得到集中，實現(xiàn)了便捷的設置、調整，可直觀統(tǒng)計到批處理作業(yè)的時間分布信息以及調度信息。（2）從整體角度設置、管理全部批處理通過對集中后的全部批處理作業(yè)的設置時間、執(zhí)行時長等信息進行分析，發(fā)現(xiàn)了系統(tǒng)批處理作業(yè)的“熱點”，通過對設置時間進行調整，將“熱點”消除，避免了對業(yè)務支撐系統(tǒng)的整體產(chǎn)生

5、影響，對系統(tǒng)整體起到了優(yōu)化作用。另外，諸如數(shù)據(jù)庫維護性啟動等操作過程中，不再需要所有應用管理人員再大范圍梳理、確認操作對批處理的影響，只要根據(jù)管理功能中的設置情況確認哪些需要暫停處理、哪些需要補充處理即可，節(jié)省了大量時間、人力資源。（3）減少投資通過試用，成果所起到的作用已完全滿足我省的需要，原采購bmc的control-m工具計劃已經(jīng)取消，為公司節(jié)約了投資開支近300萬元。文章主體（3000字以上，可附在表格后）：根據(jù)成果研究類別，主體內容的要求有差異，具體要求見表格后的“填寫說明6”。一、 業(yè)務及功能簡介:系統(tǒng)后臺批量業(yè)務處理是指“部署于系統(tǒng)后臺，定時執(zhí)行，對批量的用戶或系統(tǒng)數(shù)據(jù)進行處理的

6、作業(yè)計劃”，如：后臺資費到期、包年續(xù)簽、返費、費用提醒等等業(yè)務均是通過后臺批處理實現(xiàn)。我省后臺批處理極其繁多，實現(xiàn)了多種業(yè)務功能，這些批處理如果得不到很好的管理，則批處理得不到正確、及時的執(zhí)行，一旦出現(xiàn)此種情況，就會對相應的業(yè)務產(chǎn)生重大影響，舉例來說：如果2月1日的資費到期批處理沒有正常執(zhí)行，則會有幾萬甚至幾十萬的用戶出現(xiàn)資費錯誤的情況，而一旦用戶資費錯誤，則會造成計費錯誤、用戶誤停機等等嚴重問題。所以，系統(tǒng)后臺的批處理是業(yè)務支撐系統(tǒng)的關鍵構成部分之一，其重要程度絲毫不亞于前臺業(yè)務操作功能，對批處理的管理要求我們做到更加精細、嚴格。二、 原有系統(tǒng)實現(xiàn)流程及存在的問題：我省營業(yè)系統(tǒng)的后臺批處理處

7、于多主機部署、多人管理，無統(tǒng)一執(zhí)行計劃的狀態(tài)之下，此種情況會造成批處理作業(yè)執(zhí)行的時間處于無計劃狀態(tài)，相互之間會產(chǎn)生交叉，從而會導致同一時刻有多作業(yè)并行執(zhí)行的情況，可能造成系統(tǒng)資源的沖突問題。原部署是采用aix操作系統(tǒng)的crontab功能來設置批處理作業(yè)的執(zhí)行，見下圖：其設置方法極不利于明確各作業(yè)的部署、時間安排情況，同時作業(yè)的調度、執(zhí)行等情況信息也無法通過crontab設置來直觀體現(xiàn)，作業(yè)是否被調度成功需分析相應的日志方可得出結論，如果有的作業(yè)沒有產(chǎn)生日志，則無從掌握作業(yè)是否已經(jīng)被調度。各種批處理分散設置于多處、各自為政，調度、運行、結果等情況雜亂無章、無跡可尋，無統(tǒng)一的時間計劃安排，無統(tǒng)一的

8、資源分配安排，進而導致了極易產(chǎn)生資源沖突、影響營業(yè)生產(chǎn)的現(xiàn)象。多主機部署、多人管理模式，在進行系統(tǒng)維護性停機、升級期間，需要多人來分析、確認多主機上布置的作業(yè)與停機、升級操作是否產(chǎn)生沖突，如果不確認，則會產(chǎn)生某些批處理因停機、升級而未被執(zhí)行的情況，因此需消耗很大的人力資源來完成重復性的分析、確認工作。造成上述問題的關鍵問題就是：對批處理未做到統(tǒng)一的精細化管理。三、 優(yōu)化后的實現(xiàn)流程：欲解決上述問題，則需工具化實現(xiàn)統(tǒng)一管理、統(tǒng)一調度后臺批處理，經(jīng)綜合討論、分析，我們設計出如下方案：對所有批量業(yè)務處理的“任務信息”，實現(xiàn)集中配置、任務集中分配、運行情況集中跟蹤、信息集中收集的管理模式；對所有批量業(yè)

9、務處理的“任務實施”，實現(xiàn)“被動”接收任務、任務實施、任務進展情況及信息反饋等被管理模式。“任務實施”過程受“任務信息管理方”管控，以此實現(xiàn)任務的統(tǒng)一調度、管理。具體實現(xiàn)方案及流程：1、采用c/s架構實現(xiàn)管理與調度；2、基于數(shù)據(jù)庫（oracle）實現(xiàn)配置內容的存儲，配置內容統(tǒng)一納入表管理，要包含下述信息：批處理序號、批處理狀態(tài)（啟用、暫停、廢棄）、批處理狀態(tài)設置時間、批處理名稱、批處理管理人、設置執(zhí)行年、設置執(zhí)行月、設置執(zhí)行周、設置執(zhí)行日、設置執(zhí)行小時、設置執(zhí)行分鐘、執(zhí)行狀態(tài)（待執(zhí)行或正在執(zhí)行）、最后一次運行時間、下一次執(zhí)行時間、手動執(zhí)行標志（手動立即、非手動立即執(zhí)行）、手動執(zhí)行時間設置、運行

10、主機、運行主機ip、運行主機登錄用戶、調用shell目錄、調用shell名稱、調用shell輸出日志目錄、調用shell輸出日志名稱等必須信息。設置截圖如下：3、開發(fā)server程序，要實現(xiàn)對配置內容的解讀、調度位置識別、調度操作人（系統(tǒng)用戶）識別、任務分配、啟動判定、啟動結果處理、執(zhí)行結果處理、“下次執(zhí)行時間”預測等功能；4、開發(fā)client端程序，要實現(xiàn)本地時間信息向server端反饋、任務信息接收、任務啟動（實施）、任務啟動結果反饋、任務執(zhí)行結果反饋等功能；5、server與client端通過socket通信以及多線程技術實現(xiàn)對話、多并發(fā)處理，以滿足復雜多樣、不同執(zhí)行時長、不同啟動時間設

11、置的批處理要求。設計實現(xiàn)流程圖如下：四、 優(yōu)化后達到的效果（1）可實現(xiàn)集中化、可視化管理各系統(tǒng)、主機部署的批處理作業(yè)得到集中，實現(xiàn)了便捷的設置、調整，可直觀統(tǒng)計到批處理作業(yè)的時間分布信息以及調度信息。目前系統(tǒng)已經(jīng)承載了我省233個后臺批量業(yè)務處理功能，對這些業(yè)務真正做到了集中、有效的管理，不再是散亂、無序的管理狀態(tài)。（2）從整體角度設置、管理全部批處理通過對集中后的全部批處理作業(yè)的設置時間、執(zhí)行時長等信息進行分析，發(fā)現(xiàn)了系統(tǒng)批處理作業(yè)的“熱點”，通過對設置時間進行調整，將“熱點”消除，避免了對業(yè)務支撐系統(tǒng)的整體產(chǎn)生影響，對系統(tǒng)整體起到了優(yōu)化作用，從系統(tǒng)上線至今，根據(jù)系統(tǒng)自行收集的各業(yè)務功能運行

12、數(shù)據(jù)，我中心分析并有重點的對十多個效率低、占用資源大、消耗時間長的業(yè)務功能進行了優(yōu)化，大幅提升了業(yè)務功能的效率、降低了系統(tǒng)整體資源消耗、提升了業(yè)務支撐系統(tǒng)的整體受力性能。另外，諸如數(shù)據(jù)庫10g升級、容災應急演練、日常維護性重啟數(shù)據(jù)庫等工作中，已經(jīng)不再需要所有應用管理人員再大范圍梳理、確認操作對批處理的影響，只要根據(jù)管理功能中的設置情況確認哪些需要暫停處理、哪些需要補充處理即可，節(jié)省了大量時間、人力資源。（3）投資效益本管理系統(tǒng)的設計、開發(fā)等均為我公司自行完成，投資小，且擁有完全知識產(chǎn)權。另外，通過試用，成果所起到的作用已完全滿足我省的需要，原采購bmc的control-m工具計劃已經(jīng)取消，為公

13、司節(jié)約了投資開支300萬元以上?！俺晒蠄笊暾垥钡奶顚懻f明：1、“成果專業(yè)類別”指：核心網(wǎng)、無線、傳輸、ip、網(wǎng)管、業(yè)務支撐、管理信息系統(tǒng)、市場研究、數(shù)據(jù)業(yè)務、數(shù)據(jù)網(wǎng)絡、通信電源、空調、其他。2、“成果研究類別”指：超前研究、新產(chǎn)品開發(fā)、相關網(wǎng)絡解決方案、現(xiàn)有業(yè)務優(yōu)化、其他。3、“所屬專業(yè)部門”指：完成該成果的單位在省公司或地市分公司所屬的專業(yè)部門線條。可填寫：規(guī)劃計劃線條、網(wǎng)絡線條、業(yè)務支撐線條、管理信息系統(tǒng)線條、數(shù)據(jù)線條、市場線條、集團客戶線條、其他。4、“省內評審結果”指：優(yōu)秀、通過。5、“對企業(yè)現(xiàn)有標準規(guī)范的符合度”指：列舉該成果使用并符合的中國移動統(tǒng)一發(fā)布的企業(yè)標準的名稱和編號，詳

14、細描述該成果在現(xiàn)有的企業(yè)標準基礎上所需新增的功能要求（如業(yè)務流程的改變、設備新增的功能要求等）。6、“文章主體”：根據(jù)不同科技成果分類實施不同的主體要求，具體如下：1）超前研究類成果主體包括： 背景情況 技術特點分析 標準化情況 其他運營商應用情況（可選） 技術發(fā)展趨勢 引入策略分析2）相關網(wǎng)絡解決方案類成果主體包括： 背景情況 技術方案：概述、網(wǎng)絡解決方案（如果涉及到網(wǎng)絡方面的改造，信令改造，路由改造等，應有詳細的描述）、設備及系統(tǒng)改造/建設要求、碼號資源需求 效果（解決了哪些問題） 本省應用推廣情況3）新產(chǎn)品開發(fā)類成果主體包括： 業(yè)務及功能簡介：業(yè)務概述、業(yè)務主要功能介紹 技術實現(xiàn)方案：包括業(yè)務實現(xiàn)組網(wǎng)結構圖、相關系統(tǒng)（平臺、終端）功能和要求、業(yè)務實現(xiàn)流程、碼號要求等 業(yè)務申請和開通：包括用戶范圍及業(yè)務使用范圍、業(yè)務申請與注銷等 業(yè)務商務模式及資費：包括商務模式、業(yè)務資費模式、業(yè)務收費方式等 市場前景分析