銀行卡作業(yè)調(diào)度與監(jiān)控管理系統(tǒng)概要設(shè)計(jì)

1、銀行卡作業(yè)調(diào)度監(jiān)控系統(tǒng)概要設(shè)計(jì)說明書(補(bǔ)充文檔)（前臺(tái)）文檔信息 Document Information項(xiàng)目名稱（中文）Project Name：銀行卡統(tǒng)計(jì)分析系統(tǒng)項(xiàng)目名稱（英文）Project Name：文檔名稱 Document Title：概要設(shè)計(jì)說明書文檔密級(jí) Document Security Level：內(nèi)部閱讀版本號(hào) Version Number：V1.0負(fù)責(zé)人 Administrator：編寫人 Issued by：創(chuàng)建日期 Create Time：最后修改日期Last Saved Time：修改人 Last Saved by：狀態(tài) Status：目 錄1引言11.1編寫目的

2、11.2術(shù)語11.3參考資料21.4適用范圍21.5背景21.6目標(biāo)31.7實(shí)施原則31.7.1可用性和易操作性31.7.2易維護(hù)性31.7.3先進(jìn)性和可擴(kuò)展性31.7.4保護(hù)現(xiàn)有資源42總體設(shè)計(jì)42.1邏輯架構(gòu)42.2網(wǎng)絡(luò)拓?fù)浼軜?gòu)53功能模塊設(shè)計(jì)53.1總體說明53.2功能模塊63.3功能實(shí)現(xiàn)63.3.1日志文件的讀取功能63.3.2靈活配置作業(yè)鏈74系統(tǒng)設(shè)備及軟件要求74.1數(shù)據(jù)量的估算74.2生產(chǎn)環(huán)境硬件配置74.3開發(fā)環(huán)境硬件配置84.4軟件配置81引言1.1編寫目的概要設(shè)計(jì)說明書(補(bǔ)充文檔)的編制目的是說明一個(gè)軟件系統(tǒng)各個(gè)層次中的每個(gè)模塊的設(shè)計(jì)考慮，如果一個(gè)軟件系統(tǒng)比較簡(jiǎn)單，層次很少

3、，本文件可以不單獨(dú)編寫，有關(guān)內(nèi)容合并入概要(系統(tǒng))設(shè)計(jì)說明書。對(duì)概要設(shè)計(jì)說明書的內(nèi)容要求如下。1.2術(shù)語n 數(shù)據(jù)源：指系統(tǒng)涉及到的原始數(shù)據(jù)來源，本系統(tǒng)包括：ABIS(綜合業(yè)務(wù)系統(tǒng))、ABIS 中間層、BCSC(銀行卡交換中心系統(tǒng))、AIPS(綜合應(yīng)用前置系統(tǒng))、國際卡系統(tǒng)和輔助采集部分。n 卡基礎(chǔ)數(shù)據(jù)：包括日源數(shù)據(jù)加載區(qū)，臨時(shí)過渡區(qū)和基礎(chǔ)數(shù)據(jù)區(qū)三個(gè)部分。n 日源數(shù)據(jù)加載區(qū)：數(shù)據(jù)源經(jīng)過初清洗、加工形成每天的源數(shù)據(jù)，日源數(shù)據(jù)加載區(qū)只保留每天的增量數(shù)據(jù)（月底全量）。n 臨時(shí)過渡區(qū)：數(shù)據(jù)加工過程中需要利用的臨時(shí)緩沖區(qū)，主要使用在數(shù)據(jù)日源數(shù)據(jù)加載區(qū)到基礎(chǔ)數(shù)據(jù)區(qū)；基礎(chǔ)數(shù)據(jù)區(qū)到應(yīng)用數(shù)據(jù)區(qū)、多維分析數(shù)據(jù)區(qū)；應(yīng)

4、用數(shù)據(jù)區(qū)到多維分析數(shù)據(jù)區(qū)幾個(gè)階段。n 基礎(chǔ)數(shù)據(jù)區(qū)：日源數(shù)據(jù)加載區(qū)的數(shù)據(jù)經(jīng)過加工形成基礎(chǔ)數(shù)據(jù)區(qū)，基礎(chǔ)數(shù)據(jù)區(qū)的數(shù)據(jù)包括類源數(shù)據(jù)基礎(chǔ)檔案，靜態(tài)數(shù)據(jù)檔案和輔助采集數(shù)據(jù)檔案三個(gè)部分。n 類源數(shù)據(jù)基礎(chǔ)檔案：n 卡應(yīng)用集市：卡應(yīng)用集市是對(duì)卡基礎(chǔ)數(shù)據(jù)平臺(tái)的數(shù)據(jù)進(jìn)行深加工、統(tǒng)計(jì)生成的，主要包括應(yīng)用數(shù)據(jù)區(qū)、多維數(shù)據(jù)區(qū)和多維立方體。n 應(yīng)用數(shù)據(jù)區(qū)：基礎(chǔ)數(shù)據(jù)區(qū)的數(shù)據(jù)經(jīng)過深加工、統(tǒng)計(jì)生成應(yīng)用數(shù)據(jù)區(qū)的數(shù)據(jù)，應(yīng)用數(shù)據(jù)區(qū)主要用來生成電子報(bào)表和生成多維分析區(qū)的數(shù)據(jù)。n 多維分析區(qū)：基礎(chǔ)數(shù)據(jù)區(qū)和應(yīng)用數(shù)據(jù)區(qū)的數(shù)據(jù)經(jīng)過加工形成多維分析區(qū)。n 多維立方體：多維立方體用來提供多維分析、多維查詢、多維報(bào)表，多維立方體的數(shù)據(jù)是對(duì)多維分析區(qū)的

5、數(shù)據(jù)加工后生成的，包含銀行卡統(tǒng)計(jì)分析系統(tǒng)中的所有基本數(shù)據(jù)項(xiàng)。n 電子報(bào)表：根據(jù)銀行卡統(tǒng)計(jì)分析最終所需的報(bào)表格式制定，根據(jù)應(yīng)用數(shù)據(jù)區(qū)的數(shù)據(jù)生成報(bào)表格式文件（XML格式），再根據(jù)XML格式文件生成的。1.3參考資料銀行卡統(tǒng)計(jì)分析系統(tǒng)需求書銀行卡統(tǒng)計(jì)分析系統(tǒng)需求分析說明書數(shù)據(jù)源與基本數(shù)據(jù)項(xiàng)的映射關(guān)系1104工程監(jiān)管報(bào)表系統(tǒng)系統(tǒng)設(shè)計(jì)之總體框架v2.11104報(bào)表設(shè)計(jì)文檔1.4適用范圍1.5背景隨著銀行卡業(yè)務(wù)的快速發(fā)展，產(chǎn)品品種和業(yè)務(wù)功能日益增多，業(yè)務(wù)處理系統(tǒng)的不斷升級(jí)，銀行卡產(chǎn)品的系統(tǒng)也正處于由分散到集中的進(jìn)程中。而現(xiàn)有的報(bào)表系統(tǒng)是基于我行系統(tǒng)分散在地市行的模式下開發(fā)的，獨(dú)立于我行業(yè)務(wù)系統(tǒng)之外。報(bào)表的

6、生成以手工為主，是由發(fā)卡行按照卡部要求，從銀行卡業(yè)務(wù)系統(tǒng)中抽取要求上報(bào)的數(shù)據(jù)，輔助采集到報(bào)表系統(tǒng)中，再生成上報(bào)數(shù)據(jù)文件傳送到省行，匯總生成省報(bào)表，并通過我行辦公系統(tǒng)發(fā)送數(shù)省級(jí)報(bào)表文件到總行，總行統(tǒng)計(jì)人員再將分行的報(bào)表文件導(dǎo)入到報(bào)表系統(tǒng)中，生成全國的統(tǒng)計(jì)分析報(bào)表。該報(bào)表系統(tǒng)雖然為銀行卡業(yè)務(wù)經(jīng)營分析起到了重要的作用，但已不能滿足經(jīng)營管理的需要，主要有以下幾個(gè)方面的問題：一是數(shù)據(jù)輔助采集，不能完全保證準(zhǔn)確；二是報(bào)表生成環(huán)節(jié)多，匯總時(shí)間長(zhǎng)，任何一個(gè)環(huán)節(jié)產(chǎn)生問題，都會(huì)影響報(bào)表生成的及時(shí)性；三是報(bào)表系統(tǒng)缺乏靈活性，不能根據(jù)業(yè)務(wù)發(fā)展需要進(jìn)行調(diào)整；四是現(xiàn)有系統(tǒng)的容量有限，不能進(jìn)行復(fù)雜分析。我行銀行卡業(yè)務(wù)增長(zhǎng)方

7、式正由粗放逐漸走向集約，由數(shù)量型向質(zhì)量型轉(zhuǎn)變。由于目前我行銀行卡業(yè)務(wù)缺乏真正面向市場(chǎng)、面向客戶的分析系統(tǒng)，在客戶服務(wù)和管理上帶來了一定的難度。隨著中國全面開放金融業(yè)務(wù)的時(shí)間臨近，如何提高銀行卡綜合競(jìng)爭(zhēng)能力已擺到重要議事日程上，為了更好地提高銀行卡綜合競(jìng)爭(zhēng)力，更好地分析產(chǎn)品、細(xì)分市場(chǎng)，提高業(yè)務(wù)管理水平，特開發(fā)銀行卡統(tǒng)計(jì)分析系統(tǒng)。1.6目標(biāo)根據(jù)銀行卡統(tǒng)計(jì)分析的整體規(guī)劃，本項(xiàng)目分為近期目標(biāo)和遠(yuǎn)期目標(biāo)。近期目標(biāo)是實(shí)現(xiàn)銀行卡相關(guān)信息的統(tǒng)計(jì)，生成卡部所需要的報(bào)表，同時(shí)為實(shí)現(xiàn)遠(yuǎn)期目標(biāo)打下基礎(chǔ)。遠(yuǎn)期目標(biāo)是建立完備的銀行卡管理分析系統(tǒng)，提供經(jīng)營決策信息支持。通過信息采集、存儲(chǔ)，實(shí)現(xiàn)銀行卡業(yè)務(wù)的全面信息化管理，并

8、通過功能強(qiáng)大的信息管理分析工具，對(duì)銀行卡業(yè)務(wù)進(jìn)行全方位的立體信息挖掘，產(chǎn)生出各種經(jīng)營決策支持分析結(jié)果，提高銀行卡運(yùn)營機(jī)構(gòu)的高效性、實(shí)時(shí)性、分析的準(zhǔn)確性和科學(xué)性。為了實(shí)現(xiàn)以上這些目標(biāo)，本系統(tǒng)采用“統(tǒng)一規(guī)劃、全面考慮、分步實(shí)施”的策略，具體分為兩期建設(shè)：一期主要功能為：1、 完成對(duì)基本數(shù)據(jù)項(xiàng)的統(tǒng)計(jì)2、 實(shí)現(xiàn)業(yè)務(wù)部門提出的固定報(bào)表3、 完成相關(guān)數(shù)據(jù)的處理和積累4、 實(shí)現(xiàn)數(shù)據(jù)處理流程的自動(dòng)化5、 在條件許可的情況下，實(shí)現(xiàn)一些簡(jiǎn)單的分析。二期主要功能為：結(jié)合卡部需求，對(duì)一期的功能進(jìn)行補(bǔ)充，并實(shí)現(xiàn)我行卡業(yè)務(wù)的分析與挖掘。1.7實(shí)施原則銀行卡統(tǒng)計(jì)分析系統(tǒng)一期主要實(shí)現(xiàn)卡部的報(bào)表統(tǒng)計(jì)，二期要對(duì)我行卡業(yè)務(wù)進(jìn)行分析

9、和挖掘，一期要為二期的實(shí)施奠定基礎(chǔ)。因此在制定實(shí)施原則時(shí)，既應(yīng)充分考慮到當(dāng)前卡部生成統(tǒng)計(jì)報(bào)表的需求，更應(yīng)該統(tǒng)籌考慮日后二期建設(shè)的擴(kuò)展和相關(guān)系統(tǒng)的改造。總的實(shí)施原則主要包含以下幾點(diǎn)：1.7.1可用性和易操作性1.7.2易維護(hù)性1.7.3先進(jìn)性和可擴(kuò)展性銀行卡統(tǒng)計(jì)分析系統(tǒng)的建設(shè)既要考慮我行數(shù)據(jù)源多、需求差異大、地域分布廣的特點(diǎn)，又要兼顧全行各業(yè)務(wù)應(yīng)用系統(tǒng)、各主機(jī)平臺(tái)、全國網(wǎng)絡(luò)的現(xiàn)狀，充分考慮如何利用我行已經(jīng)買斷、技術(shù)先進(jìn)、有實(shí)用價(jià)值的軟硬件。既要防止因技術(shù)落后、體系陳舊使得系統(tǒng)沒有實(shí)用性，又要引進(jìn)技術(shù)先進(jìn)、成熟的技術(shù)實(shí)現(xiàn)手段，以加快系統(tǒng)建設(shè)步伐，保證系統(tǒng)的先進(jìn)性。同時(shí)，總體考慮系統(tǒng)物理平臺(tái)、軟件平

10、臺(tái)選擇、數(shù)據(jù)庫結(jié)構(gòu)設(shè)計(jì)、數(shù)據(jù)采集以及系統(tǒng)運(yùn)行效率等各方面，確保系統(tǒng)的可擴(kuò)展性，為未來發(fā)展保留足夠的空間。1.7.4保護(hù)現(xiàn)有資源充分借鑒1104、FARS，DAS和基礎(chǔ)數(shù)據(jù)平臺(tái)等系統(tǒng)的建設(shè)經(jīng)驗(yàn)，合理利用ABIS、AIPS等系統(tǒng)的資源合理規(guī)劃系統(tǒng)。2總體設(shè)計(jì)2.1邏輯架構(gòu)系統(tǒng)的總體邏輯架構(gòu)分為：數(shù)據(jù)源層、卡基礎(chǔ)數(shù)據(jù)層、卡應(yīng)用集市層和前臺(tái)展現(xiàn)層。數(shù)據(jù)源層主要包括從ABIS、AIPS、交換中心、國際卡系統(tǒng)、輔助采集系統(tǒng)等各數(shù)據(jù)源系統(tǒng)獲取的數(shù)據(jù)文件?？ɑA(chǔ)數(shù)據(jù)層包括日源數(shù)據(jù)加載區(qū)，臨時(shí)過渡區(qū)和基礎(chǔ)數(shù)據(jù)區(qū)幾個(gè)部分；日源數(shù)據(jù)加載區(qū)中的數(shù)據(jù)是數(shù)據(jù)源經(jīng)過初清洗、加工形成的，日源數(shù)據(jù)加載區(qū)只保留每天的增量數(shù)據(jù)（月

11、底全量）；臨時(shí)過渡區(qū)：存放加工過程中的臨時(shí)數(shù)據(jù)；基礎(chǔ)數(shù)據(jù)區(qū)：日源數(shù)據(jù)加載區(qū)的數(shù)據(jù)經(jīng)過加工形成基礎(chǔ)數(shù)據(jù)區(qū)，基礎(chǔ)數(shù)據(jù)區(qū)的數(shù)據(jù)包括類源數(shù)據(jù)基礎(chǔ)檔案，靜態(tài)數(shù)據(jù)檔案和輔助采集數(shù)據(jù)檔案三個(gè)部分?？☉?yīng)用集市主要是對(duì)卡基礎(chǔ)數(shù)據(jù)的數(shù)據(jù)進(jìn)行深加工、統(tǒng)計(jì)生成的，主要包括應(yīng)用數(shù)據(jù)區(qū)、多維數(shù)據(jù)區(qū)和多維立方體；應(yīng)用數(shù)據(jù)區(qū)的數(shù)據(jù)是由基礎(chǔ)數(shù)據(jù)區(qū)的數(shù)據(jù)經(jīng)過深加工、統(tǒng)計(jì)生成的，應(yīng)用數(shù)據(jù)區(qū)主要用來生成電子報(bào)表和生成多維分析區(qū)的數(shù)據(jù)；多維分析區(qū)的數(shù)據(jù)是由基礎(chǔ)數(shù)據(jù)區(qū)和應(yīng)用數(shù)據(jù)區(qū)的數(shù)據(jù)經(jīng)過加工形成的；多維立方體用來提供多維分析、多維查詢、多維報(bào)表，多維立方體的數(shù)據(jù)是對(duì)多維分析區(qū)的數(shù)據(jù)加工后生成的，包含銀行卡統(tǒng)計(jì)分析系統(tǒng)中的所有基本數(shù)據(jù)項(xiàng)

12、。前臺(tái)展現(xiàn)包括電子報(bào)表、定式查詢、隨意查詢、多維報(bào)表、多維查詢、多維分析和智能分析幾個(gè)部分；隨意查詢和智能分析在本期不實(shí)現(xiàn)。2.2網(wǎng)絡(luò)拓?fù)浼軜?gòu)銀行卡統(tǒng)計(jì)分析系統(tǒng)在設(shè)計(jì)時(shí)充分考慮到銀行的實(shí)際情況，既可以采用集中部署，也可以采用分布部署，同時(shí)也可以根據(jù)實(shí)際情況采用集中-分布部署。對(duì)任何一種部署方式系統(tǒng)用戶都可以到網(wǎng)點(diǎn)，但在實(shí)際部署時(shí)可以根據(jù)系統(tǒng)的性能只開放到一級(jí)分行、二級(jí)分行、支行中的任何一個(gè)級(jí)別。系統(tǒng)在設(shè)計(jì)時(shí)，做到了非常靈活的部署，滿足了銀行卡部目前和將來發(fā)展的需要。整個(gè)系統(tǒng)架構(gòu)在總行現(xiàn)有的OA網(wǎng)上，符合OA的各種規(guī)范，不需要在OA網(wǎng)上增加任何設(shè)備，充分利用了我行現(xiàn)有的資源。3功能模塊設(shè)計(jì)3.1

13、總體說明本擴(kuò)展功能模塊基于“銀行卡作業(yè)調(diào)度監(jiān)控系統(tǒng)”既有MVC框架設(shè)計(jì)模式，用IBATIS技術(shù)實(shí)現(xiàn)數(shù)據(jù)庫的讀取功能。為節(jié)省時(shí)間和成本以及為以后的維護(hù)升級(jí)工作提供方便，特在原有“銀行卡作業(yè)調(diào)度監(jiān)控系統(tǒng)”技術(shù)框架上進(jìn)行二次開發(fā)，所有功能實(shí)現(xiàn)、編程風(fēng)格全部繼承“銀行卡作業(yè)調(diào)度監(jiān)控系統(tǒng)”的規(guī)范。增加功能模塊：日志文件的讀取功能、作業(yè)鏈的靈活配置功能。3.2功能模塊3.3功能實(shí)現(xiàn)3.3.1日志文件的讀取功能系統(tǒng)日志管理功能是為安全性而設(shè)置的。系統(tǒng)日志反映了用戶操作系統(tǒng)的動(dòng)作，在系統(tǒng)不穩(wěn)定的時(shí)候，系統(tǒng)管理員可以根據(jù)系統(tǒng)日志迅速查找出原因，發(fā)現(xiàn)什么用戶在最近操作過系統(tǒng)，進(jìn)行過什么樣的操作，什么操作導(dǎo)致系統(tǒng)不

14、穩(wěn)定等等。系統(tǒng)管理員可通過菜單對(duì)系統(tǒng)日志進(jìn)行查詢、導(dǎo)出和備份。查詢服務(wù)器下各主機(jī)上的日志，每一條記錄對(duì)應(yīng)一條日志文件，根據(jù)運(yùn)行記錄時(shí)的條件來增加和讀取一條日志文件。1)作業(yè)信息表維護(hù)日志查看功能：本功能從跨平臺(tái)操作、讀取效率、實(shí)現(xiàn)方式、便于維護(hù)的角度綜合考慮，決定通過Ftp方式登錄主機(jī)將日志文件下載到本地，然后讀取文件內(nèi)容，再將下載到本地的日志文件刪除的過程。這一工作流程簡(jiǎn)單，且思路清晰，既實(shí)現(xiàn)了文件的下載與讀取功能，同時(shí)又及時(shí)將文件刪除，保證了多人操作下不會(huì)發(fā)生日志讀取錯(cuò)誤的情況。2)作業(yè)關(guān)系表維護(hù)日志查看功能：同1)。3)作業(yè)關(guān)系處理狀態(tài)表維護(hù)日志查看功能：同1)。3.3.2靈活配置作業(yè)鏈

15、靈活配置作業(yè)鏈?zhǔn)菫榱?)根據(jù)節(jié)點(diǎn)號(hào)修改作業(yè)狀態(tài)：根據(jù)提供的節(jié)點(diǎn)號(hào)修改“作業(yè)關(guān)系處理狀態(tài)”表中該節(jié)點(diǎn)號(hào)下所有本作業(yè)完成標(biāo)志和父作業(yè)完成標(biāo)志。算法原理與思想：根據(jù)頁面?zhèn)鬟f的節(jié)點(diǎn)號(hào)查找作業(yè)關(guān)系表中是否存在以該號(hào)碼為節(jié)點(diǎn)號(hào)的記錄，若為假則返回報(bào)錯(cuò)信息，若為真則查找出相應(yīng)記錄，并作更新。2)根據(jù)頭作業(yè)和尾作業(yè)修改作業(yè)狀態(tài)：根據(jù)提供的頭節(jié)點(diǎn)號(hào)、頭作業(yè)號(hào)和尾節(jié)點(diǎn)號(hào)、尾父作業(yè)號(hào)查找出兩個(gè)作業(yè)之間具有父子關(guān)系的所有記錄，并修改“作業(yè)關(guān)系處理狀態(tài)”表中該節(jié)點(diǎn)號(hào)下所有本作業(yè)完成標(biāo)志和父作業(yè)完成標(biāo)志；算法原理與思想：根據(jù)頭尾兩結(jié)點(diǎn)，用遞歸調(diào)用的方法從尾結(jié)點(diǎn)向頭結(jié)點(diǎn)找起，首先判斷探索是否結(jié)束，即該尾結(jié)點(diǎn)是否具有最終父結(jié)

16、點(diǎn)特征，若真，則本次調(diào)用結(jié)束，若假，則查找出具有尾結(jié)點(diǎn)特征的所有記錄和記錄數(shù)，并查看其父節(jié)點(diǎn)號(hào)和父作業(yè)號(hào)是否與頭結(jié)點(diǎn)特征相同，若相同則為短回路程序跳出，若不相同則程序繼續(xù)進(jìn)行，此時(shí)將記錄中的父節(jié)點(diǎn)號(hào)和父作業(yè)號(hào)分別放置兩數(shù)組中作為路徑記錄，當(dāng)最終找到某條記錄其父節(jié)點(diǎn)號(hào)和父作業(yè)號(hào)與尾結(jié)點(diǎn)特征相同則證明找到兩結(jié)點(diǎn)間其中一條路徑，將此路徑保存在一個(gè)鄰接鏈表中來記錄曾經(jīng)走過的路徑。至此一次遞歸調(diào)用完成。整個(gè)遞歸調(diào)用次數(shù)以查找出的作業(yè)號(hào)和節(jié)點(diǎn)號(hào)特征與頭結(jié)點(diǎn)相同的記錄數(shù)為準(zhǔn)，直到程序結(jié)束。最后訪問數(shù)據(jù)庫，將鄰接鏈表中存放的數(shù)據(jù)記錄全部更新。4系統(tǒng)設(shè)備及軟件要求4.1數(shù)據(jù)量的估算4.2生產(chǎn)環(huán)境硬件配置1、數(shù)據(jù)庫服務(wù)器：P590或同檔次服務(wù)器32CPU128G內(nèi)存2、WEB服務(wù)器、報(bào)表服務(wù)器：8臺(tái)刀片服務(wù)器2CPU4G內(nèi)存3、存儲(chǔ)設(shè)備：企業(yè)級(jí)存儲(chǔ)裸容量：10T4.3開發(fā)環(huán)境硬件配置1、數(shù)據(jù)庫服務(wù)器：UNIX服務(wù)器68CPU24G內(nèi)存2、WEB服務(wù)器、報(bào)表服務(wù)器：2臺(tái)2CPU8G內(nèi)存3、存儲(chǔ)設(shè)備：裸容量：