大數(shù)據(jù)平臺(tái)項(xiàng)目軟件系統(tǒng)概要設(shè)計(jì)方案（僅用于學(xué)習(xí)的參考模板）

某地智城建設(shè)項(xiàng)目大數(shù)據(jù)軟件系統(tǒng)概要設(shè)計(jì)方案引言編寫(xiě)目的此文檔用來(lái)描述某地大數(shù)據(jù)建設(shè)項(xiàng)目中的設(shè)計(jì)基準(zhǔn)。文檔主要給設(shè)計(jì)開(kāi)發(fā)人員、實(shí)施人員參考使用，包括程序系統(tǒng)的基本處理流圖、程序系統(tǒng)的組織結(jié)構(gòu)、模塊劃分、功能分配、接口設(shè)計(jì)、運(yùn)行設(shè)計(jì)、數(shù)據(jù)結(jié)構(gòu)設(shè)計(jì)和安全性設(shè)計(jì)等。系統(tǒng)概述系統(tǒng)說(shuō)明大數(shù)據(jù)是智慧城的基礎(chǔ)設(shè)施，是智慧建設(shè)的重中之重。系統(tǒng)任務(wù)系統(tǒng)目標(biāo)實(shí)現(xiàn)我不同部門(mén)異構(gòu)系統(tǒng)間的資源共享和業(yè)務(wù)協(xié)同，有效避免各部門(mén)多頭投資、重復(fù)建設(shè)、資源浪費(fèi)。實(shí)現(xiàn)信息資源目錄體系的統(tǒng)一管理，為各部門(mén)提供資源的檢索與定位服務(wù)，為跨部門(mén)信息資源的獲取和交換；實(shí)現(xiàn)標(biāo)準(zhǔn)的臺(tái)接入和信息交換服務(wù)，為全基礎(chǔ)信息庫(kù)、共享信息庫(kù)、各專(zhuān)業(yè)主題信息庫(kù)等的建立，提供基礎(chǔ)運(yùn)行支撐環(huán)境和標(biāo)準(zhǔn)化規(guī)范；實(shí)現(xiàn)認(rèn)證、授權(quán)等安全服務(wù)的統(tǒng)一管理，為跨部門(mén)的信息交換應(yīng)用，提供基礎(chǔ)安全管理服務(wù)；為跨部門(mén)應(yīng)用系統(tǒng)的建設(shè)，提供交換共享服務(wù)和技術(shù)支撐環(huán)境。與其他系統(tǒng)關(guān)系大數(shù)據(jù)臺(tái)建成后，為XXX提供強(qiáng)有力的數(shù)據(jù)支撐。通過(guò)數(shù)據(jù)共享、交換、融合，實(shí)現(xiàn)各系統(tǒng)間的相輔相成，相互促進(jìn)，將數(shù)據(jù)價(jià)值充分挖掘，提升工作效能，為公眾提供更優(yōu)質(zhì)的服務(wù)。需求規(guī)定功能需求各功能模塊設(shè)計(jì)合理，符合普通用戶(hù)的操作習(xí)慣。功能界面設(shè)計(jì)合理，展現(xiàn)新穎，圖標(biāo)符合功能釋義。功能模塊命名具有標(biāo)識(shí)性，禁止出現(xiàn)歧義的命名規(guī)則。涉及到安全級(jí)別較高的操作，例如數(shù)據(jù)注冊(cè)、申請(qǐng)、使用、審批等，要強(qiáng)制用戶(hù)登錄；同時(shí)為了保證用戶(hù)身份的安全性，強(qiáng)制用戶(hù)登錄后修改初始密碼，設(shè)置密保；用戶(hù)登錄后，若一段時(shí)間內(nèi)無(wú)操作，自動(dòng)退出登錄。分類(lèi)系統(tǒng)、標(biāo)簽系統(tǒng)命名要具有代表性，禁止隨意的命名分類(lèi)、標(biāo)簽，影響用戶(hù)理解。不同角色用戶(hù)權(quán)限要明確區(qū)分并實(shí)現(xiàn)控制。性能需求穩(wěn)定性穩(wěn)定性是系統(tǒng)第一考慮的因素，直接關(guān)系到用戶(hù)能不能使用。從系統(tǒng)設(shè)計(jì)、編碼實(shí)施、測(cè)試、發(fā)布等各環(huán)節(jié)都要考慮系統(tǒng)的穩(wěn)定性，負(fù)載均衡、數(shù)據(jù)容災(zāi)備份等都是不可缺少的手段。尤其是在系統(tǒng)進(jìn)入正式運(yùn)行階段，更要制定好系統(tǒng)以及數(shù)據(jù)出現(xiàn)問(wèn)題時(shí)的應(yīng)對(duì)措施，避免出現(xiàn)不可恢復(fù)的“災(zāi)難”。時(shí)間響應(yīng)性數(shù)據(jù)是系統(tǒng)的靈魂，幾乎任何一個(gè)操作都是在操作數(shù)據(jù)。在網(wǎng)絡(luò)允許的情況下，應(yīng)盡量保證操作數(shù)據(jù)響應(yīng)時(shí)間在用戶(hù)的感官視覺(jué)時(shí)間范圍內(nèi)。精確性在從數(shù)據(jù)庫(kù)中讀取數(shù)據(jù)時(shí)，要求數(shù)據(jù)定位準(zhǔn)確；在向數(shù)據(jù)庫(kù)寫(xiě)入數(shù)據(jù)時(shí)，要求對(duì)錄入數(shù)據(jù)進(jìn)行校驗(yàn)。靈活性當(dāng)需求發(fā)生某些變化時(shí)，系統(tǒng)整體設(shè)計(jì)以及實(shí)現(xiàn)基本不發(fā)生變化，只需通過(guò)簡(jiǎn)單配置便可滿(mǎn)足要求。數(shù)據(jù)需求時(shí)效性大數(shù)據(jù)中數(shù)據(jù)主要來(lái)自于XXX的數(shù)據(jù)共享，為了保證數(shù)據(jù)的時(shí)效性，需制定合理的數(shù)據(jù)交換周期，嚴(yán)格按照周期更新數(shù)據(jù)，才能使系統(tǒng)提供的服務(wù)保持動(dòng)態(tài)特性。數(shù)據(jù)清洗從XXX獲取到的數(shù)據(jù)格式千差萬(wàn)別，同時(shí)存在著“噪聲”數(shù)據(jù)。必須制定規(guī)則，將數(shù)據(jù)清洗、歸一化處理后，入庫(kù)統(tǒng)一管理。定制化需求數(shù)據(jù)經(jīng)過(guò)數(shù)據(jù)清洗后的數(shù)據(jù)進(jìn)入基礎(chǔ)數(shù)據(jù)庫(kù)，此庫(kù)是大數(shù)據(jù)臺(tái)的基石。要保證該數(shù)據(jù)庫(kù)的唯一性和“潔凈”，其他定制化需求需要改造數(shù)據(jù)庫(kù)結(jié)構(gòu)的要通過(guò)交換工具導(dǎo)出分析庫(kù)進(jìn)行操作。安全性在數(shù)據(jù)交換、共享傳輸過(guò)程中，通過(guò)非對(duì)稱(chēng)（用戶(hù)登錄、公用接口部分）方式來(lái)加密。對(duì)敏感信息的展示進(jìn)行遮擋。其他網(wǎng)絡(luò)需求大數(shù)據(jù)系統(tǒng)臺(tái)為B/S架構(gòu)系統(tǒng)，同時(shí)數(shù)據(jù)交換共享過(guò)程中也需要各方網(wǎng)絡(luò)能夠互通互聯(lián)，需要網(wǎng)絡(luò)環(huán)境支持。存儲(chǔ)需求本臺(tái)交換到大量數(shù)據(jù)，同時(shí)隨著數(shù)據(jù)的定期更新、積累，數(shù)據(jù)量將不斷增加，必須保證足夠的存儲(chǔ)空間。服務(wù)器需求臺(tái)中涉及數(shù)據(jù)庫(kù)集群、交換節(jié)點(diǎn)集群、負(fù)載均衡集群等，需要足夠數(shù)量和相應(yīng)配置的服務(wù)器?？傮w設(shè)計(jì)數(shù)據(jù)結(jié)構(gòu)設(shè)計(jì)依據(jù)不同用途，不同側(cè)重點(diǎn)以及不同使用場(chǎng)景，大數(shù)據(jù)臺(tái)使用的數(shù)據(jù)庫(kù)主要包括原始庫(kù)、基礎(chǔ)庫(kù)、專(zhuān)題庫(kù)。原始庫(kù)來(lái)自于各部門(mén)的原始調(diào)研數(shù)據(jù)或交換數(shù)據(jù)，可能存在較多的“噪聲”數(shù)據(jù)，無(wú)法直接提供有效的服務(wù)?；A(chǔ)庫(kù)以原始庫(kù)為基礎(chǔ)，是經(jīng)過(guò)清洗、比對(duì)等規(guī)則化處理后的數(shù)據(jù)。專(zhuān)題庫(kù)則是在基礎(chǔ)庫(kù)之上，經(jīng)過(guò)進(jìn)一步的定制化處理、整理，生成的服務(wù)于各種業(yè)務(wù)指標(biāo)或數(shù)據(jù)分析的庫(kù)。開(kāi)發(fā)環(huán)境配置運(yùn)行環(huán)境配置系統(tǒng)安全在大數(shù)據(jù)臺(tái)建設(shè)和運(yùn)行過(guò)程中，定期對(duì)系統(tǒng)進(jìn)行整體的風(fēng)險(xiǎn)評(píng)估。發(fā)現(xiàn)安全隱患，及時(shí)調(diào)整安全策略，實(shí)行動(dòng)態(tài)防護(hù)。根據(jù)系統(tǒng)的重要程度和自身安全需求，依據(jù)國(guó)家標(biāo)準(zhǔn)《計(jì)算機(jī)信息系統(tǒng)安全保護(hù)等級(jí)劃分準(zhǔn)則》，實(shí)行等級(jí)防護(hù)、適度防護(hù)等措施。要求所有被采用的安全產(chǎn)品都必須提供開(kāi)放接口，以利于將來(lái)建設(shè)統(tǒng)一的安全管理中心，對(duì)安全事件進(jìn)行有效及時(shí)的監(jiān)控和響應(yīng)。將防護(hù)重點(diǎn)放在系統(tǒng)層和應(yīng)用層的安全上。