眾安銀行敏捷研發(fā)體系建設(shè)與提效的理念與實踐-唐嘉龍

眾安國際測試架構(gòu)師現(xiàn)任眾安銀行首席測試架構(gòu)師，負(fù)責(zé)眾安銀行整體測試架構(gòu)體系建設(shè)，同時負(fù)責(zé)零售銀行促活拉新活動、智能營銷平臺、客戶與運營等業(yè)務(wù)的整體質(zhì)量保障工作。曾就職于騰訊FIT金融科技業(yè)務(wù)線，負(fù)責(zé)微信支付的跨境收單支付、國際清結(jié)算及微信分付信貸管理等業(yè)務(wù)質(zhì)量管理工作，同時也對EKYC中臺、風(fēng)控證件鑒偽、AI量化投資模型等金融領(lǐng)域AI算法應(yīng)用有獨到見解。曾發(fā)表多篇AI模型測試相關(guān)專利、并獲得騰訊微創(chuàng)新獎。AboutZA&&600K300KStrengtheningofdigitalfinanceproductsuiteAboutZA&&600K300KStrengtheningofdigitalfinanceproductsuite 2021Sep-21Dec-21Mar-22Jun-22Dec-22Mar-23Jun23Sep-23Mar-24背景-企業(yè)數(shù)字化轉(zhuǎn)型敏捷之所以更快，根本原因在于持續(xù)迭代和驗證節(jié)省了大量不必要的浪費和返工背景-研發(fā)流程中常見問題業(yè)務(wù)敏捷業(yè)務(wù)敏捷需求過多，高優(yōu)先級需求快速交付，快速驗證需求過多，高優(yōu)先級需求快速交付，快速驗證環(huán)境管理環(huán)境管理環(huán)境多復(fù)雜性上升，一致性難以保證，交付慢代碼評審，單元測試，持續(xù)集成環(huán)境多復(fù)雜性上升，一致性難以保證，交付慢部署管理技術(shù)債務(wù)部署管理提交代碼質(zhì)量差系統(tǒng)架構(gòu)設(shè)計受限，潛在的提交代碼質(zhì)量差背景-眾安國際研效體系建設(shè)之旅智能質(zhì)效診斷最佳實踐智能質(zhì)效診斷最佳實踐度量可視化工具自動化研發(fā)過程管理線上管理研發(fā)過程管理線上管理啟動單測、靜態(tài)掃描卡點啟動單測、靜態(tài)掃描卡點自研平臺工程1.0落地啟動研發(fā)過程度量分析(質(zhì)效)平臺工程1.0最佳實踐打造自驅(qū)式質(zhì)量管理平臺工程2.0項目啟動引入開源研發(fā)工具生態(tài)搭建自動化測試框架體系啟動自建持續(xù)集成流水線項目搭建線上管理流程體系引入線上管理工具啟動線上度量分析(質(zhì)效) ?眾安CICD交付流水線架構(gòu)設(shè)計?AutoQE的落地實踐CodeCodeMRCodeMRCodeMRGitLabCIserver集成腳本developerTester jira l系統(tǒng)監(jiān)控 jira l系統(tǒng)監(jiān)控 AutoQEAutoQEJira工作流Moray工作流AutoQEAutoQEAutoQEAutoQECI卡點AutoQE卡點值檢查AutoQE門禁CI卡點AutoQE卡點值檢查AutoQE門禁?眾安CICD交付流水線架構(gòu)設(shè)計?流水線之AutoQE的理念?AutoQE的落地實踐2、流水線部署方案1、流水線平臺工程方案設(shè)計4、流水線自動化執(zhí)行優(yōu)化3、流水線環(huán)境配置管理5、流水線自動化用例管理1.開發(fā)環(huán)境2.AutoQE環(huán)境：使用develop分支，CI自動部署，并執(zhí)行自動化測試用例3.SIT環(huán)境：使用release分支部署，部署后打sittag4.UAT環(huán)境：基于sittag部署，部署后打uattag：基于uattag部署，上線后打生CutyyyymmddTagAutoQE門禁AutoQE門禁AutoQE門禁 ;;持續(xù)集成流水線平臺工程2.0-簡版CutyyyymmddTagAutoQE門禁AutoQE門禁 TEST TESTdeveloper持續(xù)集成流水線平臺工程2.0-完整版AutoQE門禁AutoQE門禁 SIT/UATfeature TEST SIT/UATfeature跨迭代feature TEST developAutoQE門禁AutoQE門禁 SIT/UATfeature TEST SIT/UATfeature跨迭代feature TEST develop TEST TEST 1、緩存集中部署，減少發(fā)布單量級2、緩存區(qū)所有部署完畢后開始執(zhí)行自動化，避免環(huán)境依賴干擾地鐵：準(zhǔn)點發(fā)車地鐵：準(zhǔn)點發(fā)車1、實時觸發(fā)部署AutoQE2、K8s健康檢查、優(yōu)雅終止來實現(xiàn)應(yīng)用無感切換跑車：上車即走跑車：上車即走時間窗耗時=CI單測掃描+autoqe自動化+流程等待耗時優(yōu)雅發(fā)布耗時=CI單測掃描+autoqe自動化各業(yè)務(wù)線值班跟進各業(yè)務(wù)線值班跟進詳細記錄問題原因解決方案劃分四個階段的值?A1全量覆蓋率：40%->45%->50%->60%?A2全量覆蓋率：20%->25%->30%->40%SQL即代碼迭代版本：文件夾命名區(qū)分環(huán)境部署：文件夾命名區(qū)分執(zhí)行管理SQL即代碼迭代版本：文件夾命名區(qū)分環(huán)境部署：文件夾命名區(qū)分執(zhí)行管理：已部署過后臺打標(biāo)配置即代碼迭代版本：文件夾命名區(qū)分環(huán)境部署：文件名后綴區(qū)分執(zhí)行管理：已部署過后臺打標(biāo)rApollowebApollowebAdminservice ConfigservicebankservicesAdminservice ConfigserviceAdminservice ConfigservicebankservicesAdminservice ConfigservicebankservicesAdminservice Configservicebankservices bankAdminservice ConfigservicebankservicesAdminservice ConfigserviceAdminservice ConfigservicebankservicesAdminservice ConfigservicebankservicesAdminservice Configservicebankservices bankservices AdminAdminservice ConfigConfigservicebankservicesbankservicesCutyyyymmddTag AutoApollo配置中心AutoApollo配置中心標(biāo)準(zhǔn)化用例生成版本用例管理合入主干…版本合入主干…基準(zhǔn)用例庫接口變更感知新特性用例編寫MR主干集成測試&Auto新特性用例編寫MR主干集成測試&AutoQE使用JiraA創(chuàng)建分支集成測試&AutoQE使用!自動化生成與手工編寫結(jié)合!自動化生成與手工編寫結(jié)合數(shù)據(jù)驅(qū)動數(shù)據(jù)驅(qū)動JiraJiraB新特性用例集成測試&創(chuàng)建分支編寫AutoQE使用爭200500分0單系統(tǒng)自動化案例優(yōu)化效果（1400cases）。優(yōu)化前c插件優(yōu)化。啟用并行風(fēng)控優(yōu)化did優(yōu)?眾安CICD交付流水線架構(gòu)設(shè)計?AutoQE的落地最佳實踐部署成功通知部署失敗通知自動化門禁通過自動化門禁未通過1、聯(lián)調(diào)配置誤提交2、消息堆積導(dǎo)致性能瓶頸3、持續(xù)執(zhí)行導(dǎo)致OOMAutoQE測試自動化覆蓋率面板應(yīng)用持續(xù)構(gòu)建面板單測靜態(tài)掃描跟蹤面板應(yīng)用構(gòu)建詳情面板?眾安CICD交付流水線架構(gòu)設(shè)計?流水線之AutoQE的治理理念?AutoQE的落地實踐?成效與展望CICD質(zhì)量門禁3.213.215.155.157.104.245.304.24AveragetimeforAutoqeCaseExecution2502001、需求吞吐量穩(wěn)定上升2、生產(chǎn)問題數(shù)持續(xù)下降3、系統(tǒng)可用性2502001、需求吞吐量穩(wěn)定上升2、生產(chǎn)問題數(shù)持續(xù)下降3、系統(tǒng)可用性4個9500220/5035265202020212022