眾安銀行敏捷研發(fā)體系建設(shè)與提效的理念與實(shí)踐-唐嘉龍

眾安國(guó)際測(cè)試架構(gòu)師現(xiàn)任眾安銀行首席測(cè)試架構(gòu)師，負(fù)責(zé)眾安銀行整體測(cè)試架構(gòu)體系建設(shè)，同時(shí)負(fù)責(zé)零售銀行促活拉新活動(dòng)、智能營(yíng)銷平臺(tái)、客戶與運(yùn)營(yíng)等業(yè)務(wù)的整體質(zhì)量保障工作。曾就職于騰訊FIT金融科技業(yè)務(wù)線，負(fù)責(zé)微信支付的跨境收單支付、國(guó)際清結(jié)算及微信分付信貸管理等業(yè)務(wù)質(zhì)量管理工作，同時(shí)也對(duì)EKYC中臺(tái)、風(fēng)控證件鑒偽、AI量化投資模型等金融領(lǐng)域AI算法應(yīng)用有獨(dú)到見解。曾發(fā)表多篇AI模型測(cè)試相關(guān)專利、并獲得騰訊微創(chuàng)新獎(jiǎng)。AboutZA&&600K300KStrengtheningofdigitalfinanceproductsuiteAboutZA&&600K300KStrengtheningofdigitalfinanceproductsuite 2021Sep-21Dec-21Mar-22Jun-22Dec-22Mar-23Jun23Sep-23Mar-24背景-企業(yè)數(shù)字化轉(zhuǎn)型敏捷之所以更快，根本原因在于持續(xù)迭代和驗(yàn)證節(jié)省了大量不必要的浪費(fèi)和返工背景-研發(fā)流程中常見問題業(yè)務(wù)敏捷業(yè)務(wù)敏捷需求過多，高優(yōu)先級(jí)需求快速交付，快速驗(yàn)證需求過多，高優(yōu)先級(jí)需求快速交付，快速驗(yàn)證環(huán)境管理環(huán)境管理環(huán)境多復(fù)雜性上升，一致性難以保證，交付慢代碼評(píng)審，單元測(cè)試，持續(xù)集成環(huán)境多復(fù)雜性上升，一致性難以保證，交付慢部署管理技術(shù)債務(wù)部署管理提交代碼質(zhì)量差系統(tǒng)架構(gòu)設(shè)計(jì)受限，潛在的提交代碼質(zhì)量差背景-眾安國(guó)際研效體系建設(shè)之旅智能質(zhì)效診斷最佳實(shí)踐智能質(zhì)效診斷最佳實(shí)踐度量可視化工具自動(dòng)化研發(fā)過程管理線上管理研發(fā)過程管理線上管理啟動(dòng)單測(cè)、靜態(tài)掃描卡點(diǎn)啟動(dòng)單測(cè)、靜態(tài)掃描卡點(diǎn)自研平臺(tái)工程1.0落地啟動(dòng)研發(fā)過程度量分析(質(zhì)效)平臺(tái)工程1.0最佳實(shí)踐打造自驅(qū)式質(zhì)量管理平臺(tái)工程2.0項(xiàng)目啟動(dòng)引入開源研發(fā)工具生態(tài)搭建自動(dòng)化測(cè)試框架體系啟動(dòng)自建持續(xù)集成流水線項(xiàng)目搭建線上管理流程體系引入線上管理工具啟動(dòng)線上度量分析(質(zhì)效) ?眾安CICD交付流水線架構(gòu)設(shè)計(jì)?AutoQE的落地實(shí)踐CodeCodeMRCodeMRCodeMRGitLabCIserver集成腳本developerTester jira l系統(tǒng)監(jiān)控 jira l系統(tǒng)監(jiān)控 AutoQEAutoQEJira工作流Moray工作流AutoQEAutoQEAutoQEAutoQECI卡點(diǎn)AutoQE卡點(diǎn)值檢查AutoQE門禁CI卡點(diǎn)AutoQE卡點(diǎn)值檢查AutoQE門禁?眾安CICD交付流水線架構(gòu)設(shè)計(jì)?流水線之AutoQE的理念?AutoQE的落地實(shí)踐2、流水線部署方案1、流水線平臺(tái)工程方案設(shè)計(jì)4、流水線自動(dòng)化執(zhí)行優(yōu)化3、流水線環(huán)境配置管理5、流水線自動(dòng)化用例管理1.開發(fā)環(huán)境2.AutoQE環(huán)境：使用develop分支，CI自動(dòng)部署，并執(zhí)行自動(dòng)化測(cè)試用例3.SIT環(huán)境：使用release分支部署，部署后打sittag4.UAT環(huán)境：基于sittag部署，部署后打uattag：基于uattag部署，上線后打生CutyyyymmddTagAutoQE門禁AutoQE門禁AutoQE門禁 ;;持續(xù)集成流水線平臺(tái)工程2.0-簡(jiǎn)版CutyyyymmddTagAutoQE門禁AutoQE門禁 TEST TESTdeveloper持續(xù)集成流水線平臺(tái)工程2.0-完整版AutoQE門禁AutoQE門禁 SIT/UATfeature TEST SIT/UATfeature跨迭代feature TEST developAutoQE門禁AutoQE門禁 SIT/UATfeature TEST SIT/UATfeature跨迭代feature TEST develop TEST TEST 1、緩存集中部署，減少發(fā)布單量級(jí)2、緩存區(qū)所有部署完畢后開始執(zhí)行自動(dòng)化，避免環(huán)境依賴干擾地鐵：準(zhǔn)點(diǎn)發(fā)車地鐵：準(zhǔn)點(diǎn)發(fā)車1、實(shí)時(shí)觸發(fā)部署AutoQE2、K8s健康檢查、優(yōu)雅終止來實(shí)現(xiàn)應(yīng)用無感切換跑車：上車即走跑車：上車即走時(shí)間窗耗時(shí)=CI單測(cè)掃描+autoqe自動(dòng)化+流程等待耗時(shí)優(yōu)雅發(fā)布耗時(shí)=CI單測(cè)掃描+autoqe自動(dòng)化各業(yè)務(wù)線值班跟進(jìn)各業(yè)務(wù)線值班跟進(jìn)詳細(xì)記錄問題原因解決方案劃分四個(gè)階段的值?A1全量覆蓋率：40%->45%->50%->60%?A2全量覆蓋率：20%->25%->30%->40%SQL即代碼迭代版本：文件夾命名區(qū)分環(huán)境部署：文件夾命名區(qū)分執(zhí)行管理SQL即代碼迭代版本：文件夾命名區(qū)分環(huán)境部署：文件夾命名區(qū)分執(zhí)行管理：已部署過后臺(tái)打標(biāo)配置即代碼迭代版本：文件夾命名區(qū)分環(huán)境部署：文件名后綴區(qū)分執(zhí)行管理：已部署過后臺(tái)打標(biāo)rApollowebApollowebAdminservice ConfigservicebankservicesAdminservice ConfigserviceAdminservice ConfigservicebankservicesAdminservice ConfigservicebankservicesAdminservice Configservicebankservices bankAdminservice ConfigservicebankservicesAdminservice ConfigserviceAdminservice ConfigservicebankservicesAdminservice ConfigservicebankservicesAdminservice Configservicebankservices bankservices AdminAdminservice ConfigConfigservicebankservicesbankservicesCutyyyymmddTag AutoApollo配置中心AutoApollo配置中心標(biāo)準(zhǔn)化用例生成版本用例管理合入主干…版本合入主干…基準(zhǔn)用例庫(kù)接口變更感知新特性用例編寫MR主干集成測(cè)試&Auto新特性用例編寫MR主干集成測(cè)試&AutoQE使用JiraA創(chuàng)建分支集成測(cè)試&AutoQE使用!自動(dòng)化生成與手工編寫結(jié)合!自動(dòng)化生成與手工編寫結(jié)合數(shù)據(jù)驅(qū)動(dòng)數(shù)據(jù)驅(qū)動(dòng)JiraJiraB新特性用例集成測(cè)試&創(chuàng)建分支編寫AutoQE使用爭(zhēng)200500分0單系統(tǒng)自動(dòng)化案例優(yōu)化效果（1400cases）。優(yōu)化前c插件優(yōu)化。啟用并行風(fēng)控優(yōu)化did優(yōu)?眾安CICD交付流水線架構(gòu)設(shè)計(jì)?AutoQE的落地最佳實(shí)踐部署成功通知部署失敗通知自動(dòng)化門禁通過自動(dòng)化門禁未通過1、聯(lián)調(diào)配置誤提交2、消息堆積導(dǎo)致性能瓶頸3、持續(xù)執(zhí)行導(dǎo)致OOMAutoQE測(cè)試自動(dòng)化覆蓋率面板應(yīng)用持續(xù)構(gòu)建面板單測(cè)靜態(tài)掃描跟蹤面板應(yīng)用構(gòu)建詳情面板?眾安CICD交付流水線架構(gòu)設(shè)計(jì)?流水線之AutoQE的治理理念?AutoQE的落地實(shí)踐?成效與展望CICD質(zhì)量門禁3.213.215.155.157.104.245.304.24AveragetimeforAutoqeCaseExecution2502001、需求吞吐量穩(wěn)定上升2、生產(chǎn)問題數(shù)持續(xù)下降3、系統(tǒng)可用性2502001、需求吞吐量穩(wěn)定上升2、生產(chǎn)問題數(shù)持續(xù)下降3、系統(tǒng)可用性4個(gè)9500220/5035265202020212022