數(shù)據(jù)驅(qū)動滴滴產(chǎn)品決策

1、用數(shù)據(jù)驅(qū)動滴滴產(chǎn)品決策? 一個故事? 一些方法? 產(chǎn)品架構(gòu)? 系統(tǒng)架構(gòu)? 跳過的坑? 其他5輛還是10輛？日均訂單量占比84.1%滴滴專車（快車）用戶覆蓋量占88.4%“最近訓(xùn)練出的幾個模型，該如何選擇？”“我想測試一下西二旗附近用戶對某功能的接受程度”“如何證明機(jī)器學(xué)習(xí)模型優(yōu)于目前人工設(shè)置的模型？”“怎么衡量新上功能的效果？”“幾個新設(shè)計的產(chǎn)品方案，該如何選擇？”“這個功能先從5%開始觀察效果正向的話逐步轉(zhuǎn)全”定向投放目標(biāo)人群所有人群公司員工灰度發(fā)布公司員工所有人群+ 一線城市用戶目標(biāo)人群45%轉(zhuǎn)化率25%轉(zhuǎn)化率50%用戶訪問A組50%用戶訪問B組AB測試目標(biāo)人群指標(biāo)假設(shè)實驗行動找到提升點做

2、一個合理的猜想測試你的猜想決定下一步使用配置上線移動端支持實驗缺乏嚴(yán)謹(jǐn)性每個產(chǎn)品線獨立一套需要獨立設(shè)計開發(fā)、維護(hù)支持少量規(guī)則周期長人力占用結(jié)果置信度低錯誤的決策缺乏靈活性資源浪費想法功能研發(fā)部署發(fā)布想法功能研發(fā)部署發(fā)布驗證優(yōu)化擴(kuò)量關(guān)閉打開舊特性新特性Version X關(guān)閉打開舊特性新特性Version X功能開關(guān)實驗實現(xiàn)北京市蘋果手機(jī)20-50歲男性早晚高峰3.1-3.20開關(guān)狀態(tài)非國貿(mào)地區(qū)20%人群實驗服務(wù)日志計算展現(xiàn)SDKLOGBusiness完整過程系統(tǒng)組成Center-UIOpenAPIDashboardTagCenterLBSConfigCenterApolloServerAgent

3、MetricServerApolloAnalyzerPHPJAVAIOSAndroidLogLogLogCenterEco-sysBusinessServerMetricCenterLogCenter車標(biāo)實驗實驗碰撞手機(jī)尾號奇數(shù)用戶手機(jī)尾號偶數(shù)用戶A實驗A1A2B實驗B1B2C實驗C1C2用戶看到A1+B1+C1A2+B2+C2(A1 + B1 + C1) (A2 + B2 + C2) 不等價 (A1 A2) & (B1 B2) & (C1 C2 )Backet RangeUDIDSaltSHA-1Hash Value (20 bytes)Backet Size N分桶策略冪等

4、保證進(jìn)入某組的用戶不會進(jìn)入到其他組均勻化防止被灰的是相同的人群并行實驗?zāi)軌蛑С侄嘟M實驗并行互斥實驗?zāi)軌蛑С侄嘟M實驗互斥擴(kuò)量糟糕的擴(kuò)量更優(yōu)的擴(kuò)量日志規(guī)范與組件服務(wù)端普通日志服務(wù)端業(yè)務(wù)日志埋點日志App本地日志端日志服務(wù)日志數(shù)據(jù)支撐系統(tǒng)數(shù)據(jù)總線（采集/計算/存儲）連接/清洗Schema管理數(shù)據(jù)應(yīng)用系統(tǒng)行為分析業(yè)務(wù)BI決策支持排查與定位監(jiān)控與分析事件池與指標(biāo)池BU埋點事件池通用埋點自定義埋點指標(biāo)池通用指標(biāo)自定義指標(biāo)事件指標(biāo)復(fù)合指標(biāo)? 消除重復(fù)埋點? 正確性? 埋點生命周期管理? 一致的指標(biāo)定義? 全局共享? 提升效率? 減少重復(fù)計算實驗的科學(xué)性? 新鮮期影響? 部分優(yōu)化? 周期性影響? 指標(biāo)的選擇實驗的統(tǒng)計意義? P-value & Power? Significance level & Bonfe