移動端全鏈路保障體系

移動端全鏈路保障體系

七米·楊劍鋒

Agenda

蘑菇街App介紹

請求鏈路演進

遇到的問題

解決方案

未來展望

蘑菇街App基本數字

2011.71.0版本上線

App端GMV占比80%+

App端DAU800W+

日均用戶訪問時長20m+

日API請求6億+

日App端打點日志200G+

導購？電商？

請求鏈路-古代

Biz

JSON

NginxProxy

Nginx+PHP

MySQ

L

Redis

Solr

TFS

MGRequestManger

BizRequest

Client

NginxProxy

Nginx+PHP

Server

古代

發(fā)現問題 定位問題

應用市場評價

意見反饋

微博

Crashlytics

微博、QQ、電話

PHPLog

請求鏈路-近代

NginxProxy

Biz

MessagePack

LVS

NginxProxy

Log

Agent

PHPWebCluster

DB

Service

Cache

Service

MQ

Service

Searc

hService

MGRequestManger+HTTPDNS

BizRequest

Client

NginxProxy

Nginx+PHP

Hadoop

Kafka

Server

近代

發(fā)現問題 定位問題

少量實時監(jiān)控

數據報表

用戶反饋

Crashlytics

Hive

PHPLog

用戶溝通

請求鏈路-現代

Biz

MWP+HTTPDNS

NSOperation+NSURLProtocol

JSON

MGNetworking

AFNetworking

BizRequest

Client

Server

請求鏈路-現代

Client

JSON

NginxProxy

LVS

NginxProxy

Nginx+PHP

MWP

Server

AppService

LogAgent

Kafka

HadoopStorm

Sentry

Nginx+PHP

PlatformService

DB

(Raptor)

MoguCache

MQ

(Corgi)

SearchService

ThirdService

遇到的問題

用戶反饋下單提示系統(tǒng)繁忙，監(jiān)控曲線正常！頭疼！

用戶反饋登錄失敗，監(jiān)控曲線正常！頭疼！x2

用戶反饋商品詳情頁空白，監(jiān)控曲線正常！頭疼！x3

…頭疼！xN

下單失??？哪里出了問題？

AppMWP

用戶服務

登錄驗證

交易服務

入參校驗

商品服務

獲取商品信息庫存/下架狀態(tài)

交易服務

拆單（同一店鋪、同一商品數量等）

商家服務

獲取店鋪信息

促銷服務

獲取優(yōu)惠信息

（全場、店鋪、商品）

交易服務

買家是否限購等訂單校驗

用戶服務

買家校驗（黑名單等）

商家服務

全國包郵、七天無理由退貨等

物流服務

獲取用戶收貨信息

交易服務

前置打標（是否減庫存、關稅等）

交易服務

計算優(yōu)惠價格

運費服務

獲取運費信息

關稅服務

獲取關稅稅率等信息

交易服務

計算關稅

資金服務

獲取分期付款信息

交易服務

下單操作（不可見狀態(tài)）

交易服務

下單成功

異步信息處理

資金服務

創(chuàng)建支付操作

（返回支付ID）

交易服務

下單成功（可見狀態(tài)）

魔豆服務

扣除魔豆

商品服務

商品減庫存

促銷服務

鎖定優(yōu)惠券

問題原因？

請求鏈路長，任何環(huán)節(jié)都可能出問題

服務系統(tǒng)間隔離，監(jiān)控日志獨立不通

數據請求量大，實時性不高

被動，難復現，難調試

客戶端很無力

沒有結果！x3

快速定位問題能力

無感知修復問題能力

我們需要什么？

完善的數據監(jiān)控，實時告警

發(fā)現問

題

解決問

題

定位問

題

我們的成果

MData

·網絡/性能/穩(wěn)定性/可用性

定向查詢

定向分析

服務端鏈路跟

蹤

全鏈路染色

鏈路查詢

App端

Crash防護

網絡檢測

主動Ping等

MWP

·鏈路標記

用戶畫像

·用戶分層

IMServer

·下發(fā)通道

配置中心

配置查詢

配置更新

規(guī)則引擎

·特征判斷

我們的成果

我們的成果

我們的成果

我們的成果

我們還在做什么？

用戶體驗改進計劃（用戶隱私）

更精細的數據建設（網絡