從臨床大數(shù)據(jù)到認知醫(yī)療課件

從臨床大數(shù)據(jù)到認知醫(yī)療的探索推進互聯(lián)網(wǎng)+智慧醫(yī)療從臨床大數(shù)據(jù)到認知醫(yī)療的探索推進互聯(lián)網(wǎng)+智慧醫(yī)療1臨床醫(yī)療智能診斷系統(tǒng)輔助臨床決策系統(tǒng)智能影像輔助篩選系統(tǒng)3D器官勾畫系統(tǒng)基礎醫(yī)療患者教育病人跟蹤系統(tǒng)醫(yī)療技能遠程醫(yī)療培訓系統(tǒng)VR直播手術醫(yī)療面臨AI的挑戰(zhàn)能否爆發(fā)巨大潛能？人工智能產(chǎn)品將充分發(fā)揮其在記憶力、學習能力和運算速度上人類無法比擬的優(yōu)勢，成為醫(yī)務人員的得力助手——中國科學院院士、上海交通大學Bio-X中心主任

賀林臨床醫(yī)療智能影像基礎醫(yī)療醫(yī)療技能醫(yī)療面臨AI的挑戰(zhàn)能否爆發(fā)巨2認知醫(yī)療智慧醫(yī)療數(shù)字化醫(yī)療從數(shù)字化走向智慧與認知醫(yī)療認知醫(yī)療智慧醫(yī)療數(shù)字化醫(yī)療從數(shù)字化走向智慧與認知醫(yī)療3醫(yī)療穿戴式設備基因檢測分子醫(yī)學國家、省市縣四級醫(yī)療信息平臺互通遠程醫(yī)療健康體征檢測預警AI診療方案推薦醫(yī)學影像輔助診斷生物識別（聲紋、人臉）數(shù)字化醫(yī)療階段基本實現(xiàn)基于數(shù)字化的電子病歷、數(shù)字影像、基因檢測等智慧醫(yī)療階段基本形成院內(nèi)及區(qū)域內(nèi)互聯(lián)互通、協(xié)同醫(yī)療與感知預警框架認知醫(yī)療階段醫(yī)療中的互動、發(fā)現(xiàn)、決策能力建設剛剛起步三個階段迭代、滾動發(fā)展瑞金醫(yī)院信息化發(fā)展階段醫(yī)療穿戴式設備國家、省市縣四級醫(yī)療信息平臺互通AI診療方案4Step1:數(shù)字化醫(yī)療Step1:數(shù)字化醫(yī)療5居家健康數(shù)據(jù)采集與融合醫(yī)院檢測數(shù)據(jù)家庭檢測數(shù)據(jù)GPRS藍牙血壓計血壓計血糖儀睡眠儀

體脂儀卡路里計血壓計便攜血壓計血糖儀動脈

內(nèi)臟

內(nèi)皮硬化

脂肪

功能血氧醫(yī)生診療處方和患教患教活動家庭監(jiān)測處方查看數(shù)據(jù)健康云服務平臺居家健康數(shù)據(jù)采集與融合醫(yī)院檢測數(shù)據(jù)家庭檢測數(shù)據(jù)GPRS藍牙血6高通量基因測序染色體變異檢測疾病相關基因點突變檢測表觀遺傳學檢測腫瘤標志物檢測遺傳性疾病基因診斷感染性疾病診斷及耐藥檢測基因測序文庫制備Flowcell制備樣品測序數(shù)據(jù)分析高通量基因測序染色體變異檢測腫瘤標志物檢測基因測序文庫制備7醫(yī)療數(shù)字化新動向分子影像技術上海首臺一體化PET/MR2018年4月8日正式啟用一次掃描可將人體組織的精細形態(tài)結構、細胞代謝和功能、疾病的分子表型等信息融為一體并進行處理，同時獲得PET和MRI圖片，解決了時間一致性問題醫(yī)療數(shù)字化新動向分子影像技術8醫(yī)療數(shù)字化新動向可實現(xiàn)數(shù)據(jù)傳輸?shù)馁N片式血糖儀基于移動通信的手環(huán)式血壓計醫(yī)療數(shù)字化新動向可實現(xiàn)數(shù)據(jù)傳輸?shù)馁N片式血糖儀基于移動通信的手9醫(yī)療數(shù)字化新動向能量代謝艙多路氣體采樣系統(tǒng)多風扇氣流循環(huán)系統(tǒng)高精度、長時間（24小時以上）測量日常生活、體育訓練、工作、休息中真實能量消耗為代謝疾?。ㄌ悄虿?、肥胖、高熱等）精確測量、診斷、療效（如減肥藥效）評估提供依據(jù)醫(yī)療數(shù)字化新動向能量代謝艙高精度、長時間（24小時以上）測量10瑞金基礎研究基地醫(yī)院數(shù)據(jù)中心轉化醫(yī)學平臺臨床研究型病房藥物臨床實驗I期病房臨床治療與健康監(jiān)測平臺瑞金醫(yī)院數(shù)據(jù)采集平臺布局瑞金基礎研究基地醫(yī)院數(shù)據(jù)中心轉化醫(yī)學平臺臨床研究型病房藥11Step2：智慧醫(yī)療Step2：智慧醫(yī)療12病人腕帶識別自動排藥臺管理醫(yī)生iPad查房移動護理管理：醫(yī)囑核對、醫(yī)囑執(zhí)行標本檢驗管理院內(nèi)醫(yī)療協(xié)同——臨床醫(yī)療流程優(yōu)化病人腕帶識別自動排藥臺管理醫(yī)生iPad查房移動護理管理：標本13用時間軸顯示患者的診療記錄，嵌入到門診、住院、醫(yī)囑、護理、醫(yī)技、科研界面院內(nèi)醫(yī)療協(xié)同——360度臨床診療視圖用時間軸顯示患者的診療記錄，嵌入到門診、住院、醫(yī)囑、護理、醫(yī)14010203040506院內(nèi)醫(yī)療協(xié)同——MDT會診系統(tǒng)MDT會診系統(tǒng)支持患者MDT會診預約專家會診確認患者數(shù)字化病史影像集成在線討論背靠背投票電子會診記錄單專家遠程MDT會診已設置固定MDT門診35個，并為患者提供非常設MDT門診預約服務010203040506院內(nèi)醫(yī)療協(xié)同——MDT會診系統(tǒng)MDT15開手術醫(yī)囑手術室安排病人出病房入手術室術前安全核查麻醉手術進蘇醒室術后安全核查出手術室進病房手術麻醉閉環(huán)管理與工勤分配系統(tǒng)對接實現(xiàn)CPOE、護理管理、手麻系統(tǒng)、電子病歷、工勤分配系統(tǒng)協(xié)同工作院內(nèi)醫(yī)工協(xié)同——閉環(huán)手術麻醉管理開手術醫(yī)囑手術室安排病人出病房入手術室術前安全核查麻醉手術進16建立全院臨床數(shù)據(jù)中心，目前已匯集全院患者臨床醫(yī)療數(shù)據(jù)5億多條體檢數(shù)據(jù)醫(yī)療數(shù)據(jù)個人錄入的數(shù)據(jù)穿戴設備的采集數(shù)據(jù)院內(nèi)醫(yī)研協(xié)同——從臨床數(shù)據(jù)中心到臨床科研服務建立全院臨床數(shù)據(jù)中心，目前已匯集全院患者臨床醫(yī)療數(shù)據(jù)5億多條17掛號預約在線填寫主訴在線掛號遠程候診在線報告查詢和提示在線檢查預約診間支付方便在線身份認證微信支付預授權助醫(yī)APP

在線滿意度評價叫號提醒候診查詢免排隊在線注冊支持初診、復診檢驗檢查結果綁定最多3張就診卡醫(yī)患協(xié)同——統(tǒng)一的醫(yī)患服務平臺掛號預約在線填寫主訴在線掛號遠程候診在線報告查詢和提示在線檢18感知預警——急診智能分診集成基礎監(jiān)護設備的生命體征采集集成主訴知識庫、體征分級標準知識庫根據(jù)患者主訴、體征（呼吸，循環(huán)，意識，行動等）智能急診分診、分科Ⅰ級

瀕危Ⅱ級

危重Ⅲ級

急癥Ⅳ級

非急癥感知預警——急診智能分診集成基礎監(jiān)護設備的生命體征采集Ⅰ級191-5分

普通5-8分

有風險9分以上

重癥感知預警-潛在危重因素預警EWS重癥評估警示評估因素：年齡、BMI、血壓、呼吸、循環(huán)等1-5分普通感知預警-潛在危重因素預警EWS重癥評估警示評20Step3：認知醫(yī)療Step3：認知醫(yī)療21圖像識別影像標注AI+醫(yī)學影像基因組學蛋白組學代謝組學新藥研發(fā)AI+精準醫(yī)學語音識別風險識別健康干預AI+醫(yī)療服務疾病診斷方案推薦AI+輔助診療人工智能的醫(yī)療應用圖像識別影像標注AI+醫(yī)學影像基因組學蛋白組學代謝組學22臨床語音錄入識別率97%自然語言處理語義分析臨床?？漆t(yī)療術語訓練診間病史錄入手術記錄錄入超聲、放射報告錄入導診機器人“小穎”1、AI+醫(yī)療服務——

醫(yī)學語音識別與應用臨床語音錄入自然語言處理診間病史錄入1、AI+醫(yī)療服務——23設置操作權限識別情緒及聲音病灶防醫(yī)保欺詐制約號販子身份ID安全便捷跨省共診跨省支付聲紋識別 人臉識別在線預約身份識別1、AI+醫(yī)療服務—— 醫(yī)學語音識別與應用設置操作權限識別情緒及聲音病灶防醫(yī)保欺詐制約號販子身份I24人臉識別結合實名制就醫(yī)，應用“人臉注冊識別系統(tǒng)”實現(xiàn)無卡就診基于人臉識別，實現(xiàn)醫(yī)院統(tǒng)一信息平臺的多因素認證登入收費窗口采樣窗口醫(yī)生診間自助終端臉譜引擎影像數(shù)據(jù)采集人臉數(shù)據(jù)存儲照片特征提取云端對比返回結果識別患者身份是允許就診否拒絕就診人臉識別結合實名制就醫(yī)，應用“人臉注冊識別系統(tǒng)”實現(xiàn)無卡就25位于美國，健康管理公司，核心CaféWell健康管理平臺引入IBM

Watson的認知能力，理解復雜的人類語言，數(shù)秒內(nèi)從海量數(shù)據(jù)中為用戶健康管理、慢病回復、健康食譜等提出建議1、AI+醫(yī)療服務—— 健康管理：Welltok位于美國，健康管理公司，核心CaféWell健康管理平臺1、262、AI+輔助診療瑞金醫(yī)院神經(jīng)內(nèi)科聯(lián)合英國約克大學啟動全球最大規(guī)模單中心臨床研究，驗證AI及可穿戴設備有助于診斷及監(jiān)測帕金森病具有專利的人工智能運算方法可穿戴設備技術：異動癥24小時監(jiān)測扣指試驗客觀衡量運動遲緩抓握任務鑒別不同神經(jīng)退行性疾病視空間功能評測電子畫板用于客觀評估認知能力2、AI+輔助診療瑞金醫(yī)院神經(jīng)內(nèi)科聯(lián)合英國約克大學啟動全球最272、AI+輔助診療“瑞寧預糖”、“瑞寧知糖”——AI糖尿病預測軟件基于寧光院士建立的全球最大糖尿病預測數(shù)據(jù)庫，采集數(shù)百項指標，識別影響糖尿病患病概率重要性因子，并建立預測模型瑞寧預糖：輸入性別、年齡、血壓、血糖、血脂、體重，即可計算代謝性疾病指數(shù)（滿分100分），用以評估3年內(nèi)發(fā)生心血管病的概率瑞寧知糖：輸入個人基本信息（如性別、年齡、身高、體重、教育狀況、飲酒吸煙等，無需輸入血糖水平），即可算出近3年內(nèi)糖尿病患病風險2、AI+輔助診療“瑞寧預糖”、“瑞寧知糖”——AI糖尿病預28病灶分割病灶良惡性分級惡性程度甲狀腺超聲，含B

mode,color

flow,shearwaveelasticity

image深度神經(jīng)網(wǎng)絡模型SVMRandom

Forest3、AI+醫(yī)學影像——

與第三方合作開展超聲影像輔助診斷病灶分割病灶良惡性分級惡性程度甲狀腺超聲，含Bmode,29智能淺表超聲診斷針對不同場景設計的基于云端和移動端智能淺表超聲方案遷移學習將在自然場景中證明有效的深度神經(jīng)網(wǎng)絡用于超聲圖像提取特征和醫(yī)生對圖像的描述進行分類匹配對深度學習得到的高維特征匹配醫(yī)生對影像的分類，提高可解釋性3、AI+醫(yī)學影像智能淺表超聲診斷針對不同場景設計的基于云端和移動端智能淺表303、AI+醫(yī)學影像——

Enclitic位于美國，獲1200萬美元融資通過機器學習識別惡性腫瘤的影像學特征和判別模式經(jīng)肺癌影像數(shù)據(jù)庫LIDC、NLST

驗證，對肺癌檢出精度比放射技師高5成以上3、AI+醫(yī)學影像——Enclitic位于美國，獲1200313、AI+醫(yī)學影像——GE

Arterys：AI心臟疾病輔助診斷3、AI+醫(yī)學影像——GEArterys：AI心臟疾病輔助324、AI+精準醫(yī)學MDT中引入：Watson

forOncology完成249例結直腸患者NLP：識別醫(yī)護人員的自然語言和非結構化病史Big

DataAnalytics：在百萬計文獻中檢索治療方案KnowledgeReasoning：在治療方案中根據(jù)患者臨床推薦個性化方案僅需約十五分鐘，Watson便能完成一份深度分析報告注：NCCN——美國國立綜合癌癥網(wǎng)絡；NLP——自然語言處理4、AI+精準醫(yī)學MDT中引入：WatsonforOnc332.沃森會在大量可能包含答案的信息中進行搜索，然后生成一系列潛在答案3.沃森采用特有算法，為每一個潛在答案進行打分4.沃森會提供最有信心答案以及答案背后的相關證據(jù)5.沃森會對打分分數(shù)進行權衡，為每個答案的信心指數(shù)進行精準評估HOWWATSONWWOORK1.沃森能試圖理解你的語言，會將你的問題分解為很多個關于這個問題的關鍵特征4、AI+精準醫(yī)學2.沃森會在大量可能包含答案的信息中進行搜索，然后生成一34合作開展瑞金特色本地化治療方案推薦4、AI+精準醫(yī)學本地化后的界面合作開展瑞金特色本地化治療方案推薦4、AI+精準醫(yī)學本地化后354、AI+精準醫(yī)學位于中國，人工智能生物科技初創(chuàng)公司整合基因、微生物（腸道、口腔等）、蛋白及代謝數(shù)據(jù)（尿、汗、血液等）等提出對不健康狀態(tài)的干預措施，為醫(yī)療、慢病管理提供個性化方