从临床大数据到认知医疗课件.pptx

1、从临床大数据到认知医疗的探索推进互联网+智慧医疗临床医疗临床医疗智能诊断系统辅助临床决策系统智能影像智能影像辅助筛选系统3D器官勾画系统基础医疗基础医疗患者教育病人跟踪系统医疗技能医疗技能远程医疗培训系统VR直播手术医疗面临医疗面临AI的挑战能否爆发巨大潜能？的挑战能否爆发巨大潜能？人工智能产品将充分发人工智能产品将充分发挥挥其在其在记记忆力忆力、学习学习能能力和力和运运算速算速度度上人上人类类无法无法比比拟拟 的优势，成为医务人员的优势，成为医务人员的的得力得力助助手手中国科学院院士、上海交通大学Bio-X中心主任 贺林认知医疗认知医疗智慧医疗智慧医疗数字化医疗数字化医疗从数字化走向智慧与认

2、知医从数字化走向智慧与认知医疗疗 医疗穿戴式设备医疗穿戴式设备 基因检测基因检测 分子医学分子医学 国家、省市县四级国家、省市县四级 医疗信息平台互通医疗信息平台互通 远程医疗远程医疗 健康体征检测预警健康体征检测预警 AI诊疗方案推荐诊疗方案推荐 医学影像辅助诊断医学影像辅助诊断 生物识别（声纹、人脸）生物识别（声纹、人脸）数字化医疗阶段数字化医疗阶段 基本实现基本实现基于数字化的电子基于数字化的电子病病 历、数字影像、基因检测历、数字影像、基因检测等等智慧医疗阶段智慧医疗阶段 基本形成基本形成院内及区域内互联院内及区域内互联互互 通、协同医疗与感知预警通、协同医疗与感知预警框架框架认知医疗

3、阶段认知医疗阶段 医疗中的互动、发现、医疗中的互动、发现、决策能力建设决策能力建设刚刚起步刚刚起步三个阶段迭代、滚动发三个阶段迭代、滚动发展展瑞金医院信息化发展阶瑞金医院信息化发展阶段段Step1:数字化医疗数字化医疗居家健康数据采集与融合居家健康数据采集与融合医院检测数据医院检测数据家庭检测数据家庭检测数据GPRS蓝牙蓝牙血压计血压计血压计血压计血糖仪血糖仪睡眠睡眠仪仪体脂仪体脂仪卡路卡路里计里计血压计血压计便携血便携血压计压计血糖仪血糖仪动动脉脉内内脏脏内皮内皮 硬硬化化脂脂肪肪功能功能血氧血氧医生诊疗医生诊疗处方和患教处方和患教患教 活动家庭 监测 处方查看数据健康云服务平台健康云服务平

4、台高通量高通量 基因测序基因测序 染色体变异检测 疾病相关基因点突变检测 表观遗传学检测 肿瘤标志物检测 遗传性疾病基因诊断 感染性疾病诊断及耐药检测基因测序基因测序文库制备Flowcell制备样品测序数据分析医疗数字化新动向医疗数字化新动向分子影像技术分子影像技术 上海首台一体化PET/MR2018年4月8日正式启用 一次扫描可将人体组织的精细形态结构、细胞代谢和功能、疾病的分子表型等信息融 为一体并进行处理，同时获得PET和MRI图片，解决了时间一致性问题医疗数字化新动向医疗数字化新动向可实现数据传输的贴片式血糖可实现数据传输的贴片式血糖仪仪基于移动通信的手环式血压基于移动通信的手环式血压

5、计计医疗数字化新动向医疗数字化新动向能量代谢舱能量代谢舱 多路气体采样系统 多风扇气流循环系统 高精度、长时间（24小时以上）测量日常生活、体育训练、工作、休息中真实能量消耗 为代谢疾病（糖尿病、肥胖、高热等）精确测 量、诊断、疗效（如减肥药效）评估提供依据瑞金基础研究基地 医院数据中心转化医学平台 临床研究型病房药物临床实 验I期病房临床治疗与健 康监测平台瑞金医院数据采集平台瑞金医院数据采集平台布布局局Step2：智慧医疗智慧医疗病人腕带识别病人腕带识别自动排药台管理自动排药台管理医生医生iPad查房查房移动护理管理：移动护理管理：医嘱核对、医嘱执行医嘱核对、医嘱执行标本检验管理标本检验管

6、理院内医疗协院内医疗协同同临床医疗流程优临床医疗流程优化化 用时间轴显示患者的诊疗记录，嵌入到门诊、住院、医嘱、护理、医技、科研界用时间轴显示患者的诊疗记录，嵌入到门诊、住院、医嘱、护理、医技、科研界面面院内医疗协院内医疗协同同360度临床诊疗视度临床诊疗视图图010203040506院内医疗协同院内医疗协同MDT会诊系统会诊系统MDT会诊系统支持会诊系统支持患者MDT会诊预约专家会诊确认患者数字化病史影像集成在线讨论背靠背投票电子会诊记录单专家远程MDT会诊已设置固定已设置固定MDT门诊门诊35个，并为患个，并为患 者提供非常设者提供非常设MDT门诊预约服务门诊预约服务开手术医嘱手术室安排病

7、人出病房入手术室术前安全核查麻醉手术进苏醒室术后安全核查出手术室进病房手术麻醉闭环管理手术麻醉闭环管理与工勤分配系统对接实现实现CPOE、护理管理、护理管理、手麻手麻系系统、统、电电子病子病历历、工、工勤勤分配分配系系统协统协同同工工作作院内医工协院内医工协同同闭环手术麻醉管闭环手术麻醉管理理建立全院临床数据中心建立全院临床数据中心，目前目前已已汇集汇集全全院患院患者者临床临床医医疗数疗数据据5亿多条亿多条体检数据体检数据医疗数据医疗数据个人录入的个人录入的 数据数据穿戴设备的穿戴设备的采集数据采集数据院内医研协同院内医研协同从临床数据中心到临床科研服从临床数据中心到临床科研服务务挂号预约挂号

8、预约在在线线填写主诉填写主诉在线挂号在线挂号远程候诊远程候诊在线报告查询和提示在线报告查询和提示在线检查预约在线检查预约诊间支付诊间支付方便方便在线身份认证在线身份认证微信支付微信支付预授权预授权助医助医APP 在线满意度评价在线满意度评价叫号提醒叫号提醒候诊查询候诊查询免排队免排队在线注册在线注册支持初诊、复诊支持初诊、复诊检验检查结果检验检查结果 绑定最多绑定最多3张就诊卡张就诊卡医患协同医患协同统一的医患服务平统一的医患服务平台台感知预警感知预警急诊智能分诊急诊智能分诊 集成基础监护设备的生命体征采集 集成主诉知识库、体征分级标准知识库 根据患者主诉、体征（呼吸，循环，意识，行动等）智能

9、急诊分诊、分科级 濒危级 危重级 急症级 非急症1-5分分 普通普通5-8分分 有风险有风险9分以上分以上 重症重症感知预警感知预警-潜在危重因素预警潜在危重因素预警EWS重症评估警重症评估警示示评估因素：年龄、评估因素：年龄、BMI、血压、呼吸、循环等、血压、呼吸、循环等Step3：认知医疗认知医疗图像识别 影像标注AI+医学影像基因组学 蛋白组学 代谢组学 新药研发AI+精准医学语音识别 风险识别 健康干预AI+医疗服务疾病诊断 方案推荐AI+辅助诊疗人工智能的医疗应用人工智能的医疗应用临床语音录入临床语音录入识别率识别率97%自然语言处理自然语言处理 语义分析语义分析 临床专科医疗术语训

10、练临床专科医疗术语训练 诊间病史录入诊间病史录入 手术记录录入手术记录录入 超声、放射报告录入超声、放射报告录入 导诊机器人导诊机器人“小颖小颖”1、AI+医疗服务医疗服务 医学语音识别与应用医学语音识别与应用设置操设置操 作权限作权限识别情绪及识别情绪及 声音病灶声音病灶防医保欺诈防医保欺诈制约号贩子制约号贩子身份身份ID 安全便捷安全便捷跨省共诊跨省共诊 跨省支付跨省支付声纹识别声纹识别人脸识别人脸识别在线预约在线预约 身份识别身份识别1、AI+医疗服务医疗服务医学语音识别与应用医学语音识别与应用人脸识别人脸识别结合实名制就医，应用“人脸注册识别系统”实现 无卡就诊基于人脸识别，实现医院统

11、一信息平台的多因素认证登入收费窗口收费窗口采样窗口采样窗口医生诊间医生诊间自助终端自助终端脸谱引擎脸谱引擎影像数据采集 人脸数据存储 照片特征提取云端对比 返回结果识别患者身份识别患者身份是允许就诊允许就诊否拒绝就诊拒绝就诊 位于美国，健康管理公司，核心CafWell健康管理平台 引入IBM Watson的认知能力，理解复杂的人类语言，数秒内从海量数据中为用户健康管理、慢病回复、健康食谱等提出建议1、AI+医疗服务医疗服务健康管理健康管理：Welltok2、AI+辅助诊疗辅助诊疗瑞金医院神经内科联合英国约克大学启动全球最大规模单中心瑞金医院神经内科联合英国约克大学启动全球最大规模单中心临临 床

12、研究，验证床研究，验证AI及可穿戴设备有助于诊断及监测帕金森病及可穿戴设备有助于诊断及监测帕金森病 具有专利的人工智能运算方法 可穿戴设备技术：异动症24小时监测 扣指试验客观衡量运动迟缓 抓握任务鉴别不同神经退行性疾病 视空间功能评测电子画板用于客观评 估认知能力2、AI+辅助诊疗辅助诊疗“瑞宁预糖瑞宁预糖”、“瑞宁知糖瑞宁知糖”AI糖尿病预测软件糖尿病预测软件 基于宁光院士建立的全球最大糖尿病预测数据库，采集数百项指标，识别影响糖尿病患病 概率重要性因子，并建立预测模型 瑞宁预糖：输入性别、年龄、血压、血糖、血脂、体重，即可计算代谢性疾病指数（满分100分），用以评估3年内发生心血管病的概

13、率 瑞宁知糖：输入个人基本信息（如性别、年龄、身高、体重、教育状况、饮酒吸烟等，无 需输入血糖水平），即可算出近3年内糖尿病患病风险病灶分割病灶良恶性分级恶性程度甲状腺超声，含B mode,color flow,shear wave elasticity image深度神经网络模型SVMRandom Forest3、AI+医学影像医学影像 与第三方合作开展超声影像辅助诊与第三方合作开展超声影像辅助诊断断智能浅表超声诊断智能浅表超声诊断针对不同场景设计的基于云端和 移动端智能浅表超声方案迁移学习将在自然场景中证明有 效的深度神经网络用于超声图像提取特征和 医生对图像 的描述进行 分类匹配对深度学

14、习得到的高维特征匹配医生对影像的分类，提高可解释性3、AI+医学影像医学影像3、AI+医学影像医学影像 Enclitic 位于美国，获1200万美元融资 通过机器学习识别恶性肿瘤的影像学特征和判别模式 经肺癌影像数据库LIDC、NLST 验证，对肺癌检出精度比放射技师高5成以上3、AI+医学影像医学影像GE Arterys：AI心脏疾病辅助诊断心脏疾病辅助诊断4、AI+精准医学精准医学MDT中引入中引入：Watson for Oncology完成完成249例结直肠患者例结直肠患者 NLP：识别医护人员的自然语言和非结构化病史 Big Data Analytics：在百万计文献中检索治疗方案 K

15、nowledge Reasoning：在治疗方案中根据患者临 床推荐个性化方案仅需约十五分钟仅需约十五分钟，Watson便能完成一份深度分析报告便能完成一份深度分析报告注：NCCN美国国立综合癌症网络；NLP自然语言处理2.沃森会在大量可能包含答沃森会在大量可能包含答 案的信息中进行搜索，然后案的信息中进行搜索，然后 生成一系列生成一系列潜在答案潜在答案3.沃森采用沃森采用特有算法特有算法，为，为 每一个潜在答案进行打分每一个潜在答案进行打分4.沃森会提供最有沃森会提供最有 信心答案信心答案以及答案以及答案 背后的相关证据背后的相关证据5.沃森会对打分分数进行沃森会对打分分数进行 权衡，为每个

16、答案的信心权衡，为每个答案的信心 指数进行指数进行精准评估精准评估HOW WATSON W W O O R K1.沃森能试图理解你的沃森能试图理解你的 语言，会将你的问题分语言，会将你的问题分 解为很多个关于这个问解为很多个关于这个问 题的题的关键特征关键特征4、AI+精准医学精准医学合作开展瑞金特色本地化治疗方合作开展瑞金特色本地化治疗方案案推推荐荐4、AI+精准医学精准医学本地化后的界面4、AI+精准医学精准医学 位于中国，人工智能生物科技初创公司 整合基因、微生物（肠道、口腔等）、蛋白及代谢数据（尿、汗、血液等）等 提出对不健康状态的干预措施，为医疗、慢病管理提供个性化方案生物科技：碳云智生物科技：碳云智能能4、AI+精准医学精准医学 位于美国，一家数据驱动型生物研究公司 只需要9-12个月就能研制出一款药物 2016年10月，与美国国防部宣布合作寻找侵入性乳腺癌治疗方案，将筛选多达25万个样本寻找早期癌症的新生物标记新药研发：新药研发：BergHealth 依靠生物数据（基因、蛋白质、代谢物等）及其之间的联系，借 助AI技术寻找关键生物标记物 图中大节点就是潜在的关键蛋白图中大节点就是潜在的关键蛋白