AI+医疗|腾讯的帕金森康复训练游戏:动动嘴巴操控人物

澎湃新闻记者 陈宇曦 综合报道
2019-08-23 22:13
来源:澎湃新闻

用游戏的方式帮助帕金森病患者进行康复训练,AI帮助医生识别病变迹象。

8月23日,在上海人工智能大会倒计时一周之际,腾讯用户开放日(T-DAY)在上海举行。当天展示了腾讯在AI技术和服务方面的成果,其中健康医疗领域已经成为人工智能、图像识别等技术较为成熟的落地应用场景。

据介绍,复旦大学附属妇产科医院已经与腾讯在人工智能+医疗领域展开合作和探索,将腾讯首款人工智能医疗产品腾讯觅影应用在宫颈癌、乳腺癌等疾病的筛查上。结直肠肿瘤筛查人工智能系统则落地于海军军医大学附属医院,这也是国内首个进入临床预试验的结直肠肿瘤实时筛查人工智能系统。同时,腾讯与复旦大学附属肿瘤医院合作,携手打造基于电子就诊卡的人工智能精准患者服务平台;腾讯医疗AI实验室与复旦大学附属华山医院合作,推出帕金森病人工智能视频分析辅助诊断新技术。

帕金森康复训练游戏

澎湃新闻记者在现场体验了腾讯医疗AI实验室研发的帕金森病运动功能智能评估系统,参观者只需拿着手机做指定动作,就能完成自己的运动情况评测,成为医生判断帕金森症状的参考。

现场工作人员表示,该系统目前处于测试状态。

帕金森康复训练游戏

腾讯还结合自身在游戏领域的优势,开发了一款“帕金森康复训练游戏”,帕金森患者通过变化嘴巴的闭合状态来操控游戏人物,就能在玩游戏的同时锻炼面部肌肉,从而帮助康复训练。

据腾讯方面介绍,帕金森康复训练游戏是按照医生建议的康复动作来设计的,在游戏的AI视频分析技术下,通过摄像头能识别帕金森患者的眼部、嘴部轮廓及局部纹理信息,自动判断动作的频率和幅度。工作人员称,这套“帕金森康复训练游戏”有望在养老机构等场景进行推广。

胸部多器官分割

在腾讯用户开放日(T-DAY)上展示的“胸部多器官分割”,也体现了人工智能、图像识别和医疗的结合。

目前临床中常用的基于三维CT影像的器官描绘,很大程度上依赖于专家的人工标注,医生需要持续密集地同时对多个器官进行标注,不仅工作量大且效率较低,勾画单个病人的肿瘤区域根据患病位置的不同耗时可能高达96分钟。此外不同患者的目标器官通常在形状和位置上差异很大,并且CT影像中的轮廓对比度相对较低,也给器官的分割标注带来了困难。

胸部多器官分割演示(00:19)
由腾讯优图实验室联合厦门大学王连生教授实验室组成的TencentX团队提出的胸部多器官分割系统,提供了一种全自动化的基于卷积神经网络结构的健康器官分割方法,能够精确快速地分割出胸腔内位于靶肿瘤附近的健康器官。

该套胸部多器官分割系统,不仅可以协助医生在放射治疗中更加精确地控制剂量,从劳动密集型的器官标注工作中解放出来,而且能够提高分割准确率,指导医生更精准更快速地对病人进行治疗,同时也能帮助医学研究人员更好地了解和认知胸部器官。

AI眼底检测

澎湃新闻记者现场体验了腾讯AI眼底检测系统,系统通过分析图像生成了相应报告,高度近视的记者两只眼睛均存在豹纹状眼底的情况。

这一系统上还列出了多款常见或罕见的眼底疾病,支持包括糖尿病视网膜病变等7大常见眼底疾病与20余种罕见眼底疾病的检测,AI系统可自主对眼底图像进行分析,帮助辅助诊断。

AI眼底检测

据腾讯方面的信息,“腾讯觅影” 眼底疾病筛查AI系统已经能够完成采集图像、阅片、输出报告等工作。通过助力筛查人员进行眼底图像采集,利用AI技术对图像进行质控,AI系统使得护士、技师和其他非专科人员也能完成高质量的眼底图像采集;通过 AI自动阅片,眼科医生确认AI结果即可完成读片工作,“腾讯觅影”让医生的阅片工作效率大幅提升。最后,凝聚多中心数据资源的“腾讯觅影”还能输出专业的评估报告,支持对30多种眼底疾病进行患病风险评估。

AI医学影像分析和AI辅助诊疗技术

2017年,腾讯发布了首款“AI+医疗”产品“腾讯觅影”。腾讯觅影是一套AI医学解决方案,它聚合了腾讯AI Lab、优图实验室等多个顶尖人工智能团队的能力,拥有AI医学影像分析和AI辅助诊疗两项功能,利用AI医学影像分析,能够辅助临床医生观测到早期食管癌、肺结节、糖尿病视网膜病变、结直肠肿瘤、宫颈癌、乳腺癌等疾病信息,提高临床医生的诊断效率。

截至2019年5月,“腾讯觅影”已上线全国100余家三甲医院,累计辅助医生阅读医学影像2.7亿张,服务近160万患者,提高风险病变21万例。同时,它还辅助医生累计分析门诊病例800万份,提示高风险16万次。AI导诊已接入近300家医院,累计供470万次精确导诊。

腾讯方面称,腾讯用户开放日(T-DAY)是腾讯参与世界人工智能大会的重要组成部分,本次世界人工智能大会上,腾讯还会在8月31日举办腾讯分论坛,讨论科技向善。

自2018年8月将上海分公司升格为华东总部以来,腾讯华东总部将人工智能产业作为了业务重要布局方向。

腾讯公司副总裁、华东总部总经理张立军在腾讯用户开放日(T-DAY)上接受记者采访称,腾讯华东总部在上海的人工智能布局主要关注四个方面:

第一,腾讯将会发挥自己在关键技术创新方面的优势,依托优图实验室,推动关键技术的创新,加强在机器学习自然语言处理、图像识别、模式识别、机器学习、计算机视觉等等方面的技术创新优势;

第二,腾讯将会发挥自己在建设人工智能生态圈方面的关键的优势,腾讯AI加速器和AI开放平台两大生态圈的最新孵化产品;

第三,腾讯将努力开创人工智能应用方面的场景,把人工智能能力开放出去,在不同的应用场景中进行展现;

第四,腾讯将发挥在上海及国内外的人才的集聚优势,在上海集聚国际、国内一流的人工智能人才。

张立军介绍,腾讯华东总部预计在2021年上半年正式落地在徐汇滨江西岸。届时,腾讯将把大数据、智慧产业相关的研发部门、产品部门都迁移到新的华东总部,未来也会以徐汇滨江华东总部作为中心,重点发展腾讯在云、大数据、ToB产品相关的产品应用。

    责任编辑:孙扶
    校对:丁晓