谷歌利用其在深度学习和增强现实方面的专业知识来创造可以在医学界发挥重要作用的东西。
谷歌开发了一种增强现实显微镜(ARM)来帮助检测癌症。
尽管显微镜仍然是原型,但谷歌相信它可以帮助加速深度学习工具在世界各地病理学家中的采用。
ARM 显微镜是一种改进的光学显微镜,可以直接在医疗专业人员的视野内进行实时图像分析和机器学习算法结果的演示。
ARM 平台最重要的部分之一是所需的技术可以改装到世界各地医院和诊所现有的光学显微镜中。
谷歌还指出,ARM系统使用低成本且易于使用的组件,不需要分析整个组织的所有数字版本。
计算组件和深度学习模型(例如基于 TensorFlow 构建的模型)允许一系列预先训练的模型在 ARM 平台上运行。
谷歌表示,用户将通过 ARM 上的目镜查看样本,就像在传统显微镜上一样。
机器学习算法将其输出实时投影到用户的光路中。
数字信息的投影覆盖在样本图像上,以帮助观看者定位或量化幻灯片上感兴趣的特征。
演示实现以每秒 10 帧的速度运行,允许用户在通过移动载玻片或更改放大倍率来扫描组织时无缝更新模型输出。
ARM 可以为用户提供各种视觉反馈,包括用绿色轮廓勾勒出检测到的肿瘤区域或在视野中放置箭头和文本。
谷歌相信ARM有潜力对全球健康行业产生重大影响。