Root 发自 凹非寺

量子位 出品 | 公众号 QbitAI

癌症的诊断特别累人。

取材切片固定染色都还好，最耗时费神的要数看片了。

病理学家们要想从一团密密麻麻的组织细胞里，找到空间排列奇怪，细胞核形状诡异的癌细胞，就得守在显微镜后头，一张一张活检切片看过去，看到天荒地老，海枯石烂。



虽说得益于AI近期的发展，已经有相应算法可以快速处理切片的染色图像了。

但谷歌大脑团队发现，AI技术下铺到临床医院时还面临一个麻烦：得先获取切片的数字图像。

原来，医生直接看切片就好了。给AI看反而还要多加一步：先拍下来，再传给AI分析。这么麻烦，医生当然不乐意了。没办法，习惯的惯性就这样拖慢了AI下沉的脚步。

是否有其他技术可以一步到位，将算法的分析结果直接在显微镜里？

有。AR，增强现实。把计算的信息叠加到真实的视觉信息里。



不仅可以直接投在目镜上，速度上还快得让人难以置信。

只要0.0758秒。就给你揪出来癌细胞。

谷歌AR显微镜

今天，在美国癌症研究协会年度会议（AACR）上，谷歌大脑团队提交了一篇论文An Augmented Reality Microscope for Real-time Automated Detection of Cancer，提出了一个AR显微镜的原型。目前该论文还在待审核中。

这套神奇的AR显微镜平台是怎么工作的？

首先，目镜的图像会传给带深度学习模型的计算单元。然后AI模型将分析结果实时投到目镜的视野里。



该平台原型长这样。



出结果是挺快，但贵吗？

要知道，铺开技术的关键，是低成本。

好在这套AR显微镜适配性高，可直接加装在一线医院现有的显微镜上。只需购买带得动AI算法的AR设备，就能升级医院的癌症检测技术。

实际诊断效果怎么样？

目前，谷歌大脑团队已经成功地在这套AI+AR显微镜平台原型系统里运行了两套不同的癌症检测算法。

一个是看淋巴结组织有没有乳腺癌细胞；另外一个，是找前列腺组织里的癌变区域。



△4倍镜到40倍镜下的影像feed，分析起来统统无压力。

可疑的癌细胞，会被一个荧光绿圈框起来。

在定位、定性癌细胞的准确率方面，这套平台都有相当优秀的表现。找出乳腺癌细胞的准确值可达0.96，位置判断精准值可达0.98。



理论上，除了画圈，AR技术可直接上文本标注，打箭头，出热点图，给段动画。只要觉得能帮助病理学家诊断，什么方式打标记都行。除此之外，AR显微镜还完成做细胞计数，细胞分类等任务。

论文中还指出，这套AR显微镜的刷新率是10FPS（帧每秒），基本上可以满足病理学家看片的需求，不管是转换40倍镜还是上下移片子，都可以做到低时延输出分析结果。时间上能做到0.0758秒，可以说是完美了。



更多应用等你开发

除了癌症诊断，这套AR显微镜设备将来还可以分析CSI实验室里那些证据上沾了什么类型的人体细胞，又或者可以看看培养皿里的心肌细胞具体长了多少。

凡是原来和显微镜搭上边的，都用得到这套神器。



△这下破案更快了

最后，附AI+AR显微镜研究论文：

http://sina.lt/fzhr

你可能感兴趣

AI为癌细胞杀手“染色”，辅助医生选择治疗方案 | 附论文

和免疫荧光标记说拜拜 | 谷歌Cell论文：DL模型预测荧光位置

FDA批准首个无需人类医生指导的AI，可独立诊断眼科疾病

—完—

诚挚招聘

量子位正在招募编辑/记者，工作地点在北京中关村。期待有才气、有热情的同学加入我们！相关细节，请在量子位公众号(QbitAI)对话界面，回复“招聘”两个字。

量子位QbitAI· 头条号签约作者

վ'ᴗ' ի 追踪AI技术和产品新动态