Root 发自 凹非寺
量子位 出品 | 公众号 QbitAI
癌症的诊断特别累人。
取材切片固定染色都还好,最耗时费神的要数看片了。
病理学家们要想从一团密密麻麻的组织细胞里,找到空间排列奇怪,细胞核形状诡异的癌细胞,就得守在显微镜后头,一张一张活检切片看过去,看到天荒地老,海枯石烂。
虽说得益于AI近期的发展,已经有相应算法可以快速处理切片的染色图像了。
但谷歌大脑团队发现,AI技术下铺到临床医院时还面临一个麻烦:得先获取切片的数字图像。
原来,医生直接看切片就好了。给AI看反而还要多加一步:先拍下来,再传给AI分析。这么麻烦,医生当然不乐意了。没办法,习惯的惯性就这样拖慢了AI下沉的脚步。
是否有其他技术可以一步到位,将算法的分析结果直接在显微镜里?
有。AR,增强现实。把计算的信息叠加到真实的视觉信息里。
不仅可以直接投在目镜上,速度上还快得让人难以置信。
只要0.0758秒。就给你揪出来癌细胞。
谷歌AR显微镜
今天,在美国癌症研究协会年度会议(AACR)上,谷歌大脑团队提交了一篇论文An Augmented Reality Microscope for Real-time Automated Detection of Cancer,提出了一个AR显微镜的原型。目前该论文还在待审核中。
这套神奇的AR显微镜平台是怎么工作的?
首先,目镜的图像会传给带深度学习模型的计算单元。然后AI模型将分析结果实时投到目镜的视野里。
该平台原型长这样。
出结果是挺快,但贵吗?
要知道,铺开技术的关键,是低成本。
好在这套AR显微镜适配性高,可直接加装在一线医院现有的显微镜上。只需购买带得动AI算法的AR设备,就能升级医院的癌症检测技术。
实际诊断效果怎么样?
目前,谷歌大脑团队已经成功地在这套AI+AR显微镜平台原型系统里运行了两套不同的癌症检测算法。
一个是看淋巴结组织有没有乳腺癌细胞;另外一个,是找前列腺组织里的癌变区域。
△4倍镜到40倍镜下的影像feed,分析起来统统无压力。
可疑的癌细胞,会被一个荧光绿圈框起来。
在定位、定性癌细胞的准确率方面,这套平台都有相当优秀的表现。找出乳腺癌细胞的准确值可达0.96,位置判断精准值可达0.98。
理论上,除了画圈,AR技术可直接上文本标注,打箭头,出热点图,给段动画。只要觉得能帮助病理学家诊断,什么方式打标记都行。除此之外,AR显微镜还完成做细胞计数,细胞分类等任务。
论文中还指出,这套AR显微镜的刷新率是10FPS(帧每秒),基本上可以满足病理学家看片的需求,不管是转换40倍镜还是上下移片子,都可以做到低时延输出分析结果。时间上能做到0.0758秒,可以说是完美了。
更多应用等你开发
除了癌症诊断,这套AR显微镜设备将来还可以分析CSI实验室里那些证据上沾了什么类型的人体细胞,又或者可以看看培养皿里的心肌细胞具体长了多少。
凡是原来和显微镜搭上边的,都用得到这套神器。
△这下破案更快了
最后,附AI+AR显微镜研究论文:
http://sina.lt/fzhr
你可能感兴趣
AI为癌细胞杀手“染色”,辅助医生选择治疗方案 | 附论文
和免疫荧光标记说拜拜 | 谷歌Cell论文:DL模型预测荧光位置
FDA批准首个无需人类医生指导的AI,可独立诊断眼科疾病
—完—
诚挚招聘
量子位正在招募编辑/记者,工作地点在北京中关村。期待有才气、有热情的同学加入我们!相关细节,请在量子位公众号(QbitAI)对话界面,回复“招聘”两个字。
量子位QbitAI· 头条号签约作者
վ'ᴗ' ի 追踪AI技术和产品新动态