经产观察
IT资讯
IT产业动态
业界
网站运营
站长资讯
互联网
国际互联网新闻
国内互联网新闻
通信行业
通信设备
通信运营商
消费电子
数码
家电
数码

Google重磅医疗AI:增强现实显微镜实时自动检测癌症

作者:habao 来源: 日期:2018-5-16 14:19:49 人气:

  深度学习技术近来在眼科、皮肤科、放射科和病理科等医学学科领域展现出了极大的应用前景,它可以帮助为世界各地的患者提供更加精准、可用的高质量医疗服务。

  近日在美国癌症研究协会年会的一个中,Google通过一篇题为《增强现实显微镜实时自动检测癌症(正在审查)》的论文,介绍了一款增强现实显微镜的平台原型。该平台由一个经过改良的光学显微镜组成,能够对图像进行实时分析并直接在用户的视野中显示机器学习算法的分析结果。

  值得一提的是,只需使用低成本的、现成的元器件,就可以将这款增强现实显微镜成世界各地医院和诊所中常见的普通光学显微镜,而且无需对数字系统进行全面升级就能进行组织分析。

  现代计算组件和深度学习模型比如在 TensorFlow 平台上构建的模型,使得这个增强现实显微镜平台能够运行大量的预训练模型。和使用传统显微镜的方法一样,用户通过目镜观察样品,机器学习算法输出的结果将实时投射到光中,叠加在样本的原始图像之上,帮助观察者快速定位和量化感兴趣的特征。而且,平台的计算和视觉反馈非常迅速目前速度已经达到了 10 帧/秒,这意味着当用户移动组织或放大倍数做进一步观察时,可以获得流畅、无缝的视觉体验。

  左图:增强现实显微镜的原理概述。一台数码相机捕捉到与用户相同的视场(FoV),然后将图像传送给一个附加的计算单元,该单元能够运行实时推理的机器学习模型。随后推理结果被反馈到一个定制的 AR 显示屏,该显示屏与目镜内联,并将模型输出的结果与标本显示在同一平面上。右图:该图展示了我们的平台原型被成典型临床级光学显微镜后的样子。

  理论上,增强现实显微镜可以提供各式各样的视觉反馈,包括文本、箭头、轮廓、热图和动画,而且可以运行多种类型的机器学习算法以应对不同的任务,比如对象检测、量化和分类等。

  为了演示增强现实显微镜的功能,我们让其运行两种不同的癌症检测算法:一种用于检测淋巴结标本中的乳腺癌转移,另一种用于检测前列腺切除术标本中的前列腺癌。这些算法可以在4-40x 的放大倍数下运行,并用绿色轮廓勾画出检测到肿瘤区域。这些轮廓可以帮助病理学家注意到感兴趣的区域,而不至于遗漏外观模糊的肿瘤细胞。

  注:通过增强现实显微镜观察到的视图。这些图像展示了 4x、10x、20x 和 40x 放大倍数下的淋巴结标本。

  虽然这两个癌症检测模型并非用增强现实显微镜直接捕获的图像进行训练的,但它们在后者上表现非常出色,无需额外的训练。我们相信,假如直接用增强现实显微镜获取的图像做进一步训练,这些算法的表现还将继续提升。

  最初都是用来自一种光学结构完全不同的完整标本扫描仪的图像训练的,但他们在增强现实显微镜平台上的表现非常出色,无需额外的在训练。例如,淋巴结转移检测模型在增强现实显微镜上运行时曲线,前列腺癌检测模型的曲线,仅略低于 WSI 上得到的结果。

  我们相信,这款增强现实显微镜将给全球卫生事业产生重大影响,尤其是在发展中国家的传染病诊断方面包括结核病和疟疾等。此外,在即将采用数字病理工作流程的医院,增强现实显微镜也可以与数字工作流程结合使用。光学显微镜已经在很多行业已经证明了其价值,但在病理学领域作用有限。我们相信增强现实显微镜可以应用于医疗、生命科学研究和材料科学等众多领域。我们很高兴能继续探索这款增强现实显微镜,帮助加速机器学习技术界各地产生积极影响。

  文章出处:【微信号:ggservicerobot,微信号:高工智能未来】欢迎添加关注!文章转载请注明出处。

  去年Google I/O大会上透露的场景简化技术Seurat在近日代码。这将为更多内容创作者提供....

  德勤最新开发的财物机器人,一个机器人可以顶替15个财务的工作,而且可以每周24小时*7日的工作。36....

  谷歌召开一年一度的Google I/O大会。谷歌CEO劈柴直接祭出了这次大会的王牌AI,这个智能过人....

  我们一直在寻求一款 VR杀手应用 从 2014年底2015年初开始,我们就在苦苦寻求一款杀手级VR应....

  目前最受关注的焦点为众家公司的语音助理。但物联网不仅语音助理而己,小型公司应设法找出物联网市场中尚未....

  一篇质疑IBM的旧文今天在HackerNews上火了起来,虽已时隔两年,这篇文章还是引起了网友们的强....

  根据Canalys的预测,直到2020年美国都将占据全球智能音箱绝大部分的市场份额。由于网络普及率高....

  刚刚发布不到两年的 Google Allo 宣布将暂停开发,团队资源会转入到另一个项目中。 网上曾流....

  Google的研究人员开发了一种增强现实显微镜(ARM),该显微镜可以从一个经过训练的神经网络中获取....

  所谓的VR头盔指的是不依靠任何外部电子设备就能够工作的产品,从很多层面来讲,这样的VR头盔可....

  据了解,YouTube将在今年4月13日至15日进行本年度第一场节目直播(第20-22周的第二个周末....

  Google 的研究人员创建了一个视听模型,可以通过算法将视频中的多个声音分离,得到一个清晰的单个语....

  这不是通常意义上的智能眼镜。 美国大学研究人员开发出的智能眼镜,并没有 Google Glass....

  据统计,中国市场在2016与2017两年共计出货36万立头显,超过全球其他地区出货总量的20倍。....

  2017年,“人工智能”成为一个热门词汇。随着人工智能领域学术研究和技术应用的进步,人工智能正在与各....

  据彭博消息,谷歌CEO桑达尔•皮查伊(Sundar Pichai)近日参加在京召开的中国发展高层论坛....

  Google正在推出一款新的AI语音合成器,作为其机器学习云工具套件的一部分。名为云文本到语音的服务....

  人类科技发展再发达,也得面对一个避不开的话题:如何延续生命。所以如果有种方法,能让自己的亲人,长生不....

  据报道,在参加中国发展高层论坛2018年年会期间,谷歌CEO Sundar Pichai(“劈柴....

  随着智能家居开始进入千家万户,各大巨头对于智能家居平台的争夺也愈演愈烈,而在智能家居控制中心这一部分....

  最近大馆市和谷歌进行了合作,让秋田犬成为你的向导,在 Google 街景中以秋田犬的视角来游览这座城....

  在本周四发布的推文中,Google宣布Google Lens可视化搜索功能将会在未来一周内出现在....

  Google和LG这块VR专用显示屏对比目前市场上最高端的VR头显屏幕规格都要高很多——即便是尚未正....

  与最近出现的AR眼镜相比,dynaEdge AR的外观就显得有些与众不同。它其实是一个在眼镜腿上悬挂....

  首先是“制造成本上升”,2016年制造业最热的新闻就是“别让曹德旺跑啦!”;其次就是“企业利润太低”....

  技术都会有一个前进的方向,我把它叫做必然,就是这个趋势像重力一样,一定会发生。比如有了芯片、电波等,....

  NICE是由新创企业Scenera主导创设,参与者除了Sony和鸿海之外,还包括Nikon和纬创。N....

  Android P 的第一个开发者预览版已在近期放出,率先获得支持的设备自然是 Google 的几款....

  Ring犹如亚马逊为Alexa完整生态系统的一部分,同时也让亚马逊在智能家庭市场与Google、....

  Google正在进行一项定位技术的测试。该技术可对拨打报警电话的用户进行快速定位,以便能够更准确及时....

  我们知道在开源和贡献开源方面,Google 一直是行业的典范。2017 年它开源了哪些优秀的软件,有....

  据外媒CNBC报道称,在苹果最新发布的《iOS安全指南》文档中透露,苹果正使用Google的公有云为....

  微软正在研发HoloLens头戴式眼镜,Google正在研发一款数位多眼镜,3D打印将是未来....

  人工智能(AI)以及物联网(IoT)都引领产业快速变化,在这两个科技相互帮衬之下,AI将变得更有意义....

  Google Fight会预测航班是否会误点,甚至告诉使用者误点的原因,并加入「基本经济舱」(Bas....

  云计算这个概念从提出到今天,差不多10年了。这10年间,云计算取得了飞速的发展与翻天覆地的变化云计算....