几个世纪以来,医生都试图借助更好的医疗工具来深入检查病人的身体状况,让他们远离病痛的折磨。ct扫描、3d超声和mri(磁共振成像)等诊断成像技术在医学上的运用已经帮助挽救了数百万人的生命。如今,gpu及由其驱动的深度学习技术正在为智能医学仪器打开一扇全新的大门。
智能医学仪器其实都是可运行复杂数学运算的计算机,将传感器捕捉的信号转化为2d和3d图像以供医生读取。医生们除了要求这些仪器能够安全、简便地运行,还希望能够提高生成图像的分辨率和保真度。
基于volta架构的gpu加快信号和算法的处理速度
如今,医生们的诉求成为了可能。凭借大规模并行计算能力,nvidia基于volta架构的gpu能够高速处理信号和成像算法。
在深度学习神经网络处理方面,借助全新的nvidia volta gpu,嵌入式人工智能计算机可以每秒进行320万亿次操作,并且运行功耗不超过500瓦。这相当于使用原来1/60的功耗实现60个cpu服务器节点的性能。
深度学习、nvidia gpu计算和医学成像的结合开启了智能医疗仪器的新时代。通过使用nvidia gpu,众多诊断成像领域的先驱已经在医学成像领域的各个主要环节取得了令人惊艳的成果。
全新的图像重建深度学习框架
图像重建是将数据采集阶段获取的信号转化为图像的过程。
在过去十年间,人类在信号处理算法方面取得多项进展,不仅提高了重建ct图像的质量,还将 x 光的用量减少了将近 80%。ge healthcare全新推出的revolution frontier ct就在使用nvidia gpu来进行超级计算,用以处理复杂的重建算法。
来自麻省总医院、a.a.martinos生物医学成像中心和哈佛大学的研究人员开发了一种全新的名为“automap”的图像重建深度学习框架。
传统的图像重建需要使用离散变换和各种过滤算法,并在实施时使用手动信号处理。而automap则使用统一的图像重建框架取代了这种方法,无需任何专业知识就可以学习传感器与图像域之间的重建关系。
左边为传统图像重建,右边为automap新型框架。
除了重建外,医学成像的图像处理阶段还包括检查、分类和分割。
用于3d分割的立体卷积神经网络
慕尼黑工业大学、慕尼黑大学和约翰·霍普金斯大学的研究人员开发了一种名为“v-net”的立体卷积神经网络,可执行前列腺mri数据的3d分割。在此过程中,系统会对需要注意的器官进行划分,对3d图像中器官的每个体素进行分类并分配相同的标签。
通过执行立体分割以处理3d数据的完全卷积神经网络示意图。
v-net在描绘前列腺状况的mri图像体上接受端到端的训练,学习一次便可预测整体的分割。v-net 分割图像中会存在数百万个3d体素,训练其中每一个体素都需要大量的计算,因此这个团队使用了nvidia gpu。
如今,医生们无需尝试分析多张2d图像,仅使用立体渲染即可生成全方位3d图像。通过功能强大的nvidia gpu,医生可以从不同角度控制并查看图像,以更好地了解解剖结构的空间关系。
使用电影渲染实现解剖结构可视化
在约翰·霍普金斯大学,elliot fishman博士和siemens的研究人员开发了一种名为“电影渲染”的新方法,使用基于物理性质的光扩散模拟,以生成逼真的人体图像。电影渲染受到了电脑动画电影中使用的计算机绘图和gpu技术的启发,使用全局照明,通过数千条直接和间接光线制作出一张逼真的图像。
电影渲染可以生成逼真的图像,这些图像有可能更准确地描绘解剖细节和复杂的解剖结构。“电影渲染:原理、应用和在ct中的观察结果”,
通过这些令人惊艳的图像,放射科医生可以识别出细微的纹理变化和周围解剖结构的空间关系。另外,fishman博士和霍普金斯的团队正在研究深度学习算法是否可以从电影渲染的图像保真度中获益。
实现新一轮的成果突破
nvidia gpu计算和深度学习将带来新一轮的成果突破,提高图像保真度、降低放射量并进一步实现微型化。
通过nvidia gpu,未来的医学成像系统将成为小型人工智能超级计算机。它能够赋予医生超人般的透视能力,让医生即时查找和重点关注需要注意的解剖区域。
早期检测往往是治愈疾病的关键,而这些智能医学仪器正在不断增强早期检测的成效,拯救越来越多人的生命。
特斯拉断电甩锅国网,专家表态大概率汽车问题
太阳能警示灯制作,solar warning light
RIM新操作系统将让人震惊
尼康D6与尼康Z5性能差异比较
ADF7241具有低功和高性能的收发器的应用介绍
GPU及由其驱动的深度学习技术推动智能医疗的无限接近
DRAM三巨头将接受中国大陆反垄断局的制裁
1月夺得动力电池装机量第6名 微宏动力牛在哪?
科大讯飞的嵌入式语音识别软件 现在可用于CEVA的超低功耗音频/语音DSP
捷普正式推出了完整的增材制造解决方案
小米Note2、乐Max2、ZUK_edge、酷派S1:这四款手机入手时需慎重考虑,性价比并不是很值!
探寻手机里那些不为人知的闪光功能 京东金机奖评选温情启动
应急照明控制器如何进行智能控制和远程管理
2020年的工业机器人行业或将进入调整期
IPv6发展现状也许并不如我们意
MPLS广域网VPN技术解析
Xilinx FPGA中使用LCD1602的方法
如何将楼梯走廊内一个普通的双控开关用plc来进行控制?
从系统下手 本本WIN XP环境下的优化策略
TI毫米波雷达传感器在自动泊车系统的应用优势