很多开发者喜欢边做边学——学习新技术,使用前沿工具,帮助实现灵感。forwardxp团队也持有同样的观念,他们利用qualcomm technologies移动创新和扩展现实(xr)专业知识,在think f.a.s.t vr医疗培训演示中开发新的沉浸式体验。
think f.a.s.t.是一款非常有吸引力的vr模拟,将观看者置身于医疗急救情形当中。在这个最先进的虚拟培训中心,医科学生使用虚拟现实技术,学习如何使用f.a.s.t(面部、手臂、语音、时间)系统识别中风症状,同时与虚拟病人实时交互。
qualcomm technologies选择forwardxp将他们在视频游戏开发方面的专业知识带到医疗领域虚拟现实,在think f.a.s.t演示中展示医疗培训的突破性现实。硬件和软件是使xr真正具有沉浸式体验必不可少的两个方面,因此,在培训模拟中将两者无缝集成是至关重要的。
图片:使用qualcomm 骁龙835 vr开发套件的放射肿瘤医师利用think fast培训模拟进行交互。
硬件
虚拟现实的一个重要方面就是沉浸感,体现在三个关键方面:视觉、听觉和互动。为实现这一重要目标,forwardxp使用了qualcomm® 骁龙™ 835 vr开发套件;这是一款独立的全功能移动xr头盔,带有单面板amoled头戴式显示器(hmd)和一个集成骁龙835的移动平台。
包括支持六个自由度(6dof)的双前置摄像头,通过集成的hexagon™ dsp以800hz高频率实现六个自由度。允许用户在他们认为合适的地方自由探索并提供在环境中的自然感觉。
骁龙835 vr开发套件具有真正的移动特性,可以使用户沉浸在虚拟世界,无需连接电缆,从而可以从各个角度检查患者,确保诊断准确。不仅如此,现在医疗服务提供者可以在任何地方接受培训,而无需繁琐昂贵的设置。
hexagon dsp降低了6dof的计算量,同时,强大的qualcomm adreno™ 540 gpu提供了高帧率体验,可以帮助减少眩晕。forwardxp团队可以做到在gpu上投射高分辨率模型和纹理,而不会降低性能。
与其他xr解决方案相比,骁龙835 vr开发套件为此类应用提供了强大的解决方案。
软件
forwardxp使用unity 3d构建训练平台,将其编译成android包并部署到平台。与其他解决方案不同的是,骁龙835 vr开发套件是一款独立产品,因此,无需担心使用智能手机vr解决方案时可能会遇到的电话、多任务或其他负担。
骁龙vr sdk使unity3d获得高精度6dof跟踪,从而实现更加身临其境的体验。adreno 540 gpu的强大功能可以让艺术家自由地提供高度细致和逼真的场景。在处理病人诊断工具时,应该尽可能地贴近现实,以便将培训内容应用到实际操作当中。
图片:jah raphael在unity 3d中开发thinkfast vr模拟程序。
think f.a.s.t.还融合了leap motion的精确手部运动追踪功能,帮助提升沉浸感。由于训练面向以前从未使用过手柄的医疗专业人员,自然的手部动作是一个关键部分。
为进一步增加自然的用户交互,forwardxp还集成了专有的语音控制。允许用户以舒服的方式与虚拟病人交互,好像他们正在和自己的病人聊天一样。
中间问题
提到中风患者,时间可谓生死攸关。切实可行的实践培训可以有助于提高准确诊断的速度。
对vr开发感兴趣?在qualcomm开发者网络上查看以下资源:
骁龙vr sdk——为开发者提供骁龙vr设备优化的高级vr功能。
3d音频工具——帮助创建栩栩如生的3d音频体验的工具套件,包括支持基于场景的音频。
骁龙835 vr开发套件——由骁龙835移动平台提供支持,支持6dof的独立和无线一体化vr头盔。
硬件制造商还可以利用我们的hmd加速器计划,使用qualcomm technologies参考设计和/或与交钥匙原始设计制造商合作。
无论您在xr开发方面发挥什么作用,也无论您为哪些群体构建沉浸式体验,qualcomm开发者网络都能为您提供相应的技术、工具和资源。现在注册,注册电子邮件并更新去了解qdn最新的信息。
更多qualcomm开发内容请详见:qualcomm开发社区。
一个VR版初代《黑客帝国》的故事
安防机器人落地减轻传统安保工作强度
至2027年底!新能源汽车购置税减免再延长
ips硬屏和软屏哪个好
五大项目的实施,可创建一个主流的区块链世界
ForwardXP:通过XR培训实现F.A.S.T(快速)响应
pcb分板机原理_pcb板分板机的种类
ARM处理器设计的电机电物理量采集系统
宁德时代称将线下发布“头号新品”,传为快充电池
充电桩标准是什么?国网1591文件告诉你答案
南昌新大地电脑城:学生高价买低端机退货被收千元“拆机费”
LED平板灯是如何进行结构设计的?
如何在FPGA中实施4G无线球形检测器
酷狗M52真无线耳机推荐,享受创新设计带来的快乐
59元”地板价,德赛Fitband手环欲叫板小米?
将USB信号转换为便于光纤传输的电路图
钛金电源意义何在?
KUKAC4通过逆向启动键执行反向运行
由美籍法国数学家曼德勃罗创造出来的分形算法
2018联想创新科技大会开幕,AR技术持续受到新技术爱好者和玩家热捧