Google发布全新移动端3D识别方案Objectron 可帮助工厂车间的机器人实时规避障碍

google近日发布了全新的移动端3d识别方案objectron,该方案可在2d图像中发现物体并通过ai模型估算其位置、方向和尺寸。google表示,objectron对机器人技术、自动驾驶汽车、图像检索和ar技术影响深远,例如,其可以帮助工厂车间的机器人实时规避障碍。
目前,跟踪3d对象是一个棘手的问题,尤其是在处理有限的计算资源时。由于缺乏数据以及物体的外观和形状的多样性,当仅有的可用图像为2d时,情况会变得更糟。
为此,objectron研发团队开发了一种图片标记工具,该工具可以通过分屏视角显示2d视频帧,支持标记者使用分屏视图显示2d视频帧来标记对象的3d边界框(即矩形边框)。这些3d边界框将叠加在点云数据、摄像头画面和识别到的平面上。
标记者在3d视图中标记3d边界框后,可以在2d视频帧中进行验证,而对于静态图像,标记者只需在单个帧中标记目标对象即可。标记工具还使用ar session数据中的实际摄像头信息来确定该物体在所有帧中的位置。
为了补充现实世界中的数据以提高ai模型预测的准确性,google研发团队开发了一种引擎,将虚拟对象放置到包含ar会话数据的场景中,这样就可以使用摄像机图像检测到的平面区以及预测的光线,来生成与场景匹配的光照在物理中的位置,从而产生高质量的合成数据。在验证测试中,综合数据的准确性提高了约10%。


芯片是什么材料做的
【开发者案例】智能晾衣杆控制系统设计
现在的电动汽车有什么缺点,是否推荐购买
紫光展锐推出了三款春藤无线连接芯片产品
争做行业排头兵 当贝投影成为首家启用CVIA流明亮度标准企业
Google发布全新移动端3D识别方案Objectron 可帮助工厂车间的机器人实时规避障碍
WiTricity宣布完成融资,将继续研发其无线电力平台
无线音响界的“一股清流” Sonos PLAYBASE评测
这几款蓝牙耳机的测评,可以帮助你正确选择蓝牙耳机
应用在大连高温老化房中的温度程控调节仪
IBM联手意法半导体与Shaspa共推智能家居
基于单片机与CPLD技术的多波形函数信号发生器设计
基于CS66协作机器人技术路线介绍
联想手机重燃希望 出货量逆势增长了76%
CEVA宣布由CEVA赋能的蜂窝物联网芯片 交付1亿颗的里程碑达成
旋转机械摩擦法静电测试仪技术指标
新一代 Arm Neoverse 平台重新定义全球基础设施
互同步,互同步是什么意思
MATLAB基于FPGA和ASIC的数字收发器的开发和利用分析
蓝牙mesh取得迅速进展,新技术的开发使得创新层出不穷