基于结构光的高精度开源三维重建系统

许多面向建筑领域的机器人作业都需要获得高精度的三维表面信息以完成类似于自动水泥抛光汇总石膏喷涂等作业。然而,目前在市场上消费级深度相机并不能满足其毫米级的精度要求。本文中提出了一个基于结构光的解决方案sl sensor,能够达到5hz的发布频率的同时生成高保真的点云(基于psp方法)。通过与其他深度相机的实验-azure kinetic和realsencse l515,验证了其在精度和准确度方面均有较好的优势。为了使sl sensor成为机器人应用实验平台,我们为其添加了一个运动补偿机制使得其能够在线性运动期间也能够正常工作(传统psp方法仅在静态环境下能够使用)。通过场景实验表明sl sensor 能够重建出高精度的石灰喷涂表面。
系统介绍
(一)硬件系统
硬件系统结构 硬件系统包含两个工业cmos彩色摄像头(1440×1080)和一个dlp投影仪(912×1140)。摄像机和投影仪是由versavis板完成触发与时间同步。另外额外的imu为未来的运动补偿策略做准备。其测量范围为设备前方0.3-1.0m的区域。
(二)软件系统
软件系统结构 软件系统在机器人操作系统(ros)的框架规范下编写,这确保了它可以轻松地与其他ros社区的功能组件完成交互与集成。 整个三维重建流程分为四个节点,其在较有效率的零拷贝指针来传递进程之间的图像的同时保证了各个部分的模块性。部分decoder与triangular节点继承了slstudio中的代码。
分析评估
(一)静态精度测试
(二)运动滑轨实验
(三)喷涂场景实验
总结
在这项工作中,我们提出了一种结构光三维重建解决方案。与现有传感器解决方案相比,我们的sl sensor集成了ros中间件框架上的现有机器人软件,以定制化实现3d扫描。我们分别介绍了了软件架构、硬件设置和校准程序,并验证传感器达到毫米级精度。我们将其与常用的传感器进行了比较,实验结构表明我们的传感器达到了精细化施工应用的精度要求。之后我们验证了我们的运动补偿策略的有效性-在线性运动下高精度psp扫描,并展示了我们的传感器在真实环境运动下根据实际情况进行模式切换的能力。未来的工作将扩展sl sensor的扫描能力由线性运动到任意6自由度运动。可能的解决方案包括更稳健的运动补偿策略或自适应模式投影,当传感器处于静态并切换到当检测到运动时,另一种模式更能适应运动场景。此外,可能研究多方法点云配准以减少扫描过程中的错误积累,以获得更准确的点云合并结果。


基于3G无线传输的智能校车监控系统设计方案
2020年到2021年之间,英特尔将进一步拆分晶圆代工业务
英特尔宣布终止收购高塔半导体
Gianluigi A. Botton团队探索钨作为高镍正极掺杂剂的神秘行为
农业用土壤肥料养分检测仪的技术指标说明
基于结构光的高精度开源三维重建系统
泛林集团独家向三星等原厂供应HBM用TSV设备
一文了解OLED照明技术产业现状和趋势
性能优良的便携式扩音机电路图
造成变频器故障一般有哪些因素?
高端or渠道?华为高增长模式面对四大挑战
AI与5G如何赋能机器人?
2012中国(成都)电子展 电子领军企业集结
LGD、三星建供货关系 压缩大尺寸电视面板资源
锐龙5000系列实现了性能飞跃,展现了什么叫“低频高能”
浅析监控系统工程中网络带宽基础
5G WiFi 2X2 MIMO能否为智能手机用户带来期望中的性能?
iOS 12.1.1正式版刚发布,苹果就推出了iOS 12.1.2的首个测试版
网友曝手机QQ已悄然接入华为移动服务框架,不挂后台秒收信息
一加5什么时候上市?一加5谍照终极曝光:机身圆润、双摄加持、性能强悍!