通常情况下,想要创建一个栩栩如生的人脸 3d 数字模型,需要动用 3d 扫描仪或多个摄像头。然而位于匹兹堡的卡内基梅隆大学的一支研究团队,却已经打造出了一套仅需一部智能手机、便可基于视频来创建逼真的 3d 面部模型的新技术。据悉,这套技术由 assoc 开发,凝结了 simon lucey 教授与硕士生 shubham agrawal 和 anuj pahuja 的工作成果。
3d 建模与原视频对比(图自:carnegie mellon university)
首先,研究人员使用智能手机拍摄围绕对象头部的 15~20 秒短视频。为收集尽可能多的数据(图像帧数),lucey 团队还使用了iphonex 的慢速摄影功能。
然后,其借助一种被称作视觉同时定位和制图(slam)的现有技术,来确定面部的基本几何形状。其通过对面部表征上的点位开展三角剖分,来计算对应的形状和手机相对于面部的距离。
接着,基于深度学习的算法可用于识别对象的面部轮廓,以及眼耳口鼻等“地标”的相对位置。为填补其它“空白”数据,还需要用到传统的“网格拟合”计算机视觉技术。
尽管整个过程需要 30~40 分钟,但其最大的特点是单纯可以依靠一部智能手机来完成。3d 模型不仅看起来逼真、细粒度也达到了亚毫米级,较此前开发的类似装置提升了不少。
最后,研究团队希望这项技术能够应用于诸多领域,比如游戏中玩家化身的创建,医学、或生物特征识别等场景。
有关该团队的工作详情,已在上月初于科罗拉多举办的 ieee 冬季计算机视觉应用大会上发表。
Omniverse 课程系列 7:使用 Isaac Sim 实现机器人仿真入门
一文详解HLS从C/C++到VHDL的转换
ARHT和伦敦商学院合作推出了实时全息讲师
全新结构开放数控系统的研究
c语言中的转义字符
3D面部模型实现一部智能手机就行了
小米王腾辟谣小米10 Pro海报 并称太丑了
如何选择超声波储罐液位传感器(一)
陆风逍遥什么时候上市?已于此前广州车展中亮相,一经亮相外观就相当吸引,性价比高,售价仅6万
现在还不会为设备选择性能最佳的电子连接器吗?
智能家居催生的智能摄像头会走向何方?
赛灵思FPGA与VMware vSphere相结合实现高吞吐量、低时延ML推断性能
高通2亿像素传感器的智能手机不远了
四大瓶颈制约新能源汽车产业发展
KTV包房中如何摆放音响之八大法则
如何保障汽车信息娱乐和机群系统的热安全性
中国芯片发展高峰论坛召开在即
什么是物联网数据采集网关?物联网数据采集网关的特点
充电功率高达55W!魅族Super mCharge全新快充技术正式揭晓
时钟分配芯片AD9510在高速并行数据采集中有哪些应用