视频处理。计算机视觉。
当然可以利用cpu处理这些任务,但是有了更加强大高效的hexagon™ 680 dsp在手,还需要这样吗?
过去几年,开发人员一直在利用 hexagon sdk,量身定制 dsp,处理音频、图像与计算 。在 hotchips 半导体会议上,我们揭开了即将上市的 snapdragon 820 处理器中全新 hexagon dsp 的部分面纱。这款 hexagon 680 dsp ,集成宽幅向量处理 hexagon 向量扩展(hvx)核心,充分利用新的dsp 应用实例。
集成 hvx 意味着现在可以将cpu从处理视频与摄像中解放出来,转由 hexagon dsp 以较低功耗快速处理图像。我们已经发布了 hexagon sdk 2.0 hvx 扩展,你可以在管线中加入自己的算法,利用dsp进行处理。
全新宽幅向量处理hvx核心照像、计算机视觉(cv)与视频耗电量巨大,迫切需要从cpu卸载,以减轻负担。hexagon 设计人员利用 hvx 核心,加入宽幅向量处理,实现高性能与低功耗。
你可以在三个主要方面利用 hvx:
1.视频处理——利用你的算法,提升解码视频输出质量。sdk 扩展补充,提供框架,允许开发人员创建端对端应用,处理解码视频帧。我们提供的扩展示例专注两个方面:
•android 端视频处理应用,可以作为 android 多媒体管线与其它android视频应用相结合的出发点。
•hexagon 端视频处理算法,可以作为创建在hexagon和hvx运行的算法的出发点。
2.相机后处理与cv——我们在扩展中包含了一些示例,包括一个端对端.apk ,实时接收相机输入,运行cv处理,并发送给显示屏。我们提供了一个简单算法动态应用,你可以替换成你希望在照相机预览路径运行的其它算法。
3.相机播放——传感器与摄像前端直接连接,hvx 还包括针对传感器、hexagon dsp与摄像前端的硬件协议接口。你可以借助这个接口利用hvx,在传感器与摄像前端硬件引入dsp 处理(例如,利用非标准传感器或执行像素矫正)。sdk 中有一个例子告诉你如何创建所需的hexagon库,并连接android摄像机管线。
所有三个应用实例中,你的算法再也不必在软件中缓慢运行了。而且,你可以将dsp定制服务更轻松地集成于oem创建流程。
总之,如果管线其余部分已经就绪,扩展是开发人员增加自己后处理算法的正式方法。以前也可以利用hexagon处理视频、cv、照相,但是,hvx 更胜一筹,可以处理更大尺寸与分辨率的图像,并能更快地运行算法(见下表)。
进一步利用 hexagon sdk 2.0 hvx 扩展
准备好在hvx上尝试你自己的图像处理算法了吗?搭载snapdragon 820的设备将很快面世;同时,你可以在hexagon sdk模拟器中测试你创建的算法。
敬请留意不久发布的硬件:全新移动开发平台(mdp)与全新dragonboard开发工具包,很快就可在intrinsyc购买。
如果你具有hexagon dsp开发经验,记得获取 hexagon sdk 2.0 hvx 扩展方面的新闻。如果没有,请申请获得hexagon sdk。让你的图像处理从arm卸载,由dsp接手。
更多qualcomm开发内容请详见:qualcomm开发者社区。
改进仿人智能积分控制算法的仿真及应用研究
5G的到来会给我们的生活带来什么新变化
SF6密度继电器校验仪
TPT 17全新升级——轻松测试,悦享驾驶
”那一年,马云被称为“到处推销中国黄页的骗子”
高清图像处理,低功耗——Qualcomm® Hexagon™ Vector eXtensions (HVX)
【决赛通知】关于举办2022年首届福建省大学生人工智能创意赛--开源Harmony开发者大赛决赛的通知
蓝牙门禁系统的特点
米家LED随身灯增强版拥有10颗灯珠发光柔和非常适用
网管型光纤收发器系统具有哪些应用特点
未来十年大数据分析的发展趋势 AI、IoT也离不开它
基于Web服务器和S3C2410处理器实现温室茶树培养监测系统的设计
研究前沿:Nature Nanotechnology-石墨烯 | 量子摩擦制冷
真4K画质才过瘾,超大屏智能电视购买小窍门
Android 11变化:刷机不再变砖?Recovery分区成为历史!
51单片机指令助记符及其相关符号的记忆方法
新舟700飞机研制批大部件总装制造已进入下线交付期
企业如何在移动应用程序开发中利用人工智能和区块链
电路板缺陷检测
怎样选择PCB基板材质