赛灵思人工智能平台再次闪耀”红毯”。 lady gaga在奥斯卡颁奖典礼上以其热门电影a star is born的歌曲“shallow”获得了巨大的胜利,赛灵思在德国嵌入式世界 (embedded world )大展上以其深度学习上的“deep”,赢得了嵌入式计算设计最高奖项 —— 著名的嵌入式世界最佳展示奖。
这是继赛灵思机器学习套件ml suite 在嵌入式视觉峰会赢得“最佳云技术”大奖之后,赛灵思人工智能平台产品再获殊荣。在众多企业提名的人工智能、机器学习 (ai / ml)类方案的激烈角逐中,赛灵思从中脱颖而出。
赛灵思人工智能平台是业界首个双硬件和软件优化器。全面的软件环境直接在caffe,tensorflow和mxnet等标准框架中编译和量化经过训练的神经网络模型,并优化它们,以便在赛灵思 soc和fpga上实现。
赛灵思人工智能平台
该平台的网络剪枝技术将ai计算要求降低了93%,且精度损失不到1%。此外,为了获得最佳性能,它还根据网络结构自定义了ai推断的硬件ip和存储器层次结构。
该奖项进一步肯定了赛灵思灵活应变的ai推断加速方案,其从云到端为行业提供了无与伦比的低时延性能。我们的ai平台和生态系统使开发人员能够加速其整体应用,同时将网络性能优化提高至5倍至50倍,并同时降低功耗。
下面就请跟随小编一起来看看,2019 embedded world(嵌入式世界)展会上所展示的一大波赛灵思人工智能平台吧。
0 1 rfsoc 软件定义无线电
该软件定义无线电演示主要展示 zynq ultrascale + rfsoc 数十亿采样 rf 数据转换器和软判决前向纠错 (sd-fec),其集成在一个 soc 架构中。此产品系列在一款 zynq ultrascale+ 器件中提供 arm cortex-a53 处理子系统、ultrascale+ 可编程逻辑和最高信号处理带宽,能够提供综合 rf 信号链,满足无线、有线电视接入、测量测试、早期预警/雷达以及其它高性能 rf 应用需求。
0 2 多流低时延视频编解码器
许多实时视频编码应用都需要低时延,比如视觉医疗手术设备、监控摄像头或严重依赖视频数据实时处理的高级驾驶员辅助系统 (adas)。实时视频应用的关键指标是玻璃时延。该低时延视频编解码器演示采用子帧时延模式展示了其对多流场景的支持,该模式最适合实时视频流类型的应用。
0 3 fpga设计入门 — cortex-m1
在 arm cortex-m1 内核的赛灵思器件上演示软硬件启动,这是 arm designstart fpga 程序的一部分。mdk/keil 开发工具,直接连接至基于 cortex-m1 的子系统,该子系统在一个基于 fpga 的 arty-s7 评估板上实例化。实时选项可针对主机笔记本电脑上的应用设计进行更新,并下载到该电路板上。针对 rtos 运行的 threadx。将加载支持 cortex-m1 设计的 vivado,其可用来说明赛灵思 designstart fpga 流程。
0 4 八通道视频监控分析设备
视频分析设备可通过从现有摄像头获取输入信息并在网络中添加智能性,为现有的安全系统注入新的活力。该演示将展示赛灵思如何实现不同摄像头 8 个 h.264/h.265 视频通道的同时解码以及如何在单个 zynq ultrascale+ mpsoc 中应用灵活响应的 ai。8 个 ip 摄像头(xilinx 或第三方)使用 rtsp 客户端向设备发送压缩的比特流。
0 5 将机器学习推断从云转移至端
本演示展示了一个支持 xilinx + aws 物联网的分布式控制应用如何利用 aws 云分析、机器学习模型构建、应用供应及系统仪表板的比例。我们基于油气行业场景展示了工业控制器和智能 i/o 模块如何通过 zynq ultrascale+ 上的 aws greengrass 和 xilinx zynq-7000 平台上的亚马逊 freertos 与 aws 云服务协作。 该演示展示了如何通过将机器学习应用从云端转移至端点(这可缩短时延响应时间并降低带宽要求),为使用寿命很长的系统实现渐进的应用功能。
0 6 基于python的预测维护功能
spyn 是 xilinx 新一代简单易用的马达控制及分析套件。spyn 采用 zynq-7000 soc,带有一个可用于在 fpga 架构中创建加速电机控制算法的 c 语言界面以及支持传感器数据采集及处理的 pynq 框架,可为普及的 python 库提供帮助。查看和控制片上分析和预测性维护算法是通过一个由片上 ubuntu 网络服务器驱动的 jupyter 笔记本界面实现的。
0 7 采用机器学习加速器的摄像头
ids nxt 平台是一系列基于视觉应用的工业摄像头,主要用于在 xilinx zynq ultrascale+ mpsoc 中嵌入了 kortiq 的 aiscale 机器学习加速器的机器视觉应用。演示的特点是各种旋转的目标,这些目标由在 fpga 逻辑中实现的低时延、低功耗 kortiq aiscale 加速器在几十毫秒内检测识别。此外,zynq ultrascale+ mpsoc 还安装在 kortiq 的 somiq 系统级模块上,以便轻松实现人工智能部署。
0 8 drive-xa 自动驾驶开发平台
drive-xa 是 xilinx 最新的自动驾驶开发及路线规划平台。该平台为客户提供了一个模块化的可定制异构处理环境,具有广泛的传感器接口选项。该演示将展示平台的数据聚合、预处理和分配 (dapd) 功能,以及 xylon 的 6 摄像头 bsp 框架,该框架可为用户提供一个高效执行 ip 开发的起点。
0 9 针对adas图像识别的深度学习
多通道神经网络处理用于目标检测,支持完整的车道场景分割和目标检测识别。演示如何使用 cnn 加速器进行深度学习,以获得性能优化的 adas 解决方案。本演示使用基于 zynq ultrascale+ 的 zcu102 平台,该平台运行支持四个外部摄像头和加载的视频流的多神经网络。
1 0 为adas实现动态功能exchange
dfx 可帮助系统开发人员将系统运行时过程中互相排斥的函数纳入单个器件中。由于设备资源的限制,这些功能不能一起使用。这些资源限制可通过部分重配置来解决,其中通过 dfx 激活各种功能。前置摄像头视图、后置摄像头视图、生物特征识别以及其它相互排斥的功能现在可通过加载急需事件触发在单个设备中有效提供。这些功能相结合,所需的资源将超过单个设备所能提供的资源。使用 system view vsi 来分区和实现 dfx,可以在运行时为系统工作提供这些功能。该演示将为演示 dfx 的前后摄像头展示一款 adas 解决方案。
1 1 alveo加速卡上的端点分析
端点设备产生的数据量呈指数级增长。xelera 分析软件为实时分析端点服务器上的数据提供一个实时解决方案。采用 xilinx alveo 加速器卡的 xelera 分析库包含高速分析和机器学习算法,其使用无需改变应用层面的代码。
1 2 alveo上的自适应比特率转码
当前的视频服务提供商使用新一代压缩标准和自适应比特率 (abr) 流媒体协议来管理带宽并确保高效的视频分发。这两种方法都能带来有效的结果,但也会增加计算复杂性。xilinx 看到了这一挑战,开始与 ngcodec 和 vyusync 合作,构建一个在无需客户对现有基础架构进行大幅修改的情况下即可提供必要性能的解决方案。 我们一起向 hevc 或 vp9 abr 转码器提供 alveo 加速的实时 h.264。
探究嵌入式设计技术在选择电源FET中的应用
华为宣布,2024年推出面向商用的5.5G全套网络设备
2020年5G将会给医疗行业带来什么改变
华为Mate 40E首销:起售价4599元
5G技术支撑下,移动设备的承载能力有望进一步提升
赛灵思领先业界的十二大人工智能平台展示
.v文件结构简介
iQOO 3 5G外观设计公布 挖孔屏设计+背部矩阵相机设计
任正非亲自签发了华为总裁办2019年的一号文件
酷培AI+教育,新教育方式将走向何方?
称重传感器好坏判断视频
小米手机3月中下旬将开放新一轮预购
火险气象站远程监测,助力森林防火安全治理
山区别墅住宅能使用手机信号放大器吗,到底有没有用
利用激光雷达技术定位捕捞入侵鱼类
数字示波器分段存储功能的作用和用法
如何用C语言实现MD5加密?
基于EBG结构的方向图可重构天线设计
苹果如何成为全球最有价值品牌
南方电网广西电网公司将全力促进2019年清洁能源消纳工作方案