无人机视觉跟踪系统解决方案-米尔基于XCZU3EG/XCZU4EV/XCZU5EV核心板

近些年来,随着自动控制领域的发展,摄像镜头的工艺和视觉识别算法越来越完善,基于这一基础,无人机视觉跟踪技术成为炙手可热的研究领域。什么是无人机视觉跟踪技术呢?首先无人机通过摄像头进行视频采集,对采集的信息进行存储,并通过算法识别设定的跟踪目标,执行预设任务。目前无人机视觉跟踪技术已经广泛运用在农业生产,军事科研,物流运输等领域。
在农业生产领域,无人机视觉追踪系统运用在识别农作物的生长情况中,进行高空灌溉、驱赶害虫等自动化农业管理;在民用领域,无人机通常使用视觉跟踪系统识别人体手势,让用户通过手势操控无人机的升降和摆动;在生物调研领域,该技术更多是为了追踪记录野生濒危动物的生活习惯,维护生态系统平衡。
无人机跟踪系统是如何组成的呢?首先,无人机通过高清摄像头模块,实时采集图像数据,系统通过信号检测模块和图像预处理模块将图片信息转变成数字信息,然后通过数据采集与处理模块进行采样、量化,并对各图片参数进行分析过滤;将分析结果与设定的跟踪目标比较,进行图像识别跟踪;跟踪的图像信息可以通过网络传输到手机和电脑实时显示。
无人机视觉跟踪流程图
基于米尔电子myc-czu4ev/5ev-v2核心板设计的无人机视觉跟踪系统,可以分为图像信号采集、数据处理、信息展示三部分;图像采集主要通过摄像头收集图像信息,再由fpga芯片高速采集将图片信息传输到数据处理单元,数据处理单元由vcu和mcu组成,负责将采集的图像数据通过算法把设定好的跟踪目标进行标注处理;而信息展示部分,则通过无线传输系统把信息同步显示到无人机控制平台和app上面,实现实时视频传输,掌握远程定位追踪功能。
myc-czu3eg/4ev/5ev-v2核心板,搭载功能全面的高规格zynq ultrascale+ mpsoc芯片,其中芯片的ps端集成了apu arm cortex-a53处理器,rpu cortex-r5处理器,频率高达667mhz的arm mali-400 mp2(gpu)。需要注意的是,4ev/5ev芯片比3eg芯片多了一个视频编解码器单元 (vcu),支持h.264/h.265编解码。芯片搭载内部存储器,外部存储器接口(ddr)和外设接口。这些外设接口主要包括usb总线接口,以太网接口,sd/emmc接口,i2c总线接口,can总线接口,uart接口,gpio等。高速接口如 pcie,sata,display port。
核心板图片:
板卡资料:
机械参数
类型
分类
参数
工作温度
工业级
-40℃~+85℃
商业级
0°c~+70°c
环境温度
-50℃~100°c
工作湿度
非冷凝
20%~90%
冷凝
不支持
电源供电
核心板
3.3v/5a
核心板接口
pcb连接器
2个160 pin 0.5mm间距双排高速高密度pcb连接器
pcb规格
核心板
12层盲埋孔,沉金工艺生产,独立的接地信号参考层,无铅
机械尺寸
核心板
60.0mmx52.0mm,板厚1.6mm,核心板模块整体厚度约为8.25mm
底板资源
  序号
资源种类
ps
单元
1
1 路千兆以太网
2
1路usb3.0typec接口
3
1路display port接口
4
1路pcie 2.1x1接口
5
1路sata 3.1接口
6
1路can接口
7
1路rs232串口
8
1路tf卡接口
9
1路i2c接口
10
1个复位按键,2个用户按键
11
1路jtag
12
内置实时时钟
序号
资源种类
pl
单元
1
xadc接口
2
1路xilinx标准lpfmc接口
3
1路hdmi接口,rgb 24bit,不支持音频
4
1路lcd dip/lpc接口,rgb 24bit,与hdmi复用显示信号
5
电阻式电容式触摸屏接口,集成在lcd触摸屏接口
6
2路pmod
7
5个电源指示灯
8
4路sfp+模块接口(注:仅4ev/5ev使用)
9
1路arduino接口

Teledyne将以总价值约80亿美元的现金和股票收购FLIR
无线设计中PCB天线该如何选择
传感器的特性介绍及设计要点
NB-IoT普及加速 北京联通已开通5000基站目标年底1万个
输出EMC滤波器如何选型
无人机视觉跟踪系统解决方案-米尔基于XCZU3EG/XCZU4EV/XCZU5EV核心板
生物质能将引领未来五年可再生能源消费的增长
陀螺仪LSM6DSV16X与AI集成(2)----姿态解算
自然语言处理和人工智能的概念及发展史 自然语言处理和人工智能的区别
5G的盈利机遇在哪里
英特尔欲分离Altera,向FPGA市场投下“深水炸弹”?
大唐电信斥资1108万增持联芯科技 实现100%控股
李彦宏宣布中国首款云端AI全功能AI芯片“昆仑”发布
热风回流焊加热区结构详解
smt加工焊接时需要注意几点安全措施
什么是罩极式电动机 罩极式异步电动机结构原理
合理利用资本 才是工业机器人行业发展的正道
为什么离心机选用的是12v300w直流无刷电机?
全球顶级车厂的选择:升级版VCSEL发射器系列更可靠、更安全
小米11防误触功能再度升级