基于TMS320DM643的视频监控系统的设计
关键词：
tms320dm643 , 视频监控
以tms320dm643为核心，结合视频编解码芯片等设计了高性能的视频监控系统。详细说明了视频处理的相关核心硬件结构；及其在动态图像序列背景中，运动目标的识别与跟踪的软件设计。整个系统采用dm643对视频数据进行处理，通过实际应用证明该方案具有高速视频输入输出能力，为视频编解码算法开发、视频处理产品设计搭建了高性能的平台。
一、引言
随着社会的发展，视觉监控系统得到了很大的普及，特别是在911事件后，全世界都加强了反恐意识，飞机场，银行，停车场，超市等公共场所被安放了大量的监控设备，对场景进行全天候的监控。但是，实时视频的处理对系统有着严格的要求，特别是是常见的处理中总包含这大量的乘加法等运算，而且视频总是有着多种格式和特殊的显示要求，故实时的视频处理系统的设计无论是在硬件上还是软件上都具有更高更严的要求。基于此本文提出了一种基于dm643的嵌入式实时视频处理系统，dm643具有dm642的功能，并且价格更便宜。
二、系统的硬件设计
该系统是以dsp控制模块为核心，由存储模块、视频输入模块、视频输出模块、通讯模块以及电源模块等构成。
图1 硬件框图
1、视频编、解码模块
视频解码模块的主要功能是将从摄像头采集来的pal/ntsc复合视频信号进行采样、量化得到任意分辨率的数字信号，为dm643提供视频流。视频解码器选用的是ti公司的tvp5150视频解码芯片。该芯片是一个高性能数字视频解码器，可以将ntsc/pal制模拟视频信号转换成bt.656格式的标准数字视频信号（yuv4:2:2）。下面是视频解码的滤波部分电路图：
图2 滤波电路图
视频解码器tvp5150视频信号输入范围为0.75vpp，而外部视频信号输入范围一般为1vpp，所以外部视频输入与tvp5150视频输入之间串接到地分压电阻网络，以达到tvp5150所需的输入电平。
dm643支持标准的bt.656格式的数字视频数据流的输入格式，能与tvp5150的视频数据流进行无缝连接。下面是连接图：
图3 连接图
其中，vp1clk0作为视频源的输入时钟，vp1ctl0、vp1ctl1和vp2ctl2则分别作为视频源的capen/avid/hsync、vblnk/vsync、fid输入同步信号。
视频解码模块采用的视频编码器saa7105支持pal与ntsc格式的视频编码输出；同时可提供分辨率为1280*1024的vga视频输出，可直接驱动pc显示器。
2、存储模块
存储模块主要由flash和sdram组成。flash存储器具有可在系统进行电擦写，掉电后信息不丢失的功能，用它来保存系统自启动代码以及系统程序代码，sdram存储器的存取速度较高，用它来存放系统运行时的代码以及临时图像数据。该系统扩展的sdram存储器是4m*64位的，扩展的flash存储器是4m*8位的。
3、dsp核心模块
该模块主要实现整个系统的控制，完成运动目标检测算法运算，和向串行通行模块发送控制指令。算法主要采用相位相关配准算法。该模块是由ti公司的tms320dm643来实现的，dm643的特点是工作主频高达600mhz，处理性能可达4800mips。
4、串行通信模块
该模块实现的功能是dsp芯片通过异步串行总线rs-485向机械控制电路(云台)发送指令，实现摄像头的自动跟踪。该系统采用的是tl16c752通用异步收发器uart，它采用8位异步并行存储器接口，并采用+3.3v电源供电，可以与dm643的外部存储器接口（emif）直接连接。
图4 串口连接图
5、网络接口模块
dm643上hpi和emac是复用的，这里根据系统需要只用了emac（以太网媒体访问控制器）。其中emac+mdio用于为以太网物理层（phy）器件提供接口，其中emac为接口以太网phy提供数据通路，mdio为接口以太网phy提供管理信息通路。即emac控制phy与dsp之间的数据包的交换，mdio控制phy的配置与状态信息的监测。
图5 网络接口
6、电源模块
本系统采用tps54310的专用电源芯片，输入为5v，输出为1.4v和3.3v，分别给dsp内核和i/o端口供电，产生另外一个3.3v给视频编解码及其他芯片供电。注意这两个3.3v电源要分开设计，以免电源噪声相互干扰。把1.4v模块的电源输出有效引脚pg连接到3.3v模块的允许电压输入引脚en。这样，只有当1.4v电压有效之后，3.3v电压才开始上电，这就保证了dm643的内核电压先于i/o电压上电。下面是产生1.4v的电路。
图6 电源部分电路图
三、系统的软件设计
系统的软件部分分为系统初始化、视频数据采集模块、主处理模块、串口发送控制指令模块、flash在线下载模块五部分。其中主处理模块是系统的核心算法部分，该系统的核心算法是基于快速傅立叶变换（fft）的相位相关配准算法。其工作原理为：首先它通过fft运算计算出相邻两帧图像的功率谱；其次将两个功率谱进行单位归一化得到相位谱并对相位谱进行互相关操作；经过对相位相关谱进行ifft运算获得相位相关函数；然后检测这一互相关函数的最高峰及其坐标值(p,q)，该坐标值就是两帧图像背景部分的偏移量；最后对两帧图像进行二次差分操作，得到运动目标位置。下面是该算法的流程图：
图7 软件算法流程图
四、结论
本文根据成本、运算量等要求，合理选择了tms320dm643作为主处理芯片，以相位相关配准算法为核心算法，实现实时运动图像识别系统。本系统设计结构合理、全面，通过串口能够控制云台的转动，从而实时的追踪目标，提高监控的效果。显示部分能够实时的观察到图像，网口的设计也能够通过网络进行通信。本文描述了一个完整的视频处理系统，该系统具有很强的实用性和扩展性，可以作为核心模块应用到各种高性能的视频系统中。
保千里打令VR手机新品发布会邀请函刷遍手机科技圈
单通道红外遥控电路设计及应用
物联网在2019年有哪一些关键词
形状公差的分类理解
新的Honor Super Fast Power Bank 12000支持66W快速充电
基于TMS320DM643的视频监控系统的设计
4G路由器优势—突破有线限制,畅享无限网络
为什么现在智能电话机器人的应用越来越广泛了
iOS 14.5或将推出新的财务健康功能
什么是功率因数
全球最高效太阳能转换电池在澳大利亚研制成功
元宇宙还是平行数字空间？
全面解析全球半导体发展格局
英特尔退出电视芯片市场 转攻移动设备芯片
深入理解Linux内核协议栈 Surftrace对网络报文增强处理
爱立信将助力江苏省企业在5G时代顺利实现数字化转型
大量Android手机中的Snapdragon DSP的缺陷会让黑客窃取数据？
微软资深数据科学家:2019年,面试AI岗应该怎么准备?
555组成的自动水位控制电路
迪拜安检出新招：人脸识别取代传统流程
以tms320dm643为核心，结合视频编解码芯片等设计了高性能的视频监控系统。详细说明了视频处理的相关核心硬件结构；及其在动态图像序列背景中，运动目标的识别与跟踪的软件设计。整个系统采用dm643对视频数据进行处理，通过实际应用证明该方案具有高速视频输入输出能力，为视频编解码算法开发、视频处理产品设计搭建了高性能的平台。
一、引言
随着社会的发展，视觉监控系统得到了很大的普及，特别是在911事件后，全世界都加强了反恐意识，飞机场，银行，停车场，超市等公共场所被安放了大量的监控设备，对场景进行全天候的监控。但是，实时视频的处理对系统有着严格的要求，特别是是常见的处理中总包含这大量的乘加法等运算，而且视频总是有着多种格式和特殊的显示要求，故实时的视频处理系统的设计无论是在硬件上还是软件上都具有更高更严的要求。基于此本文提出了一种基于dm643的嵌入式实时视频处理系统，dm643具有dm642的功能，并且价格更便宜。
二、系统的硬件设计
该系统是以dsp控制模块为核心，由存储模块、视频输入模块、视频输出模块、通讯模块以及电源模块等构成。
图1 硬件框图
1、视频编、解码模块
视频解码模块的主要功能是将从摄像头采集来的pal/ntsc复合视频信号进行采样、量化得到任意分辨率的数字信号，为dm643提供视频流。视频解码器选用的是ti公司的tvp5150视频解码芯片。该芯片是一个高性能数字视频解码器，可以将ntsc/pal制模拟视频信号转换成bt.656格式的标准数字视频信号（yuv4:2:2）。下面是视频解码的滤波部分电路图：
图2 滤波电路图
视频解码器tvp5150视频信号输入范围为0.75vpp，而外部视频信号输入范围一般为1vpp，所以外部视频输入与tvp5150视频输入之间串接到地分压电阻网络，以达到tvp5150所需的输入电平。
dm643支持标准的bt.656格式的数字视频数据流的输入格式，能与tvp5150的视频数据流进行无缝连接。下面是连接图：
图3 连接图
其中，vp1clk0作为视频源的输入时钟，vp1ctl0、vp1ctl1和vp2ctl2则分别作为视频源的capen/avid/hsync、vblnk/vsync、fid输入同步信号。
视频解码模块采用的视频编码器saa7105支持pal与ntsc格式的视频编码输出；同时可提供分辨率为1280*1024的vga视频输出，可直接驱动pc显示器。
2、存储模块
存储模块主要由flash和sdram组成。flash存储器具有可在系统进行电擦写，掉电后信息不丢失的功能，用它来保存系统自启动代码以及系统程序代码，sdram存储器的存取速度较高，用它来存放系统运行时的代码以及临时图像数据。该系统扩展的sdram存储器是4m*64位的，扩展的flash存储器是4m*8位的。
3、dsp核心模块
该模块主要实现整个系统的控制，完成运动目标检测算法运算，和向串行通行模块发送控制指令。算法主要采用相位相关配准算法。该模块是由ti公司的tms320dm643来实现的，dm643的特点是工作主频高达600mhz，处理性能可达4800mips。
4、串行通信模块
该模块实现的功能是dsp芯片通过异步串行总线rs-485向机械控制电路(云台)发送指令，实现摄像头的自动跟踪。该系统采用的是tl16c752通用异步收发器uart，它采用8位异步并行存储器接口，并采用+3.3v电源供电，可以与dm643的外部存储器接口（emif）直接连接。
图4 串口连接图
5、网络接口模块
dm643上hpi和emac是复用的，这里根据系统需要只用了emac（以太网媒体访问控制器）。其中emac+mdio用于为以太网物理层（phy）器件提供接口，其中emac为接口以太网phy提供数据通路，mdio为接口以太网phy提供管理信息通路。即emac控制phy与dsp之间的数据包的交换，mdio控制phy的配置与状态信息的监测。
图5 网络接口
6、电源模块
本系统采用tps54310的专用电源芯片，输入为5v，输出为1.4v和3.3v，分别给dsp内核和i/o端口供电，产生另外一个3.3v给视频编解码及其他芯片供电。注意这两个3.3v电源要分开设计，以免电源噪声相互干扰。把1.4v模块的电源输出有效引脚pg连接到3.3v模块的允许电压输入引脚en。这样，只有当1.4v电压有效之后，3.3v电压才开始上电，这就保证了dm643的内核电压先于i/o电压上电。下面是产生1.4v的电路。
图6 电源部分电路图
三、系统的软件设计
系统的软件部分分为系统初始化、视频数据采集模块、主处理模块、串口发送控制指令模块、flash在线下载模块五部分。其中主处理模块是系统的核心算法部分，该系统的核心算法是基于快速傅立叶变换（fft）的相位相关配准算法。其工作原理为：首先它通过fft运算计算出相邻两帧图像的功率谱；其次将两个功率谱进行单位归一化得到相位谱并对相位谱进行互相关操作；经过对相位相关谱进行ifft运算获得相位相关函数；然后检测这一互相关函数的最高峰及其坐标值(p,q)，该坐标值就是两帧图像背景部分的偏移量；最后对两帧图像进行二次差分操作，得到运动目标位置。下面是该算法的流程图：
图7 软件算法流程图
四、结论
本文根据成本、运算量等要求，合理选择了tms320dm643作为主处理芯片，以相位相关配准算法为核心算法，实现实时运动图像识别系统。本系统设计结构合理、全面，通过串口能够控制云台的转动，从而实时的追踪目标，提高监控的效果。显示部分能够实时的观察到图像，网口的设计也能够通过网络进行通信。本文描述了一个完整的视频处理系统，该系统具有很强的实用性和扩展性，可以作为核心模块应用到各种高性能的视频系统中。
保千里打令VR手机新品发布会邀请函刷遍手机科技圈
单通道红外遥控电路设计及应用
物联网在2019年有哪一些关键词
形状公差的分类理解
新的Honor Super Fast Power Bank 12000支持66W快速充电
基于TMS320DM643的视频监控系统的设计
4G路由器优势—突破有线限制,畅享无限网络
为什么现在智能电话机器人的应用越来越广泛了
iOS 14.5或将推出新的财务健康功能
什么是功率因数
全球最高效太阳能转换电池在澳大利亚研制成功
元宇宙还是平行数字空间？
全面解析全球半导体发展格局
英特尔退出电视芯片市场 转攻移动设备芯片
深入理解Linux内核协议栈 Surftrace对网络报文增强处理
爱立信将助力江苏省企业在5G时代顺利实现数字化转型
大量Android手机中的Snapdragon DSP的缺陷会让黑客窃取数据？
微软资深数据科学家:2019年,面试AI岗应该怎么准备?
555组成的自动水位控制电路
迪拜安检出新招：人脸识别取代传统流程