基于DM365 的嵌入式网络摄像机的设计~*
关键词：
dm365 , 嵌入式网络 , 摄像机
0 引言
在许多比较恶劣的环境如野外、井下、甚至在战争中，人们更需要获取及时、有效的视频信息，这种环境对系统的能耗、抗干扰性、稳定性等方面提出了更高的要求，把嵌入式技术应用于视频的采集和传输可以解决很多复杂的环境问题。德州仪器 （ti）推出的基于达芬奇技术的新型tms320dm365 数字媒体处理器，dm365 高度集成了众多组件，其中包括符合生产要求的h.264、mpeg-4、mpeg-2、mjpeg 与vc1 编解码器，可满足智能视频处理功能的集成影像信号处理（isp）解决方案，以及一系列板载外设等，可使开发人员将系统成本降低25%。本文围绕dm365 数字媒体处理器，对基于dm365 的嵌入式视频采集与传输系统的设计做了具体介绍。
1 嵌入式视频采集与传输系统的整体结构
本系统利用目前先进的wifi 无线通信技术，结合h.264 视频压缩算法构建无线视频监控系统。系统工作过程为：视频采集节点将采集到的视频、音频数据，经过前端压缩等处理之后，转换成统一的ip 数据包格式，以wifi 无线方式发送到ap，ap 接入工业光纤以太网，实现无线与现有通信网络的无缝连接，构成感知矿山多媒体数字网络。该无线视频监控系统既可应用于矿井救灾应急通信系统，也可用于井下皮带、液压支架等煤矿安全生产管理，可极大提高矿井安全监控系统的能效，节约矿井生产成本。无线视频监控系统图如图1 所示。
2011-9-2 17:51:36 上传
下载附件 (14.67 kb)
图1 系统整体架构
2 系统硬件实现
2.1 系统核心架构
本视频采集与传输系统完成的主要功能是在煤矿井下能够进行实时流畅的多媒体通信。
系统设计的总指导原则是：在保持实时的多媒体通信质量的前提下，低功耗，低成本。节点硬件主要包括：视频采集前端、视频处理模块、无线发射模块和电源模块以及一些外围电路。
系统的原理框图如图2 所示。
2011-9-2 17:51:36 上传
下载附件 (12.78 kb)
图2 摄像机原理框图
2.2 视频处理模块
视频处理模块采用ti的达芬奇高性能多媒体处理器tms320dm365 完成设备管理、音视频的压缩处理及传输通信，通过外接的以太网物理层芯片实现有线网络接口，利用转wifi芯片gs1010 实现无线网络通信，支持tcp/ip 网络协议。
tms320dm365 是德州仪器（ti）推出的基于达芬奇技术（davincitm technology），面向便携高清视频应用的新型数字媒体处理器。该处理器延续了达芬奇家族中dm355 的处理器构架，集成了一颗arm926ej-s 内核，一个h.264 高清编解码协处理器hdvicp 和一个mpeg-4/jpeg高清编解码协处理器mjcp，可以支持h.264/mpeg-4 的高清视频编解码。
dm365 内部集成有视频处理子系统vpss（video processing subsystem）、h.264 协处理器（hdvicp）、arm926ejs 的处理器以及各种相关外设，并且可以使用丰富的外设，例如高速的usb otg 2.0。通过各种扩展的结合，dm365 可应用于相机、网络数码摄像机等领域。
2.2.1 arm处理器
arm 组系统采用armv5tej（32/16bit）指令集的arm926ej-s 内核cpu，是采用管道化流水线的32bit rsic 处理器，工作频率为216/270/300mhz。arm cpu 执行通常的系统控制任务，如系统初始化，配置，电源管理，用户界接口和用户命令等。arm 作为主控和执行这些功能是因为它有一个大的程序存储空间和快速的任务切换能力，因而其更适合复杂的，多任务和通用的任务控制。
arm 子系统（armss）包含arm926ej-s risc 处理器，arm 内部存储器，嵌入式跟踪模块和嵌入式跟踪缓存模块（etm/etb）和系统控制外设。arm926ej-s risc 处理器又包含协处理器15，内存管理单元（mmu），16kb 指令集，8kb 数据cache，写缓存和java 加速器。arm 内部存储器包括一个32kb 的内部ram（32-bit 宽访问）和16kb 内部rom。系统控制arm中断控制器，pll控制器，电源管理模块和系统模块。
2.2.2 视频处理子系统（vpss）
tmsdm365 拥有一个视频处理子系统（video processing subsystem-vpss）支持输入接口（video processing front end-vpfe）用于外部图像外设，例如图像传感器， 视频解码器等等。
并且支持输出接口（video processing back end-vpbe）用于显示设备，例如模拟sdtv/hdtv显示器，数字lcd 显示等等。
除了这些外围设备，有一个共同的缓冲存储器和dma 控制设置，以确保有效地利用ddr2/mddr 带宽。共享缓冲逻辑/内存是唯一的模块，无缝集成到一个图像的vpss 内的图像/视频处理子系统。它作为主要的源和接收器给所有的vpfe 和vpbe 模块， 以从ddr2/mddr 获得或传递数据。为了有效地利用外部ddr2/mddr 带宽， 它通过高带宽总线（64-bit宽）dma系统， 共享缓冲区的逻辑/内存接口。共享缓存的逻辑/内存接口通过一个128-bit 宽总线给所有vpfe 和vpbe 模块。
vpfe 模块包含图像传感器接口（isif）， 图像通道（ipipe）， 图像通道接口（ipipeif）和硬件3a 统计发生器（h3a）。这些模块提供了设备强大和灵活的前端接口。
vpbe 模块包含屏幕菜单（osd）和视频编码（venc）模块。这些模块支持设备带有强大和灵活的后端显示接口。
2.3 视频采集前端
视频采集前端核心部件即摄像头，一般摄像头由镜头、图像传感器、数字信号处理芯片、等部分组成。景物通过镜头生成的光学图像投射到图像传感器表面上，然后转为电信号，经过a/d（模数转换）转换后变为数字图像信号，再送到数字信号处理芯片（dsp）中加工处理，最后通过接口传输到计算机中进行处理，通过显示器即可看到图像。
ccd 和cmos 传感器是当前被普遍采用的两种图像传感器，两者都是利用感光二极管进行光电转换，将光像转换为电子数据。由于ccd 与cmos 图像传感器的工作原理的不同导致两者在性能表现上各有优劣。
表1 ccd与cmos优缺点比较
2011-9-2 17:51:36 上传
下载附件 (13.72 kb)
总之，cmos 传感在采集图像品质方面相对于ccd 传感器有一些缺点，有上表可知但cmos 在其他特性方面却占有一定优势。考虑到系统对功耗的要求比较高，而cmos 摄像头采集图像质量还是能够满足大部分监控需求的，所以本系统选用cmos摄像头。
2.4 无线发射模块
利用 wifi 技术来实现视频的无线发送，wifi 是wireless fidelity 的缩写，是一种无线局域网数据传输的技术与规格，也就是ieee 所定义的无线通信标准ieee 802.11。从dm365开发板的接口特性考虑，系统节点采用wifi 解决方案gs1010 芯片，该款无线soc 芯片采用双arm7 内核，包括实时时钟（rtc）、功耗控制单元、闪存（flash）和 sram，并且整合了wifi 射频（rf）前端和微控制器，具备定位跟踪以及监控物资功能，这样的芯片结构大大减轻了节点设计的复杂度，也节省了节点的成本。电源模块为传感器模块及处理器模块提供能量，气体调理电路的输出仅需要连接到gs1010 的adc 接口，这样就基本完成了基于wifi的气体监测节点的硬件设计。gs1010 采用0.18 微米工艺制造，10mm*10mmqfn 封装，在硬件设计上节省了元器件数量，简化了设计电路布线密度，提高了系统的可靠性，1.8v 工作时电流为2ma，3.6v 时为5ma，在单节aa 电池下能维持长达5～10 年的节点运行寿命。
另外，它还支持ieee802.11b/g 标准，并提供802.11i（wpa2-psk）、aes 编码、eapfast三种方式保证数据和信息安全。
3 结束语
视频信号具有直观、丰富与时序性的信息内涵，在传达信息方面有着其他信号无法达到的效果。本文重点阐述了基于dm365 的嵌入式linux 视频采集与传输系统硬件的具体设计，该系统功耗低、价格廉，实现了对复杂、恶劣工作环境的实时监控，可以应用于煤矿中的无人工作面，及时了解工作面环境等各种变化，保障了现场工作人员的安全。
author:source:中电网
受意法爱立信拖累，爱立信财务堪忧
电子芯闻早报：鸿海1.2亿美元海外投资机器人
亚马逊放弃收购扫地机器人制造商iRobot
EUVIS任意波形发生器AWG的特点及应用
KNX总线和RS485总线硬件方面对比分析
基于DM365 的嵌入式网络摄像机的设计~*
智能医疗服务怎样变得更完整
按下不同按键，发出不同频率声音应用设计
苹果iOS5或将支持语音输入
东航江苏公司引进了第6架B306E飞机
中国联通业界首个MEC智能安防项目正在部署，助力加快5G网络之路转型
TI发布业内首款批量生产的集成式USB Type-C 供电控制器
如何在虚拟现实世界中拥有身体感知的功能
电子行业如何选择热缩管
台积电的第一代GAA-FET什么时候将到来
纳微半导体荣获2022年CES创新奖
射频微波技术创新可推动5g与自动驾驶发展
富士康郑州工厂一直在运转 苹果iPhone 9产能前期不受影响
如何破解海量数据的存储之痛
电源逆变器的使用注意事项
0 引言
在许多比较恶劣的环境如野外、井下、甚至在战争中，人们更需要获取及时、有效的视频信息，这种环境对系统的能耗、抗干扰性、稳定性等方面提出了更高的要求，把嵌入式技术应用于视频的采集和传输可以解决很多复杂的环境问题。德州仪器 （ti）推出的基于达芬奇技术的新型tms320dm365 数字媒体处理器，dm365 高度集成了众多组件，其中包括符合生产要求的h.264、mpeg-4、mpeg-2、mjpeg 与vc1 编解码器，可满足智能视频处理功能的集成影像信号处理（isp）解决方案，以及一系列板载外设等，可使开发人员将系统成本降低25%。本文围绕dm365 数字媒体处理器，对基于dm365 的嵌入式视频采集与传输系统的设计做了具体介绍。
1 嵌入式视频采集与传输系统的整体结构
本系统利用目前先进的wifi 无线通信技术，结合h.264 视频压缩算法构建无线视频监控系统。系统工作过程为：视频采集节点将采集到的视频、音频数据，经过前端压缩等处理之后，转换成统一的ip 数据包格式，以wifi 无线方式发送到ap，ap 接入工业光纤以太网，实现无线与现有通信网络的无缝连接，构成感知矿山多媒体数字网络。该无线视频监控系统既可应用于矿井救灾应急通信系统，也可用于井下皮带、液压支架等煤矿安全生产管理，可极大提高矿井安全监控系统的能效，节约矿井生产成本。无线视频监控系统图如图1 所示。
2011-9-2 17:51:36 上传
下载附件 (14.67 kb)
图1 系统整体架构
2 系统硬件实现
2.1 系统核心架构
本视频采集与传输系统完成的主要功能是在煤矿井下能够进行实时流畅的多媒体通信。
系统设计的总指导原则是：在保持实时的多媒体通信质量的前提下，低功耗，低成本。节点硬件主要包括：视频采集前端、视频处理模块、无线发射模块和电源模块以及一些外围电路。
系统的原理框图如图2 所示。
2011-9-2 17:51:36 上传
下载附件 (12.78 kb)
图2 摄像机原理框图
2.2 视频处理模块
视频处理模块采用ti的达芬奇高性能多媒体处理器tms320dm365 完成设备管理、音视频的压缩处理及传输通信，通过外接的以太网物理层芯片实现有线网络接口，利用转wifi芯片gs1010 实现无线网络通信，支持tcp/ip 网络协议。
tms320dm365 是德州仪器（ti）推出的基于达芬奇技术（davincitm technology），面向便携高清视频应用的新型数字媒体处理器。该处理器延续了达芬奇家族中dm355 的处理器构架，集成了一颗arm926ej-s 内核，一个h.264 高清编解码协处理器hdvicp 和一个mpeg-4/jpeg高清编解码协处理器mjcp，可以支持h.264/mpeg-4 的高清视频编解码。
dm365 内部集成有视频处理子系统vpss（video processing subsystem）、h.264 协处理器（hdvicp）、arm926ejs 的处理器以及各种相关外设，并且可以使用丰富的外设，例如高速的usb otg 2.0。通过各种扩展的结合，dm365 可应用于相机、网络数码摄像机等领域。
2.2.1 arm处理器
arm 组系统采用armv5tej（32/16bit）指令集的arm926ej-s 内核cpu，是采用管道化流水线的32bit rsic 处理器，工作频率为216/270/300mhz。arm cpu 执行通常的系统控制任务，如系统初始化，配置，电源管理，用户界接口和用户命令等。arm 作为主控和执行这些功能是因为它有一个大的程序存储空间和快速的任务切换能力，因而其更适合复杂的，多任务和通用的任务控制。
arm 子系统（armss）包含arm926ej-s risc 处理器，arm 内部存储器，嵌入式跟踪模块和嵌入式跟踪缓存模块（etm/etb）和系统控制外设。arm926ej-s risc 处理器又包含协处理器15，内存管理单元（mmu），16kb 指令集，8kb 数据cache，写缓存和java 加速器。arm 内部存储器包括一个32kb 的内部ram（32-bit 宽访问）和16kb 内部rom。系统控制arm中断控制器，pll控制器，电源管理模块和系统模块。
2.2.2 视频处理子系统（vpss）
tmsdm365 拥有一个视频处理子系统（video processing subsystem-vpss）支持输入接口（video processing front end-vpfe）用于外部图像外设，例如图像传感器， 视频解码器等等。
并且支持输出接口（video processing back end-vpbe）用于显示设备，例如模拟sdtv/hdtv显示器，数字lcd 显示等等。
除了这些外围设备，有一个共同的缓冲存储器和dma 控制设置，以确保有效地利用ddr2/mddr 带宽。共享缓冲逻辑/内存是唯一的模块，无缝集成到一个图像的vpss 内的图像/视频处理子系统。它作为主要的源和接收器给所有的vpfe 和vpbe 模块， 以从ddr2/mddr 获得或传递数据。为了有效地利用外部ddr2/mddr 带宽， 它通过高带宽总线（64-bit宽）dma系统， 共享缓冲区的逻辑/内存接口。共享缓存的逻辑/内存接口通过一个128-bit 宽总线给所有vpfe 和vpbe 模块。
vpfe 模块包含图像传感器接口（isif）， 图像通道（ipipe）， 图像通道接口（ipipeif）和硬件3a 统计发生器（h3a）。这些模块提供了设备强大和灵活的前端接口。
vpbe 模块包含屏幕菜单（osd）和视频编码（venc）模块。这些模块支持设备带有强大和灵活的后端显示接口。
2.3 视频采集前端
视频采集前端核心部件即摄像头，一般摄像头由镜头、图像传感器、数字信号处理芯片、等部分组成。景物通过镜头生成的光学图像投射到图像传感器表面上，然后转为电信号，经过a/d（模数转换）转换后变为数字图像信号，再送到数字信号处理芯片（dsp）中加工处理，最后通过接口传输到计算机中进行处理，通过显示器即可看到图像。
ccd 和cmos 传感器是当前被普遍采用的两种图像传感器，两者都是利用感光二极管进行光电转换，将光像转换为电子数据。由于ccd 与cmos 图像传感器的工作原理的不同导致两者在性能表现上各有优劣。
表1 ccd与cmos优缺点比较
2011-9-2 17:51:36 上传
下载附件 (13.72 kb)
总之，cmos 传感在采集图像品质方面相对于ccd 传感器有一些缺点，有上表可知但cmos 在其他特性方面却占有一定优势。考虑到系统对功耗的要求比较高，而cmos 摄像头采集图像质量还是能够满足大部分监控需求的，所以本系统选用cmos摄像头。
2.4 无线发射模块
利用 wifi 技术来实现视频的无线发送，wifi 是wireless fidelity 的缩写，是一种无线局域网数据传输的技术与规格，也就是ieee 所定义的无线通信标准ieee 802.11。从dm365开发板的接口特性考虑，系统节点采用wifi 解决方案gs1010 芯片，该款无线soc 芯片采用双arm7 内核，包括实时时钟（rtc）、功耗控制单元、闪存（flash）和 sram，并且整合了wifi 射频（rf）前端和微控制器，具备定位跟踪以及监控物资功能，这样的芯片结构大大减轻了节点设计的复杂度，也节省了节点的成本。电源模块为传感器模块及处理器模块提供能量，气体调理电路的输出仅需要连接到gs1010 的adc 接口，这样就基本完成了基于wifi的气体监测节点的硬件设计。gs1010 采用0.18 微米工艺制造，10mm*10mmqfn 封装，在硬件设计上节省了元器件数量，简化了设计电路布线密度，提高了系统的可靠性，1.8v 工作时电流为2ma，3.6v 时为5ma，在单节aa 电池下能维持长达5～10 年的节点运行寿命。
另外，它还支持ieee802.11b/g 标准，并提供802.11i（wpa2-psk）、aes 编码、eapfast三种方式保证数据和信息安全。
3 结束语
视频信号具有直观、丰富与时序性的信息内涵，在传达信息方面有着其他信号无法达到的效果。本文重点阐述了基于dm365 的嵌入式linux 视频采集与传输系统硬件的具体设计，该系统功耗低、价格廉，实现了对复杂、恶劣工作环境的实时监控，可以应用于煤矿中的无人工作面，及时了解工作面环境等各种变化，保障了现场工作人员的安全。
author:source:中电网
受意法爱立信拖累，爱立信财务堪忧
电子芯闻早报：鸿海1.2亿美元海外投资机器人
亚马逊放弃收购扫地机器人制造商iRobot
EUVIS任意波形发生器AWG的特点及应用
KNX总线和RS485总线硬件方面对比分析
基于DM365 的嵌入式网络摄像机的设计~*
智能医疗服务怎样变得更完整
按下不同按键，发出不同频率声音应用设计
苹果iOS5或将支持语音输入
东航江苏公司引进了第6架B306E飞机
中国联通业界首个MEC智能安防项目正在部署，助力加快5G网络之路转型
TI发布业内首款批量生产的集成式USB Type-C 供电控制器
如何在虚拟现实世界中拥有身体感知的功能
电子行业如何选择热缩管
台积电的第一代GAA-FET什么时候将到来
纳微半导体荣获2022年CES创新奖
射频微波技术创新可推动5g与自动驾驶发展
富士康郑州工厂一直在运转 苹果iPhone 9产能前期不受影响
如何破解海量数据的存储之痛
电源逆变器的使用注意事项