随着多媒体技术、网络技术的迅猛发展和后 pc机时代的到来,利用嵌入式系统实现远程视频监控、可视电话和视频会议等应用已成为可能。为了实现这些应用,实时获得视频数据是一个重要环节。针对这一 点,本文在基于嵌入式linux系统平台上,利用video4linux内核应用编程接口函数,实现了单帧图像和视频连续帧的采集,并保存成文件的形式供 进一步视频处理和网络传输用。
1 系统平台上的硬件系统
本 文使用的系统平台硬件功能框图如图1所示。该平台采用samsung公司的处理器s3c2410。该处理器内部集成了arm公司arm920t处理器核的 32位微控制器,资源丰富,带独立的16kb的指令cache和16kb数据cache、lcd控制器、ram控制器、nand闪存控制器、3路 uart、4路dma、4路带pwm的timer、并行i/o口、8路10位adc、touch screen接口、i2c接口、i2s接口、2个usb接口控制器、2路spi,主频最高可达203mhz。在处理器丰富资源的基础上,还进行了相关的配 置和扩展,平台配置了16mb 16位的flash和64mb 32位的sdram。通过以太网控制器芯片dm9000e扩展了一个网口,另外引出了一个host usb接口。通过在usb接口上外接一个带usb口的摄像头,将采集到的视频图像数据放入输入缓冲区中。然后,或者保存成文件的形式,或者运行移植到平台 上的图像处理程序,对缓冲的图像数据直接进行相关处理,再保存并打成udp包。最后,通过网络接口将图像发送到internet上。本文只讨论其中视频采 集部分的具体实现。
2 系统平台中的软件系统
2.1 linux与嵌入式系统
linux 具有内核小,效率高,源代码开放,内核直接提供网络支持等优点。但嵌入式系统的硬件资源毕竟有限,因此不能直接把linux作为操作系统,需要针对具体的 应用通过配置内核、裁减shell和嵌入式c库对系统定制,使整个系统能够存放到容量较小的flash中。linux的动态模块加载,使linux的裁减 极为方便 ,高度模块化的部件使添加非常容易。正因为linux的上述优点,在本文实现的平台上,使用的操作系统是对linux进行了定制的armlinux。它启 用了mmu(内存管理单元),是针对支持mmu的处理器设计的。
2.2 开发环境的建立
绝 大多数linux的软件开发都以native方式进行,即本机开发、调试,本机运行的方式。这种方式通常不适于嵌入式系统的软件开发,因为对于嵌入式系统 的开发,它没有足够的资源在本机(即嵌入式系统平台)运行开发工具和调试工具。通常的嵌入式系统软件开发采用交叉编译调试的方式。交叉编译调试环境建立在 宿主机(即图1所示通过串口连接的宿主机pc)上,对应的开发板叫做目标板(即嵌入式arm2410系统)。
通 常宿主机和目标板上的处理器不同,宿主机通常为intel处理器,而目标板如图1所示为samsung s3c2410,所以程序需要使用针对处理器特点的编译器才能生成在相应平台上可运行的代码。gnu编译器提供这样的功能,在编译时,可以选择开发所需的 宿主机和目标机,从而建立开发环境。在进行嵌入式开发前的第一步工作就是把一台pc机作为宿主机开发机,并在其上安装指定的操作系统。对于嵌入式 linux,宿主机pc上应安装linux系统。之后,在宿主机上建立交叉编译调试的开发环境,开发环境的具体建立这里不细谈。本文采用移植性很强的c语 言在宿主机上编写视频采集程序,再利用交叉编译调试工具编译链接生成可执行代码,最后向目标平台移植。
3 视频采集的具体实现
上 面提到系统平台上运行的是armlinux。在启动后,启用了mmu,系统进入保护模式,所以应用程序就不能直接读写外设的i/o区域(包括i/o端口和 i/o内存),这时一般就要借助于该外设的驱动来进入内核完成这个工作。本系统中的视频采集分两步实现:一是为usb口数码摄像头在内核中写入驱动,二是 要再写入上层应用程序获取视频数据。本文着重讨论后一步。
3.1 usb口数码摄像头的驱动实现
在 linux下,设备驱动程序可以看成linux内核与外部设备之间的接口。设备驱动程序向应用程序屏蔽了硬件实现了的细节,使得应用程序可以像操作普通文 件一样来操作外部设备,可以使用和操作文件中相同的、标准的系统调用接口函数来完成对硬件设备的打开、关闭、读写和i/o控制操作,而驱动程序的主要任务 也就是要实现这些系统调用函数。本系统平台使用的嵌入式armlinux系统在内核主要功能上与linux操作系统没本质区别,所以驱动程序要实现的任务 也一样,只要编译时使用的编译器、部分头文件和库文件等要涉及到具体处理器体系结构,这些都可以在makefile文件中具体指定。
video4linux(简v4l)是linux中关于视频设备的内核驱动,它为针对视频设备的应用程序编程提供一系列接口函数,这些视频设备包括现今市 场上流行的tv卡、视频捕捉卡和usb摄像头等。对于usb口摄像头,其驱动程序中需要提供基本的i/o操作接口函数open、read、write、 close的实现。对中断的处理实现,内存映射功能以及对i/o通道的控制接口函数ioct1的实现等,并把它们定义在struct file_operations中。这样当应用程序对设备文件进行诸如open、close、read、write等系统调用操作时,linux内核将通 过file_operations结构访问驱动程序提供的函数。例如,当应用程序对设备文件执行读操作时,内核将调用file_operations结构 中的read函数。在系统平台上对usb口数码摄像头驱动,首先把usb控制器驱动模块静态编译进内核,使平台中支持usb接口,再在需要使用摄像头采集 时,使用insmode动态加载其驱动模块,这样摄像头就可正常工作了,接着进行了下一步对视频流的采集编程。
完美改装:卡片收音机易改超外差收音机
电快速瞬变(EFT)是如何引起的?如何测量收发器EFT性能?
详细解析PCB布局设计“排线的秘诀”
新能源车巨头争霸:深度解析比亚迪/特斯拉
关于RIGOL可编程直流电子负载DL3000的性能分析和应用
基于嵌入式linux和s32410平台的视频采集
自动驾驶的全球大结盟非常重要 对自动驾驶的未来发展影响深远
为什么需要debug时钟频率 Debug时钟频率原理详解
顺丰把持高端市场,京东快递挑战顺丰
王健林宣布万达彻底告别房地产!中国楼市要变天了吗?楼市背后究竟隐藏着什么?
摩拜推出共享汽车之后的实操体验分享
苹果13电池容量提升了多少
基于SRAM结构FPGA逻辑资源的测试编程
关于腾讯的开源分布式存储系统DCache
丰田卡罗拉双擎,拥有EV电动、ECO节能、POWER动力三种驱动模式,车展实拍!
电流互感器的使用注意事项
高精度GPS航迹测量系统
设计实践:AWS物联网解决方案
5种前沿的点云分割网络
OnRobot一体化系统解决方案将机器人兼容性提升至新高度