快讯
HOME
快讯
正文内容
dm365 nand 基于DM365的双码流视频监控设备的设计与实现
发布时间 : 2024-10-06
作者 : 小编
访问数量 : 23
扫码分享至微信

基于DM365的双码流视频监控设备的设计与实现

摘 要 : 针对视频监控终端设备中的视频实时显示、编码数据本地存储备份等双重需求,设计了一种基于DM365视频处理芯片、H.264压缩技术、嵌入式Linux操作系统的双码流视频监控终端设备。给出了系统的总体软硬件结构,重点阐述了视频处理子系统模块(包括视频前端采集模块和视频后端显示模块)以及视频编码模块。测试结果表明,系统实时监测性能良好,本地存储的编码数据清晰稳定,具有很强的实用性和广阔的发展前景。

0 引言

随着网络技术、视频编解码技术、信息处理技术在安防领域中的应用日趋成熟,视频监控系统的发展也从最初的模拟视频监控系统发展到了如今的网络数字视频监控系统[1]。以往视频图像处理算法主要由DSP处理,但是随着算法复杂度的增加及视频分辨率的提高,传统DSP逐渐无法胜任这方面的工作[2]。为此,需要新的处理器架构来提高视频算法的并行性与带宽。当前TI公司已经推出相关的异构处理器与多核DSP;英伟达公司推出了最新的SoC芯片Tegra4,其内含4个Cortex.A15和72个GeForceGPU[3-4]。最新的SoC制程也已经达到28 nm,几乎取得了相当于PC的频率带宽。由于视频的数据量大,占用带宽多,这不仅对网络是个不小的负担,对图像本地存储备份的能力也有很大的影响,所以就需要采取一种高效的压缩算法对视频进行编码,以降低其所占用的网络带宽和存储空间[5]。近年来,H.264、MJPGE等算法的研究使得网络较实时传输和本地存储备份成为了可能。最新的H.265压缩算法的出现大大提高了视频传输效率,但这需要相应的处理器能力的提高[6]。

本文所设计的多路数据流视频监控终端设备基于TI公司的TMS320DM365芯片,支持双路不同分辨率大小的数据流,分别实现两种不同的功能,第一路数据流实现D1(720×576)分辨率大小H.264编码数据的本地存储备份,第二路数据流实现QVGA(320×240)分辨率大小原始数据的实时显示。

1 系统总体设计框架

本文采用视频采集芯片+多核芯片(ARM核+DSP核或编解码协处理器组成)的方案来设计视频监控终端设备,这种方案将视频采集芯片获得的数据接入到多核芯片中,再交由DSP核或编解码协处理器完成视频数据的编码,最终通过ARM核对系统进行控制,完成数据流的正确传递和其他必要操作。这种方案成本较低,性价比较高。

硬件框架方面,选用了TI公司的基于DaVinci技术的TMS320DM365芯片作为处理器芯片,以及同为TI公司出品的TVP5151芯片作为视频前端采集芯片来搭建嵌入式视频监控设备。

系统硬件框架设计图如图1所示。

软件框架方面,采用多线程配合工作的方案进行设计,多线程编程相较于多进程编程,它不仅在资源利用率方面有较大的优势,同时也大大降低了程序员编程的难度,加快了项目软件的开发。

2 视频处理子系统模块

TMS320DM365芯片上提供了一个视频处理子系统(VPSS),用于视频数据的实时采集、播放等功能。VPSS内部集成了一个视频处理前端模块(VPFE)和一个视频处理后端模块(VPBE),VPFE用来控制接入的外部图像采集设备,如图像传感器、视频解码器等,本系统接入了TVP5151视频解码器。VPBE则用来控制接入的显示设备,如标清的模拟电视显示器、数字的LCD液晶显示屏等,本系统接入了RGB565LCD液晶显示屏。此外,VPSS还集成了内存缓存区和DMA(直接内存访问)控制器,用来保证有效地利用DDR2或mDDR,控制突发带宽。

2.1 驱动配置

2.1.1 VPFE采集驱动的配置

VPFE采集驱动通过标准的V4L2接口将底层硬件的功能暴露给了上层应用程序,这样,应用程序就能通过控制V4L2设备(/dev/Video0)来获取由连接到VPFE的视频解码器(如TVP5151)采集到的一帧原始数据。VPFE硬件模块支持以下两种不同的数据管道[7],如图2所示。

(1)输入接口通过IPIPE接入到SDRAM,所有型号的SoC都支持这个通道。

(2)输入接口通过IPIPE接入到Previewer,并最终从Resizer输出两种不同分辨率大小的视频数据到SDRAM,从RSZ-A输出的是原始分辨率大小的图像,用于后续的数据编码,从RSZ-B输出的是分辨率较小的图像,用于后续的实时显示。

为了实现前文所述的视频实时显示功能,通过VPFE驱动将VPFE硬件模块配置成第二种数据流通道的采集方式。

2.1.2 VPBE显示驱动的配置

VPBE显示驱动由更底层的V4L2(Video for Linux 2)驱动和FB(Frame Buffer)驱动构成,当内核加载V4L2驱动时,它会向内核注册/dev/Video2和/dev/Video3两个设备,而当内核加载FB驱动时,它会向内核注册/dev/fb/0、/dev/fb/1、/dev/fb/2、/dev/fb/3 4个设备,注册的设备都对应了它们所能控制的图层[8],对应关系如表1所示。

可以通过设置系统启动参数来决定VPBE驱动被加载时会向内核注册的设备,以此决定开启的图层以及图层开启后受何种设备控制[9],例如,注册/dev/fb/3设备,VID1图层将被开启且只受/dev/fb/3设备控制。在实际方案中,启动参数指定VPBE向内核注册/dev/Video2设备和/dev/fb/0设备,分别开启了VID0图层和OSD0图层,其中VID0图层受/dev/Video2设备控制,用于显示采集到的视频数据,而OSD0图层受/dev/fb/0设备控制,用于显示QT等UI交互界面,其余图层默认保持关闭状态。

VID0图层的数据和VID1图层的数据会依次经过VPBE硬件模块中的OSD部件和ENC部件,最终由DAC模块输出模拟信号或者由LCD控制器输出数字信号[10],数据管道如图3所示。

在前文中已提到,LCD液晶屏被接入到了VPBE模块,所以VPBE驱动将VPBE硬件模块配置成视频数据由VID0图层输入,并最终通过LCD控制器输出到LCD液晶屏上。

2.2 应用程序设计

在VPFE驱动将VPFE硬件模块配置为双分辨率数据流的前提下,将应用层程序设计为一路数据流用于视频实时显示,另外一路数据流用于视频编码,Capture线程数据流程图如图4所示。

(1)第一路数据流

hCapture-->hCapBuf-->hDstBuf(D1:720x576)-->hOutFifo,用于视频编码存储。

(2)第二路数据流

hCapture-->hCapBuf-->hRzbBuf-->hDisBuf(QVGA:320x240)-->hDisplay,用于视频实时显示。

hCapBuf缓存用于存放VPFE采集驱动采集到的原始视频数据,存放着736×576大小的数据,hDstBuf缓存中的数据用于供后续视频编码存储,存放着D1:720×576大小的数据,hDisBuf缓存中的数据用于供后续视频显示回放,存放着QVGA:320×240大小的数据,hRzbBuf缓存中的数据用于供后续视频编码上传。

3 视频编码模块

原始视频数据的编解码需要用到达芬奇软件框架的Codec Engine(编解码引擎)技术来实现。Codec Engine定义了一组VISA(Video Image Speech Audio)APIs接口供应用程序调用。DM365的高清视频协处理器(HDVICP)封装了相应的编解码算法,ARM处理器中的应用程序可以通过VISA-APIs接口对编解码算法进行调用。ARM处理器负责执行应用程序,视频协处理器负责执行编解码算法,这样不仅大大降低了ARM处理器的CPU占用率,还能提高编解码的效率。本文采用H.264编码标准进行编码,需要调用相应的H.264算法实例。

3.1视频编码接口

H.264是一种高性能的视频编解码标准,继承了H.263和MPEG1/2/4视频编码器的优点。H.264标准中定义了两个层次:视频编码层(VCL)和网络抽象层(NAL),VCL负责高效的数字视频数据压缩,NAL提供适当的接口对数据进行打包和传送。

为了得到H.264格式的视频流,需要配置alg_server.cfg文件来实现对已经编译算法的调用,文件配置如下:

var H264ENC=xdc.useModule(′ti.sdo.codecs.h264enc.ce.H264ENC′);//指定调用的算法

var myEngine=Engine.create("alg_server",[{name:"h264enc",mod:H264ENC,local:true,groupId:1}]);

//创建引擎实例

在应用程序中能调用的接口函数有:VIDENC1_create、VIDENC1_control、VIDENC1_process和VIDENC1_delete,它们分别负责编码实例的创建、控制、运行以及最终的清除。

3.2 应用程序设计

所设计的Video线程基于Capture线程,Capture线程向Video线程输入一路D1:720×576大小的数据流,Video线程如图5所示。

4 测试结果

测试环境搭建方法如下:

(1)LCD液晶屏连接在以TMS320DM365为主芯片的产品板上,TMS320DM365主芯片的CPU频率为216 MHz,板载Flash为1 GB,板载DDR2为128 MB。

(2)本地备份的视频数据文件存储在SD卡中,文件格式为H.264,文件大小为6.2 MB,总时长为1 min,使用VLC播放器播放。

经测试,视频监控终端设备能实时地显示摄像头采集到的视频画面,显示画面大小为QVGA(320×240),如图7(a)所示。SD卡里存储备份的视频数据也成功纪录了一段时间内的视频画面,分辨率大小为D1(720× 576),如图7(b)所示。

5 结论

本文设计实现了基于TMS320DM365硬件平台的视频监控终端设备,该视频监控终端设备不仅具有数据采集功能,而且还集成了本地存储备份以及原始数据实时显示等核心功能。采用TMS320DM365的ARM+DSP双核模式,提高了编码效率以及传输效率,通过测试发现,实时图像清晰流畅,ARM资源占有率低,可扩展性大,满足系统实时性和稳定性的要求。

参考文献

[1] 张伟.视频监控技术的发展历程和方向[J].中国交通信息产业,2007(6):139-142.

[2] 郑磊.基于嵌入式Linux的网络视频监控系统研究[D].武汉:武汉理工大学,2011.

[3] 刘继超.基于DM355的嵌入式网络视频监控系统设计[D].青岛:青岛科技大学,2012.

[4] 望重.嵌入式网络视频监控系统的研究与实现[D].镇江:江苏大学,2010.

[5] 胡攀.基于Linux的网络视频监控系统设计[D].武汉:武汉理工大学,2012.

[6] 项昌晨,王磊.基于TMS320DM365的网络视频监控系统设计[J].机电一体化,2011,17(12):58-63.

[7] Texas Instruments. Davinci Linux VPFE Capture Driver[EB/OL].[2014-12-15].http://www.ti.com/lit/an/sprs566a/sprs566a.pdf.

[8] Texas Instruments, Video Processing Back End(VPBE)[EB/OL].[2014-12-15].http://www.ti.com.cn/cn/lit/ug/sprufg9c/sprufg9c.pdf.

[9] Texas Instruments, LSP 2.10 DaVinci Linux VPBE Frame Buffer Driver[EB/OL]. [2014-12-15]. http://www.ti.com/lit/ug/spruek9/spruek9.pdf.

[10] Texas Instruments, LSP 2.10 DaVinci Linux V4L2 Display Driver[EB/OL]. [2014-12-15]. http://www.ti.com/lit/ug/spruel3/spruel3.pdf.

荣威D5X DMH与宋PLUS DM-i对比:谁才是更佳的混动SUV选择?

混合动力SUV对比:谁才是更佳的选择?

随着环保意识的不断提高,混合动力汽车正成为汽车市场的新宠。它们不仅能够减少燃油消耗,还可以降低尾气排放,是一种环保且经济实惠的出行方式。在国内SUV市场,荣威汽车公司推出的D5X DMH和宋PLUS DM-i两款混合动力SUV车型备受关注。这两款车型到底哪一款更值得购买呢?让我们一起来对比一下。

动力系统

动力系统是衡量一款车型性能的关键因素。D5X DMH搭载了1.5T涡轮增压发动机和电动机的混合动力系统。这套动力系统最大功率为193千瓦,峰值扭矩为365牛·米,能够为车辆提供强劲的动力输出。与之相比,宋PLUS DM-i则采用了1.5L自然吸气发动机和电动机的混合动力系统,最大功率为150千瓦,峰值扭矩为335牛·米。从数据上看,D5X DMH的动力系统输出更为强劲,能够带来更加出色的加速性能和超车能力。

不过,宋PLUS DM-i的动力系统虽然输出相对较低,但它采用了先进的第四代混合动力技术,能够实现更加平顺的动力输出和更高的能量利用效率 。在日常城市驾驶中,宋PLUS DM-i的动力表现也是足够出色的。

油耗表现

作为混合动力车型,油耗表现自然是一个重要的考量因素。根据官方数据,D5X DMH的综合工况油耗为5.9L/100km,而宋PLUS DM-i的综合工况油耗则为5.6L/100km。可以看出,在油耗方面,宋PLUS DM-i略占优势。

需要注意的是,这些数据是在理想工况下测试得出的,实际使用油耗会受到驾驶习惯、路况、天气等多种因素的影响。但两款车型的油耗水平都相当不错,比同级别的传统燃油车型要低很多。

作为混合动力车型,D5X DMH和宋PLUS DM-i都支持纯电动模式行驶。根据官方数据,D5X DMH的纯电航里程为60公里,而宋PLUS DM-i的纯电航里程为65公里。虽然这些里程数据并不算太出色,但在城市短途出行中,完全可以实现零排放、零油耗的环保驾驶体验。

车身尺寸

在车身尺寸方面,D5X DMH和宋PLUS DM-i也存在一些差异。D5X DMH的长宽高分别为4605/1865/1690毫米,轴距为2700毫米。而宋PLUS DM-i的长宽高则为4635/1860/1625毫米,轴距也是2700毫米。

从数据上看,宋PLUS DM-i的车身长度略长于D5X DMH,但两款车型的轴距相同。较长的车身有利于提供更加宽敞的车内空间,尤其是后排乘员的腿部空间会更加充裕。较长的车身也意味着车辆的整体尺寸会更大,在城市道路和停车场中的操控性和可及性或许会略有下降。

两款车型的车身高度也有所不同。D5X DMH的车身高度为1690毫米,而宋PLUS DM-i的车身高度则为1625毫米。较高的车身设计使D5X DMH拥有更好的通过性,在一些路况较差的地方驾驶时会更加游刃有余

内饰设计

除了动力系统、油耗和车身尺寸之外,内饰设计也是选择车型时需要考虑的重要因素。D5X DMH和宋PLUS DM-i在内饰设计上都采用了较为时尚和年轻化的风格,但细节上也存在一些差异。

D5X DMH的中控台采用了悬浮式设计,整体造型十分简洁大方。中控台上方配备了一块12.3英寸的全液晶数字仪表盘,以及一块10.25英寸的中控大屏,科技感十足。座椅采用了半桶形设计,不仅看起来时尚动感,而且侧围也能为乘员提供良好的支撑。

宋PLUS DM-i的内饰设计风格则更加偏向于简约大气。中控台采用了层次分明的设计,操作按键布局合理且人机工程学做得不错。同样配备了12.3英寸全液晶数字仪表盘和10.25英寸中控大屏,科技感同样十足。座椅采用了更加包裹式的设计,能够为乘员提供更好的支撑和舒适性。

两款车型的内饰设计都相当出色,各有特色。D5X DMH的内饰风格更加时尚动感,而宋PLUS DM-i则更加简约大气。具体哪一款更加符合个人审美取向,还需要亲自体验后再做判断。

智能配置

作为新一代的汽车产品,D5X DMH和宋PLUS DM-i都配备了丰富的智能化配置,以满足消费者对于智能驾驶和车载互联网体验的需求。

在智能驾驶方面,两款车型都支持了诸如自适应巡航、车道保持辅助、自动紧急制动等主流的智能驾驶辅助功能。D5X DMH还额外提供了智能导航辅助系统,能够在高速公路上实现半自动驾驶,提升了驾驶体验。

在车载互联网方面,D5X DMH和宋PLUS DM-i均采用了荣威汽车自主研发的智能车机系统,支持语音控制、在线娱乐、车载导航等丰富功能。两款车型还都提供了手机无线投屏功能,让用户可以更加便捷地享受移动办公和娱乐体验。

两款车型还都支持了远程控制、车况监测等车联网功能,让用户可以通过手机App随时了解和控制爱车的状态,提升了用车体验

对比

通过上述对比,我们可以看出D5X DMH和宋PLUS DM-i这两款混合动力SUV各有优缺点,并没有一款车型能够在所有方面都占据绝对优势

如果更看重动力性能和通过性能,那么D5X DMH或许会是一个更好的选择 。它搭载的1.5T混合动力系统输出更为强劲,能够提供更出色的加速性能;而较高的车身也使它在一些路况较差的地方驾驶时更加游刃有余。

如果更看重油耗经济性和车内空间,那么宋PLUS DM-i就会更加合适。它的综合工况油耗比D5X DMH更低,而较长的车身也能为乘员提供更加宽敞的空间体验。

两款车型在内饰设计和智能配置方面也各有特色,消费者可以根据自身的喜好进行选择。

D5X DMH和宋PLUS DM-i都是非常出色的混合动力SUV车型,能够满足大多数消费者的需求。在做出购车决策时,建议先亲自体验两款车型,对比它们在实际驾驶感受、内饰设计等方面的差异,再结合自身的实际需求做出最终选择。

相关问答

5.08m3=___ dm 3440mL=___cm34500cm3=___ dm365 cm3=___L._作业帮

[最佳回答](1)5.08m3=5080dm3;(2)440mL=440cm3;(3)4500cm3=4.5dm3;(4)65cm3=0.065L.故答案为:5080,440,4.5,0.065.(1)5.08...

初三物理常用进率换算,所有的,能用着的_作业帮

[回答]1、长度单位换算:1千米=1000米1米=10分米=100厘米1厘米=10毫米1毫米=1000微米1微米=1000纳米m--米dm--分米cm--厘米mm--毫米nm---纳米2、时....

普元开发平台好不好?-ZOL问答

回复WonderRainARM做H264还是有些吃力的,尤其上了高清标清后,你要参考现在企业级的方案,不是你想什么就是什么的。我推荐使用TI的DSP,6000OMAP看你的选择...

小学1至6年级的所有公式、单位换算、概念等各种方法_作业帮

[回答]长度单位换算1千米=1000米1米=10分米1分米=10厘米1米=100厘米1厘米=10毫米面积单位换算1平方千米=100公顷1公顷=10000平方米1平方米=...

油电混合动力汽车哪个品牌好

[回答]最好的油电混动车品牌:比亚迪、丰田、本田、雷克萨斯、哈弗。油电混合动力汽车好的品牌:雷克萨斯、别克君越(查成交价|参配|优惠政策)、比亚迪、本...

大神们,能不能推荐一下:宿迁诚信的征婚网站哪个好,征婚网...

[回答]有朋友做过南京市鼓楼区幸福之家婚介中心的产品,别说效果还真不错,楼主可以去了解一下现在动漫网太多了,也说不清楚哪个更新最快!!!!!但可以给你T...

平方的换算单位和公式三年级?

1千米=1000米/1km=1000m1米=10分米/1m=10dm1米=100厘米/1m=100cm1分米=10厘米/1dm=10cm1厘米=10毫米/1cm...

电动汽车排名前十名有哪些品牌

[回答]比亚迪比亚迪推出了自研的刀片电池、DM-i混动技术、e0平台等核心技术。特斯拉(Tesla)。特斯拉成立于2003年,是世界知名的豪华电动汽车品牌,主要生...

公分和厘米的换算 - csQDm59Z 的回答 - 懂得

公分和厘米是同一个单位所以1公分=1厘米贝斯特365

【小学的所有单位】作业帮

[回答]很高兴能帮你解决问题!长度:千米、米、分米、厘米、毫米重量:吨、千克、克面积:平方千米、平方米、平方分米、平方厘米体/容积:立方米、立方分米(升...

 威盛中国芯计算机表演赛  阿根廷在哪个洲 
王经理: 180-0000-0000(微信同号)
10086@qq.com
北京海淀区西三旗街道国际大厦08A座
©2024  上海羊羽卓进出口贸易有限公司  版权所有.All Rights Reserved.  |  程序由Z-BlogPHP强力驱动
网站首页
电话咨询
微信号

QQ

在线咨询真诚为您提供专业解答服务

热线

188-0000-0000
专属服务热线

微信

二维码扫一扫微信交流
顶部