音视频流同步论文-孟祥飞

音视频流同步论文-孟祥飞

导读:本文包含了音视频流同步论文开题报告文献综述及选题提纲参考文献,主要关键词:DM6467T,音视频同步,达芬奇系统,时间戳

音视频流同步论文文献综述

孟祥飞[1](2019)在《基于DM6467T音视频同步压缩传输监控系统的设计与研究》一文中研究指出随着社会的进步和科技的发展,半导体领域取得了突破性的进展,硬件处理速度显着提升,监控领域受到流媒体等技术的影响,也不再局限于视频,而是转变为音视频同时采集传输的形式。由于系统采集到的音视频数据过大必须经过压缩编码后才能在有限的带宽内传输,此外音视频编码的算法复杂度、所压缩数据量大小、网络传输带宽等的差异都会产生延迟,导致客户端出现音视频失步现象。另外传统的以ARM、DSP、FPGA为核心的监控方案均存在不足之处。为解决上述问题,本文设计了一款基于DaVinci处理器的音视频同步压缩传输监控系统。系统采用DM6467T作为核心处理器,利用其独特的ARM+DSP双核架构完成整个系统的控制以及音视频数据的处理。硬件方面,系统采用TLV320AIC32和TVP5150作为音视频译码芯片;采用MT47HI28MI6RT25E和NAND01GW3B2AZA6E作为系统的存储芯片;采用KSZ8001作为系统网络传输芯片。在软件方面,选择H.264和AAC作为系统音视频数据压缩算法,并提出了基于RTP协议时间戳信息和RTCP协议反馈报文的同步控制方法。利用TI提供的开发套件搭建达芬奇软件平台,在Linux系统下对整个系统进行了程序设计,首先根据V4L2和ALSA框架完成音视频数据的采集、借助CE模块调用DSP端算法对数据进行压缩,之后利用ORTP库对数据进行打包发送,在接收端通过RTP时间戳信息和RTCP报文反馈的缓冲区占用情况调节音视频数据的发送速率与播放状态,从而实现音视频同步播放。系统测试结果显示:解码后的音视频数据质量高,同步效果良好,系统延时在200ms左右,以上结果表明本文设计音视频同步压缩传输监控系统满足实际应用需求。(本文来源于《中北大学》期刊2019-05-30)

闫亚玲[2](2019)在《新媒体下的音视频同步压缩技术研究》一文中研究指出本课题研究了新媒体下的音视频同步压缩技术,随着新媒体技术的快速发展对音视频的要求也越来越高,而音视频的同步问题一直没有得到彻底的解决,本课题在DSP硬件平台下对音视频信息进行同步采集、处理,在H.264/AVC的基础上对经Zig-zag扫描后逆方向上第一个非零拖尾系数奇偶性进行改变从而嵌入音频,嵌入后通过熵编码对音视频文件进行无损压缩,压缩完成后以TS流的形式按照UDP协议经以太网接口传输至网络终端进行解码同步观看。系统的硬件平台以TI公司的达芬奇系列DM6467T处理器为核心,通过CCD摄像头和3.5mm的麦克风对音视频信息进行采集,采集的信息经DM6467T中的VP口高速接收至V4系列FPGA中进行预处理,将4:2:2格式的YUV视频数据转为4:2:0格式,通过SPI口传输至DSP端进行同步压缩。压缩过程在实现当下主流的视频压缩标准H.264/AVC的基础上,进行算法改进,通过DCT系数的奇偶性进行音频信息嵌入。采集的音频信息经AD转换后以二进制比特流的形式保存,视频数据以残差块形式进行压缩,残差块经4×4DCT变换后,由时域信息变为二维频域信息数组,4×4的DCT系数量化后由Zig-zag扫描方法进行之字遍历,重排序后为低频信息在前高频信息在后的一维数组,由于排在后面的高中频信息改变对图像质量影响不大,故通过改变有非零系数亮度块最后一位非零拖尾系数的奇偶性来记录音频信息。嵌入后的音视频混合文件以TS流的形式根据UDP协议在1600Kbps的码率下通过网络传输,接收端接收到UDP包后,在配置好的VLC播放器中进行解包、解压、解析音频信息等操作以实现同步播放。解析出音频信息后对视频信息进行修复,通过对视频图像PSNR-Y的分析,得出修复工作是必要的。经过实验检测,本课题研究实现了音视频的实时同步压缩播放,在保证音视频质量的同时,视频压缩比可达157:1,音频可达5:1;音视频同步效果良好,基本感觉不到失步偏移;实时效果良好,虽然有所延迟,但不影响观看。(本文来源于《中北大学》期刊2019-05-30)

闫旭刚,李博[3](2019)在《基于DM6467T的音视频同步压缩传输系统设计》一文中研究指出针对当下人们对海量高清音视频需求的不断增加而高清音视频压缩传输技术发展相对缓慢这一问题,提出基于DM6467T的音视频同步压缩传输系统设计。该系统以TMS320DM6467T处理器为核心的DSP+ARM双核芯片作为硬件设备,Windows操作系统作为软件开发平台,HDMI摄像头为高清视频采集设备,3.5 mm的麦克风为音频采集设备,利用H.264/AVC中的DCT变换系数奇偶性音视频同步压缩算法进行同步压缩,通过DM6467T中的以太网接口进行同步网络传输至PC机上进行同步观看。测试结果表明该系统达到了预期设计目标。(本文来源于《现代电子技术》期刊2019年08期)

张宝松[4](2019)在《基于空管自动化系统的音视频同步采集系统研究》一文中研究指出空管自动化系统是民航空管部门的核心系统。针对该系统提供的回放功能及在运行中发现的缺陷,我们有针对地开发一套音视频同步采集系统,用于改善基于空管自动化系统的事故调查工作。本文阐述了现有音视频采集系统的功能及缺陷,并着重介绍本音视频同步采集系统的设计思路和实现过程,以及该系统的推广应用场景。最后总结了系统开发的使用价值和特点。(本文来源于《民航管理》期刊2019年03期)

李慧玲[5](2019)在《基于数字编码的多媒体信息音视频同步传输方法研究》一文中研究指出基于数字编码的多媒体信息音视频同步传输方法研究是当前一项十分重要的课题,虽然多媒体信息技术已经快速发展,但在音视频同步传输方法方面存在研究不足等问题。以基于数字编码的多媒体信息技术为前提,围绕多媒体信息音视频发送端同步实现,依托多媒体信息音视频接收端同步实现,具体论证多媒体信息音视频媒体内同步,以及多媒体信息音视频媒体内同步。通过相关方法论证得出,基于数字编码的多媒体信息音视频同步传输方法研究具有十分重要的现实意义。(本文来源于《数字通信世界》期刊2019年03期)

闫亚玲,李博,孟祥飞[6](2019)在《基于DSP+ARM的音视频同步压缩存储实时传输系统设计》一文中研究指出设计了基于DSP+ARM的音视频同步压缩存储实时传输系统。该系统融合DSP和ARM以及FPGA芯片对音视频进行处理,通过CCD和麦克风采集的音视频信息经FPGA处理后进入DSP完成基于H. 264/AVC的音视频同步压缩处理,完成后由ARM控制周边电路完成音视频的外接硬盘存储和RTP网络实时传输。结果表明,该系统的压缩比可达160,传输速度可达50帧/s,同步误差不超过600 ms。(本文来源于《实验室研究与探索》期刊2019年01期)

刘伟杰[7](2018)在《嵌入式音视频同步网络监控系统设计与实现》一文中研究指出伴随着网络技术和流媒体技术的高速发展,安防监控结合互联网技术和流媒体技术传递的信息已经由单一的图像模式过渡为视频、音频、文字相互融合的多媒体通信模式。同时人们对通信的质量的要求日益提高,视频监控不仅满足于提供高清的画质,同时也需要高保真的音质,还需要通信双方的能进行实时互动,音视频网络监控能够供更加全面的信息已经成为安防监控的发展趋势。音视频同步效果是衡量音视频监控质量的关键标准,音视频通过网络传输在满足高清画质同时也要保证实时性和唇音同步成为发展音视频监控必须面对的问题。为此本文开展了嵌入式音视频同步网络监控系统的的设计与实现,主要研究和成果如下。本文首先介绍了监控发展背景和趋势,阐述了音视频监控的研究意义和应用前景,同时介绍流媒体技术的发展,对常见音视频编解码技术进行了分析与对比,确定了处理高清图像性能优越H.265/HEVC视频编码标准,音频方面采用算法简洁高效,低码率占用网络带宽少的AAC音频编码;研究了常用的网络传输协议,分析了TCP协议和UDP协议的技术特点和应用场合,提出更适合同时保证流媒体传输Rtp/Rtcp协议;研究了流媒体同步机制的解决方案,分析了多种音视频控制算法的优势与不足,确定采用基于时间戳控制的音视频同步控制算法。然后介绍了监控系统总体设计方案,采用嵌入式硬件开发平台,基于Linux操作系统,搭建开发环境移植Linux系统和重要应用软件库,构建嵌入式Boa网络服务器为监控系统网络化平台。紧接着对监控系统任务模块化分组,音视频采集模块、压缩编码模块、网络同步传输模块、终端同步控制模块进行应用程序开发,采用LINUX系统中的多线程技术实现音视频采集编码同步控制技术。然后设计监控网络客户端GUI设计和功能设计。最后对系统进行测试显示:实验结果表明,监控画面清晰无抖动,实时性好,音频效果清晰,音视频吻合效果好满足应用要求。(本文来源于《中北大学》期刊2018-06-04)

张森永,高树立,陈为刚[8](2018)在《面向嵌入式系统的音视频解码与同步播放实现》一文中研究指出基于ARM嵌入式系统设计并实现了MPEG-2 TS流的音视频解码和同步播放系统.在该系统中,由于ARM处理器内嵌了硬件视频解码器,为充分利用该资源,采用硬件MFC(multi-format codec)解码器对视频数据进行解码,同时采用开源的Mad(libmad)库对音频数据进行解码.进一步利用V4L2(Video for Linux 2)驱动接口和ALSA(advanced Linux sound architecture)库实现视频和音频的播放.由于视频帧播放周期和硬件处理时延不一致,系统对音视频数据操作存在时间差,从而造成音视频播放不同步.于是采用将视频播放同步到音频播放流的方法实现音视频的播放同步.测试结果表明,设计的音视频解码和同步播放系统可以实现对音视频数据进行解码与同步播放.(本文来源于《应用科学学报》期刊2018年03期)

张斌[9](2018)在《基于RTP/RTCP的空间多媒体通信音视频同步算法》一文中研究指出提出一种基于RTP/RTCP网络传输协议的空间多媒体通信音视频同步算法。在空间通信网络仿真系统构架下,实现空间多媒体通信仿真系统的构建。基于音视频同步控制系统规程和音视频RTP包之间的时间戳映射理论,提出音视频同步码误差检测与判决准则。在1 Mbps传输速率下对200 s(5 000帧)的视频进行测试,算法稳定,且耗时不到视频总长度的20%。与传统音视频同步算法相比,性能提升100%以上。(本文来源于《工业技术创新》期刊2018年02期)

陈震霖[10](2017)在《音视频同步直播竞争性谈判过程》一文中研究指出日前,宝安区沙井东塘旧村片区城市更新项目交易结果公示结束,至此,已经启动两年半,备受辖区市民关注的东塘旧改项目最终确定了合作方。该项目属于社区集体资产,与以往不同,该项目开创了我市集体土地合作开发交易方式的先河,即在社区集体经济综合监管服务平台(本文来源于《深圳特区报》期刊2017-08-13)

音视频流同步论文开题报告

(1)论文研究背景及目的

此处内容要求:

首先简单简介论文所研究问题的基本概念和背景,再而简单明了地指出论文所要研究解决的具体问题,并提出你的论文准备的观点或解决方法。

写法范例:

本课题研究了新媒体下的音视频同步压缩技术,随着新媒体技术的快速发展对音视频的要求也越来越高,而音视频的同步问题一直没有得到彻底的解决,本课题在DSP硬件平台下对音视频信息进行同步采集、处理,在H.264/AVC的基础上对经Zig-zag扫描后逆方向上第一个非零拖尾系数奇偶性进行改变从而嵌入音频,嵌入后通过熵编码对音视频文件进行无损压缩,压缩完成后以TS流的形式按照UDP协议经以太网接口传输至网络终端进行解码同步观看。系统的硬件平台以TI公司的达芬奇系列DM6467T处理器为核心,通过CCD摄像头和3.5mm的麦克风对音视频信息进行采集,采集的信息经DM6467T中的VP口高速接收至V4系列FPGA中进行预处理,将4:2:2格式的YUV视频数据转为4:2:0格式,通过SPI口传输至DSP端进行同步压缩。压缩过程在实现当下主流的视频压缩标准H.264/AVC的基础上,进行算法改进,通过DCT系数的奇偶性进行音频信息嵌入。采集的音频信息经AD转换后以二进制比特流的形式保存,视频数据以残差块形式进行压缩,残差块经4×4DCT变换后,由时域信息变为二维频域信息数组,4×4的DCT系数量化后由Zig-zag扫描方法进行之字遍历,重排序后为低频信息在前高频信息在后的一维数组,由于排在后面的高中频信息改变对图像质量影响不大,故通过改变有非零系数亮度块最后一位非零拖尾系数的奇偶性来记录音频信息。嵌入后的音视频混合文件以TS流的形式根据UDP协议在1600Kbps的码率下通过网络传输,接收端接收到UDP包后,在配置好的VLC播放器中进行解包、解压、解析音频信息等操作以实现同步播放。解析出音频信息后对视频信息进行修复,通过对视频图像PSNR-Y的分析,得出修复工作是必要的。经过实验检测,本课题研究实现了音视频的实时同步压缩播放,在保证音视频质量的同时,视频压缩比可达157:1,音频可达5:1;音视频同步效果良好,基本感觉不到失步偏移;实时效果良好,虽然有所延迟,但不影响观看。

(2)本文研究方法

调查法:该方法是有目的、有系统的搜集有关研究对象的具体信息。

观察法:用自己的感官和辅助工具直接观察研究对象从而得到有关信息。

实验法:通过主支变革、控制研究对象来发现与确认事物间的因果关系。

文献研究法:通过调查文献来获得资料,从而全面的、正确的了解掌握研究方法。

实证研究法:依据现有的科学理论和实践的需要提出设计。

定性分析法:对研究对象进行“质”的方面的研究,这个方法需要计算的数据较少。

定量分析法:通过具体的数字,使人们对研究对象的认识进一步精确化。

跨学科研究法:运用多学科的理论、方法和成果从整体上对某一课题进行研究。

功能分析法:这是社会科学用来分析社会现象的一种方法,从某一功能出发研究多个方面的影响。

模拟法:通过创设一个与原型相似的模型来间接研究原型某种特性的一种形容方法。

音视频流同步论文参考文献

[1].孟祥飞.基于DM6467T音视频同步压缩传输监控系统的设计与研究[D].中北大学.2019

[2].闫亚玲.新媒体下的音视频同步压缩技术研究[D].中北大学.2019

[3].闫旭刚,李博.基于DM6467T的音视频同步压缩传输系统设计[J].现代电子技术.2019

[4].张宝松.基于空管自动化系统的音视频同步采集系统研究[J].民航管理.2019

[5].李慧玲.基于数字编码的多媒体信息音视频同步传输方法研究[J].数字通信世界.2019

[6].闫亚玲,李博,孟祥飞.基于DSP+ARM的音视频同步压缩存储实时传输系统设计[J].实验室研究与探索.2019

[7].刘伟杰.嵌入式音视频同步网络监控系统设计与实现[D].中北大学.2018

[8].张森永,高树立,陈为刚.面向嵌入式系统的音视频解码与同步播放实现[J].应用科学学报.2018

[9].张斌.基于RTP/RTCP的空间多媒体通信音视频同步算法[J].工业技术创新.2018

[10].陈震霖.音视频同步直播竞争性谈判过程[N].深圳特区报.2017

标签:;  ;  ;  ;  

音视频流同步论文-孟祥飞
下载Doc文档

猜你喜欢