基于FFmpeg和SDL实现多路实时流变换及播放.docx

基于FFmpeg和SDL实现多路实时流变换及播放李科，李璐，兰时勇(四川大学视觉合成图形图像技术国防重点学科实验室，四川成都610064)摘要:针对现有不同采集设备的实时视频流采集、解码和播放，以及对大场景监视和多路多画面监视的需求，提出结合FFmpeg跨平台视频方案、SDL多媒体开发库、SDL_gfx扩展库以及多线程编程技术的整体解决方案，实现基于实时流传输 协议(ＲTSP)的多路网络视频流实时播放，并可对各路视频进行旋转、放大、仿射变换等操作。由于采用了SDL多媒体开发包及扩展库、FFmpeg视频方案等技术，因此该软件的跨平台可移植性和兼容性较高，并且该软件使用ＲTSP协议，在监控方面能够达到实时效果。关键词:FFmpeg;SDL;实时流传输协议;网络实时流;多路显示;视频操作中图分类号:TP301文献标识码:A文章编号:1673－629X(2014)04－0065－04doi:10．3969/j．issn．1673－629X．2014．04．016MultipleVideoStreamsＲeal－timeConversionandPlaybackBasedonFFmpegandSDLLIKe，LILu，LANShi－yong(NationalKeyLaboratoryofFundamentalScienceonSyntheticVision，SichuanUniversity，Chengdu610064，China)Abstract:Targetedattheneedsofdifferentacquisitiondevicesforexistingreal－timevideostreamingcapture，decodeandplayback，aswellasalargescenetomonitorandmulti－screenmulti－channelmonitoring，proposedatotalsolutionbasedonＲTSP(ＲealTimeStreamingProtocol)torealizemulti－channelnetworkvideostreamsreal－timeplayback，androtating，zooming，affinetransformationandotheroperationonthebrightestvideo，whichcombinedwithFFmpegcross－platformvideosolutions，SDLmultimediadevelopmentlibrar-iesandSDL_gfxextensionsandmulti－threadedprogrammingtechnical．AsaresultofSDL multimediadevelopmentkitandextensionli-brary，FFmpegvideosolutionsandothertechnologies，theportabilityandcross－platformcompatibilityofthesoftwareishigh，andbecauseoftheＲTSP，thecontrolscanachievereal－timeresults．Keywords:FFmpeg;SDL;ＲTSP;networklivestream;multipledisplay;videooperation0引言随着流媒体技术和视频监控技术的发展，多媒体技术和网络视频监控得到广泛的应用。现今，网络视频的多路采集与显示已成为研究和开发的热点［1－2］。 每个网络视频监控厂家都有一套配套的视频监控软件系统，支持图像的采集、传输、播放和存储。对于网络视频的二次开发，例如大场景监视、图像拼接［3］及实时视频的智能分析等技术的产品化，在不同的平台和不 同的网络摄像头设备的情况下，需要获得相应的开发 库和API。一般来说，现有的网络摄像机基本支持ＲTSP协议，利用FFmpeg对ＲTSP(ＲealTimeStreamingProto-col，实时流传输协议)协议的支持，为获取多媒体流数据提供了便利［4－6］。对于不同平台下视频流的显示和操作，利用SDL(SimpleDirectMediaLayer)能够避免对底层硬件的操作［7－11］。并且，结合SDL的扩展库及基于SDL的跨平台界面库wGui进行系统软件的开发，具有很强的移植性。1视频流接收处理连接网络摄像头获得流媒体数据，使用FFmpeg对视频流进行解码。收稿日期:2013－07－07修回日期:2013－10－26网络出版时间:2014－01－28基金项目:国家“863”高技术发展计划项目(2012AA011804)作者简介:李科(1988－)，男，四川人，硕士研究