vlc播放流程分析

  当点击播放文件或者输入要播放的文件后,vlc会执行一系列的流程。

  首先需要了解视频以及流媒体处理及播放的流程,由链接中的描述,视频以及流媒体处理时,首先要解协议(http,rtmp,rtsp等),然后是解封装(mp4,mkv,avi等),获得音频码流和视频码流,分别解码后,再根据时间戳进行同步。使用vlc点击播放后,就是这一系列的流程。

  点击播放RTSP摄像头后,vlc会开启线程对输入的文件或者url进行分析(src/playlist/preparser.c),根据视频源属性做一些准备工作,包括:

  ->InputSourceInit()

    ->input_SplitMRL()分解url

    ->demux_New()创建分离器,如果是一个mp4文件,则会加载libmp4文件,以此类推

    ->demux_Control()调用libmp4的Control函数,以此类推

    ......

    ->InitPrograms()根据文件或url属性创建解码器(decoder),创建过程会加载对应模块

  之后就是从网络或者本地获取数据,堆栈如下。从堆栈中可以看到,接收线程从网络中接收数据,如果数据有封包格式(即有封包格式,如mp4,mkv,ts等,也就是非编码后的裸数据,),则首先进行的是解封装,将解封包后的数据组成block(可以理解为是一个结构体),放入数据fifo中;解码线程从数据fifo中取出block来解码,交由其他渲染模块去显示。不同的是,摄像头并没有封装视频格式,而是传输的编码后的裸数据。

  同理,播放一个本地mp4文件的堆栈如下。播放本地文件就没有了解协议的步骤,但是使用了libmp4进行了拆包。

  放入数据fifo中的数据还没有被解码,另外还有两个解码线程(音频和视频)不断的从队列中取数据解码,视频解码线程的堆栈如下。解码线程首先从上述数据fifo中取出数据,使用已经根据数据源格式创建好的解码器解码,之后将解码后的数据放到图像fifo中。

  最后是渲染线程的堆栈,渲染线程不断的从图像fifo中取出数据渲染到窗体上。

  附:

  配置好的Windows版vlc工程下载:https://github.com/jiayayao/vlc_2.1.0-vs_2010,下载后使用vs2010可以直接编译运行,调试学习非常方便。

时间: 2024-10-11 10:06:47

vlc播放流程分析的相关文章

转载:VLC架构及流程分析

这个是一篇转载的文章,但是没有找到出处,所以如果作者看到了这篇文章,请联系我,我将按照您的意愿或者删除,或者附上您的原文链接! 0x00 前置信息 VLC是一个非常庞大的工程,我从它的架构及流程入手进行分析,涉及到一些很细的概念先搁置一边,日后详细分析. 0x01 源码结构(Android Java相关的暂未分析) # build-android-arm-linux-androideabi/:第三方库. # modules/:模块代码. # modules/demux: 解复用模块代码. # m

MT6737 Android N 平台 Audio系统学习----录音到播放录音流程分析

http://blog.csdn.net/u014310046/article/details/54133688 本文将从主mic录音到播放流程来进行学习mtk audio系统架构.  在AudioFlinger::RecordThread::threadLoop中会调用mInput->stream->read读取数据,stream就是audio_stream_in_t类型的指针,在执行open_input_stream时被初始化,先在它其实是一个legacy_stream_in类型的指针.当

VLC源码分析总结 ——入门纲领

http://blog.chinaunix.net/uid-24951403-id-3022939.html VLC源码分析总结 1. 概述 VLC属于Video LAN开源项目组织中的一款全开源的流媒体服务器和多媒体播放器.作为流媒体服务器,VLC跨平台,支持多操作系统和计算机体系结构:作为多媒体播放器,VLC可以播放多种格式的媒体文件.主要包括有:WMV.ASF.MPG.MP.AVI.H.264等多种常见媒体格式. VLC采用全模块化结构,在系统内部,通过动态的载入所需的模块,放入一个mod

vlc源码分析之调用live555接收RTSP数据

首先了解RTSP/RTP/RTCP相关概念,尤其是了解RTP协议:RTP与RTCP协议介绍(转载). vlc使用模块加载机制调用live555,调用live555的文件是live555.cpp. 一.几个重要的类 以下向左箭头("<-")为继承关系. 1. RTPInterface RTPInterface是RTPSource的成员变量,其成员函数handleRead会读取网络数据存入BufferedPacket内,该类最终会调到UDP的发送接收函数. Boolean RTPIn

Cocos2d-x3.3RC0的Android编译Activity启动流程分析

本文将从引擎源代码Jni分析Cocos2d-x3.3RC0的Android Activity的启动流程,以下是具体分析. 1.引擎源代码Jni.部分Java层和C++层代码分析 watermark/2/text/aHR0cDovL2Jsb2cuY3Nkbi5uZXQveXV4aWt1b18x/font/5a6L5L2T/fontsize/400/fill/I0JBQkFCMA==/dissolve/70/gravity/Center" > watermark/2/text/aHR0cDov

MediaPlayer本地播放流程解析(一)

应用场景: MediaPlayer mediaPlayer = new MediaPlayer(); mediaPlayer.setOnCompletionListener(new OnCompletionListener() { @Override public void onCompletion(MediaPlayer mp) { mediaPlayer.release(); mediaPlayer = null; } }); mediaPlayer.setDataSource("abc.m

vlc源码分析(七) 调试学习HLS协议

HTTP Live Streaming(HLS)是苹果公司提出来的流媒体传输协议.与RTP协议不同的是,HLS可以穿透某些允许HTTP协议通过的防火墙. 一.HLS播放模式 (1) 点播模式(Video on demand, VOD) 点播模式是指当前时间点可以获取到所有index文件和ts文件,二级index文件中记录了所有ts文件的地址.这种模式允许客户端访问全部内容.上面的例子中就是一个点播模式下的m3u8的结构. (2) 直播模式(Live) 直播模式是指实时生成M3u8和ts文件.它的

MediaPlayer本地播放流程解析(三)

这一篇文章接着之前的prepare,讲play的流程 前面的流程省略,直接从AwesomePlayer的Play()开始讲. status_t AwesomePlayer::play() { -- return play_l(); } status_t AwesomePlayer::play_l() { -- if (mAudioSource != NULL) { if (mAudioPlayer == NULL) { createAudioPlayer_l(); } if (mVideoSou

MediaPlayer本地播放流程解析(二)

上一篇MediaPlayer本地播放流程解析(一)讲了MediaPlayer的setDataSource流程,本篇将接着讲MediaPlayer的prepare流程. Prepare前面的流程一直到AwesomePlayer,和setDataSource都基本上一样,这里直接略掉.下面将从AwesomePlayer开始. status_t AwesomePlayer::prepare() { ATRACE_CALL(); Mutex::Autolock autoLock(mLock); retu