【ijkplayer】介绍

Dear 丶 2024-04-01 13:31 61阅读 0赞

## 【ijkplayer】介绍 ##

### 0x1 系统架构 ###

ijkplayer是由b站开源的播放器项目，底层基于ffmpeg, 支持Android和iOS。下面我们来简单介绍一下Android上的实现。  
Android上的系统架构图如下。  
![在这里插入图片描述][c4aed67c77684c97a16bedd22b5c727a.png]

下面分别对各个模块进行介绍：

#### 0x11 ijkplayer-example ####

app的实现，主要是ui逻辑的实现，包括activity的实现，ui控件的组织，窗口的定制，数据的存储。

#### 0x12 ijkplayer-example ####

通过调用ijkmediaplayer，android mediaplayer， google exoplayer这三种mediaplayer来实现媒体播放。

#### 0x13 ijkplayer-java ####

对底层实现的ijkmediaplayer和android mediaplayer的java封装，对ijkmediaplayer的封装是通过调用底层jni对应的java接口，对android mediaplayer的封装是调用android系统实现的默认mediaplayer接口。

#### 0x14 ijkplayer-exo ####

是对google exoplayer的封装，除了android默认的播放器之外，ExoPlayer是Google提供的在android平台上的另外一种播放器。

#### 0x15 libijkplayer ####

提供了ijkmediaplayer的jni实现ijkplayer\_jni.c，然后调用封装过的ffplayer.c, 再调用底层实现的解码库libijkffmpeg和显示库libijksdl。

#### 0x16 libijkffmpeg ####

实现了媒体文件的demux, decode等功能。

#### 0x17 libijksdl ####

实现对解码后的数据进行显示。

### 0x2 Java层关键模块分析 ###

#### 0x21 三种不同的mediaplayer实现. ####

这三种mediaplayer的类图如下图所示。

![在这里插入图片描述][7dc896490fdd4365847fc4ad77401f1c.png]

##### 0x211 AndroidMediaPlayer #####

对Andoid默认播放器的封装。

##### 0x212 IjkMediaPlayer #####

基于ffmpeg的播放器实现。

##### 0x213 IjkExoMediaPlayer #####

基于Goodle开源的ExoPlayer的封装。

#### 0x22 设置不同的Render ####

不同Render的类图如下图所示。  
![6332fa767ab04abaacb5efdaa45b26a3.png][]

##### 0x221 SurfaceRenderView #####

基于SurfaceView的显示实现。

##### 0x222 TextureRenderView #####

基于TextureView的显示实现。

上述两种显示实现方式都实现了接口**IRenderView**。

#### 0x23 IjkMediaPlayer的JNI接口 ####

详细的JNI接口如下图所示。  
![在这里插入图片描述][711d3577991e46a5984c9c4926ed3764.png]

这些JNI接口提供了播放器的基本接口，包括播放准备(\_setDataSource, \_setVideoSurface, setVolume，\_prepareAsync), 播放控制(\_start, \_stop, seekTo，\_release， \_reset)等功能。

### 0x3 关键流程 ###

#### 0x31 设置surface ####

设置surface的流程图如下图所示。

![在这里插入图片描述][ecf4269b9dc44ec88440308b04c78e2e.png]

从上面的流程图可知，通过接口\_setVideoSurface(), 把UI层的Surface对象(可以理解为显示窗口)设置给SDL显示对象，作为其显示窗口(native\_window), 这样SDL有需要显示的内容可以直接在这个显示窗口上显示输出即可。

#### 0x32 显示流程 ####

显示的流程图如下图所示。

\[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-SPCuRnnj-1667355270414)(https://cdn.jsdelivr.net/gh/xzMhehe/StaticFile\_CDN/static/code202211021012528.png)\]

下面对上面的流程图简单说明。

解码线程ffp\_video\_thread解码完成以后，调用接口queue\_picture把需要显示的buffer往SDL模块发送。

然后调用func\_fill\_frame()填充显示buffer, 这个时候需要判断是通过ffmpeg还是mediacodec实现的解码。

如果是ffmpeg实现的话则调用ijksdl\_vout\_overlay\_ffmpeg.c中的函数func\_fill\_frame()。

否则调用ijksdl\_vout\_overlay\_android\_mediacodec.c中的func\_fill\_frame()。

然后显示线程video\_refresh\_thread就可以开始显示了。如果是GPU支持的格式则调用GPU进行输出，这个时候调用的

IJK\_EGL\_display，否则调用ANativeWindow\_lock和ANativeWindow\_unlockAndPost进行输出。

[c4aed67c77684c97a16bedd22b5c727a.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/01/3b1142e8ce8a436e875fe285e2aa34f1.png
[7dc896490fdd4365847fc4ad77401f1c.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/01/0483dff2c20f41beb2c6da475bf50af8.png
[6332fa767ab04abaacb5efdaa45b26a3.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/01/f92cb396bfd9443e9862fe3b4e4f141c.png
[711d3577991e46a5984c9c4926ed3764.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/01/6e6ce04f8357430a8bcf735c0da22018.png
[ecf4269b9dc44ec88440308b04c78e2e.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/01/c7d6af14e71d4686a1eaae2a9c7e2ce9.png