直播入门体系杂谈

今天药忘吃喽~ 2022-09-29 11:57 158阅读 0赞

1、视频直播过程

整个过程：采集、处理、编码、封装、推流、传输、播放器、延迟优化

采集：从摄像头、屏幕、麦克风等采集流。摄像头或屏幕按帧数采集后形成原始得yuv格式得图片。

音频按照一定赫兹采集后得到AAC格式文件。

采集用yasea推送摄像头视频流和音频流到流媒体服务器

处理：适用滤镜等，进行美白、祛斑。此过程同时可以鉴黄。

编码：将直播视频进行压缩。原始格式太大，无法是存储、传输都不方便。

常用编码有libavcodec（免费）、h264（免费）、h245（收费）。

常见编码算法：时间冗余、空间冗余、逻辑冗余等等。

封装：将编码后的直播视频封装为flv等格式

推流：从客户端或PC端推流到流媒体服务器，由流媒体服务器再去分发到其他端。

可以是安卓客户端、IOS客户端或者PC端推流。

传输：推流所走的过程。

播放器：常见播放器如bilibili的ijkplayer（支持播放点播、直播等）被广泛应用在各个直播平台。

2、直播术语

视频是1s内连续图片个数>24帧，也就是>24个图片形成视频。

推流、拉流、分发

视频格式：flv、mp4等

压缩标准：视频、图像都采用MPEG国际标准。

adobe体系

AMF：是一种标准格式、rtmp传输过程中会将视频图片封装成AMF格式。

Flash：一种标准

Flv：一种视频格式

Flex：IDE开发平台

ActionScript：视频开发语言、开发技术。

3、直播技术杂谈

1）追溯视频直播：flv、mp4对大多数播放器支持。最早rtmp是adobe提出的私有化协议。后被西班牙工程师破解，开发出librtmp。完全从抓流分析出rtmp协议。后期苹果推出支持ios和h5的hls协议，开源。还有微软联合其他公司推出的rtsp协议，开源。再后来adobe放开了rtmp协议，不过据说至今没有全部开放。

2）关于ffmpeg：鼎鼎大名的ffmpeg是什么？ffmpeg是一个工具集、集合了从采集到传输的各个过程。是一个工具集。

3）关于直播每秒带宽：一般直播服务器每个用户连接观看直播消耗带宽500k~1.5M左右，视视频服务器、直播视频清晰度而定。

4）常见流媒体服务器：

收费：

鼎鼎大名的adobe的fms

开源免费：

RED5

基于java采用mina、spring框架编写的red5. 部署繁琐。 1000M带宽支持600~700用户并发连接。代码 更新较慢

SRS（simple rtmp server）

国人编写的，速度很快，远超nginx-rtmp、远超red5。 部署简单。 单点支持9000+连接。代码 更新较快

Nginx-RTMP

nginx的rtmp插件。 部署适中。 单点支持3000+连接。代码 更新较快

fms没有用过，但是red5配置比较麻烦，srs可满足大部分需求并且性能不错。

5）关于ijkplayer：播放器这块，要注意不同的cpu架构对应的底层库也不相同。安卓设备大都相同。

6）流媒体类型分为顺序流媒体、实时流媒体

顺序流媒体常用于点播、实时流媒体常用于直播。

7）关于视频

常见的涉及视频的业务有：点播、直播、录屏

4、ijkplayer为播放器，可播放直播、点播。如果客户端需要主播能够直播推流，可使用github的yasea项目。进行推流到流媒体服务器。

发表评论取消回复

表情：

评论列表（有 0 条评论，158人围观）

还没有评论，来说两句吧...

相关阅读

相关杂谈

仔细想想这么多年定下的这么多的目标，却都没实现。没考上雅思，失败。 ![20201213211511516.png][] 准备研究网络安全技术，<加密与解密>都没看完。

旧城等待，/ 2022年12月28日 01:44/ 0 赞/ 212 阅读

相关 ThreadPoolExecutor杂谈

ThreadPoolExecutor杂谈日常的业务开发中，避免不了使用多线程，通常我们不会在代码直接去new一个线程(不可控且耗资源)，而是借助于线程池。而java原生

痛定思痛。/ 2022年11月09日 00:56/ 0 赞/ 255 阅读

相关直播入门体系杂谈

1、视频直播过程整个过程：采集、处理、编码、封装、推流、传输、播放器、延迟优化采集：从摄像头、屏幕、麦克风等采集流。摄像头或屏幕按帧数采集后形成原始得yuv格式得图片。

今天药忘吃喽~/ 2022年09月29日 11:57/ 0 赞/ 159 阅读

相关 Java杂谈....

模式：工厂模式单例模式工厂模式所有客户端依赖于工厂所有的功能由工厂来创建工厂模式每创建一个对象，会创建不同的对象(地址是不同的),所以说创建

快来打我*/ 2022年08月10日 13:56/ 0 赞/ 178 阅读

相关 JavaScript杂谈

[浏览器内的事件队列][Link 1] 众所周知JavaScript是基于单线程运行的，同时又是可以异步执行的，一般来说这种既是单线程又是异步的语言都是基于事件来驱动的，

谁践踏了优雅/ 2022年06月04日 06:24/ 0 赞/ 333 阅读

相关杂谈 GC

在Hotspot VM实现中，主要有两大类GC Partial GC：并不会堆整个GC堆进行收集 1. young gc：只收集 yo

深碍√TFBOYSˉ_/ 2022年05月30日 09:49/ 0 赞/ 198 阅读

相关字符串杂谈

一、String类有length()方法吗？数组有length()方法吗？ String类当然有length()方法了，看看String类的源码就知道了，这是这个方法

野性酷女/ 2022年05月24日 03:26/ 0 赞/ 201 阅读

相关杂谈

在别人博客里面发现了一个好现象——有人写作！作为一个六无（不抽烟，不喝酒，不泡吧，没房，没车，没对象）青年，我觉得自己已经找到组织了，然后看了一部分作品，有一个小小的结论

客官°小女子只卖身不卖艺/ 2022年05月15日 15:52/ 0 赞/ 226 阅读

相关 PostgreSQL体系化系列直播 — 周正中（德哥）

> PostgreSQL体系化系列直播共计15课时，目标群体：开发者、DBA、运维、架构师、企业去O决策者；从PG的历史、社区、架构、客户群、应用场景、生态角度了解PG，同时对

╰半夏微凉°/ 2022年02月14日 12:15/ 0 赞/ 217 阅读

相关建立设计良好的异常体系和处理规范：（1）开篇杂谈

异常处理作为Java重要特性之一，相信每一个Java学习者都会学习到的，也被反复强调重要性。但是对于初学者来说，对异常的理解一般都很泛泛，只有工作一段时间，经过代码的不断洗

川长思鸟来/ 2022年01月27日 01:55/ 0 赞/ 128 阅读