当下，有技术实力和流量优势的互联网从业者都不愿错过直播这个风口，如何快速搭建一个直播系统成了大家关心的问题，我想和大家分享下我的经验。我从事于一家直播产品开发商，我们的产品为了快速遇上市场，使用了云处事供给商的直播SDK。
从业者都知道，一个完整直播产品应该包罗以下环节：推流端（收罗、前措置惩罚惩罚、编码、推流）、处事端措置惩罚惩罚（转码、录制、截图、鉴黄）、播放器（拉流、解码、衬着）、互动系统（聊天室、礼物系统、赞）。 下面我就一一讲述下直播SDK在各个环节所做的事情。
一、移动直播推流端需要做哪些事情？
直播推流端即主播端，主要通过手机摄像头收罗视频数据和麦克风收罗音频数据，颠末一系列前措置惩罚惩罚、编码、封装，然后推流到CDN进行分发。

1、收罗
移动直播SDK通过手机摄像头和麦克风直接收罗音视频数据。此中，视频采样数据一般给与RGB或YUV格局、音频采样数据一般给与PCM格局。收罗到的原始音视频的体积长短常大的，需要颠末压缩技术措置惩罚惩罚来提高传输效率。
2、前措置惩罚惩罚
在这个环节主要措置惩罚惩罚美颜、水印、模糊等效果。美颜成果几乎是直播的标配成果。我们调研中发明太多case是因为没有美颜成果被丢弃使用的。此外国家明确提出了，所有直播都必需打有水印并回放留存15天以上。
美颜实际上是通过算法去识别图像中的皮肤部分，对皮肤区域进行色值调解。通 过颜色比拟找到皮肤区域，可以进行色值调解、添加白色图层或调解透明度等来到达美白效果。在美颜措置惩罚惩罚方面，最著名的GPUImage供给了丰富的效果，同 时可以撑持iOS和Android，撑持本身写算法实现本身最抱负的效果。GPUImage内置了120多种常见滤镜效果，添加滤镜只需要简单挪用几行代 码就可以了。
3、编码
为 了便于手机视频的推流、拉流以及存储，凡是给与视频编码压缩技术来减少视频的体积，此刻对照常用的视频编码是H.264。在音频方面，对照常用的是AAC 编码格局，其它如MP3、WMA也是可选方案。视频颠末编码压缩大大提高了视频的存储和传输效率，固然，颠末压缩后的视频在播放时必需进行解码。
相 较于之前的H.264，2012年诞生的H.265编解码标准有了相当大的改进，做到了仅需要本来一半带宽即可播放不异质量的视频，低于1.5Mbps的 网络也能传输1080p的高清视频。像阿里云、金山云都在推本身的H.265编解码技术，跟着直播的快速成长和对带宽的依赖，H.265编解码技术已有全 面代替H.264的趋势。
H264和H265个模块技术差异：

此外，硬件编码已经成为移动直播的首选方案，软编码措置惩罚惩罚在720p以上的视频颓势非常明显。在iOS平台上硬件编码的兼容性对照好，可以直接给与，但在Android平台上，Media Codec编码器针对差此外芯片平台表示差异还长短常大的，要完全实现全平台兼容的本钱还长短常高的。
4、推流
要想用于推流还必需把音视频数据使用传输协议进行封装，酿成流数据。常 用的传布输协议有RTSP、RTMP、HLS等，使用RTMP传输的延时凡是在1–3秒，对付移动直播这种实时性要求非常高的场景，RTMP也成为移动直 播中最常用的传布输协议。最后通过必然的Qos算法将音视频流数据推送到网络断，通过CDN进行分发。在直播场景中，网络不不变长短每每见的，这时就需要 Qos来保证网络不稳情况下的用户不雅观看直播的体验，凡是是通过主播端和播放端设置缓存，让码率均匀。此外，针对实时变革的网络状况，动态码率和帧率也是最 常用的计谋。
固然，在网络传输方面全部本身来做根基不现 实，找供给推流处事的CDN处事商供给解决方案是最好的选择。据了解，阿里云是国内独一能自研CDN缓存处事器的厂商，性能非常有保障。固然，大大都直播 平台城市同时接入多个视频云处事供给商，这样可以做拉流线路互备，对推流后视频集群再进行优化也可提高直播的流畅性和不变性。
二、处事端措置惩罚惩罚需要做哪些事情？
要想适配各终端和平台，处事端还需要对流进行转码，如撑持RTMP、HLS、FLV等格局拉流，撑持一路转多路适配差别网络和辨别率的终端设备。
1、截图、录制、水印
像 阿里云等云处事商都供给了实时转码技术，将用户推流码率较高（好比720P）实时转化成较低清晰度（好比360P）的流以适应播放真个需求。如果要本身搭 建实时转码系统，这个本钱是极高的，一台8核设备只能实时转10路流，如果一个正常的直播平台有1000路流，就需要100台设备，加上后期的运维本钱， 一般公司就吃不消了。
2、鉴黄
2016 年4月14日，文化部查出了斗鱼、虎牙、YY、熊猫TV、六间房、9158等涉嫌供给含宣扬淫秽、暴力、教唆犯法的网络直播平台，被列入查处名单。当局介 入管制有利于直播行业打造健康的生态，进入良性成长。这也意味着为了安适直播产品鉴黄成了必须环节，使用技术手段去鉴黄是移动直播平台一定给与的方案。
市面上供给鉴黄处事的方案主要有两种：
第一种是对视频进行截图，然后对图片进行鉴黄，返回鉴黄功效和分值。范例的企业有阿里（绿网）、图谱科技，他们目前都撑持直接传入视频，颠末处事端分析返回功效。凡是由业务系统接入鉴黄处事，按照鉴黄功效对直播流进行控制，如堵截直播流、封禁账号等。
第二种是和CDN结合，直接对直播流进行分析，识别功效分为色情、疑似色情、性感和正常，业务系统按照识别功效直接控制直播流。范例的企业是Viscovery，这套方案的长处是实时性保证对照好，错误谬误是必需部署到CDN或本身的机房，使用成真相对高一些。