互联网直播是目前最火的技术之一,涵盖了很多方面的知识(网络,CDN,GPU,算法,图像处理),以下我介绍互联网直播的大体框架和关键技术点:
一.前端视频流协议
前端流主要包括UDP、RTMP、RTSP、RTP、HTTP-HLS。
1.目前移动端常用的HLS协议,延时比较大。
2.udp内网稳定性效果最好传输效率快,但容易丢包
3.RTMP延时还行,是flash推荐的,但是比较老,要装插件。但是用得最广泛的。
4.RTSP延时低,监控摄像头目前都用(大华海康)。
二.ffmpeg视频处理
ffmpeg是做视频转码协议的,其功能强大,各种协议转换,各种格式转换。(开源免费)
HR公司主要基于这个研究开发的,当然也有基于北美论文算法开发出来的。如H2.64、H265最新封装研发出来的。业界为H265为研究方向。
我相信4K已经慢慢进入家庭当中了,未来不是梦。
三.SRS推流服务
SRS是个开源免费的框架,当然国内厂用的肯定是收费推流服务(当前是国外的)。
功能上不多说了,可以推出各种封装协议流。
四.CDN网络加速
这个是XX公司最关键的一环,把打出去的流分发到各个CDN节点上,手机、电脑、IPAD可以通过流收看视频直播了。