音视频基础知识:流媒体核心技术梳理

​问题背景:

这个公众号已经发了十几篇文章,阅读量和订阅数也在稳定增长。为了后面大家交流更顺畅,大概知道每篇文章在音视频技术体系的位置。利用周末画了个脑图,梳理了下音视频核心技术体系,当然这张图不会包含所有流媒体的技术,如果有遗漏,你可以私信我。我会在后面补充和丰富起来,让进门的小白能找到自己的位置,赠人玫瑰,手留余香。

如果你对本篇文章感兴趣或者实际你们遇到了什么开发问题,抑或这篇文章跟你的工作有关系想了解具体实现细节,加个人微信:

了解更多可以关注本人公众号:智媒黑板报

下面用两张图来构建音视频技术人交流的行话,让你快速找到在整个流媒体技术体系所处的位置。

音视频核心技术体系:

音视频数据一定是从采集的原始数据,经过前处理,再经过编码形成压缩后的数据。压缩后的数据为了发送出去,所以需要把压缩后的音视频裸数据打包在一个容器,这就是封装要做的事情。封装后的数据通过一定的传输协议发送到客户端,不同的传输协议有不同的业务场景和适合自己的音视频封装格式。播放客户端要做的事情刚好是逆过程,先判断封装格式 ,再从容器中将音视频数据分离提取出来,最后进行解码和渲染到屏幕上。

研究音视频整个系统是一件有门槛的事情,刚进门时需要找准自己的位置,把自己这块的输入和输出搞清楚,再逐渐横向扩展。WebRTC初学者就发现里面的内容不是 一时半会能研究透彻的,这是因为WebRTC就是一个流媒体系统的解决方案,而不是为了解决音视频一个特定问题。这个公众号就是先学习WebRTC下面的边边角角,最后再上升到WebRTC代码内部进行系统性学习,希望大家耐住性子慢慢来,一点点的理解RFC文档,这样我相信能走得更远点,让大家知其然还知其所以然。

音视频系统架构图:

重要事情说三遍,解决问题时,一定要明白自己问题在这个图的位置。这样抓住输入和输出,就能达到事半功倍的效果。

今天就说这么多,祝您心情愉快,工作顺利!

如果有疑问,你可以在公众号后台发消息咨询我。

往期文章回顾:

音视频封装:FLV格式详解和打包H264、AAC方案(下)

音视频封装:FLV格式详解和打包H264、AAC方案(上)

音视频常见问题分析和解决:延时和抖动

音视频封装格式:AAC音频基础和ADTS打包方案详解

音视频封装:MPTG2-TS 媒体封装实例解析和说明

音视频基础知识-时间戳的理解

个人转载内容至朋友圈和群聊天,无需特别申请版权许可。

引用转载该订阅号文章,注明文章来源即可。

记得右下角点“在看”,还可以关注该订阅号,防止遗漏推送哦

©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容

  • 一直想把视音频编解码技术做一个简单的总结,可是苦于时间不充裕,一直没能完成。今天有着很大的空闲,终于可以总结...
    视频音频小白阅读 1,696评论 1 13
  • 封装好了的函数load:作用:异步加载页头和页脚;创建header.php与footer.php公共部分分别放入p...
    Cherish丶任阅读 469评论 0 0
  • 通知机制想必大家都很熟悉,平常的开发中或多或少的应该都用过。它是 Cocoa 中一个非常重要的机制,能把一个事件发...
    小小土豆dev阅读 2,612评论 0 4
  • 和你一起,不负终老 凌晨4点我被卫生间传出来的水声吵醒, 你都还是这么爱美。 就要到我们结婚10周年的纪念日了, ...
    二馨呀阅读 173评论 0 0
  • 抬起平静的手 止不住乱发的誓 燕过檐留不下背影 雨整夜拢不起相思 昨日又复昨日醉 明日岂可待人归? 转灯漏光的角落...
    沉默的话痨阅读 239评论 2 5