流媒体开发学习路线

2015-11-14 03:16:21 1.8k 阅读 AI 写同款 · GEO 优化AI 选题数据监测一键分发 ›

“深入浅出”系列之音视频开发：（3）音视频开发的学习路线和必备知识参与JVET/VVC的下一代视频编码标准设计和算法研究；参与视频编码（包括但不限于VVC/AV1/AVS3）优化：通过信号处理和机器学习的快速编码决策、数据结构、并行框架设计，优化编码速度，同时在有竞争力的视频编码内核基础上，探索基于语义的内容自适应编码优化；参与超低带宽的视频压缩：针对超低带宽场景下，探索针对信号处理和语义的信息论极限；参与视频编码与处理联合优化：在标准编码框架的基础上，借助AI领域的新技术成果来研究视频信号的表征、编码与处理，将视频前后处理与编码联合优化，提升端到端压缩效果；阅读详情

想学流媒体技术开发，看ffmpeg，sdl，live555这样对吗？

...全文

5G时代很火的音视频高级开发学习路线及知识点总结我们先假设某人在音视频方面是零基础，也没学过任何数字信号处理相关知识，数学基础基本是高中水准，但是熟悉 C/C++ 开发，至少熟悉某一个平台下的编译调试IDE。着重研究两个开源项目 ffmpeg 和 webRTC，主要看ffmpeg的视频部分和webRTC的音频部分。首先，从视频解码入手，这个最简单，调用 ffmpeg视频解码的基本代码只有100行左右，视频解码只要搞懂h.264就好了，80%+场景都是这个编码格式了，了解基本的 H.264 的 sps pps NAL等文件格式概念，了解YUV图像格式原阅读详情

rophie

多媒体/流媒体开发 2,554 成员 20,277 内容

+ 关注 + 加入社区

切换为时间正序

twoconk 2016-02-02

打赏
举报

引用 4 楼 xmcy001122 的回复:

http://bbs.csdn.net/topics/391116127 引用：如果不做编解码，不做codec比较专业的方向发展，我建议向解决方案构建方向发展，至少知道目前各种音视频应用架构如何，其中涉及各个开源项目如ffmpeg，darwin，live555，vlc，mpc player，gstreamer，当然这项项目中，最重要的我认为是ffmpeg，其次，学习各种流媒体协议rtmp，hls，dash，rtp，rtsp，等，其中以hls比较多，如果视频监控可能rtp，rtsp比较多，再就是各大视频网站都用到的那些技术如nginx，视频服务器开发。其次，如果能熟悉几种常用的媒体封装格式比较好，像mp4，avi，mkv，音频至少知道aac的格式。当然每种格式需要时查文档也可以。还有需要了解H264的一些概念，NAL，SPS PPS，以及profile等。rtp封装H264.如果做直播系统，要非常熟悉mpeg2ts的相关概念，其中ts数据格式是必须知道的。PMT PAT这些概念也要知道。还有一点。需要知道音视频同步原理，PTS ，DTS这些概念。当然图形图像基础这些都需要了解，推荐看一下多媒体技术基础(第3版)(清华大学计算机系列教材) 林福宗著。了解color space. 最后，如果能理解编解码压缩原理，知道DTC变换，这些编解码原理也是非常有好处的。推荐知名博客雷霄骅的博客，http://blog.csdn.net/leixiaohua1020?viewmode=list

确认给的很专业，这块水很深，所以最好是逐个击破

Go和分布式IM 2016-01-17

打赏
举报

http://bbs.csdn.net/topics/391116127 引用：如果不做编解码，不做codec比较专业的方向发展，我建议向解决方案构建方向发展，至少知道目前各种音视频应用架构如何，其中涉及各个开源项目如ffmpeg，darwin，live555，vlc，mpc player，gstreamer，当然这项项目中，最重要的我认为是ffmpeg，其次，学习各种流媒体协议rtmp，hls，dash，rtp，rtsp，等，其中以hls比较多，如果视频监控可能rtp，rtsp比较多，再就是各大视频网站都用到的那些技术如nginx，视频服务器开发。其次，如果能熟悉几种常用的媒体封装格式比较好，像mp4，avi，mkv，音频至少知道aac的格式。当然每种格式需要时查文档也可以。还有需要了解H264的一些概念，NAL，SPS PPS，以及profile等。rtp封装H264.如果做直播系统，要非常熟悉mpeg2ts的相关概念，其中ts数据格式是必须知道的。PMT PAT这些概念也要知道。还有一点。需要知道音视频同步原理，PTS ，DTS这些概念。当然图形图像基础这些都需要了解，推荐看一下多媒体技术基础(第3版)(清华大学计算机系列教材) 林福宗著。了解color space. 最后，如果能理解编解码压缩原理，知道DTC变换，这些编解码原理也是非常有好处的。推荐知名博客雷霄骅的博客，http://blog.csdn.net/leixiaohua1020?viewmode=list

rophie 2015-11-14

打赏
举报

没注意发错了，已经移动了，求过来人指点

望断雁南飞 2015-11-14

打赏
举报

不清楚，帮顶

yshuise 2015-11-14

打赏
举报

应该发到技术区附近吧，你这样他们看不见

流媒体开发学习路线

相关推荐