社区
VoIP
帖子详情
Video用TCP传,audio用RTP传,如何使音视频同步?
sfc0907
2017-08-08 09:44:14
现在有一个需求,视频数据需要使用TCP进行传输,音频数据需要用RTP传,那么如何使音视频同步而不影响正常体验效果呢?
...全文
672
回复
打赏
收藏
Video用TCP传,audio用RTP传,如何使音视频同步?
现在有一个需求,视频数据需要使用TCP进行传输,音频数据需要用RTP传,那么如何使音视频同步而不影响正常体验效果呢?
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
EasyPlayer-RTSP-Win:An elegant, simple, fast windows RTSP Player.EasyPlayer support RTSP(
RTP
over
TCP
UDP),
video
support H.264H.265,
audio
support G.711G.726AAC!EasyPlayer RTSP是一款精炼、高效、稳定的RTSP流媒体播放器,视频支持H.264H.265,音频支持G.711G.726AAC,支持
RTP
over UDP
TCP
两种模式!
EasyPlayer-RTSP-Win EasyPlayer RTSP Windows 播放器是由开发和维护的一个完善的RTSP流媒体播放器项目,视频编码支持H.264,H.265,MPEG4,MJPEG,音频支持G711A,G711U,G726,AAC,支持RTSP over
TCP
/UDP协议,支持软/硬解码,是一套极佳的安防流媒体平台播放组件!EasyPlayer Windows版本经过了很多年的发展和迭代,在很多商业项目中使用,已经非常稳定、完整,功能包括:直播、录像、抓图,应该说是目前市面上功能性、稳定性和完整性最强的一款RTSP播放器! 国内大部分的RTSP/
RTP
协议的播放器都是基于ffmpeg做的(包括协议层和解码层),但是在实际的RTSP/
RTP
项目实战过程中,由于各个厂家的自定义字段的不同,由诸多需要特殊兼容的地方,而这正是ffmpeg类播放器无法做到的,EasyPla
SipDroid客户端源码
1. sipdroid\src\org\zoolu 中是sip协议栈的实现 2. sipdroid\src\org\sipdroid 中是软电话的实现 3. sipdroid\src\com 中是stun相关的实现 4. sipdroid默认使用的编码格式为G711-A率。 5. 直接用ant debug的方法编译出的程序,只支持A率和U率两种音频编码格式,其他的都需要通过NDK的方法导入后,才能使用。 6. 如果对端终端支持视频的话(如linphone),菜单如下: 保持,静音, 转移 发送视频 挂断 注意:只能发送视频,接收不到对端的视频。 7. 如果对端终端不支持视频的话(如yate),菜单如下: 保持,静音, 转移 挂断 8. sipdroid\src\org\sipdroid\sipua\ui 中的
Video
Camera.java,有视频捕获,发送,接收的实现。 9. sipdroid\src\org\sipdroid\sipua\ui 中的CallScreen.java中的
VIDEO
_MENU_ITEM 标识了 “发送视频” 10. Activity2.java 实现了跳转到InCallScreen.java 11. class InCallScreenextends CallScreen 12. sipdroid.java 中有“关于 退出 设置”菜单的实现。 在AndroidManifest.xml中, 表明了哪个Activity先启动。 13. 网络
传
来的音频数据通过
Audio
Track类进行播放。 14. 本地的音频数据通过
Audio
Record类进行录制。 15. 在本地播放数据包中的视频流,可以先提取位图,再显示。由于系统没有提供直接播放的相关方法。 16. 线程
同步
的方法 – synchronized 17. F:\sipdroid\res\drawable 中的图标可以更换 18. sipdroid\res\values-zh-rCN 修改【关于】显示框的内容 19 在Sipdroid开源项目像服务器进行数据的发送统一是由SipProvider的sendMessage,因为首先得知道是什么连接 是UDP啊,还是
TCP
,然后就是message的封装 20. 是无连接的包投递服务,为什么是无连接呢,客户端和服务器压根就没有建立连接,服务器只是开放了端口来接受数据,有了就接受,没有就悬挂阻塞. 21双边的视频观看,走的还是数据报包,有数据报包的ip和端口就行了 22 但是Sipdroid可以直接的从MediaRecord里面已经生成好的视频数据中提取出H264/H263的数据,这些数据已经经过了相应的编码 23如何观看视频: m
Video
Frame.set
Video
URI(Uri.parse("rtsp://"+Receiver.engine(mContext).getRemoteAddr()+"/"+ Receiver.engine(mContext).getRemote
Video
()+"/sipdroid")); 24 通过内置的
video
view来通过RTSP来进行播放,那么也就是说服务器会将
传
递的
RTP
的视频数据流封装成RTSP的流
传
递给手机的
video
view来实现观看,同样也不需要解码库, 所以Sipdroid开源代码里只有声音的编码库,没有视频的编码库. 25 最好的实现该软件的方法是,借助Android的MediaRecorder实时提取出H263/H264数据,然后经过
RTP
封装
传
给RTSP服务器,这种实现方式最理想,通过获取onPrewFrame来获取预览帧编码,无论怎么弄,不可避免的,延时,丢帧各种情况都会让你非常的棘手
rtp
协议实战视频教程
实战部分带大家一起实现
RTP
传
输H264、H265、AAC,通过学习这门课程,大家可以熟练掌握
RTP
流媒体协议,能独立完成
RTP
相关应用开发和
RTP
码流的分析。 这门课程也会和大家简要介绍H264、H265、AAC的相关基础,大家不用...
Tools:工具:流媒体
音视频
开发过程中用到的各种开发辅助工具
流媒体开发工具集 各种流媒体开发免费工具集合,帮助开发者更好地进行问题的分析和解决; EasyPlayer播放器 EasyPlayer-RTSP播放器 EasyPlayer RTSP专用播放器是一款精炼、高效、稳定的RTSP流媒体播放器,视频支持H.264/H.265,音频支持G.711/G.726/AAC,支持
RTP
over UDP/
TCP
模式,支持组播播放! An elegant, simple, fast Windows/Android/iOS RTSP Player.EasyPlayer support RTSP(
RTP
over
TCP
/UDP),support multicast play,
video
support H.264/H.265,
audio
support G.711/G.726/AAC! Windows版下载: Android版本下载: iOS版本下载: Eas
rtsp-simple-server:即用型RTSPRTMP服务器和代理,允许读取,发布和代理视频和音频流
rtsp-简单服务器 rtsp-simple-server是一个简单,易于使用且零依赖的RTSP / RTMP服务器和代理,该软件允许用户发布,读取和代理实时视频和音频流。 RTSP是一个规范,描述了如何在服务器的帮助下执行这些操作,发布者和阅读者都将其与之联系,并将发布者的流中继到阅读器。 特征: 使用RTSP(UDP或
TCP
模式)或RTMP发布实时流 使用RTSP读取实时流 始终或按需从其他RTSP / RTMP服务器或摄像机拉出并提供流(RTSP代理) 每个流可以具有多个视频和音频轨道,并且可以使用任何编解码器进行编码(包括H264,H265,VP8,VP9,MPEG2,MP3,
VoIP
1,394
社区成员
567
社区内容
发帖
与我相关
我的任务
VoIP
VOIP相关技术探讨专区
复制链接
扫一扫
分享
社区描述
VOIP相关技术探讨专区
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章