android客户端录制视频使用rtp协议发送到服务器端，服务器端接收并转发

子晓聊技术 2013-01-05 10:02:40

android客户端录制视频，经过h264硬编码后，使用rtp协议发送到服务器端。这一部分我有思路了，但服务器端接收并转发提供rtsp服务这块，我有点迷糊。我是用JMF接收rtp协议的数据，然后把得到的数据实时转发到rtsp服务器？还是其他怎么做。

...全文

402 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

1. sipdroid\src\org\zoolu 中是sip协议栈的实现 2. sipdroid\src\org\sipdroid 中是软电话的实现 3. sipdroid\src\com 中是stun相关的实现 4. sipdroid默认使用的编码格式为G711-A率。 5. 直接用ant debug的方法编译出的程序，只支持A率和U率两种音频编码格式，其他的都需要通过NDK的方法导入后，才能使用。 6. 如果对端终端支持视频的话（如linphone），菜单如下：保持，静音，转移发送视频挂断注意：只能发送视频，接收不到对端的视频。 7. 如果对端终端不支持视频的话(如yate)，菜单如下：保持，静音，转移挂断 8. sipdroid\src\org\sipdroid\sipua\ui 中的VideoCamera.java，有视频捕获，发送，接收的实现。 9. sipdroid\src\org\sipdroid\sipua\ui 中的CallScreen.java中的 VIDEO_MENU_ITEM 标识了 “发送视频” 10. Activity2.java 实现了跳转到InCallScreen.java 11. class InCallScreenextends CallScreen 12. sipdroid.java 中有“关于退出设置”菜单的实现。在AndroidManifest.xml中，表明了哪个Activity先启动。 13. 网络传来的音频数据通过AudioTrack类进行播放。 14. 本地的音频数据通过AudioRecord类进行录制。 15. 在本地播放数据包中的视频流，可以先提取位图，再显示。由于系统没有提供直接播放的相关方法。 16. 线程同步的方法 – synchronized 17. F:\sipdroid\res\drawable 中的图标可以更换 18. sipdroid\res\values-zh-rCN 修改【关于】显示框的内容 19 在Sipdroid开源项目像服务器进行数据的发送统一是由SipProvider的sendMessage,因为首先得知道是什么连接是UDP啊,还是TCP,然后就是message的封装 20. 是无连接的包投递服务,为什么是无连接呢,客户端和服务器压根就没有建立连接,服务器只是开放了端口来接受数据,有了就接受,没有就悬挂阻塞. 21双边的视频观看，走的还是数据报包，有数据报包的ip和端口就行了 22 但是Sipdroid可以直接的从MediaRecord里面已经生成好的视频数据中提取出H264/H263的数据，这些数据已经经过了相应的编码 23如何观看视频： mVideoFrame.setVideoURI(Uri.parse("rtsp://"+Receiver.engine(mContext).getRemoteAddr()+"/"+ Receiver.engine(mContext).getRemoteVideo()+"/sipdroid")); 24 通过内置的videoview来通过RTSP来进行播放，那么也就是说服务器会将传递的RTP的视频数据流封装成RTSP的流传递给手机的videoview来实现观看，同样也不需要解码库，所以Sipdroid开源代码里只有声音的编码库，没有视频的编码库. 25 最好的实现该软件的方法是，借助Android的MediaRecorder实时提取出H263/H264数据，然后经过RTP封装传给RTSP服务器，这种实现方式最理想，通过获取onPrewFrame来获取预览帧编码，无论怎么弄，不可避免的，延时，丢帧各种情况都会让你非常的棘手

暂时假象的2种场景，一种是android实时录制音频，通过编码rtp打包到服务器，服务器接收并转发，客户端能够实时播放。这个是单向音频传输的想法，与spydroid处理音频类似，但由于spydroid本身的音频在我小米1s上测试不成功，故自己考虑用其他方式来实现。为什么没有把spydroid源码分析系列写下去，主要原因是，spydroid源码本身还存在不少问题。比如h263编码在我机子androi

敬告：该系列的课程在抓紧录制更新中，敬请大家关注。敬告：该系列的课程涉及：FFmpeg,WebRTC,SRS,Nginx,Darwin,Live555,OpenCV等。包括：音视频、流媒体、直播、Android、视频监控28181、等。我将带领大家一起来学习：RTP及jrtplib发送H.264码流实战；RTP协议的报文结构；RTP封装H.264；开源库jrtplib的源码编译及环境搭建；开源库jrtplib的官方案例详解与剖析；开源库jrtplib发送H264码流并用VLC播放；具体内容包括：RTP及jrtplib发送H.264码流实战；RTP协议的报文结构；RTP封装H.264；开源库jrtplib的源码编译及环境搭建；开源库jrtplib的官方案例详解与剖析；开源库jrtplib发送H264码流并用VLC播放

RTSP+RTP协议剖析

RTP（Real-time Transport Protocol，实时传输协议）是一个用于实时音频和视频数据传输的网络协议。它在互联网上广泛应用于流媒体、VoIP（Voice over IP）等多媒体通信领域。RTP协议通过UDP/IP协议提供端到端的实时传输服务，支持实时多媒体数据的同步和恢复。时间戳：每个RTP数据包包含一个时间戳，用于表示数据包中的媒体数据的采样时刻。接收端可以使用这个时间戳来实现音视频同步、延时控制和抖动缓冲。序列号：RTP为每个发送的数据包分配一个递增的序列号。

Flash流媒体开发

2,275

社区成员

15,181

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章