libstreaming支持多端拉流调研

libstreaming本身并不支持多端拉流
需求场景:手机作为Server端推流,电脑端或其他设备作为拉流端
网上看到有人提出用组播来实现多端拉流

方案一:采用组播,让服务端推流到组播地址,然后组播内成员均可以拉流

Thanks Zhehua Chang, your solution works!

Bit slow but works. :) The only issue is the writing to the broadcast ip.

As another approach, I have tried to write the buffer into two sockets.
Managed to get the frames in two clients. But has some issues.

_Here I did the modifications in the AbstractPacketizer class
and H264Packetizer class. Created two *_RtpSocket and buffer instances. *

*Anyone tried this before? *

2016-01-28 15:41 GMT+05:30 Zhehua Chang [notifications@github.com](mailto:notifications@github.com):

> Here's my old code [https://github.com/Oo-Dev/OoDroid2](https://github.com/Oo-Dev/OoDroid2) for it, but
> honestly, the code is really ugly and I guess you may get confused...
> You must be aware that broadcast packets challenges the router and it
> could cause a crash in the network.
> 
> Anyway, if my solution really helps, it is as following :
> 
> 1.  Firstly, set your IP address to "239.1.1.1" or some other broadcast IPs.
> 2.  Then build up a session as usual.After that, you can get SDP as a
>     string by calling session.getSessionDescription().
>     The above two steps correspond to the normal way to build up a sessoin
>     [https://github.com/Oo-Dev/OoDroid2/blob/master/app/src/main/java/org/oo/oodroid2/OoDroidActivity.java#L100](https://github.com/Oo-Dev/OoDroid2/blob/master/app/src/main/java/org/oo/oodroid2/OoDroidActivity.java#L100)
>     .
> 3.  As far as I know, this SDP string can identify a session. You just
>     save it into a .sdp file and then open it with VLC.This player is
>     amazing because it parses the file and connect the RTSP server
>     (libstreaming) automatically. So, the problem is to send the .sdp file
>     to clients, and I build up another socket server for it.
> 
> In conclusion, the server builds up a session and start to send broadcast
> packets.Then you build up another server to dispatch SDP strings obtained
> from session object.
> The clients connect to the latter server firstly to fetch the SDP string
> and save it as a .sdp file.Then, open the .sdp file with VLC. All done~
> 
> Forgive me but I'm not a native English speaker.And anywhere unclear, feel
> free to reply.
> 
> —
> Reply to this email directly or view it on GitHub

提供的服务端OoDroid2项目地址:https://github.com/Oo-Dev/OoDroid2
客户端OoDroid-client

OoDroid2是基于libstreaming项目写的,就是新增了一个sdp分发类,将生成的session.sdp发送给客户端,然后客户端用vlc播放该sdp,从而实现拉流

准备工作:

1.OoDroid2项目中的SDPDistributor.java改动一下,去掉else

public void startServer() throws IOException {
        if(mRequestListener == null)
            mRequestListener = new RequestListener();
        if(!alive)//else去掉
            mRequestListener.start();
        //mDistributor.setSoTimeout(100);
    }

2.OoDroid-client项目中MainActivity中的DEFAULT_HOST改成服务端的ip地址

3.通过测试发现组播地址224.0.0.1可用,则
OoDroid2项目的OoDroidActivity类作如下修改:

destinationIP = sp.getString(getString(R.string.key_destination_IP), "224.0.0.1");
videoEncoding = sp.getString(getString(R.string.key_video_encoding), "H.264");

接下来,将两个项目分别运行到两个设备上,服务端点击play按钮开启推流,然后客户端点击连接按钮和服务端建立socket连接,接着通过socket来接收session.sdp,下一步用vlc打开该文件,从而实现拉流。

sdp文件也可以通过直接手动拷贝复制到客户端上,没必要通过socket传输过去

上面的demo调试通过,接下来开整我们的面板机项目
本来的项目是通过vlc输入url向服务端发起请求,服务端解析url然后启动相机直播,接着推流给vlc,服务端和vlc之间建立了会话连接。
但现在要推流到组播地址,如果还通过上述方式,vlc总是自动断开连接,因为服务端并没有推流到vlc,vlc需要通过打开sdp来拉流

所以我把vlc这块操作砍掉,直接把url放到代码内,解析后生成Session,然后延迟个三五秒在执行推流,不然总是预览黑屏。然后通过日志打印拿到sdp的内容,复制出来创建sdp文件,然后电脑端或其他设备就可以打开sdp来拉流了,基本就这样,但是拉流着实卡的很
MainActivity.java

 @Override
    protected void onResume() {
        super.onResume();
        //延时开启
        mHandler.postDelayed(new Runnable() {
            @Override
            public void run() {
                try {
                    checkPermissionAndStartServer();
                } catch (IOException e) {
                    e.printStackTrace();
                }
            }
        }, 5000);

    }
//尺寸写320-240才能正常预览
String url = "rtsp://10.4.161.10:1234?x264=1024-20-320-240&multicast=224.0.0.1";
        session = UriParser.parse(url);

//        session.setOrigin(client.getLocalAddress().getHostAddress());
//        session.setClientSocket(client);
        if (!session.isStreaming()) {
            session.configure();
            session.start();
            Toast.makeText(MainActivity.this, "Streaming has started", Toast.LENGTH_SHORT).show();
        }

方案二:通过单播方式,然后服务端推流到同一个目的地的两个端口方案解决

实现:通过建立两个H264Packetizer实例,必须两个ByteBufferInputStream来实现,因为第一个ByteNufferInputStream使用后就变更了,当第二次在使用时已经变化了,所以需要两个

//H264Stream_x264.java
public H264Stream_x264(int cameraId) {
        super(cameraId);
        mMimeType = "video/avc";
        mCameraImageFormat = ImageFormat.NV21;
        mVideoEncoder = MediaRecorder.VideoEncoder.H264;
        mPacketizer =new H264Packetizer();
        mPacketizer2=new H264Packetizer();
    }
public synchronized void start() throws IllegalStateException, IOException {
        if (!mStreaming) {
            configure();
            byte[] pps = Base64.decode(mConfig.getB64PPS(), Base64.NO_WRAP);
            byte[] sps = Base64.decode(mConfig.getB64SPS(), Base64.NO_WRAP);
            ((H264Packetizer) mPacketizer).setStreamParameters(pps, sps);
            ((H264Packetizer) mPacketizer2).setStreamParameters(pps, sps);
            super.start();
        }
    }
protected void encodeWithMediaCodec() throws RuntimeException, IOException {
      ...
      final ByteBufferInputStream bufferInputStream = new ByteBufferInputStream(this);
      final ByteBufferInputStream bufferInputStream2 = new ByteBufferInputStream(this);
      ...
       bufferInputStream.updateData(outputBuffer, output_pts[0], size);
       bufferInputStream2.updateData(outputBuffer, output_pts[0], size);

      ...
       mPacketizer.setInputStream(bufferInputStream);
       mPacketizer2.setInputStream(bufferInputStream2);
       mPacketizer.start();
       mPacketizer2.start();
}

MediaStream.java
public synchronized void configure() throws IllegalStateException, IOException {
        if (mStreaming) throw new IllegalStateException("Can't be called while streaming.");
        if (mPacketizer != null) {
            mPacketizer.setDestination(mDestination, mRtpPort, mRtcpPort);
            mPacketizer.getRtpSocket().setOutputStream(mOutputStream, mChannelIdentifier);
        }
        if (mPacketizer2 != null) {
            mPacketizer2.setDestination(mDestination, 5008, 5009);
            mPacketizer2.getRtpSocket().setOutputStream(mOutputStream, mChannelIdentifier);
        }
        mMode = mRequestedMode;
    }
//MainActivity.java
String url = "rtsp://10.4.161.10:1234?x264=1024-20-320-240&unicast=10.4.165.254";

最后创建两个sdp文件,分别拉取两个端口的流信息,

//test.sdp
v=0
o=- 0 0 IN IP4 10.4.161.10
s=Unnamed
i=N/A
c=IN IP4 10.4.165.254
t=0 0
a=recvonly
m=video 5006 RTP/AVP 96
a=rtpmap:96 H264/90000
a=fmtp:96 packetization-mode=1;profile-level-id=42c014;sprop-parameter-sets=Z0LAFNoFB+hAAAADAEAAAAojxQqo,aM48gA==;
a=control:trackID=1

//test2.sdp
v=0
o=- 0 0 IN IP4 10.4.161.10
s=Unnamed
i=N/A
c=IN IP4 10.4.165.254
t=0 0
a=recvonly
m=video 5008 RTP/AVP 96
a=rtpmap:96 H264/90000
a=fmtp:96 packetization-mode=1;profile-level-id=42c014;sprop-parameter-sets=Z0LAFNoFB+hAAAADAEAAAAojxQqo,aM48gA==;
a=control:trackID=1

用两个vlc分别打开sdp文件

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 204,293评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,604评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,958评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,729评论 1 277
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,719评论 5 366
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,630评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,000评论 3 397
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,665评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,909评论 1 299
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,646评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,726评论 1 330
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,400评论 4 321
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,986评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,959评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,197评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 44,996评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,481评论 2 342