2017-06-12 123 views
0

我正在使用GStreamer 1.10.4为了在Java应用程序中执行原始视频流播放。GStreamer - 无法链接Decodebin元素(NOFORMAT)

这本我用我的Java应用程序外,视频播放的命令:它工作正常

gst-launch-1.0 -v udpsrc multicast-group=239.192.2.1 auto-multicast=true port="5000" caps = "application/x-rtp, media=(string)video, clock-rate=(int)90000, encoding-name=(string)RAW, sampling=(string)YCbCr-4:2:2, depth=(string)8, width=(string)1920, height=(string)1080, colorimetry=(string)BT709-2, payload=(int)96, a-framerate=(string)20" ! rtpvrawdepay ! decodebin ! videobox top=90 bottom=90 ! autovideosink sync=false 

现在,我需要实现这个管道在我的Java应用程序。所以我使用:

  • 的JNA-4.4.0.jar
  • 的GST1-Java的核心0.9-161201.jar GStreamer的Java包装
  • 的SimpleVideoComponent.java类,GStreamer中的一部分-java,为了嵌入视频宿在一个JFrame UI对象

我能够构建简单的管道中的Java(如videotestsrc!autovideosink)被正确地显示在我的UI。

但是,当我构建我的原始流式解码管道时,事情会变得更加困难,如上面的命令行中所述。

提醒:udpsrc! rtpvrawdepay!解码器! videobox! autovideosink

的问题是,我不能decodebin的SRC0焊盘连接到videobox的接收垫:我得到一个NOFORMAT错误

这里是我使用的管道建设相关的代码:

String[] gstreamerArgs = new String[1]; 
gstreamerArgs[0] = "-v"; 

Gst.init("Video", gstreamerArgs); 

mPipeline = new Pipeline("pipeline"); 

// Create elements ================================================================= 
elmt_udpsrc = ElementFactory.make("udpsrc", "udpsrc"); 
elmt_udpsrc.set("multicast-group", "239.192.2.1"); 
elmt_udpsrc.set("auto-multicast", true); 
elmt_udpsrc.set("port", 5000); 
Caps caps = new Caps("application/x-rtp, media=(string)video, clock-rate=(int)90000, encoding-name=(string)RAW, sampling=(string)YCbCr-4:2:2, depth=(string)8, width=(string)1920, height=(string)1080, colorimetry=(string)BT709-2, payload=(int)96, a-framerate=(string)20"); 
elmt_udpsrc.set("caps", caps); 
elmt_rtpvrawdepay = ElementFactory.make("rtpvrawdepay", "rtpvrawdepay"); 
elmt_decodebin = ElementFactory.make("decodebin", "decodebin"); // has a "Sometimes" pad 
elmt_decodebin.connect(new PAD_ADDED() { 

    @Override 
    public void padAdded(final Element element, final Pad pad) { 
    if (pad.isLinked()) { 
     return; 
    } 

    // Prints "Linking Decodebin pad : src_0 to sink" 
    System.out.println("VideoHandlerUI - Linking Decodebin pad : " + pad.getName() + " to " + elmt_autovideosink.getStaticPad("sink").getName()); 

    PadLinkReturn retour = pad.link(elmt_videobox.getStaticPad("sink")); // NOFORMAT error ! 

    inspect(mPipeline); 
    mPipeline.play(); 
    } 
}); 
elmt_videobox = ElementFactory.make("videobox", "videobox"); 
elmt_autovideosink = videoUIComponent.getElement(); 
elmt_autovideosink.set("sync", false); 

// Build Pipeline ================================================================= 
mPipeline.addMany(elmt_udpsrc, elmt_rtpvrawdepay, elmt_decodebin, elmt_videobox, elmt_autovideosink); 
bStatus1 = Element.linkMany(elmt_udpsrc, elmt_rtpvrawdepay, elmt_decodebin); // TRUE 
bStatus2 = Element.linkMany(elmt_videobox, elmt_autovideosink);     // TRUE 

这里是在padAdded回调的检查(管道)函数的输出,连接尝试后:

GstVideoComponent 
    Sink pad: sink connected to peer parent=BaseTransform: [videobox]/Pad: [src] 
videobox 
    Sink pad: sink DISCONNECTED 
    Src pad: src connected to peer parent=AppSink: [GstVideoComponent]/Pad: [sink] 
decodebin 
    Sink pad: sink connected to peer parent=Element: [rtpvrawdepay]/Pad: [src] 
    Sink pad: src_0 DISCONNECTED 
rtpvrawdepay 
    Sink pad: sink connected to peer parent=BaseSrc: [udpsrc]/Pad: [src] 
    Src pad: src connected to peer parent=DecodeBin: [decodebin]/GhostPad: [sink] 
udpsrc 
    Src pad: src connected to peer parent=Element: [rtpvrawdepay]/Pad: [sink] 

我正在编程这条管道的方式非常接近other examples I found on the web。我不明白为什么我得到这两个元素之间的NOFORMAT误差为同一流水线工作正常两种:

  • 在命令行模式下
  • 在Java中传递整个管道串GStreamer的时候绑定(但这不是一个合适的解决方案,因为我需要控制管道元素)

我也尝试将decodebin直接链接到videosink元素(不使用videobox),但我得到相同的结果。

任何关于我可能已经忘记在我的代码中的任何棘手的事情的想法?我怎么能更深入地看到元件垫会发生什么?

回答

0

我发现了这个问题。 appsink功能与解码器的功能不匹配。 我解决了这个问题,通过删除decodebin元素并将其替换为videoconvert元素来代替视频播放。