GStreamer# 等效于视频叠加功能

本文关键字:视频 叠加 功能 于视频 GStreamer# | 更新日期: 2023-09-27 18:35:17

我有一个用于渲染视频流的 C#/Mono 应用程序,直到最近,我一直在使用我自己内部开发的 InterOp 绑定。

我现在正在从这种方法转向使用 GStreamer# 的方法,因为这可能要少得多的维护工作,至少对我来说是这样:-)

由于我需要将独立的视频流绑定到特定的DrawableArea小部件,因此我的方法捕获了GStreamer消息,然后使用函数gst_is_video_overlay_prepare_window_handle_message(msg)a)对其进行检查。

如果返回 true,我则响应调用 gst_video_overlay_set_window_handle(xid) ,其中xid是之前使用 gdk_x11_window_get_xid() 获得的小部件的句柄。

我的问题是这样的:搜索 GStreamer# 代码,我找不到用于执行绑定的等效函数,所以我想知道这是如何完成的。

有人有任何建议或信息可以提供吗?

这两个函数的源代码是gst-plugins-base-1.4.4/gst-libs/gst/video/videooverlay.c所以,在紧要关头,我可以假化我自己的函数来完成这项工作(或者只是坚持我们的绑定一点),但在我看来,这将包含在 GStreamer# 中,因为渲染到特定小部件似乎是一个非常方便的工具。


(a) 那些 GStreamer wag。他们必须用所有不必要的打字替换键盘:-)

GStreamer# 等效于视频叠加功能

事实证明,这些函数可用的,但是在基线GStreamer内容的单独库和子命名空间中。

Xid 的获取仍然是通过自制的互操作绑定完成的,即:

[DllImport("libgdk-3", EntryPoint = "gdk_x11_window_get_xid")]
private extern static IntPtr GdkX11WindowGetXid(IntPtr window);

您还有 playbin、bus 和 X11 窗口 ID 的实例级变量:

private IntPtr windowXid;
private Gst.Element playBin;
private Gst.Bus bus;

然后,在实例化类时,捕获Realized信号并确保 GStreamer 总线上的所有消息都转到回调函数:

this.Realized += OnRealized;
playBin = Gst.ElementFactory.Make('playbin', 'playbin');
bus = playBin.Bus;
bus.AddSignalWatch();
bus.Message += MessageCallback;

在该实现函数中,您保存 Xid 以供以后使用(在实例变量中):

void OnRealized(object o, EventArgs args) {
    windowXid = GdkX11WindowGetXid(this.Window.Handle);
}

并且,当 GStreamer 询问时,提供此句柄以响应请求:

private void MessageCallback(object o, MessageArgs args) {
    Gst.Message msg = args.Message;
    if (! Gst.Video.Global.IsVideoOverlayPrepareWindowHandleMessage(msg))
        return;
    Gst.Element src = msg.Src as Gst.Element;
    if (src == null)
        return;
    Gst.Element overlay = null;
    if (src is Gst.Bin)
        overlay = ((Gst.Bin)src).GetByInterface
    Gst.Video.VideoOverlayAdapter = new Gst.Video.VideoOverlayAdapter(overlay.Handle);
    adapter.WindowHandle = windowXid;
}

请注意,我已经完全限定了所有 GStreamer 对象,因此在哪里可以找到它们绝对清楚。如果没有它们,代码可能会干净得多(并且对变量使用 var),但我想确保所有信息都可用。