GStreamer媒体框架的命令使用以及代码实现 gst-launch-1.0

gst-launch-1.0 playbin 命令播放MP4

gst-launch-1.0 playbin uri=file:///root/Desktop/test/bin/food.mp4

解析：

• playbin 是 GStreamer 中的超级方便的“万能播放器”，全名是 GstPlayBin，是一个“高阶封装元素”;
• 自动选择 demuxer（解复用器）、parser（解析器）、decoder(解码器);
• 给它个文件路径或 URL，它帮你搞定所有解复用、解码、同步、播放的事;
• 一般系统默认不占用DRM图层，具体看系统默认使用什么video sink;

代码实现

#include <stdio.h>
#include <gst/gst.h>

int main(int argc, char *argv[]) {
    GstElement *playbin;
    GstBus *bus;
    GstMessage *msg;

    // GStreamer初始化
    gst_init(&argc, &argv);

    playbin = gst_element_factory_make("playbin", "player");
    if (!playbin) {
        printf("Do not create playbin Element!\n");
        return -1;
    }

    // 设置 URI，注意 file:// 必须完整！
    g_object_set(playbin, "uri", "file:///root/Desktop/test/bin/food.mp4", NULL);

    // 启动播放
    gst_element_set_state(playbin, GST_STATE_PLAYING);

    // 等待播放完成或出错
    bus = gst_element_get_bus(playbin);
    msg = gst_bus_timed_pop_filtered(bus, GST_CLOCK_TIME_NONE,
             (GstMessageType)(GST_MESSAGE_ERROR | GST_MESSAGE_EOS));

    // 释放资源
    if (msg != NULL) {
        GError *err;
        gchar *debug_info;

        switch (GST_MESSAGE_TYPE(msg)) {
        case GST_MESSAGE_ERROR:
            gst_message_parse_error(msg, &err, &debug_info);
            g_printerr("播放出错: %s\n", err->message);
            g_error_free(err);
            g_free(debug_info);
            break;
        case GST_MESSAGE_EOS:
            g_print("播放结束\n");
            break;
        default:
            g_printerr("收到未知消息\n");
            break;
        }
        gst_message_unref(msg);
    }

    gst_object_unref(bus);
    gst_element_set_state(playbin, GST_STATE_NULL);
    gst_object_unref(playbin);

    return 0;
}

gst-launch-1.0 filesrc命令播放MP4

gst-launch-1.0 filesrc location=/path/to/your/video.mp4 ! qtdemux ! h264parse ! mppvideodec ! videoconvert ! autovideosink

解析：

• 这是一条手动构建的播放管线命令;
• filesrc（文件读取器），从本地文件系统中读取视频文件;
• qtdemux（QuickTime 解复用器），分析 .mp4 文件容器结构，把里面的音视频轨道分开;
• h264parse（H.264 解析器），对 H.264 数据帧进行 bitstream 解析;
• mppvideodec（瑞芯微 MPP 硬件解码器），使用 VPU 将压缩的 H.264 解码成原始 YUV 视频帧，也可以替换成avdec_h264软解码;
• videoconvert（颜色空间转换器），将硬解码输出的像素格式（如 NV12）转换为显示设备支持的格式（如 RGB）;
• autovideosink（自动选择合适的视频输出），也可以换成xvimagesink（X11渲染）、glimagesink（OpenGL渲染）、kmssink（DRM 硬件层渲染）;
• pipeline 是一个特殊的容器元素，用来组织和调度所有的 element（模块）执行音视频流处理任务。

代码实现

#include <stdio.h>
#include <gst/gst.h>

// 动态 pad 回调函数
static void on_pad_added(GstElement *element, GstPad *pad, gpointer data) {
    GstElement *parser = (GstElement *)data;
    GstPad *sinkpad = gst_element_get_static_pad(parser, "sink");

    if (gst_pad_is_linked(sinkpad)) {
        gst_object_unref(sinkpad);
        return;
    }

    // 检查是否是视频流
    GstCaps *caps = gst_pad_get_current_caps(pad);
    const gchar *name = gst_structure_get_name(gst_caps_get_structure(caps, 0));
    if (g_str_has_prefix(name, "video/")) {
        gst_pad_link(pad, sinkpad);
    }
    gst_caps_unref(caps);
    gst_object_unref(sinkpad);
}

int main(int argc, char *argv[]) {
    GstElement *pipeline, *source, *demux, *parser, *decoder, *conv, *sink;
    GstBus *bus;
    GstMessage *msg;

    gst_init(&argc, &argv);

    // 创建元素
    source = gst_element_factory_make("filesrc", "source");
    demux = gst_element_factory_make("qtdemux", "demux");
    parser = gst_element_factory_make("h264parse", "parser");
    decoder = gst_element_factory_make("mppvideodec", "decoder"); // 可改为 "v4l2h264dec"
    conv = gst_element_factory_make("videoconvert", "conv");
    sink = gst_element_factory_make("autovideosink", "sink");

    // 创建 pipeline
    pipeline = gst_pipeline_new("video-player");

    if (!pipeline || !source || !parser || !decoder || !conv || !sink) {
        g_printerr("元素创建失败，请确保已安装相应插件！\n");
        return -1;
    }

    // 设置文件路径
    g_object_set(G_OBJECT(source), "location", "/root/Desktop/test/bin/food.mp4", NULL);

    // 构建 pipeline
    gst_bin_add_many(GST_BIN(pipeline), source, demux, parser, decoder, conv, sink, NULL);

    // 静态连接
    if (!gst_element_link(source, demux)) {
        g_printerr("source 和 demux 连接失败\n");
        return -1;
    }

    // 动态连接
    // qtdemux 是个“动态 Pad”元素，它在运行时才创建输出 Pad，无法在代码初始化阶段完成连接。
    g_signal_connect(demux, "pad-added", G_CALLBACK(on_pad_added), parser);

    // 后续静态连接
    if (!gst_element_link_many(parser, decoder, conv, sink, NULL)) {
        g_printerr("parser -> decoder -> convert -> sink 连接失败\n");
        return -1;
    }

    // 启动 pipeline
    gst_element_set_state(pipeline, GST_STATE_PLAYING);

    // 等待播放结束或错误
    bus = gst_element_get_bus(pipeline);
    msg = gst_bus_timed_pop_filtered(bus, GST_CLOCK_TIME_NONE,
             (GstMessageType)(GST_MESSAGE_ERROR | GST_MESSAGE_EOS));

    // 清理
    if (msg != NULL) {
        GError *err;
        gchar *debug_info;

        switch (GST_MESSAGE_TYPE(msg)) {
        case GST_MESSAGE_ERROR:
            gst_message_parse_error(msg, &err, &debug_info);
            g_printerr("播放出错: %s\n", err->message);
            g_error_free(err);
            g_free(debug_info);
            break;
        case GST_MESSAGE_EOS:
            g_print("播放结束\n");
            break;
        default:
            g_printerr("收到未知消息\n");
            break;
        }
        gst_message_unref(msg);
    }

    gst_object_unref(bus);
    gst_element_set_state(pipeline, GST_STATE_NULL);
    gst_object_unref(pipeline);

    return 0;
}