经过一段时间的学习,终于可以完成一些基本的应用了。
通过前面篇章的学习以及学习Gstreamer官网的例程后实现了从Ubuntu设备获取camera 的数据流并推送的功能。
介绍
我写的这个代码实现的功能是基于Ubuntu 22.04设备,获取他的camera 的视屏流并通过GST RTSP SERVER推送。可以使用在同一个局域网下的设备通过VLC等RTSP播放器或者gst命令行工具获取视频流。
代码
/*
fuction: 用于从本机的camera 获取数据流并通过gst rtsp server 推送
usage: eg: ./main /dev/video0 /dev/video1 ...... 可以推送多个流
其他选项使用 ./main -help查看
*/
#include <stdio.h>
#include <string.h>
#include <stdlib.h>
#include <gst/gst.h>
#include <gst/rtsp-server/rtsp-server.h>
// default set rtsp://127.0.0.1:8900/live*
#define DEFAULT_RTSP_ADDRESS "127.0.0.1"
#define DEFAULT_RTSP_PORT "8900"
#define DEFAULT_RTSP_POINT "/live"
static gboolean
timeout (GstRTSPServer * server)
{
GstRTSPSessionPool *pool;
pool = gst_rtsp_server_get_session_pool (server);
gst_rtsp_session_pool_cleanup (pool);
g_object_unref (pool);
return TRUE;
}
gint
main (gint argc, gchar *argv[])
{
GMainLoop *loop = NULL;
GstRTSPServer *server = NULL;
GstRTSPMountPoints *mounts = NULL;
GstRTSPMediaFactory *factory = NULL;
GOptionContext *ctx = NULL;
gchar *str = NULL;
gchar *address = DEFAULT_RTSP_ADDRESS;
gchar *port = DEFAULT_RTSP_PORT;
//gchar *mpoint0 = DEFAULT_RTSP_POINT_ONE;
//gchar *mpoint1 = DEFAULT_RTSP_POINT_TWO;
gboolean record = FALSE;
char temp_mpoint[64];
int stream_cnt = 0;
// Input parameter
GOptionEntry entries[] = {
{ "address", 'a', 0, G_OPTION_ARG_STRING, &address,
"Server IP address (default: " DEFAULT_RTSP_ADDRESS ")",
"ADDRESS"
},
{ "port", 'p', 0, G_OPTION_ARG_STRING, &port,
"Port on which to stream the payload (default: " DEFAULT_RTSP_PORT ")",
"PORT"
},
{ "record", 'r', 0, G_OPTION_ARG_NONE, &record,
"Use RECORD transport mode instead of PLAY", NULL
},
{ NULL }
};
g_set_prgname ("gst-rtsp-server-multistreamer-test");
// 1. Parse command line entries.
if ((ctx = g_option_context_new ("DESCRIPTION")) != NULL) {
gboolean success = FALSE;
GError *error = NULL;
g_option_context_add_main_entries (ctx, entries, NULL);
g_option_context_add_group (ctx, gst_init_get_option_group ());
success = g_option_context_parse (ctx, &argc, &argv, &error);
g_option_context_free (ctx);
if (!success && (error != NULL)) {
g_printerr ("ERROR: Failed to parse command line options: %s!\n",
GST_STR_NULL (error->message));
g_clear_error (&error);
return -EFAULT;
} else if (!success && (NULL == error)) {
g_printerr ("ERROR: Initializing: Unknown error!\n");
return -EFAULT;
}
} else {
g_printerr ("ERROR: Failed to create options context!\n");
return -EFAULT;
}
/*
argc与argv经过处理后参数部分会被去除
*/
stream_cnt = argc - 1; //number of stream
g_print("stream have %d\n", stream_cnt);
// 2. Initialize GST library.
gst_init (&argc, &argv);
// 3. Initialize main loop.
loop = g_main_loop_new (NULL, FALSE);
g_return_val_if_fail (loop != NULL, -ENODEV);
// 4. Initialize RTSP server.
server = gst_rtsp_server_new ();
g_return_val_if_fail (server != NULL, -ENODEV);
/*
绑定IP,这里只是用于测试所以先注释掉。因为如果绑定了127.0.0.1后就只能用这个IP访问流,它绑定的是这个IP而不是本机
因此我们可能不能在同一个局域网下的其他设备通过设备IP eg:192.168.....访问本机
*/
// 5. Set the server IP address.
//gst_rtsp_server_set_address (server, address);
// 6. Set the server port.
gst_rtsp_server_set_service (server, port);
// 7. Get the mount points for this server.
mounts = gst_rtsp_server_get_mount_points (server);
g_return_val_if_fail (mounts != NULL, -ENODEV);
/******************8. 创建多个流,这里使用一个端口推送多个流 **************************/
for (int index = 1; index <= stream_cnt; index++)
{
//attention must pay0
str = g_strdup_printf ("( v4l2src device=%s ! videoconvert ! video/x-raw, format=NV12, width=640, height=480, framerate=30/1 ! x264enc ! rtph264pay name=pay0 pt=96 )",argv[index]);
g_print ("stream ready at %s\n", str);
factory = gst_rtsp_media_factory_new ();
gst_rtsp_media_factory_set_launch (factory, str);
gst_rtsp_media_factory_set_shared (factory, TRUE);
sprintf(temp_mpoint, "%s%d", DEFAULT_RTSP_POINT, index - 1);
gst_rtsp_mount_points_add_factory (mounts, temp_mpoint, factory);
gst_rtsp_media_factory_set_enable_rtcp (factory, TRUE);
gst_rtsp_media_factory_set_transport_mode (factory,
record ? GST_RTSP_TRANSPORT_MODE_RECORD : GST_RTSP_TRANSPORT_MODE_PLAY);
g_free (str);
g_print ("stream ready at rtsp://%s:%s%s\n", address, port, temp_mpoint);
}
// 9. Add a timeout for the session cleanup.
g_timeout_add_seconds (5, (GSourceFunc) timeout, server);
// 10. Attach the RTSP server to the main context.
if (0 == gst_rtsp_server_attach (server, NULL))
g_printerr ("Failed to attach RTSP server to main loop context!\n");
// No need to keep reference for below objects.
g_object_unref (mounts);
// Run main loop.
g_main_loop_run (loop);
// Cleanup.
g_object_unref (factory);
g_object_unref (server);
g_main_loop_unref (loop);
gst_deinit ();
return 0;
}
测试
首先编译它
gcc main.c -o main `pkg-config --cflags --libs gstreamer-rtsp-server-1.0 gstreamer-1.0`
编译出一个bin文件。执行这个bin文件
像这样: ./main /dev/video0 /dev/video2
像我的设备有一个USB camera 与 本机自带camera 两个,就可以指定这两个节点,指定几个就可以推送几个流 。
如上图是测试方法,也可以使用命令gst-launch-1.0 playbin uri=rtsp://127.0.0.1:8900/live0
或者VLC播放器。
推送的流已经使能了客户端共享,可以使用多个客户端捕获它们。理论上这个程序可以推送我们指定的所用video节点上报的数据流,当然实际上还是要看设备性能。
另外 这个命令还可以指定流的IP地址和端口号等,可以使用./main -help查看
不足处还有很多,流传输的格式是固定的不能改变管道如下,如果电脑安装的gstream插件不完全可能无法运行,大家可以先使用test-launch.c实验出一个可以推送的流在换到代码对应位置处:
v4l2src device=%s ! videoconvert ! video/x-raw, format=NV12, width=640, height=480, framerate=30/1 ! x264enc ! rtph264pay name=pay0 pt=96
初步目标已经完成,后续计划还要实现可以改变流的编码格式,流传输过程中改变camera zoom,
resolution,等参数的功能。
问题 <gst/rtsp-server/rtsp-server.h> 没有这个目录
自带的gstreamer版本默认是没有 gstreamer-rtsp-server-1.0包的。
可以去下面的目录查看,如果没有gstreamer-rtsp-server-1.0.pc也就找不到与之相关的头文件和库,并且这个库用apt安装不上,只能使用源码安装(pip好像可以安装,但是忘记是什么包名了)。:
如果按照前几编源码编译了整个gstreamer,并且直接配置了环境变量,直接可以使用了。如果没有,那就单独编译gst-rtsp包,
编译也是用meson, 按照编译源码的方法直接编译它就行
复制编译出来的/lib /include 还有pkg内容:
cd 到include
sudo cp -r rtsp-server/ /usr/include/gstreamer-1.0/gst/rtsp-server
cd 到lib
sudo cp -r *rtsp* /usr/lib/x86_64-linux-gnu/
sudo cp -r *rtsp* /usr//lib/x86_64-linux-gnu/gstreamer-1.0/
sudo cp -r gstreamer-rtsp-server-1.0.pc /usr/lib/x86_64-linux-gnu/pkgconfig/
总之把与rtsp-server 相关的.so .h .pc复制到对应lib下即可