【视频开发】用GStreamer实现摄像头的采集和保存

GStreamer是流媒体软件的开发框架。可以这样说,在该框架的支持下,你可以非常简单地为很多格式的流媒体写出自已需要的程序。
现在,GStreamer已经内置对MP3、Ogg/Vorbis、MPEG-1/2、AVI、Quicktime、mod等媒体格式的支持,如果你需要开发此类软件,你可以直接为我所用。如果你程序需要用到GStreamer未包含的格式,你可以通过开发相应的插件来达到你的目的。
GStreamer及其自带的插件支持GNU LGPL协议。具体信息请参阅源代码所附的相关说明文档。

 

转入正题:

利用GST可以方便的实现对摄像头的采集并显示,再加QT做个漂亮的界面就可以实现一个集采集,显示,拍照….等功能于一体的软件了。当然,大部分功能都是以GST为基础的,QT只是个漂亮的外套。下面先来一个GST的元件连接图吧。

 

v4l2src -> ffmpegcolorspace ->tee -> queue1 -> ximagesink

                                                   |

                                                   |--->queue2->videorate->video_filter->x264enc-> avimux -> filesink

 

 

1, 首先把上面的插件用gst_element_factory_make()创建出来

2, 如果创建没问题的话,再gst_bin_add()到创建的pipeline中。(什么?上面的图中没有pipeline,哥们,别搞笑了吧)。

 

3, 下面就是经常出问题的gst_element_link了。这个是该重点讲一下的。其实gst_element_link函数一般不会出问题的,问题是连起来的插件不起作用,或者出一些BUG,这个才是真正头疼的。

而重点除了要正确的使用元件,还要正确的设置元件的属性。

 

  首先对输入源v4l2src的device属性设置一下,指定采集设备的名称:

  g_object_set(G_OBJECT(v4l2src),"device", device_filename, NULL);

 

  设置保存文件的的文件路径。

  g_object_set(G_OBJECT(filesink),"location", video_filename, NULL);

 

     对tee和queue1,queue2连接的时候,不妨使用下面的代码,只列出对queue1的例子: 

      GstPad *tee_pad =gst_element_get_request_pad (tee, "src%d");

      GstPad *sink_pad =gst_element_get_static_pad (queue1, "sink");

    gst_pad_link (tee_pad, sink_pad);

    这样连接后,就不需要再用gst_element_link来连接了。

 

    还有一点要说明的是,要把queue的属性设置一下,两个都要设置,下面只列出第一个:

      g_object_set(G_OBJECT (queue1),"max-size-buffers", 0, NULL);

      g_object_set(G_OBJECT(queue1), "max-size-time", 0, NULL);

      g_object_set(G_OBJECT(queue1), "max-size-bytes", 512000000, NULL);

 

4, 经过上面的设置,元件似乎可以连接起来了,让我们来一串gst_element_link(),或者用个比较直接的gst_element_link_many();

5, 设置pipeline的状态为PLAYING:

 gst_element_set_state(pipeline,GST_STATE_PLAYING);

 要注意的是,这个设置不一定会成功可能会返回GST_STATE_CHANGE_FAILURE。

 不要紧张,不妨再调用 一次gst_element_set_state(pipeline,GST_STATE_PLAYING);

 如果不行的话,就再来一次,要是还不行的话,就检查元件的使用或者属性设置是不是错了。因为本文仅供参考,只能提供一个可能的解决办法,所以并不保证以上元件在所有机器上连接起来都能工作,毕竟本人学GST的时间也不长。

 

下面再强调一下其它的几个小问题:

1,用过gst的都知道使用ximagesink或xvimagesink可以出现一个显示图像的窗口,怎样将这个窗口依附到我们漂亮的QT界面上呢?

gst_x_overlay_set_xwindow_id(GST_X_OVERLAY(videosink), m_winID);

不妨试一下上面这个函数。

 

2,Ximagesink和xvimagesink ,本文使用的是ximagesink,因为使用ximagesink可以截图。使用xvimagesink的时候截图出现的是一片无望的黑色。(要问怎么截图,大家就去翻翻QT的东东吧,当然QPixmap::grabWindow和QImage.save可能帮到大家)

posted @ 2017-08-28 11:13  ZhangPYi  阅读(4015)  评论(0编辑  收藏  举报