Reworked QtCamAnalysisBin
[harmattan/cameraplus] / lib / qtcamdevice.cpp
1 /*!
2  * This file is part of CameraPlus.
3  *
4  * Copyright (C) 2012 Mohammed Sameer <msameer@foolab.org>
5  *
6  * This library is free software; you can redistribute it and/or
7  * modify it under the terms of the GNU Lesser General Public
8  * License as published by the Free Software Foundation; either
9  * version 2.1 of the License, or (at your option) any later version.
10  *
11  * This library is distributed in the hope that it will be useful,
12  * but WITHOUT ANY WARRANTY; without even the implied warranty of
13  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
14  * Lesser General Public License for more details.
15  *
16  * You should have received a copy of the GNU Lesser General Public
17  * License along with this library; if not, write to the Free Software
18  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA  02110-1301  USA
19  */
20
21 #include "qtcamdevice.h"
22 #include "qtcamviewfinder.h"
23 #include "qtcamconfig.h"
24 #include "qtcamdevice_p.h"
25 #include <QDebug>
26 #include <gst/gst.h>
27 #include "qtcamgstreamermessagelistener.h"
28 #include "qtcammode.h"
29 #include "qtcamimagemode.h"
30 #include "qtcamvideomode.h"
31 #include "qtcamnotifications.h"
32 #include "gst/gstcopy.h"
33 #include "qtcampropertysetter.h"
34 #include "qtcamanalysisbin.h"
35
36 QtCamDevice::QtCamDevice(QtCamConfig *config, const QString& name,
37                          const QVariant& id, QObject *parent) :
38   QObject(parent), d_ptr(new QtCamDevicePrivate) {
39
40   static gboolean register_copy = TRUE;
41   if (register_copy) {
42     qt_cam_copy_register();
43     register_copy = FALSE;
44   }
45
46   d_ptr->q_ptr = this;
47   d_ptr->name = name;
48   d_ptr->id = id;
49   d_ptr->conf = config;
50
51   d_ptr->cameraBin = gst_element_factory_make("camerabin2", "QtCameraCameraBin");
52   if (!d_ptr->cameraBin) {
53     qCritical() << "Failed to create camerabin";
54     return;
55   }
56
57   d_ptr->propertySetter = new QtCamPropertySetter(d_ptr);
58
59   d_ptr->createAndAddElement(d_ptr->conf->audioSource(), "audio-source", "QtCameraAudioSrc");
60   if (!d_ptr->conf->wrapperVideoSource().isEmpty() &&
61       !d_ptr->conf->wrapperVideoSourceProperty().isEmpty()) {
62     d_ptr->createAndAddVideoSourceAndWrapper();
63   }
64   else {
65     d_ptr->createAndAddVideoSource();
66   }
67
68   int flags =
69     0x00000001 /* no-audio-conversion - Do not use audio conversion elements */
70     | 0x00000002 /* no-video-conversion - Do not use video conversion elements */
71     | 0x00000004 /* no-viewfinder-conversion - Do not use viewfinder conversion elements */
72     | 0x00000008; /* no-image-conversion - Do not use image conversion elements */
73
74   g_object_set(d_ptr->cameraBin, "flags", flags, NULL);
75
76   d_ptr->setAudioCaptureCaps();
77
78   QStringList viewfinderFilters = d_ptr->conf->viewfinderFilters();
79   if (!viewfinderFilters.isEmpty()) {
80     d_ptr->viewfinderFilters =
81       QtCamAnalysisBin::create(viewfinderFilters, "QtCamViewfinderFilters");
82
83     if (!d_ptr->viewfinderFilters) {
84       qWarning() << "Failed to create viewfinder filters";
85     }
86   }
87
88   g_object_set(d_ptr->cameraBin, "viewfinder-filter", d_ptr->viewfinderFilters->bin(), NULL);
89
90   d_ptr->listener = new QtCamGStreamerMessageListener(gst_element_get_bus(d_ptr->cameraBin),
91                                                       d_ptr, this);
92
93   QObject::connect(d_ptr->listener, SIGNAL(error(const QString&, int, const QString&)),
94                    this, SLOT(_d_error(const QString&, int, const QString&)));
95   QObject::connect(d_ptr->listener, SIGNAL(started()), this, SLOT(_d_started()));
96   QObject::connect(d_ptr->listener, SIGNAL(stopped()), this, SLOT(_d_stopped()));
97   QObject::connect(d_ptr->listener, SIGNAL(stopping()), this, SLOT(_d_stopping()));
98
99   g_signal_connect(d_ptr->cameraBin, "notify::idle",
100                    G_CALLBACK(QtCamDevicePrivate::on_idle_changed), d_ptr);
101
102   g_signal_connect(d_ptr->wrapperVideoSource, "notify::ready-for-capture",
103                    G_CALLBACK(QtCamDevicePrivate::on_ready_for_capture_changed), d_ptr);
104
105   d_ptr->image = new QtCamImageMode(d_ptr, this);
106   d_ptr->video = new QtCamVideoMode(d_ptr, this);
107
108   d_ptr->notifications = new QtCamNotifications(this, this);
109 }
110
111 QtCamDevice::~QtCamDevice() {
112   stop(true);
113
114   d_ptr->image->deactivate();
115   d_ptr->video->deactivate();
116
117   delete d_ptr->image; d_ptr->image = 0;
118   delete d_ptr->video; d_ptr->video = 0;
119
120   delete d_ptr->propertySetter;
121
122   delete d_ptr->viewfinderFilters;
123
124   if (d_ptr->cameraBin) {
125     gst_object_unref(d_ptr->cameraBin);
126   }
127
128   delete d_ptr; d_ptr = 0;
129 }
130
131 bool QtCamDevice::setViewfinder(QtCamViewfinder *viewfinder) {
132   if (isRunning()) {
133     qWarning() << "QtCamDevice: pipeline must be stopped before setting a viewfinder";
134     return false;
135   }
136
137   if (d_ptr->viewfinder == viewfinder) {
138     return true;
139   }
140
141   if (!viewfinder) {
142     qWarning() << "QtCamDevice: viewfinder cannot be unset.";
143     return false;
144   }
145
146   if (d_ptr->viewfinder) {
147     qWarning() << "QtCamDevice: viewfinder cannot be replaced.";
148     return false;
149   }
150
151   if (!viewfinder->setDevice(this)) {
152     return false;
153   }
154
155   d_ptr->viewfinder = viewfinder;
156
157   return true;
158 }
159
160 QtCamViewfinder *QtCamDevice::viewfinder() const {
161   return d_ptr->viewfinder;
162 }
163
164 bool QtCamDevice::start() {
165   if (d_ptr->error) {
166     qWarning() << "Pipeline must be stopped first because of an error.";
167     return false;
168   }
169
170   if (!d_ptr->cameraBin) {
171     qWarning() << "Missing camerabin";
172     return false;
173   }
174
175   if (!d_ptr->viewfinder) {
176     qWarning() << "Viewfinder not set";
177     return false;
178   }
179
180   if (isRunning()) {
181     return true;
182   }
183
184   if (!d_ptr->active) {
185     d_ptr->image->activate();
186   }
187   else {
188     d_ptr->active->applySettings();
189   }
190
191   // Set sink.
192   if (!d_ptr->setViewfinderSink()) {
193     return false;
194   }
195
196   GstStateChangeReturn err = gst_element_set_state(d_ptr->cameraBin, GST_STATE_PLAYING);
197   if (err == GST_STATE_CHANGE_FAILURE) {
198     qWarning() << "Failed to start camera pipeline";
199     return false;
200   }
201
202   // We need to wait for startup to complet. There's a race condition somewhere in the pipeline.
203   // If we set the scene mode to night and update the resolution while starting up
204   // then subdevsrc2 barfs:
205   // streaming task paused, reason not-negotiated (-4)
206   GstState state;
207   if (err != GST_STATE_CHANGE_ASYNC) {
208     return true;
209   }
210
211   if (gst_element_get_state(d_ptr->cameraBin, &state, 0, GST_CLOCK_TIME_NONE)
212       != GST_STATE_CHANGE_SUCCESS) {
213     // We are seriously screwed up :(
214     return false;
215   }
216
217   if (state != GST_STATE_PLAYING) {
218     // Huh ? Is this even possible ??
219     return false;
220   }
221
222   return true;
223 }
224
225 bool QtCamDevice::stop(bool force) {
226   if (!d_ptr->cameraBin) {
227     return true;
228   }
229
230   if (d_ptr->error) {
231     gst_element_set_state(d_ptr->cameraBin, GST_STATE_NULL);
232     d_ptr->error = false;
233
234     d_ptr->viewfinder->stop();
235
236     return true;
237   }
238
239   GstState state;
240   gst_element_get_state(d_ptr->cameraBin, &state, 0, GST_CLOCK_TIME_NONE);
241
242   if (state == GST_STATE_NULL) {
243     // Nothing to do.
244     return true;
245   }
246
247   if (!isIdle()) {
248     if (!force) {
249       return false;
250     }
251   }
252
253   // First we go to ready:
254   GstStateChangeReturn st = gst_element_set_state(d_ptr->cameraBin, GST_STATE_READY);
255   if (st != GST_STATE_CHANGE_FAILURE) {
256     // Flush the bus:
257     d_ptr->listener->flushMessages();
258   }
259
260   // Now to NULL
261   gst_element_set_state(d_ptr->cameraBin, GST_STATE_NULL);
262
263   d_ptr->viewfinder->stop();
264
265   return true;
266 }
267
268 bool QtCamDevice::isRunning() {
269   if (!d_ptr->cameraBin) {
270     return false;
271   }
272
273   GstState state;
274   GstStateChangeReturn err = gst_element_get_state(d_ptr->cameraBin,
275                                                    &state, 0, GST_CLOCK_TIME_NONE);
276
277   if (err == GST_STATE_CHANGE_FAILURE || state != GST_STATE_PLAYING) {
278     return false;
279   }
280
281   return true;
282 }
283
284 bool QtCamDevice::isIdle() {
285   if (!d_ptr->cameraBin) {
286     return true;
287   }
288
289   gboolean idle = FALSE;
290   g_object_get(d_ptr->cameraBin, "idle", &idle, NULL);
291
292   return idle == TRUE;
293 }
294
295 QtCamImageMode *QtCamDevice::imageMode() const {
296   return d_ptr->image;
297 }
298
299 QtCamVideoMode *QtCamDevice::videoMode() const {
300   return d_ptr->video;
301 }
302
303 QtCamMode *QtCamDevice::activeMode() const {
304   return d_ptr->active;
305 }
306
307 QString QtCamDevice::name() const {
308   return d_ptr->name;
309 }
310
311 QVariant QtCamDevice::id() const {
312   return d_ptr->id;
313 }
314
315 QtCamConfig *QtCamDevice::config() const {
316   return d_ptr->conf;
317 }
318
319 QtCamGStreamerMessageListener *QtCamDevice::listener() const {
320   return d_ptr->listener;
321 }
322
323 QtCamNotifications *QtCamDevice::notifications() const {
324   return d_ptr->notifications;
325 }
326
327 #include "moc_qtcamdevice.cpp"