No need to mess with method reference counts.
[libsigrokdecode.git] / type_decoder.c
1 /*
2  * This file is part of the libsigrokdecode project.
3  *
4  * Copyright (C) 2012 Bert Vermeulen <bert@biot.com>
5  *
6  * This program is free software: you can redistribute it and/or modify
7  * it under the terms of the GNU General Public License as published by
8  * the Free Software Foundation, either version 3 of the License, or
9  * (at your option) any later version.
10  *
11  * This program is distributed in the hope that it will be useful,
12  * but WITHOUT ANY WARRANTY; without even the implied warranty of
13  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
14  * GNU General Public License for more details.
15  *
16  * You should have received a copy of the GNU General Public License
17  * along with this program.  If not, see <http://www.gnu.org/licenses/>.
18  */
19
20 #include "libsigrokdecode.h" /* First, so we avoid a _POSIX_C_SOURCE warning. */
21 #include "libsigrokdecode-internal.h"
22 #include "config.h"
23 #include <inttypes.h>
24
25 /* This is only used for nicer srd_dbg() output. */
26 static const char *OUTPUT_TYPES[] = {
27         "OUTPUT_ANN",
28         "OUTPUT_PYTHON",
29         "OUTPUT_BINARY",
30         "OUTPUT_META",
31 };
32
33 static int convert_annotation(struct srd_decoder_inst *di, PyObject *obj,
34                 struct srd_proto_data *pdata)
35 {
36         PyObject *py_tmp;
37         struct srd_pd_output *pdo;
38         struct srd_proto_data_annotation *pda;
39         int ann_format;
40         char **ann_text;
41
42         /* Should be a list of [annotation format, [string, ...]]. */
43         if (!PyList_Check(obj) && !PyTuple_Check(obj)) {
44                 srd_err("Protocol decoder %s submitted %s instead of list.",
45                         di->decoder->name, obj->ob_type->tp_name);
46                 return SRD_ERR_PYTHON;
47         }
48
49         /* Should have 2 elements. */
50         if (PyList_Size(obj) != 2) {
51                 srd_err("Protocol decoder %s submitted annotation list with "
52                         "%d elements instead of 2", di->decoder->name,
53                         PyList_Size(obj));
54                 return SRD_ERR_PYTHON;
55         }
56
57         /*
58          * The first element should be an integer matching a previously
59          * registered annotation format.
60          */
61         py_tmp = PyList_GetItem(obj, 0);
62         if (!PyLong_Check(py_tmp)) {
63                 srd_err("Protocol decoder %s submitted annotation list, but "
64                         "first element was not an integer.", di->decoder->name);
65                 return SRD_ERR_PYTHON;
66         }
67         ann_format = PyLong_AsLong(py_tmp);
68         if (!(pdo = g_slist_nth_data(di->decoder->annotations, ann_format))) {
69                 srd_err("Protocol decoder %s submitted data to unregistered "
70                         "annotation format %d.", di->decoder->name, ann_format);
71                 return SRD_ERR_PYTHON;
72         }
73
74         /* Second element must be a list. */
75         py_tmp = PyList_GetItem(obj, 1);
76         if (!PyList_Check(py_tmp)) {
77                 srd_err("Protocol decoder %s submitted annotation list, but "
78                         "second element was not a list.", di->decoder->name);
79                 return SRD_ERR_PYTHON;
80         }
81         if (py_strseq_to_char(py_tmp, &ann_text) != SRD_OK) {
82                 srd_err("Protocol decoder %s submitted annotation list, but "
83                         "second element was malformed.", di->decoder->name);
84                 return SRD_ERR_PYTHON;
85         }
86
87         if (!(pda = g_try_malloc(sizeof(struct srd_proto_data_annotation))))
88                 return SRD_ERR_MALLOC;
89         pda->ann_format = ann_format;
90         pda->ann_text = ann_text;
91         pdata->data = pda;
92
93         return SRD_OK;
94 }
95
96 static int convert_binary(struct srd_decoder_inst *di, PyObject *obj,
97                 struct srd_proto_data *pdata)
98 {
99         struct srd_proto_data_binary *pdb;
100         PyObject *py_tmp;
101         Py_ssize_t size;
102         int bin_class;
103         char *class_name, *buf;
104
105         /* Should be a tuple of (binary class, bytes). */
106         if (!PyTuple_Check(obj)) {
107                 srd_err("Protocol decoder %s submitted SRD_OUTPUT_BINARY with "
108                                 "%s instead of tuple.", di->decoder->name,
109                                 obj->ob_type->tp_name);
110                 return SRD_ERR_PYTHON;
111         }
112
113         /* Should have 2 elements. */
114         if (PyTuple_Size(obj) != 2) {
115                 srd_err("Protocol decoder %s submitted SRD_OUTPUT_BINARY tuple "
116                                 "with %d elements instead of 2", di->decoder->name,
117                                 PyList_Size(obj));
118                 return SRD_ERR_PYTHON;
119         }
120
121         /* The first element should be an integer. */
122         py_tmp = PyTuple_GetItem(obj, 0);
123         if (!PyLong_Check(py_tmp)) {
124                 srd_err("Protocol decoder %s submitted SRD_OUTPUT_BINARY tuple, "
125                         "but first element was not an integer.", di->decoder->name);
126                 return SRD_ERR_PYTHON;
127         }
128         bin_class = PyLong_AsLong(py_tmp);
129         if (!(class_name = g_slist_nth_data(di->decoder->binary, bin_class))) {
130                 srd_err("Protocol decoder %s submitted SRD_OUTPUT_BINARY with "
131                         "unregistered binary class %d.", di->decoder->name, bin_class);
132                 return SRD_ERR_PYTHON;
133         }
134
135         /* Second element should be bytes. */
136         py_tmp = PyTuple_GetItem(obj, 1);
137         if (!PyBytes_Check(py_tmp)) {
138                 srd_err("Protocol decoder %s submitted SRD_OUTPUT_BINARY tuple, "
139                         "but second element was not bytes.", di->decoder->name);
140                 return SRD_ERR_PYTHON;
141         }
142
143         /* Consider an empty set of bytes a bug. */
144         if (PyBytes_Size(py_tmp) == 0) {
145                 srd_err("Protocol decoder %s submitted SRD_OUTPUT_BINARY "
146                                 "with empty data set.", di->decoder->name);
147                 return SRD_ERR_PYTHON;
148         }
149
150         if (!(pdb = g_try_malloc(sizeof(struct srd_proto_data_binary))))
151                 return SRD_ERR_MALLOC;
152         if (PyBytes_AsStringAndSize(py_tmp, &buf, &size) == -1)
153                 return SRD_ERR_PYTHON;
154         pdb->bin_class = bin_class;
155         pdb->size = size;
156         if (!(pdb->data = g_try_malloc(pdb->size)))
157                 return SRD_ERR_MALLOC;
158         memcpy((void *)pdb->data, (const void *)buf, pdb->size);
159         pdata->data = pdb;
160
161         return SRD_OK;
162 }
163
164 static int convert_meta(struct srd_proto_data *pdata, PyObject *obj)
165 {
166         long long intvalue;
167         double dvalue;
168
169         if (pdata->pdo->meta_type == G_VARIANT_TYPE_INT64) {
170                 if (!PyLong_Check(obj)) {
171                         PyErr_Format(PyExc_TypeError, "This output was registered "
172                                         "as 'int', but '%s' was passed.", obj->ob_type->tp_name);
173                         return SRD_ERR_PYTHON;
174                 }
175                 intvalue = PyLong_AsLongLong(obj);
176                 if (PyErr_Occurred())
177                         return SRD_ERR_PYTHON;
178                 pdata->data = g_variant_new_int64(intvalue);
179         } else if (pdata->pdo->meta_type == G_VARIANT_TYPE_DOUBLE) {
180                 if (!PyFloat_Check(obj)) {
181                         PyErr_Format(PyExc_TypeError, "This output was registered "
182                                         "as 'float', but '%s' was passed.", obj->ob_type->tp_name);
183                         return SRD_ERR_PYTHON;
184                 }
185                 dvalue = PyFloat_AsDouble(obj);
186                 if (PyErr_Occurred())
187                         return SRD_ERR_PYTHON;
188                 pdata->data = g_variant_new_double(dvalue);
189         }
190
191         return SRD_OK;
192 }
193
194 static PyObject *Decoder_put(PyObject *self, PyObject *args)
195 {
196         GSList *l;
197         PyObject *py_data, *py_res;
198         struct srd_decoder_inst *di, *next_di;
199         struct srd_pd_output *pdo;
200         struct srd_proto_data *pdata;
201         uint64_t start_sample, end_sample;
202         int output_id;
203         struct srd_pd_callback *cb;
204
205         if (!(di = srd_inst_find_by_obj(NULL, self))) {
206                 /* Shouldn't happen. */
207                 srd_dbg("put(): self instance not found.");
208                 return NULL;
209         }
210
211         if (!PyArg_ParseTuple(args, "KKiO", &start_sample, &end_sample,
212             &output_id, &py_data)) {
213                 /*
214                  * This throws an exception, but by returning NULL here we let
215                  * Python raise it. This results in a much better trace in
216                  * controller.c on the decode() method call.
217                  */
218                 return NULL;
219         }
220
221         if (!(l = g_slist_nth(di->pd_output, output_id))) {
222                 srd_err("Protocol decoder %s submitted invalid output ID %d.",
223                         di->decoder->name, output_id);
224                 return NULL;
225         }
226         pdo = l->data;
227
228         srd_spew("Instance %s put %" PRIu64 "-%" PRIu64 " %s on oid %d.",
229                  di->inst_id, start_sample, end_sample,
230                  OUTPUT_TYPES[pdo->output_type], output_id);
231
232         if (!(pdata = g_try_malloc0(sizeof(struct srd_proto_data)))) {
233                 srd_err("Failed to g_malloc() struct srd_proto_data.");
234                 return NULL;
235         }
236         pdata->start_sample = start_sample;
237         pdata->end_sample = end_sample;
238         pdata->pdo = pdo;
239
240         switch (pdo->output_type) {
241         case SRD_OUTPUT_ANN:
242                 /* Annotations are only fed to callbacks. */
243                 if ((cb = srd_pd_output_callback_find(di->sess, pdo->output_type))) {
244                         /* Convert from PyDict to srd_proto_data_annotation. */
245                         if (convert_annotation(di, py_data, pdata) != SRD_OK) {
246                                 /* An error was already logged. */
247                                 break;
248                         }
249                         cb->cb(pdata, cb->cb_data);
250                 }
251                 break;
252         case SRD_OUTPUT_PYTHON:
253                 for (l = di->next_di; l; l = l->next) {
254                         next_di = l->data;
255                         srd_spew("Sending %d-%d to instance %s",
256                                  start_sample, end_sample,
257                                  next_di->inst_id);
258                         if (!(py_res = PyObject_CallMethod(
259                             next_di->py_inst, "decode", "KKO", start_sample,
260                             end_sample, py_data))) {
261                                 srd_exception_catch("Calling %s decode(): ",
262                                                     next_di->inst_id);
263                         }
264                         Py_XDECREF(py_res);
265                 }
266                 break;
267         case SRD_OUTPUT_BINARY:
268                 if ((cb = srd_pd_output_callback_find(di->sess, pdo->output_type))) {
269                         /* Convert from PyDict to srd_proto_data_binary. */
270                         if (convert_binary(di, py_data, pdata) != SRD_OK) {
271                                 /* An error was already logged. */
272                                 break;
273                         }
274                         cb->cb(pdata, cb->cb_data);
275                 }
276                 break;
277         case SRD_OUTPUT_META:
278                 if ((cb = srd_pd_output_callback_find(di->sess, pdo->output_type))) {
279                         /* Annotations need converting from PyObject. */
280                         if (convert_meta(pdata, py_data) != SRD_OK) {
281                                 /* An exception was already set up. */
282                                 break;
283                         }
284                         cb->cb(pdata, cb->cb_data);
285                 }
286                 break;
287         default:
288                 srd_err("Protocol decoder %s submitted invalid output type %d.",
289                         di->decoder->name, pdo->output_type);
290                 break;
291         }
292
293         g_free(pdata);
294
295         Py_RETURN_NONE;
296 }
297
298 static PyObject *Decoder_register(PyObject *self, PyObject *args,
299                 PyObject *kwargs)
300 {
301         struct srd_decoder_inst *di;
302         struct srd_pd_output *pdo;
303         PyObject *py_new_output_id;
304         PyTypeObject *meta_type_py;
305         const GVariantType *meta_type_gv;
306         int output_type;
307         char *proto_id, *meta_name, *meta_descr;
308         char *keywords[] = {"output_type", "proto_id", "meta", NULL};
309
310         meta_type_py = NULL;
311         meta_type_gv = NULL;
312         meta_name = meta_descr = NULL;
313
314         if (!(di = srd_inst_find_by_obj(NULL, self))) {
315                 PyErr_SetString(PyExc_Exception, "decoder instance not found");
316                 return NULL;
317         }
318
319         /* Default to instance id, which defaults to class id. */
320         proto_id = di->inst_id;
321         if (!PyArg_ParseTupleAndKeywords(args, kwargs, "i|s(Oss)", keywords,
322                         &output_type, &proto_id,
323                         &meta_type_py, &meta_name, &meta_descr)) {
324                 /* Let Python raise this exception. */
325                 return NULL;
326         }
327
328         /* Check if the meta value's type is supported. */
329         if (output_type == SRD_OUTPUT_META) {
330                 if (meta_type_py == &PyLong_Type)
331                         meta_type_gv = G_VARIANT_TYPE_INT64;
332                 else if (meta_type_py == &PyFloat_Type)
333                         meta_type_gv = G_VARIANT_TYPE_DOUBLE;
334                 else {
335                         PyErr_Format(PyExc_TypeError, "Unsupported type '%s'.",
336                                         meta_type_py->tp_name);
337                         return NULL;
338                 }
339         }
340
341         srd_dbg("Instance %s creating new output type %d for %s.",
342                 di->inst_id, output_type, proto_id);
343
344         if (!(pdo = g_try_malloc(sizeof(struct srd_pd_output)))) {
345                 PyErr_SetString(PyExc_MemoryError, "struct srd_pd_output");
346                 return NULL;
347         }
348
349         /* pdo_id is just a simple index, nothing is deleted from this list anyway. */
350         pdo->pdo_id = g_slist_length(di->pd_output);
351         pdo->output_type = output_type;
352         pdo->di = di;
353         pdo->proto_id = g_strdup(proto_id);
354
355         if (output_type == SRD_OUTPUT_META) {
356                 pdo->meta_type = meta_type_gv;
357                 pdo->meta_name = g_strdup(meta_name);
358                 pdo->meta_descr = g_strdup(meta_descr);
359         }
360
361         di->pd_output = g_slist_append(di->pd_output, pdo);
362         py_new_output_id = Py_BuildValue("i", pdo->pdo_id);
363
364         return py_new_output_id;
365 }
366
367 /* TODO: this is just a stub that calls _register() until all PDs
368  * are changed to use the new register API. */
369 static PyObject *Decoder_add(PyObject *self, PyObject *args)
370 {
371         PyObject *py_keywords, *py_new_output_id;
372
373         py_keywords = PyDict_New();
374         py_new_output_id = Decoder_register(self, args, py_keywords);
375         Py_DecRef(py_keywords);
376
377         return py_new_output_id;
378 }
379
380 static PyMethodDef Decoder_methods[] = {
381         {"put", Decoder_put, METH_VARARGS,
382          "Accepts a dictionary with the following keys: startsample, endsample, data"},
383         {"add", Decoder_add, METH_VARARGS, "Create a new output stream"},
384         {"register", (PyCFunction)Decoder_register, METH_VARARGS|METH_KEYWORDS,
385                         "Register a new output stream"},
386         {NULL, NULL, 0, NULL}
387 };
388
389 /** @cond PRIVATE */
390 SRD_PRIV PyTypeObject srd_Decoder_type = {
391         PyVarObject_HEAD_INIT(NULL, 0)
392         .tp_name = "sigrokdecode.Decoder",
393         .tp_basicsize = sizeof(srd_Decoder),
394         .tp_flags = Py_TPFLAGS_DEFAULT | Py_TPFLAGS_BASETYPE,
395         .tp_doc = "sigrok Decoder base class",
396         .tp_methods = Decoder_methods,
397 };
398 /** @endcond */