]> git.sesse.net Git - ffmpeg/blob - libavfilter/af_ladspa.c
avfilter/af_ladspa: check another directory for plugins
[ffmpeg] / libavfilter / af_ladspa.c
1 /*
2  * Copyright (c) 2013 Paul B Mahol
3  * Copyright (c) 2011 Mina Nagy Zaki
4  *
5  * This file is part of FFmpeg.
6  *
7  * FFmpeg is free software; you can redistribute it and/or
8  * modify it under the terms of the GNU Lesser General Public
9  * License as published by the Free Software Foundation; either
10  * version 2.1 of the License, or (at your option) any later version.
11  *
12  * FFmpeg is distributed in the hope that it will be useful,
13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
15  * Lesser General Public License for more details.
16  *
17  * You should have received a copy of the GNU Lesser General Public
18  * License along with FFmpeg; if not, write to the Free Software
19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
20  */
21
22 /**
23  * @file
24  * LADSPA wrapper
25  */
26
27 #include <dlfcn.h>
28 #include <ladspa.h>
29 #include "libavutil/avassert.h"
30 #include "libavutil/avstring.h"
31 #include "libavutil/channel_layout.h"
32 #include "libavutil/opt.h"
33 #include "audio.h"
34 #include "avfilter.h"
35 #include "internal.h"
36
37 typedef struct LADSPAContext {
38     const AVClass *class;
39     char *dl_name;
40     char *plugin;
41     char *options;
42     void *dl_handle;
43
44     unsigned long nb_inputs;
45     unsigned long *ipmap;      /* map input number to port number */
46
47     unsigned long nb_inputcontrols;
48     unsigned long *icmap;      /* map input control number to port number */
49     LADSPA_Data *ictlv;        /* input controls values */
50
51     unsigned long nb_outputs;
52     unsigned long *opmap;      /* map output number to port number */
53
54     unsigned long nb_outputcontrols;
55     unsigned long *ocmap;      /* map output control number to port number */
56     LADSPA_Data *octlv;        /* output controls values */
57
58     const LADSPA_Descriptor *desc;
59     int *ctl_needs_value;
60     int nb_handles;
61     LADSPA_Handle *handles;
62
63     int sample_rate;
64     int nb_samples;
65     int64_t pts;
66     int64_t duration;
67 } LADSPAContext;
68
69 #define OFFSET(x) offsetof(LADSPAContext, x)
70 #define FLAGS AV_OPT_FLAG_AUDIO_PARAM | AV_OPT_FLAG_FILTERING_PARAM
71 static const AVOption ladspa_options[] = {
72     { "file", "set library name or full path", OFFSET(dl_name), AV_OPT_TYPE_STRING, .flags = FLAGS },
73     { "f",    "set library name or full path", OFFSET(dl_name), AV_OPT_TYPE_STRING, .flags = FLAGS },
74     { "plugin", "set plugin name", OFFSET(plugin), AV_OPT_TYPE_STRING, .flags = FLAGS },
75     { "p",      "set plugin name", OFFSET(plugin), AV_OPT_TYPE_STRING, .flags = FLAGS },
76     { "controls", "set plugin options", OFFSET(options), AV_OPT_TYPE_STRING, .flags = FLAGS },
77     { "c",        "set plugin options", OFFSET(options), AV_OPT_TYPE_STRING, .flags = FLAGS },
78     { "sample_rate", "set sample rate", OFFSET(sample_rate), AV_OPT_TYPE_INT, {.i64=44100}, 1, INT32_MAX, FLAGS },
79     { "s",           "set sample rate", OFFSET(sample_rate), AV_OPT_TYPE_INT, {.i64=44100}, 1, INT32_MAX, FLAGS },
80     { "nb_samples", "set the number of samples per requested frame", OFFSET(nb_samples), AV_OPT_TYPE_INT, {.i64=1024}, 1, INT_MAX, FLAGS },
81     { "n",          "set the number of samples per requested frame", OFFSET(nb_samples), AV_OPT_TYPE_INT, {.i64=1024}, 1, INT_MAX, FLAGS },
82     { "duration", "set audio duration", OFFSET(duration), AV_OPT_TYPE_DURATION, {.i64=-1}, -1, INT64_MAX, FLAGS },
83     { "d",        "set audio duration", OFFSET(duration), AV_OPT_TYPE_DURATION, {.i64=-1}, -1, INT64_MAX, FLAGS },
84     { NULL }
85 };
86
87 AVFILTER_DEFINE_CLASS(ladspa);
88
89 static void print_ctl_info(AVFilterContext *ctx, int level,
90                            LADSPAContext *s, int ctl, unsigned long *map,
91                            LADSPA_Data *values, int print)
92 {
93     const LADSPA_PortRangeHint *h = s->desc->PortRangeHints + map[ctl];
94
95     av_log(ctx, level, "c%i: %s [", ctl, s->desc->PortNames[map[ctl]]);
96
97     if (LADSPA_IS_HINT_TOGGLED(h->HintDescriptor)) {
98         av_log(ctx, level, "toggled (1 or 0)");
99
100         if (LADSPA_IS_HINT_HAS_DEFAULT(h->HintDescriptor))
101             av_log(ctx, level, " (default %i)", (int)values[ctl]);
102     } else {
103         if (LADSPA_IS_HINT_INTEGER(h->HintDescriptor)) {
104             av_log(ctx, level, "<int>");
105
106             if (LADSPA_IS_HINT_BOUNDED_BELOW(h->HintDescriptor))
107                 av_log(ctx, level, ", min: %i", (int)h->LowerBound);
108
109             if (LADSPA_IS_HINT_BOUNDED_ABOVE(h->HintDescriptor))
110                 av_log(ctx, level, ", max: %i", (int)h->UpperBound);
111
112             if (print)
113                 av_log(ctx, level, " (value %d)", (int)values[ctl]);
114             else if (LADSPA_IS_HINT_HAS_DEFAULT(h->HintDescriptor))
115                 av_log(ctx, level, " (default %d)", (int)values[ctl]);
116         } else {
117             av_log(ctx, level, "<float>");
118
119             if (LADSPA_IS_HINT_BOUNDED_BELOW(h->HintDescriptor))
120                 av_log(ctx, level, ", min: %f", h->LowerBound);
121
122             if (LADSPA_IS_HINT_BOUNDED_ABOVE(h->HintDescriptor))
123                 av_log(ctx, level, ", max: %f", h->UpperBound);
124
125             if (print)
126                 av_log(ctx, level, " (value %f)", values[ctl]);
127             else if (LADSPA_IS_HINT_HAS_DEFAULT(h->HintDescriptor))
128                 av_log(ctx, level, " (default %f)", values[ctl]);
129         }
130
131         if (LADSPA_IS_HINT_SAMPLE_RATE(h->HintDescriptor))
132             av_log(ctx, level, ", multiple of sample rate");
133
134         if (LADSPA_IS_HINT_LOGARITHMIC(h->HintDescriptor))
135             av_log(ctx, level, ", logarithmic scale");
136     }
137
138     av_log(ctx, level, "]\n");
139 }
140
141 static int filter_frame(AVFilterLink *inlink, AVFrame *in)
142 {
143     AVFilterContext *ctx = inlink->dst;
144     LADSPAContext *s = ctx->priv;
145     AVFrame *out;
146     int i, h, p;
147
148     av_assert0(in->channels == (s->nb_inputs * s->nb_handles));
149
150     if (!s->nb_outputs ||
151         (av_frame_is_writable(in) && s->nb_inputs == s->nb_outputs &&
152         !(s->desc->Properties & LADSPA_PROPERTY_INPLACE_BROKEN))) {
153         out = in;
154     } else {
155         out = ff_get_audio_buffer(ctx->outputs[0], in->nb_samples);
156         if (!out) {
157             av_frame_free(&in);
158             return AVERROR(ENOMEM);
159         }
160         av_frame_copy_props(out, in);
161     }
162
163     av_assert0(!s->nb_outputs || out->channels == (s->nb_outputs * s->nb_handles));
164
165     for (h = 0; h < s->nb_handles; h++) {
166         for (i = 0; i < s->nb_inputs; i++) {
167             p = s->nb_handles > 1 ? h : i;
168             s->desc->connect_port(s->handles[h], s->ipmap[i],
169                                   (LADSPA_Data*)in->extended_data[p]);
170         }
171
172         for (i = 0; i < s->nb_outputs; i++) {
173             p = s->nb_handles > 1 ? h : i;
174             s->desc->connect_port(s->handles[h], s->opmap[i],
175                                   (LADSPA_Data*)out->extended_data[p]);
176         }
177
178         s->desc->run(s->handles[h], in->nb_samples);
179     }
180
181     for (i = 0; i < s->nb_outputcontrols; i++)
182         print_ctl_info(ctx, AV_LOG_VERBOSE, s, i, s->ocmap, s->octlv, 1);
183
184     if (out != in)
185         av_frame_free(&in);
186
187     return ff_filter_frame(ctx->outputs[0], out);
188 }
189
190 static int request_frame(AVFilterLink *outlink)
191 {
192     AVFilterContext *ctx = outlink->src;
193     LADSPAContext *s = ctx->priv;
194     AVFrame *out;
195     int64_t t;
196     int i;
197
198     if (ctx->nb_inputs)
199         return ff_request_frame(ctx->inputs[0]);
200
201     t = av_rescale(s->pts, AV_TIME_BASE, s->sample_rate);
202     if (s->duration >= 0 && t >= s->duration)
203         return AVERROR_EOF;
204
205     out = ff_get_audio_buffer(outlink, s->nb_samples);
206     if (!out)
207         return AVERROR(ENOMEM);
208
209     for (i = 0; i < s->nb_outputs; i++)
210         s->desc->connect_port(s->handles[0], s->opmap[i],
211                 (LADSPA_Data*)out->extended_data[i]);
212
213     s->desc->run(s->handles[0], s->nb_samples);
214
215     for (i = 0; i < s->nb_outputcontrols; i++)
216         print_ctl_info(ctx, AV_LOG_INFO, s, i, s->ocmap, s->octlv, 1);
217
218     out->sample_rate = s->sample_rate;
219     out->pts         = s->pts;
220     s->pts          += s->nb_samples;
221
222     return ff_filter_frame(outlink, out);
223 }
224
225 static void set_default_ctl_value(LADSPAContext *s, int ctl,
226                                   unsigned long *map, LADSPA_Data *values)
227 {
228     const LADSPA_PortRangeHint *h = s->desc->PortRangeHints + map[ctl];
229     const LADSPA_Data lower = h->LowerBound;
230     const LADSPA_Data upper = h->UpperBound;
231
232     if (LADSPA_IS_HINT_DEFAULT_MINIMUM(h->HintDescriptor)) {
233         values[ctl] = lower;
234     } else if (LADSPA_IS_HINT_DEFAULT_MAXIMUM(h->HintDescriptor)) {
235         values[ctl] = upper;
236     } else if (LADSPA_IS_HINT_DEFAULT_0(h->HintDescriptor)) {
237         values[ctl] = 0.0;
238     } else if (LADSPA_IS_HINT_DEFAULT_1(h->HintDescriptor)) {
239         values[ctl] = 1.0;
240     } else if (LADSPA_IS_HINT_DEFAULT_100(h->HintDescriptor)) {
241         values[ctl] = 100.0;
242     } else if (LADSPA_IS_HINT_DEFAULT_440(h->HintDescriptor)) {
243         values[ctl] = 440.0;
244     } else if (LADSPA_IS_HINT_DEFAULT_LOW(h->HintDescriptor)) {
245         if (LADSPA_IS_HINT_LOGARITHMIC(h->HintDescriptor))
246             values[ctl] = exp(log(lower) * 0.75 + log(upper) * 0.25);
247         else
248             values[ctl] = lower * 0.75 + upper * 0.25;
249     } else if (LADSPA_IS_HINT_DEFAULT_MIDDLE(h->HintDescriptor)) {
250         if (LADSPA_IS_HINT_LOGARITHMIC(h->HintDescriptor))
251             values[ctl] = exp(log(lower) * 0.5 + log(upper) * 0.5);
252         else
253             values[ctl] = lower * 0.5 + upper * 0.5;
254     } else if (LADSPA_IS_HINT_DEFAULT_HIGH(h->HintDescriptor)) {
255         if (LADSPA_IS_HINT_LOGARITHMIC(h->HintDescriptor))
256             values[ctl] = exp(log(lower) * 0.25 + log(upper) * 0.75);
257         else
258             values[ctl] = lower * 0.25 + upper * 0.75;
259     }
260 }
261
262 static int connect_ports(AVFilterContext *ctx, AVFilterLink *link)
263 {
264     LADSPAContext *s = ctx->priv;
265     int i, j;
266
267     s->nb_handles = s->nb_inputs == 1 && s->nb_outputs == 1 ? link->channels : 1;
268     s->handles    = av_calloc(s->nb_handles, sizeof(*s->handles));
269     if (!s->handles)
270         return AVERROR(ENOMEM);
271
272     for (i = 0; i < s->nb_handles; i++) {
273         s->handles[i] = s->desc->instantiate(s->desc, link->sample_rate);
274         if (!s->handles[i]) {
275             av_log(ctx, AV_LOG_ERROR, "Could not instantiate plugin.\n");
276             return AVERROR_EXTERNAL;
277         }
278
279         // Connect the input control ports
280         for (j = 0; j < s->nb_inputcontrols; j++)
281             s->desc->connect_port(s->handles[i], s->icmap[j], s->ictlv + j);
282
283         // Connect the output control ports
284         for (j = 0; j < s->nb_outputcontrols; j++)
285             s->desc->connect_port(s->handles[i], s->ocmap[j], &s->octlv[j]);
286
287         if (s->desc->activate)
288             s->desc->activate(s->handles[i]);
289     }
290
291     av_log(ctx, AV_LOG_DEBUG, "handles: %d\n", s->nb_handles);
292
293     return 0;
294 }
295
296 static int config_input(AVFilterLink *inlink)
297 {
298     AVFilterContext *ctx = inlink->dst;
299
300     return connect_ports(ctx, inlink);
301 }
302
303 static int config_output(AVFilterLink *outlink)
304 {
305     AVFilterContext *ctx = outlink->src;
306     LADSPAContext *s = ctx->priv;
307     int ret;
308
309     if (ctx->nb_inputs) {
310         AVFilterLink *inlink = ctx->inputs[0];
311
312         outlink->format      = inlink->format;
313         outlink->sample_rate = inlink->sample_rate;
314         if (s->nb_inputs == s->nb_outputs) {
315             outlink->channel_layout = inlink->channel_layout;
316             outlink->channels = inlink->channels;
317         }
318
319         ret = 0;
320     } else {
321         outlink->sample_rate = s->sample_rate;
322         outlink->time_base   = (AVRational){1, s->sample_rate};
323
324         ret = connect_ports(ctx, outlink);
325     }
326
327     return ret;
328 }
329
330 static void count_ports(const LADSPA_Descriptor *desc,
331                         unsigned long *nb_inputs, unsigned long *nb_outputs)
332 {
333     LADSPA_PortDescriptor pd;
334     int i;
335
336     for (i = 0; i < desc->PortCount; i++) {
337         pd = desc->PortDescriptors[i];
338
339         if (LADSPA_IS_PORT_AUDIO(pd)) {
340             if (LADSPA_IS_PORT_INPUT(pd)) {
341                 (*nb_inputs)++;
342             } else if (LADSPA_IS_PORT_OUTPUT(pd)) {
343                 (*nb_outputs)++;
344             }
345         }
346     }
347 }
348
349 static void *try_load(const char *dir, const char *soname)
350 {
351     char *path = av_asprintf("%s/%s.so", dir, soname);
352     void *ret = NULL;
353
354     if (path) {
355         ret = dlopen(path, RTLD_LOCAL|RTLD_NOW);
356         av_free(path);
357     }
358
359     return ret;
360 }
361
362 static int set_control(AVFilterContext *ctx, unsigned long port, LADSPA_Data value)
363 {
364     LADSPAContext *s = ctx->priv;
365     const char *label = s->desc->Label;
366     LADSPA_PortRangeHint *h = (LADSPA_PortRangeHint *)s->desc->PortRangeHints +
367                               s->icmap[port];
368
369     if (port >= s->nb_inputcontrols) {
370         av_log(ctx, AV_LOG_ERROR, "Control c%ld is out of range [0 - %lu].\n",
371                port, s->nb_inputcontrols);
372         return AVERROR(EINVAL);
373     }
374
375     if (LADSPA_IS_HINT_BOUNDED_BELOW(h->HintDescriptor) &&
376             value < h->LowerBound) {
377         av_log(ctx, AV_LOG_ERROR,
378                 "%s: input control c%ld is below lower boundary of %0.4f.\n",
379                 label, port, h->LowerBound);
380         return AVERROR(EINVAL);
381     }
382
383     if (LADSPA_IS_HINT_BOUNDED_ABOVE(h->HintDescriptor) &&
384             value > h->UpperBound) {
385         av_log(ctx, AV_LOG_ERROR,
386                 "%s: input control c%ld is above upper boundary of %0.4f.\n",
387                 label, port, h->UpperBound);
388         return AVERROR(EINVAL);
389     }
390
391     s->ictlv[port] = value;
392
393     return 0;
394 }
395
396 static av_cold int init(AVFilterContext *ctx)
397 {
398     LADSPAContext *s = ctx->priv;
399     LADSPA_Descriptor_Function descriptor_fn;
400     const LADSPA_Descriptor *desc;
401     LADSPA_PortDescriptor pd;
402     AVFilterPad pad = { NULL };
403     char *p, *arg, *saveptr = NULL;
404     unsigned long nb_ports;
405     int i, j = 0;
406
407     if (!s->dl_name) {
408         av_log(ctx, AV_LOG_ERROR, "No plugin name provided\n");
409         return AVERROR(EINVAL);
410     }
411
412     if (s->dl_name[0] == '/' || s->dl_name[0] == '.') {
413         // argument is a path
414         s->dl_handle = dlopen(s->dl_name, RTLD_LOCAL|RTLD_NOW);
415     } else {
416         // argument is a shared object name
417         char *paths = av_strdup(getenv("LADSPA_PATH"));
418         const char *separator = ":";
419
420         if (paths) {
421             p = paths;
422             while ((arg = av_strtok(p, separator, &saveptr)) && !s->dl_handle) {
423                 s->dl_handle = try_load(arg, s->dl_name);
424                 p = NULL;
425             }
426         }
427
428         av_free(paths);
429         if (!s->dl_handle && (paths = av_asprintf("%s/.ladspa", getenv("HOME")))) {
430             s->dl_handle = try_load(paths, s->dl_name);
431             av_free(paths);
432         }
433
434         if (!s->dl_handle && (paths = av_asprintf("%s/.ladspa/lib", getenv("HOME")))) {
435             s->dl_handle = try_load(paths, s->dl_name);
436             av_free(paths);
437         }
438
439         if (!s->dl_handle)
440             s->dl_handle = try_load("/usr/local/lib/ladspa", s->dl_name);
441
442         if (!s->dl_handle)
443             s->dl_handle = try_load("/usr/lib/ladspa", s->dl_name);
444     }
445     if (!s->dl_handle) {
446         av_log(ctx, AV_LOG_ERROR, "Failed to load '%s'\n", s->dl_name);
447         return AVERROR(EINVAL);
448     }
449
450     descriptor_fn = dlsym(s->dl_handle, "ladspa_descriptor");
451     if (!descriptor_fn) {
452         av_log(ctx, AV_LOG_ERROR, "Could not find ladspa_descriptor: %s\n", dlerror());
453         return AVERROR(EINVAL);
454     }
455
456     // Find the requested plugin, or list plugins
457     if (!s->plugin) {
458         av_log(ctx, AV_LOG_INFO, "The '%s' library contains the following plugins:\n", s->dl_name);
459         av_log(ctx, AV_LOG_INFO, "I = Input Channels\n");
460         av_log(ctx, AV_LOG_INFO, "O = Output Channels\n");
461         av_log(ctx, AV_LOG_INFO, "I:O %-25s %s\n", "Plugin", "Description");
462         av_log(ctx, AV_LOG_INFO, "\n");
463         for (i = 0; desc = descriptor_fn(i); i++) {
464             unsigned long inputs = 0, outputs = 0;
465
466             count_ports(desc, &inputs, &outputs);
467             av_log(ctx, AV_LOG_INFO, "%lu:%lu %-25s %s\n", inputs, outputs, desc->Label,
468                    (char *)av_x_if_null(desc->Name, "?"));
469             av_log(ctx, AV_LOG_VERBOSE, "Maker: %s\n",
470                    (char *)av_x_if_null(desc->Maker, "?"));
471             av_log(ctx, AV_LOG_VERBOSE, "Copyright: %s\n",
472                    (char *)av_x_if_null(desc->Copyright, "?"));
473         }
474         return AVERROR_EXIT;
475     } else {
476         for (i = 0;; i++) {
477             desc = descriptor_fn(i);
478             if (!desc) {
479                 av_log(ctx, AV_LOG_ERROR, "Could not find plugin: %s\n", s->plugin);
480                 return AVERROR(EINVAL);
481             }
482
483             if (desc->Label && !strcmp(desc->Label, s->plugin))
484                 break;
485         }
486     }
487
488     s->desc  = desc;
489     nb_ports = desc->PortCount;
490
491     s->ipmap = av_calloc(nb_ports, sizeof(*s->ipmap));
492     s->opmap = av_calloc(nb_ports, sizeof(*s->opmap));
493     s->icmap = av_calloc(nb_ports, sizeof(*s->icmap));
494     s->ocmap = av_calloc(nb_ports, sizeof(*s->ocmap));
495     s->ictlv = av_calloc(nb_ports, sizeof(*s->ictlv));
496     s->octlv = av_calloc(nb_ports, sizeof(*s->octlv));
497     s->ctl_needs_value = av_calloc(nb_ports, sizeof(*s->ctl_needs_value));
498     if (!s->ipmap || !s->opmap || !s->icmap ||
499         !s->ocmap || !s->ictlv || !s->octlv || !s->ctl_needs_value)
500         return AVERROR(ENOMEM);
501
502     for (i = 0; i < nb_ports; i++) {
503         pd = desc->PortDescriptors[i];
504
505         if (LADSPA_IS_PORT_AUDIO(pd)) {
506             if (LADSPA_IS_PORT_INPUT(pd)) {
507                 s->ipmap[s->nb_inputs] = i;
508                 s->nb_inputs++;
509             } else if (LADSPA_IS_PORT_OUTPUT(pd)) {
510                 s->opmap[s->nb_outputs] = i;
511                 s->nb_outputs++;
512             }
513         } else if (LADSPA_IS_PORT_CONTROL(pd)) {
514             if (LADSPA_IS_PORT_INPUT(pd)) {
515                 s->icmap[s->nb_inputcontrols] = i;
516
517                 if (LADSPA_IS_HINT_HAS_DEFAULT(desc->PortRangeHints[i].HintDescriptor))
518                     set_default_ctl_value(s, s->nb_inputcontrols, s->icmap, s->ictlv);
519                 else
520                     s->ctl_needs_value[s->nb_inputcontrols] = 1;
521
522                 s->nb_inputcontrols++;
523             } else if (LADSPA_IS_PORT_OUTPUT(pd)) {
524                 s->ocmap[s->nb_outputcontrols] = i;
525                 s->nb_outputcontrols++;
526             }
527         }
528     }
529
530     // List Control Ports if "help" is specified
531     if (s->options && !strcmp(s->options, "help")) {
532         if (!s->nb_inputcontrols) {
533             av_log(ctx, AV_LOG_INFO,
534                    "The '%s' plugin does not have any input controls.\n",
535                    desc->Label);
536         } else {
537             av_log(ctx, AV_LOG_INFO,
538                    "The '%s' plugin has the following input controls:\n",
539                    desc->Label);
540             for (i = 0; i < s->nb_inputcontrols; i++)
541                 print_ctl_info(ctx, AV_LOG_INFO, s, i, s->icmap, s->ictlv, 0);
542         }
543         return AVERROR_EXIT;
544     }
545
546     // Parse control parameters
547     p = s->options;
548     while (s->options) {
549         LADSPA_Data val;
550         int ret;
551
552         if (!(arg = av_strtok(p, " |", &saveptr)))
553             break;
554         p = NULL;
555
556         if (av_sscanf(arg, "c%d=%f", &i, &val) != 2) {
557             if (av_sscanf(arg, "%f", &val) != 1) {
558                 av_log(ctx, AV_LOG_ERROR, "Invalid syntax.\n");
559                 return AVERROR(EINVAL);
560             }
561             i = j++;
562         }
563
564         if ((ret = set_control(ctx, i, val)) < 0)
565             return ret;
566         s->ctl_needs_value[i] = 0;
567     }
568
569     // Check if any controls are not set
570     for (i = 0; i < s->nb_inputcontrols; i++) {
571         if (s->ctl_needs_value[i]) {
572             av_log(ctx, AV_LOG_ERROR, "Control c%d must be set.\n", i);
573             print_ctl_info(ctx, AV_LOG_ERROR, s, i, s->icmap, s->ictlv, 0);
574             return AVERROR(EINVAL);
575         }
576     }
577
578     pad.type = AVMEDIA_TYPE_AUDIO;
579
580     if (s->nb_inputs) {
581         pad.name = av_asprintf("in0:%s%lu", desc->Label, s->nb_inputs);
582         if (!pad.name)
583             return AVERROR(ENOMEM);
584
585         pad.filter_frame = filter_frame;
586         pad.config_props = config_input;
587         if (ff_insert_inpad(ctx, ctx->nb_inputs, &pad) < 0) {
588             av_freep(&pad.name);
589             return AVERROR(ENOMEM);
590         }
591     }
592
593     av_log(ctx, AV_LOG_DEBUG, "ports: %lu\n", nb_ports);
594     av_log(ctx, AV_LOG_DEBUG, "inputs: %lu outputs: %lu\n",
595                               s->nb_inputs, s->nb_outputs);
596     av_log(ctx, AV_LOG_DEBUG, "input controls: %lu output controls: %lu\n",
597                               s->nb_inputcontrols, s->nb_outputcontrols);
598
599     return 0;
600 }
601
602 static int query_formats(AVFilterContext *ctx)
603 {
604     LADSPAContext *s = ctx->priv;
605     AVFilterFormats *formats;
606     AVFilterChannelLayouts *layouts;
607     static const enum AVSampleFormat sample_fmts[] = {
608         AV_SAMPLE_FMT_FLTP, AV_SAMPLE_FMT_NONE };
609     int ret;
610
611     formats = ff_make_format_list(sample_fmts);
612     if (!formats)
613         return AVERROR(ENOMEM);
614     ret = ff_set_common_formats(ctx, formats);
615     if (ret < 0)
616         return ret;
617
618     if (s->nb_inputs) {
619         formats = ff_all_samplerates();
620         if (!formats)
621             return AVERROR(ENOMEM);
622
623         ret = ff_set_common_samplerates(ctx, formats);
624         if (ret < 0)
625             return ret;
626     } else {
627         int sample_rates[] = { s->sample_rate, -1 };
628
629         ret = ff_set_common_samplerates(ctx, ff_make_format_list(sample_rates));
630         if (ret < 0)
631             return ret;
632     }
633
634     if (s->nb_inputs == 1 && s->nb_outputs == 1) {
635         // We will instantiate multiple LADSPA_Handle, one over each channel
636         layouts = ff_all_channel_counts();
637         if (!layouts)
638             return AVERROR(ENOMEM);
639
640         ret = ff_set_common_channel_layouts(ctx, layouts);
641         if (ret < 0)
642             return ret;
643     } else if (s->nb_inputs == 2 && s->nb_outputs == 2) {
644         layouts = NULL;
645         ret = ff_add_channel_layout(&layouts, AV_CH_LAYOUT_STEREO);
646         if (ret < 0)
647             return ret;
648         ret = ff_set_common_channel_layouts(ctx, layouts);
649         if (ret < 0)
650             return ret;
651     } else {
652         AVFilterLink *outlink = ctx->outputs[0];
653
654         if (s->nb_inputs >= 1) {
655             AVFilterLink *inlink = ctx->inputs[0];
656             uint64_t inlayout = FF_COUNT2LAYOUT(s->nb_inputs);
657
658             layouts = NULL;
659             ret = ff_add_channel_layout(&layouts, inlayout);
660             if (ret < 0)
661                 return ret;
662             ret = ff_channel_layouts_ref(layouts, &inlink->out_channel_layouts);
663             if (ret < 0)
664                 return ret;
665
666             if (!s->nb_outputs) {
667                 ret = ff_channel_layouts_ref(layouts, &outlink->in_channel_layouts);
668                 if (ret < 0)
669                     return ret;
670             }
671         }
672
673         if (s->nb_outputs >= 1) {
674             uint64_t outlayout = FF_COUNT2LAYOUT(s->nb_outputs);
675
676             layouts = NULL;
677             ret = ff_add_channel_layout(&layouts, outlayout);
678             if (ret < 0)
679                 return ret;
680             ret = ff_channel_layouts_ref(layouts, &outlink->in_channel_layouts);
681             if (ret < 0)
682                 return ret;
683         }
684     }
685
686     return 0;
687 }
688
689 static av_cold void uninit(AVFilterContext *ctx)
690 {
691     LADSPAContext *s = ctx->priv;
692     int i;
693
694     for (i = 0; i < s->nb_handles; i++) {
695         if (s->desc->deactivate)
696             s->desc->deactivate(s->handles[i]);
697         if (s->desc->cleanup)
698             s->desc->cleanup(s->handles[i]);
699     }
700
701     if (s->dl_handle)
702         dlclose(s->dl_handle);
703
704     av_freep(&s->ipmap);
705     av_freep(&s->opmap);
706     av_freep(&s->icmap);
707     av_freep(&s->ocmap);
708     av_freep(&s->ictlv);
709     av_freep(&s->octlv);
710     av_freep(&s->handles);
711     av_freep(&s->ctl_needs_value);
712
713     if (ctx->nb_inputs)
714         av_freep(&ctx->input_pads[0].name);
715 }
716
717 static int process_command(AVFilterContext *ctx, const char *cmd, const char *args,
718                            char *res, int res_len, int flags)
719 {
720     LADSPA_Data value;
721     unsigned long port;
722
723     if (av_sscanf(cmd, "c%ld", &port) + av_sscanf(args, "%f", &value) != 2)
724         return AVERROR(EINVAL);
725
726     return set_control(ctx, port, value);
727 }
728
729 static const AVFilterPad ladspa_outputs[] = {
730     {
731         .name          = "default",
732         .type          = AVMEDIA_TYPE_AUDIO,
733         .config_props  = config_output,
734         .request_frame = request_frame,
735     },
736     { NULL }
737 };
738
739 AVFilter ff_af_ladspa = {
740     .name          = "ladspa",
741     .description   = NULL_IF_CONFIG_SMALL("Apply LADSPA effect."),
742     .priv_size     = sizeof(LADSPAContext),
743     .priv_class    = &ladspa_class,
744     .init          = init,
745     .uninit        = uninit,
746     .query_formats = query_formats,
747     .process_command = process_command,
748     .inputs        = 0,
749     .outputs       = ladspa_outputs,
750     .flags         = AVFILTER_FLAG_DYNAMIC_INPUTS,
751 };