]> git.sesse.net Git - ffmpeg/blob - libavcodec/vorbisdec.c
Merge remote-tracking branch 'shariman/wmall'
[ffmpeg] / libavcodec / vorbisdec.c
1 /**
2  * @file
3  * Vorbis I decoder
4  * @author Denes Balatoni  ( dbalatoni programozo hu )
5  *
6  * This file is part of FFmpeg.
7  *
8  * FFmpeg is free software; you can redistribute it and/or
9  * modify it under the terms of the GNU Lesser General Public
10  * License as published by the Free Software Foundation; either
11  * version 2.1 of the License, or (at your option) any later version.
12  *
13  * FFmpeg is distributed in the hope that it will be useful,
14  * but WITHOUT ANY WARRANTY; without even the implied warranty of
15  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
16  * Lesser General Public License for more details.
17  *
18  * You should have received a copy of the GNU Lesser General Public
19  * License along with FFmpeg; if not, write to the Free Software
20  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
21  */
22
23 /**
24  * @file
25  * Vorbis I decoder
26  * @author Denes Balatoni  ( dbalatoni programozo hu )
27  */
28
29 #include <inttypes.h>
30 #include <math.h>
31
32 #define BITSTREAM_READER_LE
33 #include "avcodec.h"
34 #include "get_bits.h"
35 #include "dsputil.h"
36 #include "fft.h"
37 #include "fmtconvert.h"
38
39 #include "vorbis.h"
40 #include "xiph.h"
41
42 #define V_NB_BITS 8
43 #define V_NB_BITS2 11
44 #define V_MAX_VLCS (1 << 16)
45 #define V_MAX_PARTITIONS (1 << 20)
46
47 #undef NDEBUG
48 #include <assert.h>
49
50 typedef struct {
51     uint8_t      dimensions;
52     uint8_t      lookup_type;
53     uint8_t      maxdepth;
54     VLC          vlc;
55     float       *codevectors;
56     unsigned int nb_bits;
57 } vorbis_codebook;
58
59 typedef union  vorbis_floor_u  vorbis_floor_data;
60 typedef struct vorbis_floor0_s vorbis_floor0;
61 typedef struct vorbis_floor1_s vorbis_floor1;
62 struct vorbis_context_s;
63 typedef
64 int (* vorbis_floor_decode_func)
65     (struct vorbis_context_s *, vorbis_floor_data *, float *);
66 typedef struct {
67     uint8_t floor_type;
68     vorbis_floor_decode_func decode;
69     union vorbis_floor_u {
70         struct vorbis_floor0_s {
71             uint8_t       order;
72             uint16_t      rate;
73             uint16_t      bark_map_size;
74             int32_t      *map[2];
75             uint32_t      map_size[2];
76             uint8_t       amplitude_bits;
77             uint8_t       amplitude_offset;
78             uint8_t       num_books;
79             uint8_t      *book_list;
80             float        *lsp;
81         } t0;
82         struct vorbis_floor1_s {
83             uint8_t       partitions;
84             uint8_t       partition_class[32];
85             uint8_t       class_dimensions[16];
86             uint8_t       class_subclasses[16];
87             uint8_t       class_masterbook[16];
88             int16_t       subclass_books[16][8];
89             uint8_t       multiplier;
90             uint16_t      x_list_dim;
91             vorbis_floor1_entry *list;
92         } t1;
93     } data;
94 } vorbis_floor;
95
96 typedef struct {
97     uint16_t      type;
98     uint32_t      begin;
99     uint32_t      end;
100     unsigned      partition_size;
101     uint8_t       classifications;
102     uint8_t       classbook;
103     int16_t       books[64][8];
104     uint8_t       maxpass;
105     uint16_t      ptns_to_read;
106     uint8_t      *classifs;
107 } vorbis_residue;
108
109 typedef struct {
110     uint8_t       submaps;
111     uint16_t      coupling_steps;
112     uint8_t      *magnitude;
113     uint8_t      *angle;
114     uint8_t      *mux;
115     uint8_t       submap_floor[16];
116     uint8_t       submap_residue[16];
117 } vorbis_mapping;
118
119 typedef struct {
120     uint8_t       blockflag;
121     uint16_t      windowtype;
122     uint16_t      transformtype;
123     uint8_t       mapping;
124 } vorbis_mode;
125
126 typedef struct vorbis_context_s {
127     AVCodecContext *avccontext;
128     AVFrame frame;
129     GetBitContext gb;
130     DSPContext dsp;
131     FmtConvertContext fmt_conv;
132
133     FFTContext mdct[2];
134     uint8_t       first_frame;
135     uint32_t      version;
136     uint8_t       audio_channels;
137     uint32_t      audio_samplerate;
138     uint32_t      bitrate_maximum;
139     uint32_t      bitrate_nominal;
140     uint32_t      bitrate_minimum;
141     uint32_t      blocksize[2];
142     const float  *win[2];
143     uint16_t      codebook_count;
144     vorbis_codebook *codebooks;
145     uint8_t       floor_count;
146     vorbis_floor *floors;
147     uint8_t       residue_count;
148     vorbis_residue *residues;
149     uint8_t       mapping_count;
150     vorbis_mapping *mappings;
151     uint8_t       mode_count;
152     vorbis_mode  *modes;
153     uint8_t       mode_number; // mode number for the current packet
154     uint8_t       previous_window;
155     float        *channel_residues;
156     float        *channel_floors;
157     float        *saved;
158     float         scale_bias; // for float->int conversion
159 } vorbis_context;
160
161 /* Helper functions */
162
163 #define BARK(x) \
164     (13.1f * atan(0.00074f * (x)) + 2.24f * atan(1.85e-8f * (x) * (x)) + 1e-4f * (x))
165
166 static const char idx_err_str[] = "Index value %d out of range (0 - %d) for %s at %s:%i\n";
167 #define VALIDATE_INDEX(idx, limit) \
168     if (idx >= limit) {\
169         av_log(vc->avccontext, AV_LOG_ERROR,\
170                idx_err_str,\
171                (int)(idx), (int)(limit - 1), #idx, __FILE__, __LINE__);\
172         return AVERROR_INVALIDDATA;\
173     }
174 #define GET_VALIDATED_INDEX(idx, bits, limit) \
175     {\
176         idx = get_bits(gb, bits);\
177         VALIDATE_INDEX(idx, limit)\
178     }
179
180 static float vorbisfloat2float(unsigned val)
181 {
182     double mant = val & 0x1fffff;
183     long exp    = (val & 0x7fe00000L) >> 21;
184     if (val & 0x80000000)
185         mant = -mant;
186     return ldexp(mant, exp - 20 - 768);
187 }
188
189
190 // Free all allocated memory -----------------------------------------
191
192 static void vorbis_free(vorbis_context *vc)
193 {
194     int i;
195
196     av_freep(&vc->channel_residues);
197     av_freep(&vc->channel_floors);
198     av_freep(&vc->saved);
199
200     for (i = 0; i < vc->residue_count; i++)
201         av_free(vc->residues[i].classifs);
202     av_freep(&vc->residues);
203     av_freep(&vc->modes);
204
205     ff_mdct_end(&vc->mdct[0]);
206     ff_mdct_end(&vc->mdct[1]);
207
208     for (i = 0; i < vc->codebook_count; ++i) {
209         av_free(vc->codebooks[i].codevectors);
210         free_vlc(&vc->codebooks[i].vlc);
211     }
212     av_freep(&vc->codebooks);
213
214     for (i = 0; i < vc->floor_count; ++i) {
215         if (vc->floors[i].floor_type == 0) {
216             av_free(vc->floors[i].data.t0.map[0]);
217             av_free(vc->floors[i].data.t0.map[1]);
218             av_free(vc->floors[i].data.t0.book_list);
219             av_free(vc->floors[i].data.t0.lsp);
220         } else {
221             av_free(vc->floors[i].data.t1.list);
222         }
223     }
224     av_freep(&vc->floors);
225
226     for (i = 0; i < vc->mapping_count; ++i) {
227         av_free(vc->mappings[i].magnitude);
228         av_free(vc->mappings[i].angle);
229         av_free(vc->mappings[i].mux);
230     }
231     av_freep(&vc->mappings);
232 }
233
234 // Parse setup header -------------------------------------------------
235
236 // Process codebooks part
237
238 static int vorbis_parse_setup_hdr_codebooks(vorbis_context *vc)
239 {
240     unsigned cb;
241     uint8_t  *tmp_vlc_bits;
242     uint32_t *tmp_vlc_codes;
243     GetBitContext *gb = &vc->gb;
244     uint16_t *codebook_multiplicands;
245     int ret = 0;
246
247     vc->codebook_count = get_bits(gb, 8) + 1;
248
249     av_dlog(NULL, " Codebooks: %d \n", vc->codebook_count);
250
251     vc->codebooks = av_mallocz(vc->codebook_count * sizeof(*vc->codebooks));
252     tmp_vlc_bits  = av_mallocz(V_MAX_VLCS * sizeof(*tmp_vlc_bits));
253     tmp_vlc_codes = av_mallocz(V_MAX_VLCS * sizeof(*tmp_vlc_codes));
254     codebook_multiplicands = av_malloc(V_MAX_VLCS * sizeof(*codebook_multiplicands));
255
256     for (cb = 0; cb < vc->codebook_count; ++cb) {
257         vorbis_codebook *codebook_setup = &vc->codebooks[cb];
258         unsigned ordered, t, entries, used_entries = 0;
259
260         av_dlog(NULL, " %u. Codebook\n", cb);
261
262         if (get_bits(gb, 24) != 0x564342) {
263             av_log(vc->avccontext, AV_LOG_ERROR,
264                    " %u. Codebook setup data corrupt.\n", cb);
265             ret = AVERROR_INVALIDDATA;
266             goto error;
267         }
268
269         codebook_setup->dimensions=get_bits(gb, 16);
270         if (codebook_setup->dimensions > 16 || codebook_setup->dimensions == 0) {
271             av_log(vc->avccontext, AV_LOG_ERROR,
272                    " %u. Codebook's dimension is invalid (%d).\n",
273                    cb, codebook_setup->dimensions);
274             ret = AVERROR_INVALIDDATA;
275             goto error;
276         }
277         entries = get_bits(gb, 24);
278         if (entries > V_MAX_VLCS) {
279             av_log(vc->avccontext, AV_LOG_ERROR,
280                    " %u. Codebook has too many entries (%u).\n",
281                    cb, entries);
282             ret = AVERROR_INVALIDDATA;
283             goto error;
284         }
285
286         ordered = get_bits1(gb);
287
288         av_dlog(NULL, " codebook_dimensions %d, codebook_entries %u\n",
289                 codebook_setup->dimensions, entries);
290
291         if (!ordered) {
292             unsigned ce, flag;
293             unsigned sparse = get_bits1(gb);
294
295             av_dlog(NULL, " not ordered \n");
296
297             if (sparse) {
298                 av_dlog(NULL, " sparse \n");
299
300                 used_entries = 0;
301                 for (ce = 0; ce < entries; ++ce) {
302                     flag = get_bits1(gb);
303                     if (flag) {
304                         tmp_vlc_bits[ce] = get_bits(gb, 5) + 1;
305                         ++used_entries;
306                     } else
307                         tmp_vlc_bits[ce] = 0;
308                 }
309             } else {
310                 av_dlog(NULL, " not sparse \n");
311
312                 used_entries = entries;
313                 for (ce = 0; ce < entries; ++ce)
314                     tmp_vlc_bits[ce] = get_bits(gb, 5) + 1;
315             }
316         } else {
317             unsigned current_entry  = 0;
318             unsigned current_length = get_bits(gb, 5) + 1;
319
320             av_dlog(NULL, " ordered, current length: %u\n", current_length);  //FIXME
321
322             used_entries = entries;
323             for (; current_entry < used_entries && current_length <= 32; ++current_length) {
324                 unsigned i, number;
325
326                 av_dlog(NULL, " number bits: %u ", ilog(entries - current_entry));
327
328                 number = get_bits(gb, ilog(entries - current_entry));
329
330                 av_dlog(NULL, " number: %u\n", number);
331
332                 for (i = current_entry; i < number+current_entry; ++i)
333                     if (i < used_entries)
334                         tmp_vlc_bits[i] = current_length;
335
336                 current_entry+=number;
337             }
338             if (current_entry>used_entries) {
339                 av_log(vc->avccontext, AV_LOG_ERROR, " More codelengths than codes in codebook. \n");
340                 ret = AVERROR_INVALIDDATA;
341                 goto error;
342             }
343         }
344
345         codebook_setup->lookup_type = get_bits(gb, 4);
346
347         av_dlog(NULL, " lookup type: %d : %s \n", codebook_setup->lookup_type,
348                 codebook_setup->lookup_type ? "vq" : "no lookup");
349
350 // If the codebook is used for (inverse) VQ, calculate codevectors.
351
352         if (codebook_setup->lookup_type == 1) {
353             unsigned i, j, k;
354             unsigned codebook_lookup_values = ff_vorbis_nth_root(entries, codebook_setup->dimensions);
355
356             float codebook_minimum_value = vorbisfloat2float(get_bits_long(gb, 32));
357             float codebook_delta_value   = vorbisfloat2float(get_bits_long(gb, 32));
358             unsigned codebook_value_bits = get_bits(gb, 4) + 1;
359             unsigned codebook_sequence_p = get_bits1(gb);
360
361             av_dlog(NULL, " We expect %d numbers for building the codevectors. \n",
362                     codebook_lookup_values);
363             av_dlog(NULL, "  delta %f minmum %f \n",
364                     codebook_delta_value, codebook_minimum_value);
365
366             for (i = 0; i < codebook_lookup_values; ++i) {
367                 codebook_multiplicands[i] = get_bits(gb, codebook_value_bits);
368
369                 av_dlog(NULL, " multiplicands*delta+minmum : %e \n",
370                         (float)codebook_multiplicands[i] * codebook_delta_value + codebook_minimum_value);
371                 av_dlog(NULL, " multiplicand %u\n", codebook_multiplicands[i]);
372             }
373
374 // Weed out unused vlcs and build codevector vector
375             codebook_setup->codevectors = used_entries ? av_mallocz(used_entries *
376                                                                     codebook_setup->dimensions *
377                                                                     sizeof(*codebook_setup->codevectors))
378                                                        : NULL;
379             for (j = 0, i = 0; i < entries; ++i) {
380                 unsigned dim = codebook_setup->dimensions;
381
382                 if (tmp_vlc_bits[i]) {
383                     float last = 0.0;
384                     unsigned lookup_offset = i;
385
386                     av_dlog(vc->avccontext, "Lookup offset %u ,", i);
387
388                     for (k = 0; k < dim; ++k) {
389                         unsigned multiplicand_offset = lookup_offset % codebook_lookup_values;
390                         codebook_setup->codevectors[j * dim + k] = codebook_multiplicands[multiplicand_offset] * codebook_delta_value + codebook_minimum_value + last;
391                         if (codebook_sequence_p)
392                             last = codebook_setup->codevectors[j * dim + k];
393                         lookup_offset/=codebook_lookup_values;
394                     }
395                     tmp_vlc_bits[j] = tmp_vlc_bits[i];
396
397                     av_dlog(vc->avccontext, "real lookup offset %u, vector: ", j);
398                     for (k = 0; k < dim; ++k)
399                         av_dlog(vc->avccontext, " %f ",
400                                 codebook_setup->codevectors[j * dim + k]);
401                     av_dlog(vc->avccontext, "\n");
402
403                     ++j;
404                 }
405             }
406             if (j != used_entries) {
407                 av_log(vc->avccontext, AV_LOG_ERROR, "Bug in codevector vector building code. \n");
408                 ret = AVERROR_INVALIDDATA;
409                 goto error;
410             }
411             entries = used_entries;
412         } else if (codebook_setup->lookup_type >= 2) {
413             av_log(vc->avccontext, AV_LOG_ERROR, "Codebook lookup type not supported. \n");
414             ret = AVERROR_INVALIDDATA;
415             goto error;
416         }
417
418 // Initialize VLC table
419         if (ff_vorbis_len2vlc(tmp_vlc_bits, tmp_vlc_codes, entries)) {
420             av_log(vc->avccontext, AV_LOG_ERROR, " Invalid code lengths while generating vlcs. \n");
421             ret = AVERROR_INVALIDDATA;
422             goto error;
423         }
424         codebook_setup->maxdepth = 0;
425         for (t = 0; t < entries; ++t)
426             if (tmp_vlc_bits[t] >= codebook_setup->maxdepth)
427                 codebook_setup->maxdepth = tmp_vlc_bits[t];
428
429         if (codebook_setup->maxdepth > 3 * V_NB_BITS)
430             codebook_setup->nb_bits = V_NB_BITS2;
431         else
432             codebook_setup->nb_bits = V_NB_BITS;
433
434         codebook_setup->maxdepth = (codebook_setup->maxdepth+codebook_setup->nb_bits - 1) / codebook_setup->nb_bits;
435
436         if ((ret = init_vlc(&codebook_setup->vlc, codebook_setup->nb_bits,
437                             entries, tmp_vlc_bits, sizeof(*tmp_vlc_bits),
438                             sizeof(*tmp_vlc_bits), tmp_vlc_codes,
439                             sizeof(*tmp_vlc_codes), sizeof(*tmp_vlc_codes),
440                             INIT_VLC_LE))) {
441             av_log(vc->avccontext, AV_LOG_ERROR, " Error generating vlc tables. \n");
442             goto error;
443         }
444     }
445
446     av_free(tmp_vlc_bits);
447     av_free(tmp_vlc_codes);
448     av_free(codebook_multiplicands);
449     return 0;
450
451 // Error:
452 error:
453     av_free(tmp_vlc_bits);
454     av_free(tmp_vlc_codes);
455     av_free(codebook_multiplicands);
456     return ret;
457 }
458
459 // Process time domain transforms part (unused in Vorbis I)
460
461 static int vorbis_parse_setup_hdr_tdtransforms(vorbis_context *vc)
462 {
463     GetBitContext *gb = &vc->gb;
464     unsigned i, vorbis_time_count = get_bits(gb, 6) + 1;
465
466     for (i = 0; i < vorbis_time_count; ++i) {
467         unsigned vorbis_tdtransform = get_bits(gb, 16);
468
469         av_dlog(NULL, " Vorbis time domain transform %u: %u\n",
470                 vorbis_time_count, vorbis_tdtransform);
471
472         if (vorbis_tdtransform) {
473             av_log(vc->avccontext, AV_LOG_ERROR, "Vorbis time domain transform data nonzero. \n");
474             return AVERROR_INVALIDDATA;
475         }
476     }
477     return 0;
478 }
479
480 // Process floors part
481
482 static int vorbis_floor0_decode(vorbis_context *vc,
483                                 vorbis_floor_data *vfu, float *vec);
484 static void create_map(vorbis_context *vc, unsigned floor_number);
485 static int vorbis_floor1_decode(vorbis_context *vc,
486                                 vorbis_floor_data *vfu, float *vec);
487 static int vorbis_parse_setup_hdr_floors(vorbis_context *vc)
488 {
489     GetBitContext *gb = &vc->gb;
490     int i,j,k;
491
492     vc->floor_count = get_bits(gb, 6) + 1;
493
494     vc->floors = av_mallocz(vc->floor_count * sizeof(*vc->floors));
495
496     for (i = 0; i < vc->floor_count; ++i) {
497         vorbis_floor *floor_setup = &vc->floors[i];
498
499         floor_setup->floor_type = get_bits(gb, 16);
500
501         av_dlog(NULL, " %d. floor type %d \n", i, floor_setup->floor_type);
502
503         if (floor_setup->floor_type == 1) {
504             int maximum_class = -1;
505             unsigned rangebits, rangemax, floor1_values = 2;
506
507             floor_setup->decode = vorbis_floor1_decode;
508
509             floor_setup->data.t1.partitions = get_bits(gb, 5);
510
511             av_dlog(NULL, " %d.floor: %d partitions \n",
512                     i, floor_setup->data.t1.partitions);
513
514             for (j = 0; j < floor_setup->data.t1.partitions; ++j) {
515                 floor_setup->data.t1.partition_class[j] = get_bits(gb, 4);
516                 if (floor_setup->data.t1.partition_class[j] > maximum_class)
517                     maximum_class = floor_setup->data.t1.partition_class[j];
518
519                 av_dlog(NULL, " %d. floor %d partition class %d \n",
520                         i, j, floor_setup->data.t1.partition_class[j]);
521
522             }
523
524             av_dlog(NULL, " maximum class %d \n", maximum_class);
525
526             for (j = 0; j <= maximum_class; ++j) {
527                 floor_setup->data.t1.class_dimensions[j] = get_bits(gb, 3) + 1;
528                 floor_setup->data.t1.class_subclasses[j] = get_bits(gb, 2);
529
530                 av_dlog(NULL, " %d floor %d class dim: %d subclasses %d \n", i, j,
531                         floor_setup->data.t1.class_dimensions[j],
532                         floor_setup->data.t1.class_subclasses[j]);
533
534                 if (floor_setup->data.t1.class_subclasses[j]) {
535                     GET_VALIDATED_INDEX(floor_setup->data.t1.class_masterbook[j], 8, vc->codebook_count)
536
537                     av_dlog(NULL, "   masterbook: %d \n", floor_setup->data.t1.class_masterbook[j]);
538                 }
539
540                 for (k = 0; k < (1 << floor_setup->data.t1.class_subclasses[j]); ++k) {
541                     int16_t bits = get_bits(gb, 8) - 1;
542                     if (bits != -1)
543                         VALIDATE_INDEX(bits, vc->codebook_count)
544                     floor_setup->data.t1.subclass_books[j][k] = bits;
545
546                     av_dlog(NULL, "    book %d. : %d \n", k, floor_setup->data.t1.subclass_books[j][k]);
547                 }
548             }
549
550             floor_setup->data.t1.multiplier = get_bits(gb, 2) + 1;
551             floor_setup->data.t1.x_list_dim = 2;
552
553             for (j = 0; j < floor_setup->data.t1.partitions; ++j)
554                 floor_setup->data.t1.x_list_dim+=floor_setup->data.t1.class_dimensions[floor_setup->data.t1.partition_class[j]];
555
556             floor_setup->data.t1.list = av_mallocz(floor_setup->data.t1.x_list_dim *
557                                                    sizeof(*floor_setup->data.t1.list));
558
559
560             rangebits = get_bits(gb, 4);
561             rangemax = (1 << rangebits);
562             if (rangemax > vc->blocksize[1] / 2) {
563                 av_log(vc->avccontext, AV_LOG_ERROR,
564                        "Floor value is too large for blocksize: %u (%"PRIu32")\n",
565                        rangemax, vc->blocksize[1] / 2);
566                 return AVERROR_INVALIDDATA;
567             }
568             floor_setup->data.t1.list[0].x = 0;
569             floor_setup->data.t1.list[1].x = rangemax;
570
571             for (j = 0; j < floor_setup->data.t1.partitions; ++j) {
572                 for (k = 0; k < floor_setup->data.t1.class_dimensions[floor_setup->data.t1.partition_class[j]]; ++k, ++floor1_values) {
573                     floor_setup->data.t1.list[floor1_values].x = get_bits(gb, rangebits);
574
575                     av_dlog(NULL, " %u. floor1 Y coord. %d\n", floor1_values,
576                             floor_setup->data.t1.list[floor1_values].x);
577                 }
578             }
579
580 // Precalculate order of x coordinates - needed for decode
581             ff_vorbis_ready_floor1_list(floor_setup->data.t1.list, floor_setup->data.t1.x_list_dim);
582         } else if (floor_setup->floor_type == 0) {
583             unsigned max_codebook_dim = 0;
584
585             floor_setup->decode = vorbis_floor0_decode;
586
587             floor_setup->data.t0.order          = get_bits(gb,  8);
588             floor_setup->data.t0.rate           = get_bits(gb, 16);
589             floor_setup->data.t0.bark_map_size  = get_bits(gb, 16);
590             floor_setup->data.t0.amplitude_bits = get_bits(gb,  6);
591             /* zero would result in a div by zero later *
592              * 2^0 - 1 == 0                             */
593             if (floor_setup->data.t0.amplitude_bits == 0) {
594                 av_log(vc->avccontext, AV_LOG_ERROR,
595                        "Floor 0 amplitude bits is 0.\n");
596                 return AVERROR_INVALIDDATA;
597             }
598             floor_setup->data.t0.amplitude_offset = get_bits(gb, 8);
599             floor_setup->data.t0.num_books        = get_bits(gb, 4) + 1;
600
601             /* allocate mem for booklist */
602             floor_setup->data.t0.book_list =
603                 av_malloc(floor_setup->data.t0.num_books);
604             if (!floor_setup->data.t0.book_list)
605                 return AVERROR(ENOMEM);
606             /* read book indexes */
607             {
608                 int idx;
609                 unsigned book_idx;
610                 for (idx = 0; idx < floor_setup->data.t0.num_books; ++idx) {
611                     GET_VALIDATED_INDEX(book_idx, 8, vc->codebook_count)
612                     floor_setup->data.t0.book_list[idx] = book_idx;
613                     if (vc->codebooks[book_idx].dimensions > max_codebook_dim)
614                         max_codebook_dim = vc->codebooks[book_idx].dimensions;
615                 }
616             }
617
618             create_map(vc, i);
619
620             /* codebook dim is for padding if codebook dim doesn't *
621              * divide order+1 then we need to read more data       */
622             floor_setup->data.t0.lsp =
623                 av_malloc((floor_setup->data.t0.order + 1 + max_codebook_dim)
624                           * sizeof(*floor_setup->data.t0.lsp));
625             if (!floor_setup->data.t0.lsp)
626                 return AVERROR(ENOMEM);
627
628             /* debug output parsed headers */
629             av_dlog(NULL, "floor0 order: %u\n", floor_setup->data.t0.order);
630             av_dlog(NULL, "floor0 rate: %u\n", floor_setup->data.t0.rate);
631             av_dlog(NULL, "floor0 bark map size: %u\n",
632                     floor_setup->data.t0.bark_map_size);
633             av_dlog(NULL, "floor0 amplitude bits: %u\n",
634                     floor_setup->data.t0.amplitude_bits);
635             av_dlog(NULL, "floor0 amplitude offset: %u\n",
636                     floor_setup->data.t0.amplitude_offset);
637             av_dlog(NULL, "floor0 number of books: %u\n",
638                     floor_setup->data.t0.num_books);
639             av_dlog(NULL, "floor0 book list pointer: %p\n",
640                     floor_setup->data.t0.book_list);
641             {
642                 int idx;
643                 for (idx = 0; idx < floor_setup->data.t0.num_books; ++idx) {
644                     av_dlog(NULL, "  Book %d: %u\n", idx + 1,
645                             floor_setup->data.t0.book_list[idx]);
646                 }
647             }
648         } else {
649             av_log(vc->avccontext, AV_LOG_ERROR, "Invalid floor type!\n");
650             return AVERROR_INVALIDDATA;
651         }
652     }
653     return 0;
654 }
655
656 // Process residues part
657
658 static int vorbis_parse_setup_hdr_residues(vorbis_context *vc)
659 {
660     GetBitContext *gb = &vc->gb;
661     unsigned i, j, k;
662
663     vc->residue_count = get_bits(gb, 6)+1;
664     vc->residues      = av_mallocz(vc->residue_count * sizeof(*vc->residues));
665
666     av_dlog(NULL, " There are %d residues. \n", vc->residue_count);
667
668     for (i = 0; i < vc->residue_count; ++i) {
669         vorbis_residue *res_setup = &vc->residues[i];
670         uint8_t cascade[64];
671         unsigned high_bits, low_bits;
672
673         res_setup->type = get_bits(gb, 16);
674
675         av_dlog(NULL, " %u. residue type %d\n", i, res_setup->type);
676
677         res_setup->begin          = get_bits(gb, 24);
678         res_setup->end            = get_bits(gb, 24);
679         res_setup->partition_size = get_bits(gb, 24) + 1;
680         /* Validations to prevent a buffer overflow later. */
681         if (res_setup->begin>res_setup->end ||
682             res_setup->end > vc->avccontext->channels * vc->blocksize[1] / 2 ||
683             (res_setup->end-res_setup->begin) / res_setup->partition_size > V_MAX_PARTITIONS) {
684             av_log(vc->avccontext, AV_LOG_ERROR,
685                    "partition out of bounds: type, begin, end, size, blocksize: %"PRIu16", %"PRIu32", %"PRIu32", %u, %"PRIu32"\n",
686                    res_setup->type, res_setup->begin, res_setup->end,
687                    res_setup->partition_size, vc->blocksize[1] / 2);
688             return AVERROR_INVALIDDATA;
689         }
690
691         res_setup->classifications = get_bits(gb, 6) + 1;
692         GET_VALIDATED_INDEX(res_setup->classbook, 8, vc->codebook_count)
693
694         res_setup->ptns_to_read =
695             (res_setup->end - res_setup->begin) / res_setup->partition_size;
696         res_setup->classifs = av_malloc(res_setup->ptns_to_read *
697                                         vc->audio_channels *
698                                         sizeof(*res_setup->classifs));
699         if (!res_setup->classifs)
700             return AVERROR(ENOMEM);
701
702         av_dlog(NULL, "    begin %d end %d part.size %d classif.s %d classbook %d \n",
703                 res_setup->begin, res_setup->end, res_setup->partition_size,
704                 res_setup->classifications, res_setup->classbook);
705
706         for (j = 0; j < res_setup->classifications; ++j) {
707             high_bits = 0;
708             low_bits  = get_bits(gb, 3);
709             if (get_bits1(gb))
710                 high_bits = get_bits(gb, 5);
711             cascade[j] = (high_bits << 3) + low_bits;
712
713             av_dlog(NULL, "     %u class cascade depth: %d\n", j, ilog(cascade[j]));
714         }
715
716         res_setup->maxpass = 0;
717         for (j = 0; j < res_setup->classifications; ++j) {
718             for (k = 0; k < 8; ++k) {
719                 if (cascade[j]&(1 << k)) {
720                     GET_VALIDATED_INDEX(res_setup->books[j][k], 8, vc->codebook_count)
721
722                     av_dlog(NULL, "     %u class cascade depth %u book: %d\n",
723                             j, k, res_setup->books[j][k]);
724
725                     if (k>res_setup->maxpass)
726                         res_setup->maxpass = k;
727                 } else {
728                     res_setup->books[j][k] = -1;
729                 }
730             }
731         }
732     }
733     return 0;
734 }
735
736 // Process mappings part
737
738 static int vorbis_parse_setup_hdr_mappings(vorbis_context *vc)
739 {
740     GetBitContext *gb = &vc->gb;
741     unsigned i, j;
742
743     vc->mapping_count = get_bits(gb, 6)+1;
744     vc->mappings      = av_mallocz(vc->mapping_count * sizeof(*vc->mappings));
745
746     av_dlog(NULL, " There are %d mappings. \n", vc->mapping_count);
747
748     for (i = 0; i < vc->mapping_count; ++i) {
749         vorbis_mapping *mapping_setup = &vc->mappings[i];
750
751         if (get_bits(gb, 16)) {
752             av_log(vc->avccontext, AV_LOG_ERROR, "Other mappings than type 0 are not compliant with the Vorbis I specification. \n");
753             return AVERROR_INVALIDDATA;
754         }
755         if (get_bits1(gb)) {
756             mapping_setup->submaps = get_bits(gb, 4) + 1;
757         } else {
758             mapping_setup->submaps = 1;
759         }
760
761         if (get_bits1(gb)) {
762             mapping_setup->coupling_steps = get_bits(gb, 8) + 1;
763             mapping_setup->magnitude      = av_mallocz(mapping_setup->coupling_steps *
764                                                        sizeof(*mapping_setup->magnitude));
765             mapping_setup->angle          = av_mallocz(mapping_setup->coupling_steps *
766                                                        sizeof(*mapping_setup->angle));
767             for (j = 0; j < mapping_setup->coupling_steps; ++j) {
768                 GET_VALIDATED_INDEX(mapping_setup->magnitude[j], ilog(vc->audio_channels - 1), vc->audio_channels)
769                 GET_VALIDATED_INDEX(mapping_setup->angle[j],     ilog(vc->audio_channels - 1), vc->audio_channels)
770             }
771         } else {
772             mapping_setup->coupling_steps = 0;
773         }
774
775         av_dlog(NULL, "   %u mapping coupling steps: %d\n",
776                 i, mapping_setup->coupling_steps);
777
778         if (get_bits(gb, 2)) {
779             av_log(vc->avccontext, AV_LOG_ERROR, "%u. mapping setup data invalid.\n", i);
780             return AVERROR_INVALIDDATA; // following spec.
781         }
782
783         if (mapping_setup->submaps>1) {
784             mapping_setup->mux = av_mallocz(vc->audio_channels *
785                                             sizeof(*mapping_setup->mux));
786             for (j = 0; j < vc->audio_channels; ++j)
787                 mapping_setup->mux[j] = get_bits(gb, 4);
788         }
789
790         for (j = 0; j < mapping_setup->submaps; ++j) {
791             skip_bits(gb, 8); // FIXME check?
792             GET_VALIDATED_INDEX(mapping_setup->submap_floor[j],   8, vc->floor_count)
793             GET_VALIDATED_INDEX(mapping_setup->submap_residue[j], 8, vc->residue_count)
794
795             av_dlog(NULL, "   %u mapping %u submap : floor %d, residue %d\n", i, j,
796                     mapping_setup->submap_floor[j],
797                     mapping_setup->submap_residue[j]);
798         }
799     }
800     return 0;
801 }
802
803 // Process modes part
804
805 static void create_map(vorbis_context *vc, unsigned floor_number)
806 {
807     vorbis_floor *floors = vc->floors;
808     vorbis_floor0 *vf;
809     int idx;
810     int blockflag, n;
811     int32_t *map;
812
813     for (blockflag = 0; blockflag < 2; ++blockflag) {
814         n = vc->blocksize[blockflag] / 2;
815         floors[floor_number].data.t0.map[blockflag] =
816             av_malloc((n + 1) * sizeof(int32_t)); // n + sentinel
817
818         map =  floors[floor_number].data.t0.map[blockflag];
819         vf  = &floors[floor_number].data.t0;
820
821         for (idx = 0; idx < n; ++idx) {
822             map[idx] = floor(BARK((vf->rate * idx) / (2.0f * n)) *
823                              ((vf->bark_map_size) /
824                               BARK(vf->rate / 2.0f)));
825             if (vf->bark_map_size-1 < map[idx])
826                 map[idx] = vf->bark_map_size - 1;
827         }
828         map[n] = -1;
829         vf->map_size[blockflag] = n;
830     }
831
832     for (idx = 0; idx <= n; ++idx) {
833         av_dlog(NULL, "floor0 map: map at pos %d is %d\n", idx, map[idx]);
834     }
835 }
836
837 static int vorbis_parse_setup_hdr_modes(vorbis_context *vc)
838 {
839     GetBitContext *gb = &vc->gb;
840     unsigned i;
841
842     vc->mode_count = get_bits(gb, 6) + 1;
843     vc->modes      = av_mallocz(vc->mode_count * sizeof(*vc->modes));
844
845     av_dlog(NULL, " There are %d modes.\n", vc->mode_count);
846
847     for (i = 0; i < vc->mode_count; ++i) {
848         vorbis_mode *mode_setup = &vc->modes[i];
849
850         mode_setup->blockflag     = get_bits1(gb);
851         mode_setup->windowtype    = get_bits(gb, 16); //FIXME check
852         mode_setup->transformtype = get_bits(gb, 16); //FIXME check
853         GET_VALIDATED_INDEX(mode_setup->mapping, 8, vc->mapping_count);
854
855         av_dlog(NULL, " %u mode: blockflag %d, windowtype %d, transformtype %d, mapping %d\n",
856                 i, mode_setup->blockflag, mode_setup->windowtype,
857                 mode_setup->transformtype, mode_setup->mapping);
858     }
859     return 0;
860 }
861
862 // Process the whole setup header using the functions above
863
864 static int vorbis_parse_setup_hdr(vorbis_context *vc)
865 {
866     GetBitContext *gb = &vc->gb;
867     int ret;
868
869     if ((get_bits(gb, 8) != 'v') || (get_bits(gb, 8) != 'o') ||
870         (get_bits(gb, 8) != 'r') || (get_bits(gb, 8) != 'b') ||
871         (get_bits(gb, 8) != 'i') || (get_bits(gb, 8) != 's')) {
872         av_log(vc->avccontext, AV_LOG_ERROR, " Vorbis setup header packet corrupt (no vorbis signature). \n");
873         return AVERROR_INVALIDDATA;
874     }
875
876     if ((ret = vorbis_parse_setup_hdr_codebooks(vc))) {
877         av_log(vc->avccontext, AV_LOG_ERROR, " Vorbis setup header packet corrupt (codebooks). \n");
878         return ret;
879     }
880     if ((ret = vorbis_parse_setup_hdr_tdtransforms(vc))) {
881         av_log(vc->avccontext, AV_LOG_ERROR, " Vorbis setup header packet corrupt (time domain transforms). \n");
882         return ret;
883     }
884     if ((ret = vorbis_parse_setup_hdr_floors(vc))) {
885         av_log(vc->avccontext, AV_LOG_ERROR, " Vorbis setup header packet corrupt (floors). \n");
886         return ret;
887     }
888     if ((ret = vorbis_parse_setup_hdr_residues(vc))) {
889         av_log(vc->avccontext, AV_LOG_ERROR, " Vorbis setup header packet corrupt (residues). \n");
890         return ret;
891     }
892     if ((ret = vorbis_parse_setup_hdr_mappings(vc))) {
893         av_log(vc->avccontext, AV_LOG_ERROR, " Vorbis setup header packet corrupt (mappings). \n");
894         return ret;
895     }
896     if ((ret = vorbis_parse_setup_hdr_modes(vc))) {
897         av_log(vc->avccontext, AV_LOG_ERROR, " Vorbis setup header packet corrupt (modes). \n");
898         return ret;
899     }
900     if (!get_bits1(gb)) {
901         av_log(vc->avccontext, AV_LOG_ERROR, " Vorbis setup header packet corrupt (framing flag). \n");
902         return AVERROR_INVALIDDATA; // framing flag bit unset error
903     }
904
905     return 0;
906 }
907
908 // Process the identification header
909
910 static int vorbis_parse_id_hdr(vorbis_context *vc)
911 {
912     GetBitContext *gb = &vc->gb;
913     unsigned bl0, bl1;
914
915     if ((get_bits(gb, 8) != 'v') || (get_bits(gb, 8) != 'o') ||
916         (get_bits(gb, 8) != 'r') || (get_bits(gb, 8) != 'b') ||
917         (get_bits(gb, 8) != 'i') || (get_bits(gb, 8) != 's')) {
918         av_log(vc->avccontext, AV_LOG_ERROR, " Vorbis id header packet corrupt (no vorbis signature). \n");
919         return AVERROR_INVALIDDATA;
920     }
921
922     vc->version        = get_bits_long(gb, 32);    //FIXME check 0
923     vc->audio_channels = get_bits(gb, 8);
924     if (vc->audio_channels <= 0) {
925         av_log(vc->avccontext, AV_LOG_ERROR, "Invalid number of channels\n");
926         return AVERROR_INVALIDDATA;
927     }
928     vc->audio_samplerate = get_bits_long(gb, 32);
929     if (vc->audio_samplerate <= 0) {
930         av_log(vc->avccontext, AV_LOG_ERROR, "Invalid samplerate\n");
931         return AVERROR_INVALIDDATA;
932     }
933     vc->bitrate_maximum = get_bits_long(gb, 32);
934     vc->bitrate_nominal = get_bits_long(gb, 32);
935     vc->bitrate_minimum = get_bits_long(gb, 32);
936     bl0 = get_bits(gb, 4);
937     bl1 = get_bits(gb, 4);
938     vc->blocksize[0] = (1 << bl0);
939     vc->blocksize[1] = (1 << bl1);
940     if (bl0 > 13 || bl0 < 6 || bl1 > 13 || bl1 < 6 || bl1 < bl0) {
941         av_log(vc->avccontext, AV_LOG_ERROR, " Vorbis id header packet corrupt (illegal blocksize). \n");
942         return AVERROR_INVALIDDATA;
943     }
944     vc->win[0] = ff_vorbis_vwin[bl0 - 6];
945     vc->win[1] = ff_vorbis_vwin[bl1 - 6];
946
947     if ((get_bits1(gb)) == 0) {
948         av_log(vc->avccontext, AV_LOG_ERROR, " Vorbis id header packet corrupt (framing flag not set). \n");
949         return AVERROR_INVALIDDATA;
950     }
951
952     vc->channel_residues =  av_malloc((vc->blocksize[1]  / 2) * vc->audio_channels * sizeof(*vc->channel_residues));
953     vc->channel_floors   =  av_malloc((vc->blocksize[1]  / 2) * vc->audio_channels * sizeof(*vc->channel_floors));
954     vc->saved            =  av_mallocz((vc->blocksize[1] / 4) * vc->audio_channels * sizeof(*vc->saved));
955     vc->previous_window  = 0;
956
957     ff_mdct_init(&vc->mdct[0], bl0, 1, -vc->scale_bias);
958     ff_mdct_init(&vc->mdct[1], bl1, 1, -vc->scale_bias);
959
960     av_dlog(NULL, " vorbis version %d \n audio_channels %d \n audio_samplerate %d \n bitrate_max %d \n bitrate_nom %d \n bitrate_min %d \n blk_0 %d blk_1 %d \n ",
961             vc->version, vc->audio_channels, vc->audio_samplerate, vc->bitrate_maximum, vc->bitrate_nominal, vc->bitrate_minimum, vc->blocksize[0], vc->blocksize[1]);
962
963 /*
964     BLK = vc->blocksize[0];
965     for (i = 0; i < BLK / 2; ++i) {
966         vc->win[0][i] = sin(0.5*3.14159265358*(sin(((float)i + 0.5) / (float)BLK*3.14159265358))*(sin(((float)i + 0.5) / (float)BLK*3.14159265358)));
967     }
968 */
969
970     return 0;
971 }
972
973 // Process the extradata using the functions above (identification header, setup header)
974
975 static av_cold int vorbis_decode_init(AVCodecContext *avccontext)
976 {
977     vorbis_context *vc = avccontext->priv_data;
978     uint8_t *headers   = avccontext->extradata;
979     int headers_len    = avccontext->extradata_size;
980     uint8_t *header_start[3];
981     int header_len[3];
982     GetBitContext *gb = &(vc->gb);
983     int hdr_type, ret;
984
985     vc->avccontext = avccontext;
986     dsputil_init(&vc->dsp, avccontext);
987     ff_fmt_convert_init(&vc->fmt_conv, avccontext);
988
989     if (avccontext->request_sample_fmt == AV_SAMPLE_FMT_FLT) {
990         avccontext->sample_fmt = AV_SAMPLE_FMT_FLT;
991         vc->scale_bias = 1.0f;
992     } else {
993         avccontext->sample_fmt = AV_SAMPLE_FMT_S16;
994         vc->scale_bias = 32768.0f;
995     }
996
997     if (!headers_len) {
998         av_log(avccontext, AV_LOG_ERROR, "Extradata missing.\n");
999         return AVERROR_INVALIDDATA;
1000     }
1001
1002     if ((ret = avpriv_split_xiph_headers(headers, headers_len, 30, header_start, header_len)) < 0) {
1003         av_log(avccontext, AV_LOG_ERROR, "Extradata corrupt.\n");
1004         return ret;
1005     }
1006
1007     init_get_bits(gb, header_start[0], header_len[0]*8);
1008     hdr_type = get_bits(gb, 8);
1009     if (hdr_type != 1) {
1010         av_log(avccontext, AV_LOG_ERROR, "First header is not the id header.\n");
1011         return AVERROR_INVALIDDATA;
1012     }
1013     if ((ret = vorbis_parse_id_hdr(vc))) {
1014         av_log(avccontext, AV_LOG_ERROR, "Id header corrupt.\n");
1015         vorbis_free(vc);
1016         return ret;
1017     }
1018
1019     init_get_bits(gb, header_start[2], header_len[2]*8);
1020     hdr_type = get_bits(gb, 8);
1021     if (hdr_type != 5) {
1022         av_log(avccontext, AV_LOG_ERROR, "Third header is not the setup header.\n");
1023         vorbis_free(vc);
1024         return AVERROR_INVALIDDATA;
1025     }
1026     if ((ret = vorbis_parse_setup_hdr(vc))) {
1027         av_log(avccontext, AV_LOG_ERROR, "Setup header corrupt.\n");
1028         vorbis_free(vc);
1029         return ret;
1030     }
1031
1032     if (vc->audio_channels > 8)
1033         avccontext->channel_layout = 0;
1034     else
1035         avccontext->channel_layout = ff_vorbis_channel_layouts[vc->audio_channels - 1];
1036
1037     avccontext->channels    = vc->audio_channels;
1038     avccontext->sample_rate = vc->audio_samplerate;
1039     avccontext->frame_size  = FFMIN(vc->blocksize[0], vc->blocksize[1]) >> 2;
1040
1041     avcodec_get_frame_defaults(&vc->frame);
1042     avccontext->coded_frame = &vc->frame;
1043
1044     return 0;
1045 }
1046
1047 // Decode audiopackets -------------------------------------------------
1048
1049 // Read and decode floor
1050
1051 static int vorbis_floor0_decode(vorbis_context *vc,
1052                                 vorbis_floor_data *vfu, float *vec)
1053 {
1054     vorbis_floor0 *vf = &vfu->t0;
1055     float *lsp = vf->lsp;
1056     unsigned amplitude, book_idx;
1057     unsigned blockflag = vc->modes[vc->mode_number].blockflag;
1058
1059     amplitude = get_bits(&vc->gb, vf->amplitude_bits);
1060     if (amplitude > 0) {
1061         float last = 0;
1062         unsigned idx, lsp_len = 0;
1063         vorbis_codebook codebook;
1064
1065         book_idx = get_bits(&vc->gb, ilog(vf->num_books));
1066         if (book_idx >= vf->num_books) {
1067             av_log(vc->avccontext, AV_LOG_ERROR,
1068                     "floor0 dec: booknumber too high!\n");
1069             book_idx =  0;
1070         }
1071         av_dlog(NULL, "floor0 dec: booknumber: %u\n", book_idx);
1072         codebook = vc->codebooks[vf->book_list[book_idx]];
1073         /* Invalid codebook! */
1074         if (!codebook.codevectors)
1075             return AVERROR_INVALIDDATA;
1076
1077         while (lsp_len<vf->order) {
1078             int vec_off;
1079
1080             av_dlog(NULL, "floor0 dec: book dimension: %d\n", codebook.dimensions);
1081             av_dlog(NULL, "floor0 dec: maximum depth: %d\n", codebook.maxdepth);
1082             /* read temp vector */
1083             vec_off = get_vlc2(&vc->gb, codebook.vlc.table,
1084                                codebook.nb_bits, codebook.maxdepth)
1085                       * codebook.dimensions;
1086             av_dlog(NULL, "floor0 dec: vector offset: %d\n", vec_off);
1087             /* copy each vector component and add last to it */
1088             for (idx = 0; idx < codebook.dimensions; ++idx)
1089                 lsp[lsp_len+idx] = codebook.codevectors[vec_off+idx] + last;
1090             last = lsp[lsp_len+idx-1]; /* set last to last vector component */
1091
1092             lsp_len += codebook.dimensions;
1093         }
1094         /* DEBUG: output lsp coeffs */
1095         {
1096             int idx;
1097             for (idx = 0; idx < lsp_len; ++idx)
1098                 av_dlog(NULL, "floor0 dec: coeff at %d is %f\n", idx, lsp[idx]);
1099         }
1100
1101         /* synthesize floor output vector */
1102         {
1103             int i;
1104             int order = vf->order;
1105             float wstep = M_PI / vf->bark_map_size;
1106
1107             for (i = 0; i < order; i++)
1108                 lsp[i] = 2.0f * cos(lsp[i]);
1109
1110             av_dlog(NULL, "floor0 synth: map_size = %"PRIu32"; m = %d; wstep = %f\n",
1111                     vf->map_size[blockflag], order, wstep);
1112
1113             i = 0;
1114             while (i < vf->map_size[blockflag]) {
1115                 int j, iter_cond = vf->map[blockflag][i];
1116                 float p = 0.5f;
1117                 float q = 0.5f;
1118                 float two_cos_w = 2.0f * cos(wstep * iter_cond); // needed all times
1119
1120                 /* similar part for the q and p products */
1121                 for (j = 0; j + 1 < order; j += 2) {
1122                     q *= lsp[j]     - two_cos_w;
1123                     p *= lsp[j + 1] - two_cos_w;
1124                 }
1125                 if (j == order) { // even order
1126                     p *= p * (2.0f - two_cos_w);
1127                     q *= q * (2.0f + two_cos_w);
1128                 } else { // odd order
1129                     q *= two_cos_w-lsp[j]; // one more time for q
1130
1131                     /* final step and square */
1132                     p *= p * (4.f - two_cos_w * two_cos_w);
1133                     q *= q;
1134                 }
1135
1136                 /* calculate linear floor value */
1137                 q = exp((((amplitude*vf->amplitude_offset) /
1138                           (((1 << vf->amplitude_bits) - 1) * sqrt(p + q)))
1139                          - vf->amplitude_offset) * .11512925f);
1140
1141                 /* fill vector */
1142                 do {
1143                     vec[i] = q; ++i;
1144                 } while (vf->map[blockflag][i] == iter_cond);
1145             }
1146         }
1147     } else {
1148         /* this channel is unused */
1149         return 1;
1150     }
1151
1152     av_dlog(NULL, " Floor0 decoded\n");
1153
1154     return 0;
1155 }
1156
1157 static int vorbis_floor1_decode(vorbis_context *vc,
1158                                 vorbis_floor_data *vfu, float *vec)
1159 {
1160     vorbis_floor1 *vf = &vfu->t1;
1161     GetBitContext *gb = &vc->gb;
1162     uint16_t range_v[4] = { 256, 128, 86, 64 };
1163     unsigned range = range_v[vf->multiplier - 1];
1164     uint16_t floor1_Y[258];
1165     uint16_t floor1_Y_final[258];
1166     int floor1_flag[258];
1167     unsigned partition_class, cdim, cbits, csub, cval, offset, i, j;
1168     int book, adx, ady, dy, off, predicted, err;
1169
1170
1171     if (!get_bits1(gb)) // silence
1172         return 1;
1173
1174 // Read values (or differences) for the floor's points
1175
1176     floor1_Y[0] = get_bits(gb, ilog(range - 1));
1177     floor1_Y[1] = get_bits(gb, ilog(range - 1));
1178
1179     av_dlog(NULL, "floor 0 Y %d floor 1 Y %d \n", floor1_Y[0], floor1_Y[1]);
1180
1181     offset = 2;
1182     for (i = 0; i < vf->partitions; ++i) {
1183         partition_class = vf->partition_class[i];
1184         cdim   = vf->class_dimensions[partition_class];
1185         cbits  = vf->class_subclasses[partition_class];
1186         csub = (1 << cbits) - 1;
1187         cval = 0;
1188
1189         av_dlog(NULL, "Cbits %u\n", cbits);
1190
1191         if (cbits) // this reads all subclasses for this partition's class
1192             cval = get_vlc2(gb, vc->codebooks[vf->class_masterbook[partition_class]].vlc.table,
1193                             vc->codebooks[vf->class_masterbook[partition_class]].nb_bits, 3);
1194
1195         for (j = 0; j < cdim; ++j) {
1196             book = vf->subclass_books[partition_class][cval & csub];
1197
1198             av_dlog(NULL, "book %d Cbits %u cval %u  bits:%d\n",
1199                     book, cbits, cval, get_bits_count(gb));
1200
1201             cval = cval >> cbits;
1202             if (book > -1) {
1203                 floor1_Y[offset+j] = get_vlc2(gb, vc->codebooks[book].vlc.table,
1204                 vc->codebooks[book].nb_bits, 3);
1205             } else {
1206                 floor1_Y[offset+j] = 0;
1207             }
1208
1209             av_dlog(NULL, " floor(%d) = %d \n",
1210                     vf->list[offset+j].x, floor1_Y[offset+j]);
1211         }
1212         offset+=cdim;
1213     }
1214
1215 // Amplitude calculation from the differences
1216
1217     floor1_flag[0] = 1;
1218     floor1_flag[1] = 1;
1219     floor1_Y_final[0] = floor1_Y[0];
1220     floor1_Y_final[1] = floor1_Y[1];
1221
1222     for (i = 2; i < vf->x_list_dim; ++i) {
1223         unsigned val, highroom, lowroom, room, high_neigh_offs, low_neigh_offs;
1224
1225         low_neigh_offs  = vf->list[i].low;
1226         high_neigh_offs = vf->list[i].high;
1227         dy  = floor1_Y_final[high_neigh_offs] - floor1_Y_final[low_neigh_offs];  // render_point begin
1228         adx = vf->list[high_neigh_offs].x - vf->list[low_neigh_offs].x;
1229         ady = FFABS(dy);
1230         err = ady * (vf->list[i].x - vf->list[low_neigh_offs].x);
1231         off = err / adx;
1232         if (dy < 0) {
1233             predicted = floor1_Y_final[low_neigh_offs] - off;
1234         } else {
1235             predicted = floor1_Y_final[low_neigh_offs] + off;
1236         } // render_point end
1237
1238         val = floor1_Y[i];
1239         highroom = range-predicted;
1240         lowroom  = predicted;
1241         if (highroom < lowroom) {
1242             room = highroom * 2;
1243         } else {
1244             room = lowroom * 2;   // SPEC mispelling
1245         }
1246         if (val) {
1247             floor1_flag[low_neigh_offs]  = 1;
1248             floor1_flag[high_neigh_offs] = 1;
1249             floor1_flag[i]               = 1;
1250             if (val >= room) {
1251                 if (highroom > lowroom) {
1252                     floor1_Y_final[i] = val - lowroom + predicted;
1253                 } else {
1254                     floor1_Y_final[i] = predicted - val + highroom - 1;
1255                 }
1256             } else {
1257                 if (val & 1) {
1258                     floor1_Y_final[i] = predicted - (val + 1) / 2;
1259                 } else {
1260                     floor1_Y_final[i] = predicted + val / 2;
1261                 }
1262             }
1263         } else {
1264             floor1_flag[i]    = 0;
1265             floor1_Y_final[i] = predicted;
1266         }
1267
1268         av_dlog(NULL, " Decoded floor(%d) = %u / val %u\n",
1269                 vf->list[i].x, floor1_Y_final[i], val);
1270     }
1271
1272 // Curve synth - connect the calculated dots and convert from dB scale FIXME optimize ?
1273
1274     ff_vorbis_floor1_render_list(vf->list, vf->x_list_dim, floor1_Y_final, floor1_flag, vf->multiplier, vec, vf->list[1].x);
1275
1276     av_dlog(NULL, " Floor decoded\n");
1277
1278     return 0;
1279 }
1280
1281 // Read and decode residue
1282
1283 static av_always_inline int vorbis_residue_decode_internal(vorbis_context *vc,
1284                                                            vorbis_residue *vr,
1285                                                            unsigned ch,
1286                                                            uint8_t *do_not_decode,
1287                                                            float *vec,
1288                                                            unsigned vlen,
1289                                                            int vr_type)
1290 {
1291     GetBitContext *gb = &vc->gb;
1292     unsigned c_p_c        = vc->codebooks[vr->classbook].dimensions;
1293     unsigned ptns_to_read = vr->ptns_to_read;
1294     uint8_t *classifs = vr->classifs;
1295     unsigned pass, ch_used, i, j, k, l;
1296
1297     if (vr_type == 2) {
1298         for (j = 1; j < ch; ++j)
1299             do_not_decode[0] &= do_not_decode[j];  // FIXME - clobbering input
1300         if (do_not_decode[0])
1301             return 0;
1302         ch_used = 1;
1303     } else {
1304         ch_used = ch;
1305     }
1306
1307     av_dlog(NULL, " residue type 0/1/2 decode begin, ch: %d  cpc %d  \n", ch, c_p_c);
1308
1309     for (pass = 0; pass <= vr->maxpass; ++pass) { // FIXME OPTIMIZE?
1310         uint16_t voffset, partition_count, j_times_ptns_to_read;
1311
1312         voffset = vr->begin;
1313         for (partition_count = 0; partition_count < ptns_to_read;) {  // SPEC        error
1314             if (!pass) {
1315                 unsigned inverse_class = ff_inverse[vr->classifications];
1316                 for (j_times_ptns_to_read = 0, j = 0; j < ch_used; ++j) {
1317                     if (!do_not_decode[j]) {
1318                         unsigned temp = get_vlc2(gb, vc->codebooks[vr->classbook].vlc.table,
1319                                                  vc->codebooks[vr->classbook].nb_bits, 3);
1320
1321                         av_dlog(NULL, "Classword: %u\n", temp);
1322
1323                         assert(vr->classifications > 1 && temp <= 65536); //needed for inverse[]
1324                         for (i = 0; i < c_p_c; ++i) {
1325                             unsigned temp2;
1326
1327                             temp2 = (((uint64_t)temp) * inverse_class) >> 32;
1328                             if (partition_count + c_p_c - 1 - i < ptns_to_read)
1329                                 classifs[j_times_ptns_to_read + partition_count + c_p_c - 1 - i] = temp - temp2 * vr->classifications;
1330                             temp = temp2;
1331                         }
1332                     }
1333                     j_times_ptns_to_read += ptns_to_read;
1334                 }
1335             }
1336             for (i = 0; (i < c_p_c) && (partition_count < ptns_to_read); ++i) {
1337                 for (j_times_ptns_to_read = 0, j = 0; j < ch_used; ++j) {
1338                     unsigned voffs;
1339
1340                     if (!do_not_decode[j]) {
1341                         unsigned vqclass = classifs[j_times_ptns_to_read + partition_count];
1342                         int vqbook  = vr->books[vqclass][pass];
1343
1344                         if (vqbook >= 0 && vc->codebooks[vqbook].codevectors) {
1345                             unsigned coffs;
1346                             unsigned dim  = vc->codebooks[vqbook].dimensions;
1347                             unsigned step = dim == 1 ? vr->partition_size
1348                                                      : FASTDIV(vr->partition_size, dim);
1349                             vorbis_codebook codebook = vc->codebooks[vqbook];
1350
1351                             if (vr_type == 0) {
1352
1353                                 voffs = voffset+j*vlen;
1354                                 for (k = 0; k < step; ++k) {
1355                                     coffs = get_vlc2(gb, codebook.vlc.table, codebook.nb_bits, 3) * dim;
1356                                     for (l = 0; l < dim; ++l)
1357                                         vec[voffs + k + l * step] += codebook.codevectors[coffs + l];  // FPMATH
1358                                 }
1359                             } else if (vr_type == 1) {
1360                                 voffs = voffset + j * vlen;
1361                                 for (k = 0; k < step; ++k) {
1362                                     coffs = get_vlc2(gb, codebook.vlc.table, codebook.nb_bits, 3) * dim;
1363                                     for (l = 0; l < dim; ++l, ++voffs) {
1364                                         vec[voffs]+=codebook.codevectors[coffs+l];  // FPMATH
1365
1366                                         av_dlog(NULL, " pass %d offs: %d curr: %f change: %f cv offs.: %d  \n",
1367                                                 pass, voffs, vec[voffs], codebook.codevectors[coffs+l], coffs);
1368                                     }
1369                                 }
1370                             } else if (vr_type == 2 && ch == 2 && (voffset & 1) == 0 && (dim & 1) == 0) { // most frequent case optimized
1371                                 voffs = voffset >> 1;
1372
1373                                 if (dim == 2) {
1374                                     for (k = 0; k < step; ++k) {
1375                                         coffs = get_vlc2(gb, codebook.vlc.table, codebook.nb_bits, 3) * 2;
1376                                         vec[voffs + k       ] += codebook.codevectors[coffs    ];  // FPMATH
1377                                         vec[voffs + k + vlen] += codebook.codevectors[coffs + 1];  // FPMATH
1378                                     }
1379                                 } else if (dim == 4) {
1380                                     for (k = 0; k < step; ++k, voffs += 2) {
1381                                         coffs = get_vlc2(gb, codebook.vlc.table, codebook.nb_bits, 3) * 4;
1382                                         vec[voffs           ] += codebook.codevectors[coffs    ];  // FPMATH
1383                                         vec[voffs + 1       ] += codebook.codevectors[coffs + 2];  // FPMATH
1384                                         vec[voffs + vlen    ] += codebook.codevectors[coffs + 1];  // FPMATH
1385                                         vec[voffs + vlen + 1] += codebook.codevectors[coffs + 3];  // FPMATH
1386                                     }
1387                                 } else
1388                                 for (k = 0; k < step; ++k) {
1389                                     coffs = get_vlc2(gb, codebook.vlc.table, codebook.nb_bits, 3) * dim;
1390                                     for (l = 0; l < dim; l += 2, voffs++) {
1391                                         vec[voffs       ] += codebook.codevectors[coffs + l    ];  // FPMATH
1392                                         vec[voffs + vlen] += codebook.codevectors[coffs + l + 1];  // FPMATH
1393
1394                                         av_dlog(NULL, " pass %d offs: %d curr: %f change: %f cv offs.: %d+%d  \n",
1395                                                 pass, voffset / ch + (voffs % ch) * vlen,
1396                                                 vec[voffset / ch + (voffs % ch) * vlen],
1397                                                 codebook.codevectors[coffs + l], coffs, l);
1398                                     }
1399                                 }
1400
1401                             } else if (vr_type == 2) {
1402                                 voffs = voffset;
1403
1404                                 for (k = 0; k < step; ++k) {
1405                                     coffs = get_vlc2(gb, codebook.vlc.table, codebook.nb_bits, 3) * dim;
1406                                     for (l = 0; l < dim; ++l, ++voffs) {
1407                                         vec[voffs / ch + (voffs % ch) * vlen] += codebook.codevectors[coffs + l];  // FPMATH FIXME use if and counter instead of / and %
1408
1409                                         av_dlog(NULL, " pass %d offs: %d curr: %f change: %f cv offs.: %d+%d  \n",
1410                                                 pass, voffset / ch + (voffs % ch) * vlen,
1411                                                 vec[voffset / ch + (voffs % ch) * vlen],
1412                                                 codebook.codevectors[coffs + l], coffs, l);
1413                                     }
1414                                 }
1415                             }
1416                         }
1417                     }
1418                     j_times_ptns_to_read += ptns_to_read;
1419                 }
1420                 ++partition_count;
1421                 voffset += vr->partition_size;
1422             }
1423         }
1424     }
1425     return 0;
1426 }
1427
1428 static inline int vorbis_residue_decode(vorbis_context *vc, vorbis_residue *vr,
1429                                         unsigned ch,
1430                                         uint8_t *do_not_decode,
1431                                         float *vec, unsigned vlen)
1432 {
1433     if (vr->type == 2)
1434         return vorbis_residue_decode_internal(vc, vr, ch, do_not_decode, vec, vlen, 2);
1435     else if (vr->type == 1)
1436         return vorbis_residue_decode_internal(vc, vr, ch, do_not_decode, vec, vlen, 1);
1437     else if (vr->type == 0)
1438         return vorbis_residue_decode_internal(vc, vr, ch, do_not_decode, vec, vlen, 0);
1439     else {
1440         av_log(vc->avccontext, AV_LOG_ERROR, " Invalid residue type while residue decode?! \n");
1441         return AVERROR_INVALIDDATA;
1442     }
1443 }
1444
1445 void vorbis_inverse_coupling(float *mag, float *ang, int blocksize)
1446 {
1447     int i;
1448     for (i = 0;  i < blocksize;  i++) {
1449         if (mag[i] > 0.0) {
1450             if (ang[i] > 0.0) {
1451                 ang[i] = mag[i] - ang[i];
1452             } else {
1453                 float temp = ang[i];
1454                 ang[i]     = mag[i];
1455                 mag[i]    += temp;
1456             }
1457         } else {
1458             if (ang[i] > 0.0) {
1459                 ang[i] += mag[i];
1460             } else {
1461                 float temp = ang[i];
1462                 ang[i]     = mag[i];
1463                 mag[i]    -= temp;
1464             }
1465         }
1466     }
1467 }
1468
1469 // Decode the audio packet using the functions above
1470
1471 static int vorbis_parse_audio_packet(vorbis_context *vc)
1472 {
1473     GetBitContext *gb = &vc->gb;
1474     FFTContext *mdct;
1475     unsigned previous_window = vc->previous_window;
1476     unsigned mode_number, blockflag, blocksize;
1477     int i, j;
1478     uint8_t no_residue[255];
1479     uint8_t do_not_decode[255];
1480     vorbis_mapping *mapping;
1481     float *ch_res_ptr   = vc->channel_residues;
1482     float *ch_floor_ptr = vc->channel_floors;
1483     uint8_t res_chan[255];
1484     unsigned res_num = 0;
1485     int retlen  = 0;
1486
1487     if (get_bits1(gb)) {
1488         av_log(vc->avccontext, AV_LOG_ERROR, "Not a Vorbis I audio packet.\n");
1489         return AVERROR_INVALIDDATA; // packet type not audio
1490     }
1491
1492     if (vc->mode_count == 1) {
1493         mode_number = 0;
1494     } else {
1495         GET_VALIDATED_INDEX(mode_number, ilog(vc->mode_count-1), vc->mode_count)
1496     }
1497     vc->mode_number = mode_number;
1498     mapping = &vc->mappings[vc->modes[mode_number].mapping];
1499
1500     av_dlog(NULL, " Mode number: %u , mapping: %d , blocktype %d\n", mode_number,
1501             vc->modes[mode_number].mapping, vc->modes[mode_number].blockflag);
1502
1503     blockflag = vc->modes[mode_number].blockflag;
1504     blocksize = vc->blocksize[blockflag];
1505     if (blockflag)
1506         skip_bits(gb, 2); // previous_window, next_window
1507
1508     memset(ch_res_ptr,   0, sizeof(float) * vc->audio_channels * blocksize / 2); //FIXME can this be removed ?
1509     memset(ch_floor_ptr, 0, sizeof(float) * vc->audio_channels * blocksize / 2); //FIXME can this be removed ?
1510
1511 // Decode floor
1512
1513     for (i = 0; i < vc->audio_channels; ++i) {
1514         vorbis_floor *floor;
1515         int ret;
1516         if (mapping->submaps > 1) {
1517             floor = &vc->floors[mapping->submap_floor[mapping->mux[i]]];
1518         } else {
1519             floor = &vc->floors[mapping->submap_floor[0]];
1520         }
1521
1522         ret = floor->decode(vc, &floor->data, ch_floor_ptr);
1523
1524         if (ret < 0) {
1525             av_log(vc->avccontext, AV_LOG_ERROR, "Invalid codebook in vorbis_floor_decode.\n");
1526             return AVERROR_INVALIDDATA;
1527         }
1528         no_residue[i] = ret;
1529         ch_floor_ptr += blocksize / 2;
1530     }
1531
1532 // Nonzero vector propagate
1533
1534     for (i = mapping->coupling_steps - 1; i >= 0; --i) {
1535         if (!(no_residue[mapping->magnitude[i]] & no_residue[mapping->angle[i]])) {
1536             no_residue[mapping->magnitude[i]] = 0;
1537             no_residue[mapping->angle[i]]     = 0;
1538         }
1539     }
1540
1541 // Decode residue
1542
1543     for (i = 0; i < mapping->submaps; ++i) {
1544         vorbis_residue *residue;
1545         unsigned ch = 0;
1546
1547         for (j = 0; j < vc->audio_channels; ++j) {
1548             if ((mapping->submaps == 1) || (i == mapping->mux[j])) {
1549                 res_chan[j] = res_num;
1550                 if (no_residue[j]) {
1551                     do_not_decode[ch] = 1;
1552                 } else {
1553                     do_not_decode[ch] = 0;
1554                 }
1555                 ++ch;
1556                 ++res_num;
1557             }
1558         }
1559         residue = &vc->residues[mapping->submap_residue[i]];
1560         vorbis_residue_decode(vc, residue, ch, do_not_decode, ch_res_ptr, blocksize/2);
1561
1562         ch_res_ptr += ch * blocksize / 2;
1563     }
1564
1565 // Inverse coupling
1566
1567     for (i = mapping->coupling_steps - 1; i >= 0; --i) { //warning: i has to be signed
1568         float *mag, *ang;
1569
1570         mag = vc->channel_residues+res_chan[mapping->magnitude[i]] * blocksize / 2;
1571         ang = vc->channel_residues+res_chan[mapping->angle[i]]     * blocksize / 2;
1572         vc->dsp.vorbis_inverse_coupling(mag, ang, blocksize / 2);
1573     }
1574
1575 // Dotproduct, MDCT
1576
1577     mdct = &vc->mdct[blockflag];
1578
1579     for (j = vc->audio_channels-1;j >= 0; j--) {
1580         ch_floor_ptr = vc->channel_floors   + j           * blocksize / 2;
1581         ch_res_ptr   = vc->channel_residues + res_chan[j] * blocksize / 2;
1582         vc->dsp.vector_fmul(ch_floor_ptr, ch_floor_ptr, ch_res_ptr, blocksize / 2);
1583         mdct->imdct_half(mdct, ch_res_ptr, ch_floor_ptr);
1584     }
1585
1586 // Overlap/add, save data for next overlapping  FPMATH
1587
1588     retlen = (blocksize + vc->blocksize[previous_window]) / 4;
1589     for (j = 0; j < vc->audio_channels; j++) {
1590         unsigned bs0 = vc->blocksize[0];
1591         unsigned bs1 = vc->blocksize[1];
1592         float *residue    = vc->channel_residues + res_chan[j] * blocksize / 2;
1593         float *saved      = vc->saved + j * bs1 / 4;
1594         float *ret        = vc->channel_floors + j * retlen;
1595         float *buf        = residue;
1596         const float *win  = vc->win[blockflag & previous_window];
1597
1598         if (blockflag == previous_window) {
1599             vc->dsp.vector_fmul_window(ret, saved, buf, win, blocksize / 4);
1600         } else if (blockflag > previous_window) {
1601             vc->dsp.vector_fmul_window(ret, saved, buf, win, bs0 / 4);
1602             memcpy(ret+bs0/2, buf+bs0/4, ((bs1-bs0)/4) * sizeof(float));
1603         } else {
1604             memcpy(ret, saved, ((bs1 - bs0) / 4) * sizeof(float));
1605             vc->dsp.vector_fmul_window(ret + (bs1 - bs0) / 4, saved + (bs1 - bs0) / 4, buf, win, bs0 / 4);
1606         }
1607         memcpy(saved, buf + blocksize / 4, blocksize / 4 * sizeof(float));
1608     }
1609
1610     vc->previous_window = blockflag;
1611     return retlen;
1612 }
1613
1614 // Return the decoded audio packet through the standard api
1615
1616 static int vorbis_decode_frame(AVCodecContext *avccontext, void *data,
1617                                int *got_frame_ptr, AVPacket *avpkt)
1618 {
1619     const uint8_t *buf = avpkt->data;
1620     int buf_size       = avpkt->size;
1621     vorbis_context *vc = avccontext->priv_data;
1622     GetBitContext *gb = &(vc->gb);
1623     const float *channel_ptrs[255];
1624     int i, len, ret;
1625
1626     av_dlog(NULL, "packet length %d \n", buf_size);
1627
1628     init_get_bits(gb, buf, buf_size*8);
1629
1630     if ((len = vorbis_parse_audio_packet(vc)) <= 0)
1631         return len;
1632
1633     if (!vc->first_frame) {
1634         vc->first_frame = 1;
1635         *got_frame_ptr = 0;
1636         return buf_size;
1637     }
1638
1639     av_dlog(NULL, "parsed %d bytes %d bits, returned %d samples (*ch*bits) \n",
1640             get_bits_count(gb) / 8, get_bits_count(gb) % 8, len);
1641
1642     /* get output buffer */
1643     vc->frame.nb_samples = len;
1644     if ((ret = avccontext->get_buffer(avccontext, &vc->frame)) < 0) {
1645         av_log(avccontext, AV_LOG_ERROR, "get_buffer() failed\n");
1646         return ret;
1647     }
1648
1649     if (vc->audio_channels > 8) {
1650         for (i = 0; i < vc->audio_channels; i++)
1651             channel_ptrs[i] = vc->channel_floors + i * len;
1652     } else {
1653         for (i = 0; i < vc->audio_channels; i++)
1654             channel_ptrs[i] = vc->channel_floors +
1655                               len * ff_vorbis_channel_layout_offsets[vc->audio_channels - 1][i];
1656     }
1657
1658     if (avccontext->sample_fmt == AV_SAMPLE_FMT_FLT)
1659         vc->fmt_conv.float_interleave((float *)vc->frame.data[0], channel_ptrs,
1660                                       len, vc->audio_channels);
1661     else
1662         vc->fmt_conv.float_to_int16_interleave((int16_t *)vc->frame.data[0],
1663                                                channel_ptrs, len,
1664                                                vc->audio_channels);
1665
1666     *got_frame_ptr   = 1;
1667     *(AVFrame *)data = vc->frame;
1668
1669     return buf_size;
1670 }
1671
1672 // Close decoder
1673
1674 static av_cold int vorbis_decode_close(AVCodecContext *avccontext)
1675 {
1676     vorbis_context *vc = avccontext->priv_data;
1677
1678     vorbis_free(vc);
1679
1680     return 0;
1681 }
1682
1683 AVCodec ff_vorbis_decoder = {
1684     .name           = "vorbis",
1685     .type           = AVMEDIA_TYPE_AUDIO,
1686     .id             = CODEC_ID_VORBIS,
1687     .priv_data_size = sizeof(vorbis_context),
1688     .init           = vorbis_decode_init,
1689     .close          = vorbis_decode_close,
1690     .decode         = vorbis_decode_frame,
1691     .capabilities   = CODEC_CAP_DR1,
1692     .long_name = NULL_IF_CONFIG_SMALL("Vorbis"),
1693     .channel_layouts = ff_vorbis_channel_layouts,
1694     .sample_fmts = (const enum AVSampleFormat[]) {
1695         AV_SAMPLE_FMT_FLT, AV_SAMPLE_FMT_S16, AV_SAMPLE_FMT_NONE
1696     },
1697 };
1698