]> git.sesse.net Git - ffmpeg/blob - libavformat/matroskadec.c
http: never send 'Cookie: (null)' to the server
[ffmpeg] / libavformat / matroskadec.c
1 /*
2  * Matroska file demuxer
3  * Copyright (c) 2003-2008 The FFmpeg Project
4  *
5  * This file is part of FFmpeg.
6  *
7  * FFmpeg is free software; you can redistribute it and/or
8  * modify it under the terms of the GNU Lesser General Public
9  * License as published by the Free Software Foundation; either
10  * version 2.1 of the License, or (at your option) any later version.
11  *
12  * FFmpeg is distributed in the hope that it will be useful,
13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
15  * Lesser General Public License for more details.
16  *
17  * You should have received a copy of the GNU Lesser General Public
18  * License along with FFmpeg; if not, write to the Free Software
19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
20  */
21
22 /**
23  * @file
24  * Matroska file demuxer
25  * @author Ronald Bultje <rbultje@ronald.bitfreak.net>
26  * @author with a little help from Moritz Bunkus <moritz@bunkus.org>
27  * @author totally reworked by Aurelien Jacobs <aurel@gnuage.org>
28  * @see specs available on the Matroska project page: http://www.matroska.org/
29  */
30
31 #include "config.h"
32
33 #include <inttypes.h>
34 #include <stdio.h>
35 #if CONFIG_BZLIB
36 #include <bzlib.h>
37 #endif
38 #if CONFIG_ZLIB
39 #include <zlib.h>
40 #endif
41
42 #include "libavutil/avstring.h"
43 #include "libavutil/base64.h"
44 #include "libavutil/dict.h"
45 #include "libavutil/intfloat.h"
46 #include "libavutil/intreadwrite.h"
47 #include "libavutil/lzo.h"
48
49 #include "libavcodec/bytestream.h"
50 #include "libavcodec/mpeg4audio.h"
51
52 #include "avformat.h"
53 #include "avio_internal.h"
54 #include "internal.h"
55 #include "isom.h"
56 #include "matroska.h"
57 /* For ff_codec_get_id(). */
58 #include "riff.h"
59 #include "rmsipr.h"
60
61 typedef enum {
62     EBML_NONE,
63     EBML_UINT,
64     EBML_FLOAT,
65     EBML_STR,
66     EBML_UTF8,
67     EBML_BIN,
68     EBML_NEST,
69     EBML_PASS,
70     EBML_STOP,
71     EBML_SINT,
72     EBML_TYPE_COUNT
73 } EbmlType;
74
75 typedef const struct EbmlSyntax {
76     uint32_t id;
77     EbmlType type;
78     int list_elem_size;
79     int data_offset;
80     union {
81         uint64_t    u;
82         double      f;
83         const char *s;
84         const struct EbmlSyntax *n;
85     } def;
86 } EbmlSyntax;
87
88 typedef struct {
89     int nb_elem;
90     void *elem;
91 } EbmlList;
92
93 typedef struct {
94     int      size;
95     uint8_t *data;
96     int64_t  pos;
97 } EbmlBin;
98
99 typedef struct {
100     uint64_t version;
101     uint64_t max_size;
102     uint64_t id_length;
103     char    *doctype;
104     uint64_t doctype_version;
105 } Ebml;
106
107 typedef struct {
108     uint64_t algo;
109     EbmlBin  settings;
110 } MatroskaTrackCompression;
111
112 typedef struct {
113     uint64_t algo;
114     EbmlBin  key_id;
115 } MatroskaTrackEncryption;
116
117 typedef struct {
118     uint64_t scope;
119     uint64_t type;
120     MatroskaTrackCompression compression;
121     MatroskaTrackEncryption encryption;
122 } MatroskaTrackEncoding;
123
124 typedef struct {
125     double   frame_rate;
126     uint64_t display_width;
127     uint64_t display_height;
128     uint64_t pixel_width;
129     uint64_t pixel_height;
130     EbmlBin color_space;
131     uint64_t stereo_mode;
132     uint64_t alpha_mode;
133 } MatroskaTrackVideo;
134
135 typedef struct {
136     double   samplerate;
137     double   out_samplerate;
138     uint64_t bitdepth;
139     uint64_t channels;
140
141     /* real audio header (extracted from extradata) */
142     int      coded_framesize;
143     int      sub_packet_h;
144     int      frame_size;
145     int      sub_packet_size;
146     int      sub_packet_cnt;
147     int      pkt_cnt;
148     uint64_t buf_timecode;
149     uint8_t *buf;
150 } MatroskaTrackAudio;
151
152 typedef struct {
153     uint64_t uid;
154     uint64_t type;
155 } MatroskaTrackPlane;
156
157 typedef struct {
158     EbmlList combine_planes;
159 } MatroskaTrackOperation;
160
161 typedef struct {
162     uint64_t num;
163     uint64_t uid;
164     uint64_t type;
165     char    *name;
166     char    *codec_id;
167     EbmlBin  codec_priv;
168     char    *language;
169     double time_scale;
170     uint64_t default_duration;
171     uint64_t flag_default;
172     uint64_t flag_forced;
173     uint64_t codec_delay;
174     uint64_t seek_preroll;
175     MatroskaTrackVideo video;
176     MatroskaTrackAudio audio;
177     MatroskaTrackOperation operation;
178     EbmlList encodings;
179
180     AVStream *stream;
181     int64_t end_timecode;
182     int ms_compat;
183     uint64_t max_block_additional_id;
184 } MatroskaTrack;
185
186 typedef struct {
187     uint64_t uid;
188     char *filename;
189     char *mime;
190     EbmlBin bin;
191
192     AVStream *stream;
193 } MatroskaAttachment;
194
195 typedef struct {
196     uint64_t start;
197     uint64_t end;
198     uint64_t uid;
199     char    *title;
200
201     AVChapter *chapter;
202 } MatroskaChapter;
203
204 typedef struct {
205     uint64_t track;
206     uint64_t pos;
207 } MatroskaIndexPos;
208
209 typedef struct {
210     uint64_t time;
211     EbmlList pos;
212 } MatroskaIndex;
213
214 typedef struct {
215     char *name;
216     char *string;
217     char *lang;
218     uint64_t def;
219     EbmlList sub;
220 } MatroskaTag;
221
222 typedef struct {
223     char    *type;
224     uint64_t typevalue;
225     uint64_t trackuid;
226     uint64_t chapteruid;
227     uint64_t attachuid;
228 } MatroskaTagTarget;
229
230 typedef struct {
231     MatroskaTagTarget target;
232     EbmlList tag;
233 } MatroskaTags;
234
235 typedef struct {
236     uint64_t id;
237     uint64_t pos;
238 } MatroskaSeekhead;
239
240 typedef struct {
241     uint64_t start;
242     uint64_t length;
243 } MatroskaLevel;
244
245 typedef struct {
246     uint64_t timecode;
247     EbmlList blocks;
248 } MatroskaCluster;
249
250 typedef struct {
251     AVFormatContext *ctx;
252
253     /* EBML stuff */
254     int num_levels;
255     MatroskaLevel levels[EBML_MAX_DEPTH];
256     int level_up;
257     uint32_t current_id;
258
259     uint64_t time_scale;
260     double   duration;
261     char    *title;
262     char    *muxingapp;
263     EbmlBin date_utc;
264     EbmlList tracks;
265     EbmlList attachments;
266     EbmlList chapters;
267     EbmlList index;
268     EbmlList tags;
269     EbmlList seekhead;
270
271     /* byte position of the segment inside the stream */
272     int64_t segment_start;
273
274     /* the packet queue */
275     AVPacket **packets;
276     int num_packets;
277     AVPacket *prev_pkt;
278
279     int done;
280
281     /* What to skip before effectively reading a packet. */
282     int skip_to_keyframe;
283     uint64_t skip_to_timecode;
284
285     /* File has a CUES element, but we defer parsing until it is needed. */
286     int cues_parsing_deferred;
287
288     int current_cluster_num_blocks;
289     int64_t current_cluster_pos;
290     MatroskaCluster current_cluster;
291
292     /* File has SSA subtitles which prevent incremental cluster parsing. */
293     int contains_ssa;
294 } MatroskaDemuxContext;
295
296 typedef struct {
297     uint64_t duration;
298     int64_t  reference;
299     uint64_t non_simple;
300     EbmlBin  bin;
301     uint64_t additional_id;
302     EbmlBin  additional;
303     int64_t discard_padding;
304 } MatroskaBlock;
305
306 static EbmlSyntax ebml_header[] = {
307     { EBML_ID_EBMLREADVERSION,    EBML_UINT, 0, offsetof(Ebml, version),         { .u = EBML_VERSION } },
308     { EBML_ID_EBMLMAXSIZELENGTH,  EBML_UINT, 0, offsetof(Ebml, max_size),        { .u = 8 } },
309     { EBML_ID_EBMLMAXIDLENGTH,    EBML_UINT, 0, offsetof(Ebml, id_length),       { .u = 4 } },
310     { EBML_ID_DOCTYPE,            EBML_STR,  0, offsetof(Ebml, doctype),         { .s = "(none)" } },
311     { EBML_ID_DOCTYPEREADVERSION, EBML_UINT, 0, offsetof(Ebml, doctype_version), { .u = 1 } },
312     { EBML_ID_EBMLVERSION,        EBML_NONE },
313     { EBML_ID_DOCTYPEVERSION,     EBML_NONE },
314     { 0 }
315 };
316
317 static EbmlSyntax ebml_syntax[] = {
318     { EBML_ID_HEADER, EBML_NEST, 0, 0, { .n = ebml_header } },
319     { 0 }
320 };
321
322 static EbmlSyntax matroska_info[] = {
323     { MATROSKA_ID_TIMECODESCALE, EBML_UINT,  0, offsetof(MatroskaDemuxContext, time_scale), { .u = 1000000 } },
324     { MATROSKA_ID_DURATION,      EBML_FLOAT, 0, offsetof(MatroskaDemuxContext, duration) },
325     { MATROSKA_ID_TITLE,         EBML_UTF8,  0, offsetof(MatroskaDemuxContext, title) },
326     { MATROSKA_ID_WRITINGAPP,    EBML_NONE },
327     { MATROSKA_ID_MUXINGAPP,     EBML_UTF8, 0, offsetof(MatroskaDemuxContext, muxingapp) },
328     { MATROSKA_ID_DATEUTC,       EBML_BIN,  0, offsetof(MatroskaDemuxContext, date_utc) },
329     { MATROSKA_ID_SEGMENTUID,    EBML_NONE },
330     { 0 }
331 };
332
333 static EbmlSyntax matroska_track_video[] = {
334     { MATROSKA_ID_VIDEOFRAMERATE,      EBML_FLOAT, 0, offsetof(MatroskaTrackVideo, frame_rate) },
335     { MATROSKA_ID_VIDEODISPLAYWIDTH,   EBML_UINT,  0, offsetof(MatroskaTrackVideo, display_width), { .u=-1 } },
336     { MATROSKA_ID_VIDEODISPLAYHEIGHT,  EBML_UINT,  0, offsetof(MatroskaTrackVideo, display_height), { .u=-1 } },
337     { MATROSKA_ID_VIDEOPIXELWIDTH,     EBML_UINT,  0, offsetof(MatroskaTrackVideo, pixel_width) },
338     { MATROSKA_ID_VIDEOPIXELHEIGHT,    EBML_UINT,  0, offsetof(MatroskaTrackVideo, pixel_height) },
339     { MATROSKA_ID_VIDEOCOLORSPACE,     EBML_BIN,   0, offsetof(MatroskaTrackVideo, color_space) },
340     { MATROSKA_ID_VIDEOSTEREOMODE,     EBML_UINT,  0, offsetof(MatroskaTrackVideo, stereo_mode) },
341     { MATROSKA_ID_VIDEOALPHAMODE,      EBML_UINT,  0, offsetof(MatroskaTrackVideo, alpha_mode) },
342     { MATROSKA_ID_VIDEOPIXELCROPB,     EBML_NONE },
343     { MATROSKA_ID_VIDEOPIXELCROPT,     EBML_NONE },
344     { MATROSKA_ID_VIDEOPIXELCROPL,     EBML_NONE },
345     { MATROSKA_ID_VIDEOPIXELCROPR,     EBML_NONE },
346     { MATROSKA_ID_VIDEODISPLAYUNIT,    EBML_NONE },
347     { MATROSKA_ID_VIDEOFLAGINTERLACED, EBML_NONE },
348     { MATROSKA_ID_VIDEOASPECTRATIO,    EBML_NONE },
349     { 0 }
350 };
351
352 static EbmlSyntax matroska_track_audio[] = {
353     { MATROSKA_ID_AUDIOSAMPLINGFREQ,    EBML_FLOAT, 0, offsetof(MatroskaTrackAudio, samplerate), { .f = 8000.0 } },
354     { MATROSKA_ID_AUDIOOUTSAMPLINGFREQ, EBML_FLOAT, 0, offsetof(MatroskaTrackAudio, out_samplerate) },
355     { MATROSKA_ID_AUDIOBITDEPTH,        EBML_UINT,  0, offsetof(MatroskaTrackAudio, bitdepth) },
356     { MATROSKA_ID_AUDIOCHANNELS,        EBML_UINT,  0, offsetof(MatroskaTrackAudio, channels),   { .u = 1 } },
357     { 0 }
358 };
359
360 static EbmlSyntax matroska_track_encoding_compression[] = {
361     { MATROSKA_ID_ENCODINGCOMPALGO,     EBML_UINT, 0, offsetof(MatroskaTrackCompression, algo), { .u = 0 } },
362     { MATROSKA_ID_ENCODINGCOMPSETTINGS, EBML_BIN,  0, offsetof(MatroskaTrackCompression, settings) },
363     { 0 }
364 };
365
366 static EbmlSyntax matroska_track_encoding_encryption[] = {
367     { MATROSKA_ID_ENCODINGENCALGO,        EBML_UINT, 0, offsetof(MatroskaTrackEncryption,algo), {.u = 0} },
368     { MATROSKA_ID_ENCODINGENCKEYID,       EBML_BIN, 0, offsetof(MatroskaTrackEncryption,key_id) },
369     { MATROSKA_ID_ENCODINGENCAESSETTINGS, EBML_NONE },
370     { MATROSKA_ID_ENCODINGSIGALGO,        EBML_NONE },
371     { MATROSKA_ID_ENCODINGSIGHASHALGO,    EBML_NONE },
372     { MATROSKA_ID_ENCODINGSIGKEYID,       EBML_NONE },
373     { MATROSKA_ID_ENCODINGSIGNATURE,      EBML_NONE },
374     { 0 }
375 };
376 static EbmlSyntax matroska_track_encoding[] = {
377     { MATROSKA_ID_ENCODINGSCOPE,       EBML_UINT, 0, offsetof(MatroskaTrackEncoding, scope),       { .u = 1 } },
378     { MATROSKA_ID_ENCODINGTYPE,        EBML_UINT, 0, offsetof(MatroskaTrackEncoding, type),        { .u = 0 } },
379     { MATROSKA_ID_ENCODINGCOMPRESSION, EBML_NEST, 0, offsetof(MatroskaTrackEncoding, compression), { .n = matroska_track_encoding_compression } },
380     { MATROSKA_ID_ENCODINGENCRYPTION,  EBML_NEST, 0, offsetof(MatroskaTrackEncoding, encryption),  { .n = matroska_track_encoding_encryption } },
381     { MATROSKA_ID_ENCODINGORDER,       EBML_NONE },
382     { 0 }
383 };
384
385 static EbmlSyntax matroska_track_encodings[] = {
386     { MATROSKA_ID_TRACKCONTENTENCODING, EBML_NEST, sizeof(MatroskaTrackEncoding), offsetof(MatroskaTrack, encodings), { .n = matroska_track_encoding } },
387     { 0 }
388 };
389
390 static EbmlSyntax matroska_track_plane[] = {
391     { MATROSKA_ID_TRACKPLANEUID,  EBML_UINT, 0, offsetof(MatroskaTrackPlane,uid) },
392     { MATROSKA_ID_TRACKPLANETYPE, EBML_UINT, 0, offsetof(MatroskaTrackPlane,type) },
393     { 0 }
394 };
395
396 static EbmlSyntax matroska_track_combine_planes[] = {
397     { MATROSKA_ID_TRACKPLANE, EBML_NEST, sizeof(MatroskaTrackPlane), offsetof(MatroskaTrackOperation,combine_planes), {.n = matroska_track_plane} },
398     { 0 }
399 };
400
401 static EbmlSyntax matroska_track_operation[] = {
402     { MATROSKA_ID_TRACKCOMBINEPLANES, EBML_NEST, 0, 0, {.n = matroska_track_combine_planes} },
403     { 0 }
404 };
405
406 static EbmlSyntax matroska_track[] = {
407     { MATROSKA_ID_TRACKNUMBER,           EBML_UINT,  0, offsetof(MatroskaTrack, num) },
408     { MATROSKA_ID_TRACKNAME,             EBML_UTF8,  0, offsetof(MatroskaTrack, name) },
409     { MATROSKA_ID_TRACKUID,              EBML_UINT,  0, offsetof(MatroskaTrack, uid) },
410     { MATROSKA_ID_TRACKTYPE,             EBML_UINT,  0, offsetof(MatroskaTrack, type) },
411     { MATROSKA_ID_CODECID,               EBML_STR,   0, offsetof(MatroskaTrack, codec_id) },
412     { MATROSKA_ID_CODECPRIVATE,          EBML_BIN,   0, offsetof(MatroskaTrack, codec_priv) },
413     { MATROSKA_ID_TRACKLANGUAGE,         EBML_UTF8,  0, offsetof(MatroskaTrack, language),     { .s = "eng" } },
414     { MATROSKA_ID_TRACKDEFAULTDURATION,  EBML_UINT,  0, offsetof(MatroskaTrack, default_duration) },
415     { MATROSKA_ID_TRACKTIMECODESCALE,    EBML_FLOAT, 0, offsetof(MatroskaTrack, time_scale),   { .f = 1.0 } },
416     { MATROSKA_ID_TRACKFLAGDEFAULT,      EBML_UINT,  0, offsetof(MatroskaTrack, flag_default), { .u = 1 } },
417     { MATROSKA_ID_TRACKFLAGFORCED,       EBML_UINT,  0, offsetof(MatroskaTrack, flag_forced),  { .u = 0 } },
418     { MATROSKA_ID_TRACKVIDEO,            EBML_NEST,  0, offsetof(MatroskaTrack, video),        { .n = matroska_track_video } },
419     { MATROSKA_ID_TRACKAUDIO,            EBML_NEST,  0, offsetof(MatroskaTrack, audio),        { .n = matroska_track_audio } },
420     { MATROSKA_ID_TRACKOPERATION,        EBML_NEST,  0, offsetof(MatroskaTrack, operation),    { .n = matroska_track_operation } },
421     { MATROSKA_ID_TRACKCONTENTENCODINGS, EBML_NEST,  0, 0,                                     { .n = matroska_track_encodings } },
422     { MATROSKA_ID_TRACKMAXBLKADDID,      EBML_UINT,  0, offsetof(MatroskaTrack, max_block_additional_id) },
423     { MATROSKA_ID_CODECDELAY,            EBML_UINT,  0, offsetof(MatroskaTrack, codec_delay) },
424     { MATROSKA_ID_SEEKPREROLL,           EBML_UINT,  0, offsetof(MatroskaTrack, seek_preroll) },
425     { MATROSKA_ID_TRACKFLAGENABLED,      EBML_NONE },
426     { MATROSKA_ID_TRACKFLAGLACING,       EBML_NONE },
427     { MATROSKA_ID_CODECNAME,             EBML_NONE },
428     { MATROSKA_ID_CODECDECODEALL,        EBML_NONE },
429     { MATROSKA_ID_CODECINFOURL,          EBML_NONE },
430     { MATROSKA_ID_CODECDOWNLOADURL,      EBML_NONE },
431     { MATROSKA_ID_TRACKMINCACHE,         EBML_NONE },
432     { MATROSKA_ID_TRACKMAXCACHE,         EBML_NONE },
433     { 0 }
434 };
435
436 static EbmlSyntax matroska_tracks[] = {
437     { MATROSKA_ID_TRACKENTRY, EBML_NEST, sizeof(MatroskaTrack), offsetof(MatroskaDemuxContext, tracks), { .n = matroska_track } },
438     { 0 }
439 };
440
441 static EbmlSyntax matroska_attachment[] = {
442     { MATROSKA_ID_FILEUID,      EBML_UINT, 0, offsetof(MatroskaAttachment, uid) },
443     { MATROSKA_ID_FILENAME,     EBML_UTF8, 0, offsetof(MatroskaAttachment, filename) },
444     { MATROSKA_ID_FILEMIMETYPE, EBML_STR,  0, offsetof(MatroskaAttachment, mime) },
445     { MATROSKA_ID_FILEDATA,     EBML_BIN,  0, offsetof(MatroskaAttachment, bin) },
446     { MATROSKA_ID_FILEDESC,     EBML_NONE },
447     { 0 }
448 };
449
450 static EbmlSyntax matroska_attachments[] = {
451     { MATROSKA_ID_ATTACHEDFILE, EBML_NEST, sizeof(MatroskaAttachment), offsetof(MatroskaDemuxContext, attachments), { .n = matroska_attachment } },
452     { 0 }
453 };
454
455 static EbmlSyntax matroska_chapter_display[] = {
456     { MATROSKA_ID_CHAPSTRING, EBML_UTF8, 0, offsetof(MatroskaChapter, title) },
457     { MATROSKA_ID_CHAPLANG,   EBML_NONE },
458     { 0 }
459 };
460
461 static EbmlSyntax matroska_chapter_entry[] = {
462     { MATROSKA_ID_CHAPTERTIMESTART,   EBML_UINT, 0, offsetof(MatroskaChapter, start), { .u = AV_NOPTS_VALUE } },
463     { MATROSKA_ID_CHAPTERTIMEEND,     EBML_UINT, 0, offsetof(MatroskaChapter, end),   { .u = AV_NOPTS_VALUE } },
464     { MATROSKA_ID_CHAPTERUID,         EBML_UINT, 0, offsetof(MatroskaChapter, uid) },
465     { MATROSKA_ID_CHAPTERDISPLAY,     EBML_NEST, 0,                        0,         { .n = matroska_chapter_display } },
466     { MATROSKA_ID_CHAPTERFLAGHIDDEN,  EBML_NONE },
467     { MATROSKA_ID_CHAPTERFLAGENABLED, EBML_NONE },
468     { MATROSKA_ID_CHAPTERPHYSEQUIV,   EBML_NONE },
469     { MATROSKA_ID_CHAPTERATOM,        EBML_NONE },
470     { 0 }
471 };
472
473 static EbmlSyntax matroska_chapter[] = {
474     { MATROSKA_ID_CHAPTERATOM,        EBML_NEST, sizeof(MatroskaChapter), offsetof(MatroskaDemuxContext, chapters), { .n = matroska_chapter_entry } },
475     { MATROSKA_ID_EDITIONUID,         EBML_NONE },
476     { MATROSKA_ID_EDITIONFLAGHIDDEN,  EBML_NONE },
477     { MATROSKA_ID_EDITIONFLAGDEFAULT, EBML_NONE },
478     { MATROSKA_ID_EDITIONFLAGORDERED, EBML_NONE },
479     { 0 }
480 };
481
482 static EbmlSyntax matroska_chapters[] = {
483     { MATROSKA_ID_EDITIONENTRY, EBML_NEST, 0, 0, { .n = matroska_chapter } },
484     { 0 }
485 };
486
487 static EbmlSyntax matroska_index_pos[] = {
488     { MATROSKA_ID_CUETRACK,           EBML_UINT, 0, offsetof(MatroskaIndexPos, track) },
489     { MATROSKA_ID_CUECLUSTERPOSITION, EBML_UINT, 0, offsetof(MatroskaIndexPos, pos) },
490     { MATROSKA_ID_CUERELATIVEPOSITION,EBML_NONE },
491     { MATROSKA_ID_CUEDURATION,        EBML_NONE },
492     { MATROSKA_ID_CUEBLOCKNUMBER,     EBML_NONE },
493     { 0 }
494 };
495
496 static EbmlSyntax matroska_index_entry[] = {
497     { MATROSKA_ID_CUETIME,          EBML_UINT, 0,                        offsetof(MatroskaIndex, time) },
498     { MATROSKA_ID_CUETRACKPOSITION, EBML_NEST, sizeof(MatroskaIndexPos), offsetof(MatroskaIndex, pos), { .n = matroska_index_pos } },
499     { 0 }
500 };
501
502 static EbmlSyntax matroska_index[] = {
503     { MATROSKA_ID_POINTENTRY, EBML_NEST, sizeof(MatroskaIndex), offsetof(MatroskaDemuxContext, index), { .n = matroska_index_entry } },
504     { 0 }
505 };
506
507 static EbmlSyntax matroska_simpletag[] = {
508     { MATROSKA_ID_TAGNAME,        EBML_UTF8, 0,                   offsetof(MatroskaTag, name) },
509     { MATROSKA_ID_TAGSTRING,      EBML_UTF8, 0,                   offsetof(MatroskaTag, string) },
510     { MATROSKA_ID_TAGLANG,        EBML_STR,  0,                   offsetof(MatroskaTag, lang), { .s = "und" } },
511     { MATROSKA_ID_TAGDEFAULT,     EBML_UINT, 0,                   offsetof(MatroskaTag, def) },
512     { MATROSKA_ID_TAGDEFAULT_BUG, EBML_UINT, 0,                   offsetof(MatroskaTag, def) },
513     { MATROSKA_ID_SIMPLETAG,      EBML_NEST, sizeof(MatroskaTag), offsetof(MatroskaTag, sub),  { .n = matroska_simpletag } },
514     { 0 }
515 };
516
517 static EbmlSyntax matroska_tagtargets[] = {
518     { MATROSKA_ID_TAGTARGETS_TYPE,       EBML_STR,  0, offsetof(MatroskaTagTarget, type) },
519     { MATROSKA_ID_TAGTARGETS_TYPEVALUE,  EBML_UINT, 0, offsetof(MatroskaTagTarget, typevalue), { .u = 50 } },
520     { MATROSKA_ID_TAGTARGETS_TRACKUID,   EBML_UINT, 0, offsetof(MatroskaTagTarget, trackuid) },
521     { MATROSKA_ID_TAGTARGETS_CHAPTERUID, EBML_UINT, 0, offsetof(MatroskaTagTarget, chapteruid) },
522     { MATROSKA_ID_TAGTARGETS_ATTACHUID,  EBML_UINT, 0, offsetof(MatroskaTagTarget, attachuid) },
523     { 0 }
524 };
525
526 static EbmlSyntax matroska_tag[] = {
527     { MATROSKA_ID_SIMPLETAG,  EBML_NEST, sizeof(MatroskaTag), offsetof(MatroskaTags, tag),    { .n = matroska_simpletag } },
528     { MATROSKA_ID_TAGTARGETS, EBML_NEST, 0,                   offsetof(MatroskaTags, target), { .n = matroska_tagtargets } },
529     { 0 }
530 };
531
532 static EbmlSyntax matroska_tags[] = {
533     { MATROSKA_ID_TAG, EBML_NEST, sizeof(MatroskaTags), offsetof(MatroskaDemuxContext, tags), { .n = matroska_tag } },
534     { 0 }
535 };
536
537 static EbmlSyntax matroska_seekhead_entry[] = {
538     { MATROSKA_ID_SEEKID,       EBML_UINT, 0, offsetof(MatroskaSeekhead, id) },
539     { MATROSKA_ID_SEEKPOSITION, EBML_UINT, 0, offsetof(MatroskaSeekhead, pos), { .u = -1 } },
540     { 0 }
541 };
542
543 static EbmlSyntax matroska_seekhead[] = {
544     { MATROSKA_ID_SEEKENTRY, EBML_NEST, sizeof(MatroskaSeekhead), offsetof(MatroskaDemuxContext, seekhead), { .n = matroska_seekhead_entry } },
545     { 0 }
546 };
547
548 static EbmlSyntax matroska_segment[] = {
549     { MATROSKA_ID_INFO,        EBML_NEST, 0, 0, { .n = matroska_info } },
550     { MATROSKA_ID_TRACKS,      EBML_NEST, 0, 0, { .n = matroska_tracks } },
551     { MATROSKA_ID_ATTACHMENTS, EBML_NEST, 0, 0, { .n = matroska_attachments } },
552     { MATROSKA_ID_CHAPTERS,    EBML_NEST, 0, 0, { .n = matroska_chapters } },
553     { MATROSKA_ID_CUES,        EBML_NEST, 0, 0, { .n = matroska_index } },
554     { MATROSKA_ID_TAGS,        EBML_NEST, 0, 0, { .n = matroska_tags } },
555     { MATROSKA_ID_SEEKHEAD,    EBML_NEST, 0, 0, { .n = matroska_seekhead } },
556     { MATROSKA_ID_CLUSTER,     EBML_STOP },
557     { 0 }
558 };
559
560 static EbmlSyntax matroska_segments[] = {
561     { MATROSKA_ID_SEGMENT, EBML_NEST, 0, 0, { .n = matroska_segment } },
562     { 0 }
563 };
564
565 static EbmlSyntax matroska_blockmore[] = {
566     { MATROSKA_ID_BLOCKADDID,      EBML_UINT, 0, offsetof(MatroskaBlock,additional_id) },
567     { MATROSKA_ID_BLOCKADDITIONAL, EBML_BIN,  0, offsetof(MatroskaBlock,additional) },
568     { 0 }
569 };
570
571 static EbmlSyntax matroska_blockadditions[] = {
572     { MATROSKA_ID_BLOCKMORE, EBML_NEST, 0, 0, {.n = matroska_blockmore} },
573     { 0 }
574 };
575
576 static EbmlSyntax matroska_blockgroup[] = {
577     { MATROSKA_ID_BLOCK,          EBML_BIN,  0, offsetof(MatroskaBlock, bin) },
578     { MATROSKA_ID_BLOCKADDITIONS, EBML_NEST, 0, 0, { .n = matroska_blockadditions} },
579     { MATROSKA_ID_SIMPLEBLOCK,    EBML_BIN,  0, offsetof(MatroskaBlock, bin) },
580     { MATROSKA_ID_BLOCKDURATION,  EBML_UINT, 0, offsetof(MatroskaBlock, duration) },
581     { MATROSKA_ID_DISCARDPADDING, EBML_SINT, 0, offsetof(MatroskaBlock, discard_padding) },
582     { MATROSKA_ID_BLOCKREFERENCE, EBML_SINT, 0, offsetof(MatroskaBlock, reference) },
583     { MATROSKA_ID_CODECSTATE,     EBML_NONE },
584     {                          1, EBML_UINT, 0, offsetof(MatroskaBlock, non_simple), { .u = 1 } },
585     { 0 }
586 };
587
588 static EbmlSyntax matroska_cluster[] = {
589     { MATROSKA_ID_CLUSTERTIMECODE, EBML_UINT, 0,                     offsetof(MatroskaCluster, timecode) },
590     { MATROSKA_ID_BLOCKGROUP,      EBML_NEST, sizeof(MatroskaBlock), offsetof(MatroskaCluster, blocks), { .n = matroska_blockgroup } },
591     { MATROSKA_ID_SIMPLEBLOCK,     EBML_PASS, sizeof(MatroskaBlock), offsetof(MatroskaCluster, blocks), { .n = matroska_blockgroup } },
592     { MATROSKA_ID_CLUSTERPOSITION, EBML_NONE },
593     { MATROSKA_ID_CLUSTERPREVSIZE, EBML_NONE },
594     { 0 }
595 };
596
597 static EbmlSyntax matroska_clusters[] = {
598     { MATROSKA_ID_CLUSTER,  EBML_NEST, 0, 0, { .n = matroska_cluster } },
599     { MATROSKA_ID_INFO,     EBML_NONE },
600     { MATROSKA_ID_CUES,     EBML_NONE },
601     { MATROSKA_ID_TAGS,     EBML_NONE },
602     { MATROSKA_ID_SEEKHEAD, EBML_NONE },
603     { 0 }
604 };
605
606 static EbmlSyntax matroska_cluster_incremental_parsing[] = {
607     { MATROSKA_ID_CLUSTERTIMECODE, EBML_UINT, 0,                     offsetof(MatroskaCluster, timecode) },
608     { MATROSKA_ID_BLOCKGROUP,      EBML_NEST, sizeof(MatroskaBlock), offsetof(MatroskaCluster, blocks), { .n = matroska_blockgroup } },
609     { MATROSKA_ID_SIMPLEBLOCK,     EBML_PASS, sizeof(MatroskaBlock), offsetof(MatroskaCluster, blocks), { .n = matroska_blockgroup } },
610     { MATROSKA_ID_CLUSTERPOSITION, EBML_NONE },
611     { MATROSKA_ID_CLUSTERPREVSIZE, EBML_NONE },
612     { MATROSKA_ID_INFO,            EBML_NONE },
613     { MATROSKA_ID_CUES,            EBML_NONE },
614     { MATROSKA_ID_TAGS,            EBML_NONE },
615     { MATROSKA_ID_SEEKHEAD,        EBML_NONE },
616     { MATROSKA_ID_CLUSTER,         EBML_STOP },
617     { 0 }
618 };
619
620 static EbmlSyntax matroska_cluster_incremental[] = {
621     { MATROSKA_ID_CLUSTERTIMECODE, EBML_UINT, 0, offsetof(MatroskaCluster, timecode) },
622     { MATROSKA_ID_BLOCKGROUP,      EBML_STOP },
623     { MATROSKA_ID_SIMPLEBLOCK,     EBML_STOP },
624     { MATROSKA_ID_CLUSTERPOSITION, EBML_NONE },
625     { MATROSKA_ID_CLUSTERPREVSIZE, EBML_NONE },
626     { 0 }
627 };
628
629 static EbmlSyntax matroska_clusters_incremental[] = {
630     { MATROSKA_ID_CLUSTER,  EBML_NEST, 0, 0, { .n = matroska_cluster_incremental } },
631     { MATROSKA_ID_INFO,     EBML_NONE },
632     { MATROSKA_ID_CUES,     EBML_NONE },
633     { MATROSKA_ID_TAGS,     EBML_NONE },
634     { MATROSKA_ID_SEEKHEAD, EBML_NONE },
635     { 0 }
636 };
637
638 static const char *const matroska_doctypes[] = { "matroska", "webm" };
639
640 static int matroska_resync(MatroskaDemuxContext *matroska, int64_t last_pos)
641 {
642     AVIOContext *pb = matroska->ctx->pb;
643     uint32_t id;
644     matroska->current_id = 0;
645     matroska->num_levels = 0;
646
647     /* seek to next position to resync from */
648     if (avio_seek(pb, last_pos + 1, SEEK_SET) < 0)
649         goto eof;
650
651     id = avio_rb32(pb);
652
653     // try to find a toplevel element
654     while (!url_feof(pb)) {
655         if (id == MATROSKA_ID_INFO     || id == MATROSKA_ID_TRACKS      ||
656             id == MATROSKA_ID_CUES     || id == MATROSKA_ID_TAGS        ||
657             id == MATROSKA_ID_SEEKHEAD || id == MATROSKA_ID_ATTACHMENTS ||
658             id == MATROSKA_ID_CLUSTER  || id == MATROSKA_ID_CHAPTERS) {
659             matroska->current_id = id;
660             return 0;
661         }
662         id = (id << 8) | avio_r8(pb);
663     }
664
665 eof:
666     matroska->done = 1;
667     return AVERROR_EOF;
668 }
669
670 /*
671  * Return: Whether we reached the end of a level in the hierarchy or not.
672  */
673 static int ebml_level_end(MatroskaDemuxContext *matroska)
674 {
675     AVIOContext *pb = matroska->ctx->pb;
676     int64_t pos = avio_tell(pb);
677
678     if (matroska->num_levels > 0) {
679         MatroskaLevel *level = &matroska->levels[matroska->num_levels - 1];
680         if (pos - level->start >= level->length || matroska->current_id) {
681             matroska->num_levels--;
682             return 1;
683         }
684     }
685     return 0;
686 }
687
688 /*
689  * Read: an "EBML number", which is defined as a variable-length
690  * array of bytes. The first byte indicates the length by giving a
691  * number of 0-bits followed by a one. The position of the first
692  * "one" bit inside the first byte indicates the length of this
693  * number.
694  * Returns: number of bytes read, < 0 on error
695  */
696 static int ebml_read_num(MatroskaDemuxContext *matroska, AVIOContext *pb,
697                          int max_size, uint64_t *number)
698 {
699     int read = 1, n = 1;
700     uint64_t total = 0;
701
702     /* The first byte tells us the length in bytes - avio_r8() can normally
703      * return 0, but since that's not a valid first ebmlID byte, we can
704      * use it safely here to catch EOS. */
705     if (!(total = avio_r8(pb))) {
706         /* we might encounter EOS here */
707         if (!url_feof(pb)) {
708             int64_t pos = avio_tell(pb);
709             av_log(matroska->ctx, AV_LOG_ERROR,
710                    "Read error at pos. %"PRIu64" (0x%"PRIx64")\n",
711                    pos, pos);
712             return pb->error ? pb->error : AVERROR(EIO);
713         }
714         return AVERROR_EOF;
715     }
716
717     /* get the length of the EBML number */
718     read = 8 - ff_log2_tab[total];
719     if (read > max_size) {
720         int64_t pos = avio_tell(pb) - 1;
721         av_log(matroska->ctx, AV_LOG_ERROR,
722                "Invalid EBML number size tag 0x%02x at pos %"PRIu64" (0x%"PRIx64")\n",
723                (uint8_t) total, pos, pos);
724         return AVERROR_INVALIDDATA;
725     }
726
727     /* read out length */
728     total ^= 1 << ff_log2_tab[total];
729     while (n++ < read)
730         total = (total << 8) | avio_r8(pb);
731
732     *number = total;
733
734     return read;
735 }
736
737 /**
738  * Read a EBML length value.
739  * This needs special handling for the "unknown length" case which has multiple
740  * encodings.
741  */
742 static int ebml_read_length(MatroskaDemuxContext *matroska, AVIOContext *pb,
743                             uint64_t *number)
744 {
745     int res = ebml_read_num(matroska, pb, 8, number);
746     if (res > 0 && *number + 1 == 1ULL << (7 * res))
747         *number = 0xffffffffffffffULL;
748     return res;
749 }
750
751 /*
752  * Read the next element as an unsigned int.
753  * 0 is success, < 0 is failure.
754  */
755 static int ebml_read_uint(AVIOContext *pb, int size, uint64_t *num)
756 {
757     int n = 0;
758
759     if (size > 8)
760         return AVERROR_INVALIDDATA;
761
762     /* big-endian ordering; build up number */
763     *num = 0;
764     while (n++ < size)
765         *num = (*num << 8) | avio_r8(pb);
766
767     return 0;
768 }
769
770 /*
771  * Read the next element as a signed int.
772  * 0 is success, < 0 is failure.
773  */
774 static int ebml_read_sint(AVIOContext *pb, int size, int64_t *num)
775 {
776     int n = 1;
777
778     if (size > 8)
779         return AVERROR_INVALIDDATA;
780
781     if (size == 0) {
782         *num = 0;
783     } else {
784         *num = sign_extend(avio_r8(pb), 8);
785
786         /* big-endian ordering; build up number */
787         while (n++ < size)
788             *num = (*num << 8) | avio_r8(pb);
789     }
790
791     return 0;
792 }
793
794 /*
795  * Read the next element as a float.
796  * 0 is success, < 0 is failure.
797  */
798 static int ebml_read_float(AVIOContext *pb, int size, double *num)
799 {
800     if (size == 0)
801         *num = 0;
802     else if (size == 4)
803         *num = av_int2float(avio_rb32(pb));
804     else if (size == 8)
805         *num = av_int2double(avio_rb64(pb));
806     else
807         return AVERROR_INVALIDDATA;
808
809     return 0;
810 }
811
812 /*
813  * Read the next element as an ASCII string.
814  * 0 is success, < 0 is failure.
815  */
816 static int ebml_read_ascii(AVIOContext *pb, int size, char **str)
817 {
818     char *res;
819
820     /* EBML strings are usually not 0-terminated, so we allocate one
821      * byte more, read the string and NULL-terminate it ourselves. */
822     if (!(res = av_malloc(size + 1)))
823         return AVERROR(ENOMEM);
824     if (avio_read(pb, (uint8_t *) res, size) != size) {
825         av_free(res);
826         return AVERROR(EIO);
827     }
828     (res)[size] = '\0';
829     av_free(*str);
830     *str = res;
831
832     return 0;
833 }
834
835 /*
836  * Read the next element as binary data.
837  * 0 is success, < 0 is failure.
838  */
839 static int ebml_read_binary(AVIOContext *pb, int length, EbmlBin *bin)
840 {
841     av_fast_padded_malloc(&bin->data, &bin->size, length);
842     if (!bin->data)
843         return AVERROR(ENOMEM);
844
845     bin->size = length;
846     bin->pos  = avio_tell(pb);
847     if (avio_read(pb, bin->data, length) != length) {
848         av_freep(&bin->data);
849         bin->size = 0;
850         return AVERROR(EIO);
851     }
852
853     return 0;
854 }
855
856 /*
857  * Read the next element, but only the header. The contents
858  * are supposed to be sub-elements which can be read separately.
859  * 0 is success, < 0 is failure.
860  */
861 static int ebml_read_master(MatroskaDemuxContext *matroska, uint64_t length)
862 {
863     AVIOContext *pb = matroska->ctx->pb;
864     MatroskaLevel *level;
865
866     if (matroska->num_levels >= EBML_MAX_DEPTH) {
867         av_log(matroska->ctx, AV_LOG_ERROR,
868                "File moves beyond max. allowed depth (%d)\n", EBML_MAX_DEPTH);
869         return AVERROR(ENOSYS);
870     }
871
872     level         = &matroska->levels[matroska->num_levels++];
873     level->start  = avio_tell(pb);
874     level->length = length;
875
876     return 0;
877 }
878
879 /*
880  * Read signed/unsigned "EBML" numbers.
881  * Return: number of bytes processed, < 0 on error
882  */
883 static int matroska_ebmlnum_uint(MatroskaDemuxContext *matroska,
884                                  uint8_t *data, uint32_t size, uint64_t *num)
885 {
886     AVIOContext pb;
887     ffio_init_context(&pb, data, size, 0, NULL, NULL, NULL, NULL);
888     return ebml_read_num(matroska, &pb, FFMIN(size, 8), num);
889 }
890
891 /*
892  * Same as above, but signed.
893  */
894 static int matroska_ebmlnum_sint(MatroskaDemuxContext *matroska,
895                                  uint8_t *data, uint32_t size, int64_t *num)
896 {
897     uint64_t unum;
898     int res;
899
900     /* read as unsigned number first */
901     if ((res = matroska_ebmlnum_uint(matroska, data, size, &unum)) < 0)
902         return res;
903
904     /* make signed (weird way) */
905     *num = unum - ((1LL << (7 * res - 1)) - 1);
906
907     return res;
908 }
909
910 static int ebml_parse_elem(MatroskaDemuxContext *matroska,
911                            EbmlSyntax *syntax, void *data);
912
913 static int ebml_parse_id(MatroskaDemuxContext *matroska, EbmlSyntax *syntax,
914                          uint32_t id, void *data)
915 {
916     int i;
917     for (i = 0; syntax[i].id; i++)
918         if (id == syntax[i].id)
919             break;
920     if (!syntax[i].id && id == MATROSKA_ID_CLUSTER &&
921         matroska->num_levels > 0                   &&
922         matroska->levels[matroska->num_levels - 1].length == 0xffffffffffffff)
923         return 0;  // we reached the end of an unknown size cluster
924     if (!syntax[i].id && id != EBML_ID_VOID && id != EBML_ID_CRC32) {
925         av_log(matroska->ctx, AV_LOG_INFO, "Unknown entry 0x%"PRIX32"\n", id);
926         if (matroska->ctx->error_recognition & AV_EF_EXPLODE)
927             return AVERROR_INVALIDDATA;
928     }
929     return ebml_parse_elem(matroska, &syntax[i], data);
930 }
931
932 static int ebml_parse(MatroskaDemuxContext *matroska, EbmlSyntax *syntax,
933                       void *data)
934 {
935     if (!matroska->current_id) {
936         uint64_t id;
937         int res = ebml_read_num(matroska, matroska->ctx->pb, 4, &id);
938         if (res < 0)
939             return res;
940         matroska->current_id = id | 1 << 7 * res;
941     }
942     return ebml_parse_id(matroska, syntax, matroska->current_id, data);
943 }
944
945 static int ebml_parse_nest(MatroskaDemuxContext *matroska, EbmlSyntax *syntax,
946                            void *data)
947 {
948     int i, res = 0;
949
950     for (i = 0; syntax[i].id; i++)
951         switch (syntax[i].type) {
952         case EBML_UINT:
953             *(uint64_t *) ((char *) data + syntax[i].data_offset) = syntax[i].def.u;
954             break;
955         case EBML_FLOAT:
956             *(double *) ((char *) data + syntax[i].data_offset) = syntax[i].def.f;
957             break;
958         case EBML_STR:
959         case EBML_UTF8:
960             // the default may be NULL
961             if (syntax[i].def.s) {
962                 uint8_t **dst = (uint8_t **) ((uint8_t *) data + syntax[i].data_offset);
963                 *dst = av_strdup(syntax[i].def.s);
964                 if (!*dst)
965                     return AVERROR(ENOMEM);
966             }
967             break;
968         }
969
970     while (!res && !ebml_level_end(matroska))
971         res = ebml_parse(matroska, syntax, data);
972
973     return res;
974 }
975
976 static int ebml_parse_elem(MatroskaDemuxContext *matroska,
977                            EbmlSyntax *syntax, void *data)
978 {
979     static const uint64_t max_lengths[EBML_TYPE_COUNT] = {
980         [EBML_UINT]  = 8,
981         [EBML_FLOAT] = 8,
982         // max. 16 MB for strings
983         [EBML_STR]   = 0x1000000,
984         [EBML_UTF8]  = 0x1000000,
985         // max. 256 MB for binary data
986         [EBML_BIN]   = 0x10000000,
987         // no limits for anything else
988     };
989     AVIOContext *pb = matroska->ctx->pb;
990     uint32_t id = syntax->id;
991     uint64_t length;
992     int res;
993     void *newelem;
994
995     data = (char *) data + syntax->data_offset;
996     if (syntax->list_elem_size) {
997         EbmlList *list = data;
998         newelem = av_realloc_array(list->elem, list->nb_elem + 1, syntax->list_elem_size);
999         if (!newelem)
1000             return AVERROR(ENOMEM);
1001         list->elem = newelem;
1002         data = (char *) list->elem + list->nb_elem * syntax->list_elem_size;
1003         memset(data, 0, syntax->list_elem_size);
1004         list->nb_elem++;
1005     }
1006
1007     if (syntax->type != EBML_PASS && syntax->type != EBML_STOP) {
1008         matroska->current_id = 0;
1009         if ((res = ebml_read_length(matroska, pb, &length)) < 0)
1010             return res;
1011         if (max_lengths[syntax->type] && length > max_lengths[syntax->type]) {
1012             av_log(matroska->ctx, AV_LOG_ERROR,
1013                    "Invalid length 0x%"PRIx64" > 0x%"PRIx64" for syntax element %i\n",
1014                    length, max_lengths[syntax->type], syntax->type);
1015             return AVERROR_INVALIDDATA;
1016         }
1017     }
1018
1019     switch (syntax->type) {
1020     case EBML_UINT:
1021         res = ebml_read_uint(pb, length, data);
1022         break;
1023     case EBML_SINT:
1024         res = ebml_read_sint(pb, length, data);
1025         break;
1026     case EBML_FLOAT:
1027         res = ebml_read_float(pb, length, data);
1028         break;
1029     case EBML_STR:
1030     case EBML_UTF8:
1031         res = ebml_read_ascii(pb, length, data);
1032         break;
1033     case EBML_BIN:
1034         res = ebml_read_binary(pb, length, data);
1035         break;
1036     case EBML_NEST:
1037         if ((res = ebml_read_master(matroska, length)) < 0)
1038             return res;
1039         if (id == MATROSKA_ID_SEGMENT)
1040             matroska->segment_start = avio_tell(matroska->ctx->pb);
1041         return ebml_parse_nest(matroska, syntax->def.n, data);
1042     case EBML_PASS:
1043         return ebml_parse_id(matroska, syntax->def.n, id, data);
1044     case EBML_STOP:
1045         return 1;
1046     default:
1047         if (ffio_limit(pb, length) != length)
1048             return AVERROR(EIO);
1049         return avio_skip(pb, length) < 0 ? AVERROR(EIO) : 0;
1050     }
1051     if (res == AVERROR_INVALIDDATA)
1052         av_log(matroska->ctx, AV_LOG_ERROR, "Invalid element\n");
1053     else if (res == AVERROR(EIO))
1054         av_log(matroska->ctx, AV_LOG_ERROR, "Read error\n");
1055     return res;
1056 }
1057
1058 static void ebml_free(EbmlSyntax *syntax, void *data)
1059 {
1060     int i, j;
1061     for (i = 0; syntax[i].id; i++) {
1062         void *data_off = (char *) data + syntax[i].data_offset;
1063         switch (syntax[i].type) {
1064         case EBML_STR:
1065         case EBML_UTF8:
1066             av_freep(data_off);
1067             break;
1068         case EBML_BIN:
1069             av_freep(&((EbmlBin *) data_off)->data);
1070             break;
1071         case EBML_NEST:
1072             if (syntax[i].list_elem_size) {
1073                 EbmlList *list = data_off;
1074                 char *ptr = list->elem;
1075                 for (j = 0; j < list->nb_elem;
1076                      j++, ptr += syntax[i].list_elem_size)
1077                     ebml_free(syntax[i].def.n, ptr);
1078                 av_free(list->elem);
1079             } else
1080                 ebml_free(syntax[i].def.n, data_off);
1081         default:
1082             break;
1083         }
1084     }
1085 }
1086
1087 /*
1088  * Autodetecting...
1089  */
1090 static int matroska_probe(AVProbeData *p)
1091 {
1092     uint64_t total = 0;
1093     int len_mask = 0x80, size = 1, n = 1, i;
1094
1095     /* EBML header? */
1096     if (AV_RB32(p->buf) != EBML_ID_HEADER)
1097         return 0;
1098
1099     /* length of header */
1100     total = p->buf[4];
1101     while (size <= 8 && !(total & len_mask)) {
1102         size++;
1103         len_mask >>= 1;
1104     }
1105     if (size > 8)
1106         return 0;
1107     total &= (len_mask - 1);
1108     while (n < size)
1109         total = (total << 8) | p->buf[4 + n++];
1110
1111     /* Does the probe data contain the whole header? */
1112     if (p->buf_size < 4 + size + total)
1113         return 0;
1114
1115     /* The header should contain a known document type. For now,
1116      * we don't parse the whole header but simply check for the
1117      * availability of that array of characters inside the header.
1118      * Not fully fool-proof, but good enough. */
1119     for (i = 0; i < FF_ARRAY_ELEMS(matroska_doctypes); i++) {
1120         int probelen = strlen(matroska_doctypes[i]);
1121         if (total < probelen)
1122             continue;
1123         for (n = 4 + size; n <= 4 + size + total - probelen; n++)
1124             if (!memcmp(p->buf + n, matroska_doctypes[i], probelen))
1125                 return AVPROBE_SCORE_MAX;
1126     }
1127
1128     // probably valid EBML header but no recognized doctype
1129     return AVPROBE_SCORE_EXTENSION;
1130 }
1131
1132 static MatroskaTrack *matroska_find_track_by_num(MatroskaDemuxContext *matroska,
1133                                                  int num)
1134 {
1135     MatroskaTrack *tracks = matroska->tracks.elem;
1136     int i;
1137
1138     for (i = 0; i < matroska->tracks.nb_elem; i++)
1139         if (tracks[i].num == num)
1140             return &tracks[i];
1141
1142     av_log(matroska->ctx, AV_LOG_ERROR, "Invalid track number %d\n", num);
1143     return NULL;
1144 }
1145
1146 static int matroska_decode_buffer(uint8_t **buf, int *buf_size,
1147                                   MatroskaTrack *track)
1148 {
1149     MatroskaTrackEncoding *encodings = track->encodings.elem;
1150     uint8_t *data = *buf;
1151     int isize = *buf_size;
1152     uint8_t *pkt_data = NULL;
1153     uint8_t av_unused *newpktdata;
1154     int pkt_size = isize;
1155     int result = 0;
1156     int olen;
1157
1158     if (pkt_size >= 10000000U)
1159         return AVERROR_INVALIDDATA;
1160
1161     switch (encodings[0].compression.algo) {
1162     case MATROSKA_TRACK_ENCODING_COMP_HEADERSTRIP:
1163     {
1164         int header_size = encodings[0].compression.settings.size;
1165         uint8_t *header = encodings[0].compression.settings.data;
1166
1167         if (header_size && !header) {
1168             av_log(NULL, AV_LOG_ERROR, "Compression size but no data in headerstrip\n");
1169             return -1;
1170         }
1171
1172         if (!header_size)
1173             return 0;
1174
1175         pkt_size = isize + header_size;
1176         pkt_data = av_malloc(pkt_size);
1177         if (!pkt_data)
1178             return AVERROR(ENOMEM);
1179
1180         memcpy(pkt_data, header, header_size);
1181         memcpy(pkt_data + header_size, data, isize);
1182         break;
1183     }
1184 #if CONFIG_LZO
1185     case MATROSKA_TRACK_ENCODING_COMP_LZO:
1186         do {
1187             olen       = pkt_size *= 3;
1188             newpktdata = av_realloc(pkt_data, pkt_size + AV_LZO_OUTPUT_PADDING);
1189             if (!newpktdata) {
1190                 result = AVERROR(ENOMEM);
1191                 goto failed;
1192             }
1193             pkt_data = newpktdata;
1194             result   = av_lzo1x_decode(pkt_data, &olen, data, &isize);
1195         } while (result == AV_LZO_OUTPUT_FULL && pkt_size < 10000000);
1196         if (result) {
1197             result = AVERROR_INVALIDDATA;
1198             goto failed;
1199         }
1200         pkt_size -= olen;
1201         break;
1202 #endif
1203 #if CONFIG_ZLIB
1204     case MATROSKA_TRACK_ENCODING_COMP_ZLIB:
1205     {
1206         z_stream zstream = { 0 };
1207         if (inflateInit(&zstream) != Z_OK)
1208             return -1;
1209         zstream.next_in  = data;
1210         zstream.avail_in = isize;
1211         do {
1212             pkt_size  *= 3;
1213             newpktdata = av_realloc(pkt_data, pkt_size);
1214             if (!newpktdata) {
1215                 inflateEnd(&zstream);
1216                 goto failed;
1217             }
1218             pkt_data          = newpktdata;
1219             zstream.avail_out = pkt_size - zstream.total_out;
1220             zstream.next_out  = pkt_data + zstream.total_out;
1221             if (pkt_data) {
1222                 result = inflate(&zstream, Z_NO_FLUSH);
1223             } else
1224                 result = Z_MEM_ERROR;
1225         } while (result == Z_OK && pkt_size < 10000000);
1226         pkt_size = zstream.total_out;
1227         inflateEnd(&zstream);
1228         if (result != Z_STREAM_END) {
1229             if (result == Z_MEM_ERROR)
1230                 result = AVERROR(ENOMEM);
1231             else
1232                 result = AVERROR_INVALIDDATA;
1233             goto failed;
1234         }
1235         break;
1236     }
1237 #endif
1238 #if CONFIG_BZLIB
1239     case MATROSKA_TRACK_ENCODING_COMP_BZLIB:
1240     {
1241         bz_stream bzstream = { 0 };
1242         if (BZ2_bzDecompressInit(&bzstream, 0, 0) != BZ_OK)
1243             return -1;
1244         bzstream.next_in  = data;
1245         bzstream.avail_in = isize;
1246         do {
1247             pkt_size  *= 3;
1248             newpktdata = av_realloc(pkt_data, pkt_size);
1249             if (!newpktdata) {
1250                 BZ2_bzDecompressEnd(&bzstream);
1251                 goto failed;
1252             }
1253             pkt_data           = newpktdata;
1254             bzstream.avail_out = pkt_size - bzstream.total_out_lo32;
1255             bzstream.next_out  = pkt_data + bzstream.total_out_lo32;
1256             if (pkt_data) {
1257                 result = BZ2_bzDecompress(&bzstream);
1258             } else
1259                 result = BZ_MEM_ERROR;
1260         } while (result == BZ_OK && pkt_size < 10000000);
1261         pkt_size = bzstream.total_out_lo32;
1262         BZ2_bzDecompressEnd(&bzstream);
1263         if (result != BZ_STREAM_END) {
1264             if (result == BZ_MEM_ERROR)
1265                 result = AVERROR(ENOMEM);
1266             else
1267                 result = AVERROR_INVALIDDATA;
1268             goto failed;
1269         }
1270         break;
1271     }
1272 #endif
1273     default:
1274         return AVERROR_INVALIDDATA;
1275     }
1276
1277     *buf      = pkt_data;
1278     *buf_size = pkt_size;
1279     return 0;
1280
1281 failed:
1282     av_free(pkt_data);
1283     return result;
1284 }
1285
1286 #if FF_API_ASS_SSA
1287 static void matroska_fix_ass_packet(MatroskaDemuxContext *matroska,
1288                                     AVPacket *pkt, uint64_t display_duration)
1289 {
1290     AVBufferRef *line;
1291     char *layer, *ptr = pkt->data, *end = ptr + pkt->size;
1292
1293     for (; *ptr != ',' && ptr < end - 1; ptr++)
1294         ;
1295     if (*ptr == ',')
1296         ptr++;
1297     layer = ptr;
1298     for (; *ptr != ',' && ptr < end - 1; ptr++)
1299         ;
1300     if (*ptr == ',') {
1301         int64_t end_pts = pkt->pts + display_duration;
1302         int sc = matroska->time_scale * pkt->pts / 10000000;
1303         int ec = matroska->time_scale * end_pts  / 10000000;
1304         int sh, sm, ss, eh, em, es, len;
1305         sh     = sc / 360000;
1306         sc    -= 360000 * sh;
1307         sm     = sc / 6000;
1308         sc    -= 6000 * sm;
1309         ss     = sc / 100;
1310         sc    -= 100 * ss;
1311         eh     = ec / 360000;
1312         ec    -= 360000 * eh;
1313         em     = ec / 6000;
1314         ec    -= 6000 * em;
1315         es     = ec / 100;
1316         ec    -= 100 * es;
1317         *ptr++ = '\0';
1318         len    = 50 + end - ptr + FF_INPUT_BUFFER_PADDING_SIZE;
1319         if (!(line = av_buffer_alloc(len)))
1320             return;
1321         snprintf(line->data, len,
1322                  "Dialogue: %s,%d:%02d:%02d.%02d,%d:%02d:%02d.%02d,%s\r\n",
1323                  layer, sh, sm, ss, sc, eh, em, es, ec, ptr);
1324         av_buffer_unref(&pkt->buf);
1325         pkt->buf  = line;
1326         pkt->data = line->data;
1327         pkt->size = strlen(line->data);
1328     }
1329 }
1330
1331 static int matroska_merge_packets(AVPacket *out, AVPacket *in)
1332 {
1333     int ret = av_grow_packet(out, in->size);
1334     if (ret < 0)
1335         return ret;
1336
1337     memcpy(out->data + out->size - in->size, in->data, in->size);
1338
1339     av_free_packet(in);
1340     av_free(in);
1341     return 0;
1342 }
1343 #endif
1344
1345 static void matroska_convert_tag(AVFormatContext *s, EbmlList *list,
1346                                  AVDictionary **metadata, char *prefix)
1347 {
1348     MatroskaTag *tags = list->elem;
1349     char key[1024];
1350     int i;
1351
1352     for (i = 0; i < list->nb_elem; i++) {
1353         const char *lang = tags[i].lang &&
1354                            strcmp(tags[i].lang, "und") ? tags[i].lang : NULL;
1355
1356         if (!tags[i].name) {
1357             av_log(s, AV_LOG_WARNING, "Skipping invalid tag with no TagName.\n");
1358             continue;
1359         }
1360         if (prefix)
1361             snprintf(key, sizeof(key), "%s/%s", prefix, tags[i].name);
1362         else
1363             av_strlcpy(key, tags[i].name, sizeof(key));
1364         if (tags[i].def || !lang) {
1365             av_dict_set(metadata, key, tags[i].string, 0);
1366             if (tags[i].sub.nb_elem)
1367                 matroska_convert_tag(s, &tags[i].sub, metadata, key);
1368         }
1369         if (lang) {
1370             av_strlcat(key, "-", sizeof(key));
1371             av_strlcat(key, lang, sizeof(key));
1372             av_dict_set(metadata, key, tags[i].string, 0);
1373             if (tags[i].sub.nb_elem)
1374                 matroska_convert_tag(s, &tags[i].sub, metadata, key);
1375         }
1376     }
1377     ff_metadata_conv(metadata, NULL, ff_mkv_metadata_conv);
1378 }
1379
1380 static void matroska_convert_tags(AVFormatContext *s)
1381 {
1382     MatroskaDemuxContext *matroska = s->priv_data;
1383     MatroskaTags *tags = matroska->tags.elem;
1384     int i, j;
1385
1386     for (i = 0; i < matroska->tags.nb_elem; i++) {
1387         if (tags[i].target.attachuid) {
1388             MatroskaAttachment *attachment = matroska->attachments.elem;
1389             for (j = 0; j < matroska->attachments.nb_elem; j++)
1390                 if (attachment[j].uid == tags[i].target.attachuid &&
1391                     attachment[j].stream)
1392                     matroska_convert_tag(s, &tags[i].tag,
1393                                          &attachment[j].stream->metadata, NULL);
1394         } else if (tags[i].target.chapteruid) {
1395             MatroskaChapter *chapter = matroska->chapters.elem;
1396             for (j = 0; j < matroska->chapters.nb_elem; j++)
1397                 if (chapter[j].uid == tags[i].target.chapteruid &&
1398                     chapter[j].chapter)
1399                     matroska_convert_tag(s, &tags[i].tag,
1400                                          &chapter[j].chapter->metadata, NULL);
1401         } else if (tags[i].target.trackuid) {
1402             MatroskaTrack *track = matroska->tracks.elem;
1403             for (j = 0; j < matroska->tracks.nb_elem; j++)
1404                 if (track[j].uid == tags[i].target.trackuid && track[j].stream)
1405                     matroska_convert_tag(s, &tags[i].tag,
1406                                          &track[j].stream->metadata, NULL);
1407         } else {
1408             matroska_convert_tag(s, &tags[i].tag, &s->metadata,
1409                                  tags[i].target.type);
1410         }
1411     }
1412 }
1413
1414 static int matroska_parse_seekhead_entry(MatroskaDemuxContext *matroska,
1415                                          int idx)
1416 {
1417     EbmlList *seekhead_list = &matroska->seekhead;
1418     uint32_t level_up       = matroska->level_up;
1419     uint32_t saved_id       = matroska->current_id;
1420     MatroskaSeekhead *seekhead = seekhead_list->elem;
1421     int64_t before_pos = avio_tell(matroska->ctx->pb);
1422     MatroskaLevel level;
1423     int64_t offset;
1424     int ret = 0;
1425
1426     if (idx >= seekhead_list->nb_elem            ||
1427         seekhead[idx].id == MATROSKA_ID_SEEKHEAD ||
1428         seekhead[idx].id == MATROSKA_ID_CLUSTER)
1429         return 0;
1430
1431     /* seek */
1432     offset = seekhead[idx].pos + matroska->segment_start;
1433     if (avio_seek(matroska->ctx->pb, offset, SEEK_SET) == offset) {
1434         /* We don't want to lose our seekhead level, so we add
1435          * a dummy. This is a crude hack. */
1436         if (matroska->num_levels == EBML_MAX_DEPTH) {
1437             av_log(matroska->ctx, AV_LOG_INFO,
1438                    "Max EBML element depth (%d) reached, "
1439                    "cannot parse further.\n", EBML_MAX_DEPTH);
1440             ret = AVERROR_INVALIDDATA;
1441         } else {
1442             level.start  = 0;
1443             level.length = (uint64_t) -1;
1444             matroska->levels[matroska->num_levels] = level;
1445             matroska->num_levels++;
1446             matroska->current_id                   = 0;
1447
1448             ret = ebml_parse(matroska, matroska_segment, matroska);
1449
1450             /* remove dummy level */
1451             while (matroska->num_levels) {
1452                 uint64_t length = matroska->levels[--matroska->num_levels].length;
1453                 if (length == (uint64_t) -1)
1454                     break;
1455             }
1456         }
1457     }
1458     /* seek back */
1459     avio_seek(matroska->ctx->pb, before_pos, SEEK_SET);
1460     matroska->level_up   = level_up;
1461     matroska->current_id = saved_id;
1462
1463     return ret;
1464 }
1465
1466 static void matroska_execute_seekhead(MatroskaDemuxContext *matroska)
1467 {
1468     EbmlList *seekhead_list = &matroska->seekhead;
1469     int64_t before_pos = avio_tell(matroska->ctx->pb);
1470     int i;
1471
1472     // we should not do any seeking in the streaming case
1473     if (!matroska->ctx->pb->seekable ||
1474         (matroska->ctx->flags & AVFMT_FLAG_IGNIDX))
1475         return;
1476
1477     for (i = 0; i < seekhead_list->nb_elem; i++) {
1478         MatroskaSeekhead *seekhead = seekhead_list->elem;
1479         if (seekhead[i].pos <= before_pos)
1480             continue;
1481
1482         // defer cues parsing until we actually need cue data.
1483         if (seekhead[i].id == MATROSKA_ID_CUES) {
1484             matroska->cues_parsing_deferred = 1;
1485             continue;
1486         }
1487
1488         if (matroska_parse_seekhead_entry(matroska, i) < 0) {
1489             // mark index as broken
1490             matroska->cues_parsing_deferred = -1;
1491             break;
1492         }
1493     }
1494 }
1495
1496 static void matroska_add_index_entries(MatroskaDemuxContext *matroska)
1497 {
1498     EbmlList *index_list;
1499     MatroskaIndex *index;
1500     int index_scale = 1;
1501     int i, j;
1502
1503     index_list = &matroska->index;
1504     index      = index_list->elem;
1505     if (index_list->nb_elem &&
1506         index[0].time > 1E14 / matroska->time_scale) {
1507         av_log(matroska->ctx, AV_LOG_WARNING, "Working around broken index.\n");
1508         index_scale = matroska->time_scale;
1509     }
1510     for (i = 0; i < index_list->nb_elem; i++) {
1511         EbmlList *pos_list    = &index[i].pos;
1512         MatroskaIndexPos *pos = pos_list->elem;
1513         for (j = 0; j < pos_list->nb_elem; j++) {
1514             MatroskaTrack *track = matroska_find_track_by_num(matroska,
1515                                                               pos[j].track);
1516             if (track && track->stream)
1517                 av_add_index_entry(track->stream,
1518                                    pos[j].pos + matroska->segment_start,
1519                                    index[i].time / index_scale, 0, 0,
1520                                    AVINDEX_KEYFRAME);
1521         }
1522     }
1523 }
1524
1525 static void matroska_parse_cues(MatroskaDemuxContext *matroska) {
1526     EbmlList *seekhead_list = &matroska->seekhead;
1527     MatroskaSeekhead *seekhead = seekhead_list->elem;
1528     int i;
1529
1530     for (i = 0; i < seekhead_list->nb_elem; i++)
1531         if (seekhead[i].id == MATROSKA_ID_CUES)
1532             break;
1533     av_assert1(i <= seekhead_list->nb_elem);
1534
1535     if (matroska_parse_seekhead_entry(matroska, i) < 0)
1536        matroska->cues_parsing_deferred = -1;
1537     matroska_add_index_entries(matroska);
1538 }
1539
1540 static int matroska_aac_profile(char *codec_id)
1541 {
1542     static const char *const aac_profiles[] = { "MAIN", "LC", "SSR" };
1543     int profile;
1544
1545     for (profile = 0; profile < FF_ARRAY_ELEMS(aac_profiles); profile++)
1546         if (strstr(codec_id, aac_profiles[profile]))
1547             break;
1548     return profile + 1;
1549 }
1550
1551 static int matroska_aac_sri(int samplerate)
1552 {
1553     int sri;
1554
1555     for (sri = 0; sri < FF_ARRAY_ELEMS(avpriv_mpeg4audio_sample_rates); sri++)
1556         if (avpriv_mpeg4audio_sample_rates[sri] == samplerate)
1557             break;
1558     return sri;
1559 }
1560
1561 static void matroska_metadata_creation_time(AVDictionary **metadata, int64_t date_utc)
1562 {
1563     char buffer[32];
1564     /* Convert to seconds and adjust by number of seconds between 2001-01-01 and Epoch */
1565     time_t creation_time = date_utc / 1000000000 + 978307200;
1566     struct tm *ptm = gmtime(&creation_time);
1567     if (!ptm) return;
1568     strftime(buffer, sizeof(buffer), "%Y-%m-%d %H:%M:%S", ptm);
1569     av_dict_set(metadata, "creation_time", buffer, 0);
1570 }
1571
1572 static int matroska_read_header(AVFormatContext *s)
1573 {
1574     MatroskaDemuxContext *matroska = s->priv_data;
1575     EbmlList *attachments_list = &matroska->attachments;
1576     EbmlList *chapters_list    = &matroska->chapters;
1577     MatroskaAttachment *attachments;
1578     MatroskaChapter *chapters;
1579     MatroskaTrack *tracks;
1580     uint64_t max_start = 0;
1581     int64_t pos;
1582     Ebml ebml = { 0 };
1583     AVStream *st;
1584     int i, j, k, res;
1585
1586     matroska->ctx = s;
1587
1588     /* First read the EBML header. */
1589     if (ebml_parse(matroska, ebml_syntax, &ebml) ||
1590         ebml.version         > EBML_VERSION      ||
1591         ebml.max_size        > sizeof(uint64_t)  ||
1592         ebml.id_length       > sizeof(uint32_t)  ||
1593         ebml.doctype_version > 3                 ||
1594         !ebml.doctype) {
1595         av_log(matroska->ctx, AV_LOG_ERROR,
1596                "EBML header using unsupported features\n"
1597                "(EBML version %"PRIu64", doctype %s, doc version %"PRIu64")\n",
1598                ebml.version, ebml.doctype, ebml.doctype_version);
1599         ebml_free(ebml_syntax, &ebml);
1600         return AVERROR_PATCHWELCOME;
1601     } else if (ebml.doctype_version == 3) {
1602         av_log(matroska->ctx, AV_LOG_WARNING,
1603                "EBML header using unsupported features\n"
1604                "(EBML version %"PRIu64", doctype %s, doc version %"PRIu64")\n",
1605                ebml.version, ebml.doctype, ebml.doctype_version);
1606     }
1607     for (i = 0; i < FF_ARRAY_ELEMS(matroska_doctypes); i++)
1608         if (!strcmp(ebml.doctype, matroska_doctypes[i]))
1609             break;
1610     if (i >= FF_ARRAY_ELEMS(matroska_doctypes)) {
1611         av_log(s, AV_LOG_WARNING, "Unknown EBML doctype '%s'\n", ebml.doctype);
1612         if (matroska->ctx->error_recognition & AV_EF_EXPLODE) {
1613             ebml_free(ebml_syntax, &ebml);
1614             return AVERROR_INVALIDDATA;
1615         }
1616     }
1617     ebml_free(ebml_syntax, &ebml);
1618
1619     /* The next thing is a segment. */
1620     pos = avio_tell(matroska->ctx->pb);
1621     res = ebml_parse(matroska, matroska_segments, matroska);
1622     // try resyncing until we find a EBML_STOP type element.
1623     while (res != 1) {
1624         res = matroska_resync(matroska, pos);
1625         if (res < 0)
1626             return res;
1627         pos = avio_tell(matroska->ctx->pb);
1628         res = ebml_parse(matroska, matroska_segment, matroska);
1629     }
1630     matroska_execute_seekhead(matroska);
1631
1632     if (!matroska->time_scale)
1633         matroska->time_scale = 1000000;
1634     if (matroska->duration)
1635         matroska->ctx->duration = matroska->duration * matroska->time_scale *
1636                                   1000 / AV_TIME_BASE;
1637     av_dict_set(&s->metadata, "title", matroska->title, 0);
1638     av_dict_set(&s->metadata, "encoder", matroska->muxingapp, 0);
1639
1640     if (matroska->date_utc.size == 8)
1641         matroska_metadata_creation_time(&s->metadata, AV_RB64(matroska->date_utc.data));
1642
1643     tracks = matroska->tracks.elem;
1644     for (i = 0; i < matroska->tracks.nb_elem; i++) {
1645         MatroskaTrack *track = &tracks[i];
1646         enum AVCodecID codec_id = AV_CODEC_ID_NONE;
1647         EbmlList *encodings_list = &track->encodings;
1648         MatroskaTrackEncoding *encodings = encodings_list->elem;
1649         uint8_t *extradata = NULL;
1650         int extradata_size = 0;
1651         int extradata_offset = 0;
1652         uint32_t fourcc = 0;
1653         AVIOContext b;
1654         char* key_id_base64 = NULL;
1655         int bit_depth = -1;
1656
1657         /* Apply some sanity checks. */
1658         if (track->type != MATROSKA_TRACK_TYPE_VIDEO &&
1659             track->type != MATROSKA_TRACK_TYPE_AUDIO &&
1660             track->type != MATROSKA_TRACK_TYPE_SUBTITLE &&
1661             track->type != MATROSKA_TRACK_TYPE_METADATA) {
1662             av_log(matroska->ctx, AV_LOG_INFO,
1663                    "Unknown or unsupported track type %"PRIu64"\n",
1664                    track->type);
1665             continue;
1666         }
1667         if (track->codec_id == NULL)
1668             continue;
1669
1670         if (track->type == MATROSKA_TRACK_TYPE_VIDEO) {
1671             if (!track->default_duration && track->video.frame_rate > 0)
1672                 track->default_duration = 1000000000 / track->video.frame_rate;
1673             if (track->video.display_width == -1)
1674                 track->video.display_width = track->video.pixel_width;
1675             if (track->video.display_height == -1)
1676                 track->video.display_height = track->video.pixel_height;
1677             if (track->video.color_space.size == 4)
1678                 fourcc = AV_RL32(track->video.color_space.data);
1679         } else if (track->type == MATROSKA_TRACK_TYPE_AUDIO) {
1680             if (!track->audio.out_samplerate)
1681                 track->audio.out_samplerate = track->audio.samplerate;
1682         }
1683         if (encodings_list->nb_elem > 1) {
1684             av_log(matroska->ctx, AV_LOG_ERROR,
1685                    "Multiple combined encodings not supported");
1686         } else if (encodings_list->nb_elem == 1) {
1687             if (encodings[0].type) {
1688                 if (encodings[0].encryption.key_id.size > 0) {
1689                     /* Save the encryption key id to be stored later as a
1690                        metadata tag. */
1691                     const int b64_size = AV_BASE64_SIZE(encodings[0].encryption.key_id.size);
1692                     key_id_base64 = av_malloc(b64_size);
1693                     if (key_id_base64 == NULL)
1694                         return AVERROR(ENOMEM);
1695
1696                     av_base64_encode(key_id_base64, b64_size,
1697                                      encodings[0].encryption.key_id.data,
1698                                      encodings[0].encryption.key_id.size);
1699                 } else {
1700                     encodings[0].scope = 0;
1701                     av_log(matroska->ctx, AV_LOG_ERROR,
1702                            "Unsupported encoding type");
1703                 }
1704             } else if (
1705 #if CONFIG_ZLIB
1706                  encodings[0].compression.algo != MATROSKA_TRACK_ENCODING_COMP_ZLIB  &&
1707 #endif
1708 #if CONFIG_BZLIB
1709                  encodings[0].compression.algo != MATROSKA_TRACK_ENCODING_COMP_BZLIB &&
1710 #endif
1711 #if CONFIG_LZO
1712                  encodings[0].compression.algo != MATROSKA_TRACK_ENCODING_COMP_LZO   &&
1713 #endif
1714                  encodings[0].compression.algo != MATROSKA_TRACK_ENCODING_COMP_HEADERSTRIP) {
1715                 encodings[0].scope = 0;
1716                 av_log(matroska->ctx, AV_LOG_ERROR,
1717                        "Unsupported encoding type");
1718             } else if (track->codec_priv.size && encodings[0].scope & 2) {
1719                 uint8_t *codec_priv = track->codec_priv.data;
1720                 int ret = matroska_decode_buffer(&track->codec_priv.data,
1721                                                  &track->codec_priv.size,
1722                                                  track);
1723                 if (ret < 0) {
1724                     track->codec_priv.data = NULL;
1725                     track->codec_priv.size = 0;
1726                     av_log(matroska->ctx, AV_LOG_ERROR,
1727                            "Failed to decode codec private data\n");
1728                 }
1729
1730                 if (codec_priv != track->codec_priv.data)
1731                     av_free(codec_priv);
1732             }
1733         }
1734
1735         for (j = 0; ff_mkv_codec_tags[j].id != AV_CODEC_ID_NONE; j++) {
1736             if (!strncmp(ff_mkv_codec_tags[j].str, track->codec_id,
1737                          strlen(ff_mkv_codec_tags[j].str))) {
1738                 codec_id = ff_mkv_codec_tags[j].id;
1739                 break;
1740             }
1741         }
1742
1743         st = track->stream = avformat_new_stream(s, NULL);
1744         if (st == NULL) {
1745             av_free(key_id_base64);
1746             return AVERROR(ENOMEM);
1747         }
1748
1749         if (key_id_base64) {
1750             /* export encryption key id as base64 metadata tag */
1751             av_dict_set(&st->metadata, "enc_key_id", key_id_base64, 0);
1752             av_freep(&key_id_base64);
1753         }
1754
1755         if (!strcmp(track->codec_id, "V_MS/VFW/FOURCC") &&
1756              track->codec_priv.size >= 40               &&
1757             track->codec_priv.data != NULL) {
1758             track->ms_compat    = 1;
1759             bit_depth           = AV_RL16(track->codec_priv.data + 14);
1760             fourcc              = AV_RL32(track->codec_priv.data + 16);
1761             codec_id            = ff_codec_get_id(ff_codec_bmp_tags,
1762                                                   fourcc);
1763             extradata_offset    = 40;
1764         } else if (!strcmp(track->codec_id, "A_MS/ACM") &&
1765                    track->codec_priv.size >= 14         &&
1766                    track->codec_priv.data != NULL) {
1767             int ret;
1768             ffio_init_context(&b, track->codec_priv.data,
1769                               track->codec_priv.size,
1770                               0, NULL, NULL, NULL, NULL);
1771             ret = ff_get_wav_header(&b, st->codec, track->codec_priv.size);
1772             if (ret < 0)
1773                 return ret;
1774             codec_id         = st->codec->codec_id;
1775             extradata_offset = FFMIN(track->codec_priv.size, 18);
1776         } else if (!strcmp(track->codec_id, "A_QUICKTIME")
1777                    && (track->codec_priv.size >= 86)
1778                    && (track->codec_priv.data != NULL)) {
1779             fourcc = AV_RL32(track->codec_priv.data + 4);
1780             codec_id = ff_codec_get_id(ff_codec_movaudio_tags, fourcc);
1781             if (ff_codec_get_id(ff_codec_movaudio_tags, AV_RL32(track->codec_priv.data))) {
1782                 fourcc = AV_RL32(track->codec_priv.data);
1783                 codec_id = ff_codec_get_id(ff_codec_movaudio_tags, fourcc);
1784             }
1785         } else if (!strcmp(track->codec_id, "V_QUICKTIME") &&
1786                    (track->codec_priv.size >= 21)          &&
1787                    (track->codec_priv.data != NULL)) {
1788             fourcc   = AV_RL32(track->codec_priv.data + 4);
1789             codec_id = ff_codec_get_id(ff_codec_movvideo_tags, fourcc);
1790             if (ff_codec_get_id(ff_codec_movvideo_tags, AV_RL32(track->codec_priv.data))) {
1791                 fourcc   = AV_RL32(track->codec_priv.data);
1792                 codec_id = ff_codec_get_id(ff_codec_movvideo_tags, fourcc);
1793             }
1794             if (codec_id == AV_CODEC_ID_NONE && AV_RL32(track->codec_priv.data+4) == AV_RL32("SMI "))
1795                 codec_id = AV_CODEC_ID_SVQ3;
1796         } else if (codec_id == AV_CODEC_ID_PCM_S16BE) {
1797             switch (track->audio.bitdepth) {
1798             case  8:
1799                 codec_id = AV_CODEC_ID_PCM_U8;
1800                 break;
1801             case 24:
1802                 codec_id = AV_CODEC_ID_PCM_S24BE;
1803                 break;
1804             case 32:
1805                 codec_id = AV_CODEC_ID_PCM_S32BE;
1806                 break;
1807             }
1808         } else if (codec_id == AV_CODEC_ID_PCM_S16LE) {
1809             switch (track->audio.bitdepth) {
1810             case  8:
1811                 codec_id = AV_CODEC_ID_PCM_U8;
1812                 break;
1813             case 24:
1814                 codec_id = AV_CODEC_ID_PCM_S24LE;
1815                 break;
1816             case 32:
1817                 codec_id = AV_CODEC_ID_PCM_S32LE;
1818                 break;
1819             }
1820         } else if (codec_id == AV_CODEC_ID_PCM_F32LE &&
1821                    track->audio.bitdepth == 64) {
1822             codec_id = AV_CODEC_ID_PCM_F64LE;
1823         } else if (codec_id == AV_CODEC_ID_AAC && !track->codec_priv.size) {
1824             int profile = matroska_aac_profile(track->codec_id);
1825             int sri     = matroska_aac_sri(track->audio.samplerate);
1826             extradata   = av_mallocz(5 + FF_INPUT_BUFFER_PADDING_SIZE);
1827             if (extradata == NULL)
1828                 return AVERROR(ENOMEM);
1829             extradata[0] = (profile << 3) | ((sri & 0x0E) >> 1);
1830             extradata[1] = ((sri & 0x01) << 7) | (track->audio.channels << 3);
1831             if (strstr(track->codec_id, "SBR")) {
1832                 sri            = matroska_aac_sri(track->audio.out_samplerate);
1833                 extradata[2]   = 0x56;
1834                 extradata[3]   = 0xE5;
1835                 extradata[4]   = 0x80 | (sri << 3);
1836                 extradata_size = 5;
1837             } else
1838                 extradata_size = 2;
1839         } else if (codec_id == AV_CODEC_ID_ALAC && track->codec_priv.size && track->codec_priv.size < INT_MAX - 12 - FF_INPUT_BUFFER_PADDING_SIZE) {
1840             /* Only ALAC's magic cookie is stored in Matroska's track headers.
1841              * Create the "atom size", "tag", and "tag version" fields the
1842              * decoder expects manually. */
1843             extradata_size = 12 + track->codec_priv.size;
1844             extradata      = av_mallocz(extradata_size +
1845                                         FF_INPUT_BUFFER_PADDING_SIZE);
1846             if (extradata == NULL)
1847                 return AVERROR(ENOMEM);
1848             AV_WB32(extradata, extradata_size);
1849             memcpy(&extradata[4], "alac", 4);
1850             AV_WB32(&extradata[8], 0);
1851             memcpy(&extradata[12], track->codec_priv.data,
1852                    track->codec_priv.size);
1853         } else if (codec_id == AV_CODEC_ID_TTA) {
1854             extradata_size = 30;
1855             extradata      = av_mallocz(extradata_size + FF_INPUT_BUFFER_PADDING_SIZE);
1856             if (extradata == NULL)
1857                 return AVERROR(ENOMEM);
1858             ffio_init_context(&b, extradata, extradata_size, 1,
1859                               NULL, NULL, NULL, NULL);
1860             avio_write(&b, "TTA1", 4);
1861             avio_wl16(&b, 1);
1862             avio_wl16(&b, track->audio.channels);
1863             avio_wl16(&b, track->audio.bitdepth);
1864             if (track->audio.out_samplerate < 0 || track->audio.out_samplerate > INT_MAX)
1865                 return AVERROR_INVALIDDATA;
1866             avio_wl32(&b, track->audio.out_samplerate);
1867             avio_wl32(&b, av_rescale((matroska->duration * matroska->time_scale),
1868                                      track->audio.out_samplerate,
1869                                      AV_TIME_BASE * 1000));
1870         } else if (codec_id == AV_CODEC_ID_RV10 ||
1871                    codec_id == AV_CODEC_ID_RV20 ||
1872                    codec_id == AV_CODEC_ID_RV30 ||
1873                    codec_id == AV_CODEC_ID_RV40) {
1874             extradata_offset = 26;
1875         } else if (codec_id == AV_CODEC_ID_RA_144) {
1876             track->audio.out_samplerate = 8000;
1877             track->audio.channels       = 1;
1878         } else if ((codec_id == AV_CODEC_ID_RA_288 ||
1879                     codec_id == AV_CODEC_ID_COOK   ||
1880                     codec_id == AV_CODEC_ID_ATRAC3 ||
1881                     codec_id == AV_CODEC_ID_SIPR)
1882                       && track->codec_priv.data) {
1883             int flavor;
1884
1885             ffio_init_context(&b, track->codec_priv.data,
1886                               track->codec_priv.size,
1887                               0, NULL, NULL, NULL, NULL);
1888             avio_skip(&b, 22);
1889             flavor                       = avio_rb16(&b);
1890             track->audio.coded_framesize = avio_rb32(&b);
1891             avio_skip(&b, 12);
1892             track->audio.sub_packet_h    = avio_rb16(&b);
1893             track->audio.frame_size      = avio_rb16(&b);
1894             track->audio.sub_packet_size = avio_rb16(&b);
1895             if (flavor                        < 0 ||
1896                 track->audio.coded_framesize <= 0 ||
1897                 track->audio.sub_packet_h    <= 0 ||
1898                 track->audio.frame_size      <= 0 ||
1899                 track->audio.sub_packet_size <= 0)
1900                 return AVERROR_INVALIDDATA;
1901             track->audio.buf = av_malloc_array(track->audio.sub_packet_h,
1902                                                track->audio.frame_size);
1903             if (!track->audio.buf)
1904                 return AVERROR(ENOMEM);
1905             if (codec_id == AV_CODEC_ID_RA_288) {
1906                 st->codec->block_align = track->audio.coded_framesize;
1907                 track->codec_priv.size = 0;
1908             } else {
1909                 if (codec_id == AV_CODEC_ID_SIPR && flavor < 4) {
1910                     static const int sipr_bit_rate[4] = { 6504, 8496, 5000, 16000 };
1911                     track->audio.sub_packet_size = ff_sipr_subpk_size[flavor];
1912                     st->codec->bit_rate          = sipr_bit_rate[flavor];
1913                 }
1914                 st->codec->block_align = track->audio.sub_packet_size;
1915                 extradata_offset       = 78;
1916             }
1917         }
1918         track->codec_priv.size -= extradata_offset;
1919
1920         if (codec_id == AV_CODEC_ID_NONE)
1921             av_log(matroska->ctx, AV_LOG_INFO,
1922                    "Unknown/unsupported AVCodecID %s.\n", track->codec_id);
1923
1924         if (track->time_scale < 0.01)
1925             track->time_scale = 1.0;
1926         avpriv_set_pts_info(st, 64, matroska->time_scale * track->time_scale,
1927                             1000 * 1000 * 1000);    /* 64 bit pts in ns */
1928
1929         st->codec->codec_id = codec_id;
1930
1931         if (strcmp(track->language, "und"))
1932             av_dict_set(&st->metadata, "language", track->language, 0);
1933         av_dict_set(&st->metadata, "title", track->name, 0);
1934
1935         if (track->flag_default)
1936             st->disposition |= AV_DISPOSITION_DEFAULT;
1937         if (track->flag_forced)
1938             st->disposition |= AV_DISPOSITION_FORCED;
1939
1940         if (!st->codec->extradata) {
1941             if (extradata) {
1942                 st->codec->extradata      = extradata;
1943                 st->codec->extradata_size = extradata_size;
1944             } else if (track->codec_priv.data && track->codec_priv.size > 0) {
1945                 if (ff_alloc_extradata(st->codec, track->codec_priv.size))
1946                     return AVERROR(ENOMEM);
1947                 memcpy(st->codec->extradata,
1948                        track->codec_priv.data + extradata_offset,
1949                        track->codec_priv.size);
1950             }
1951         }
1952
1953         if (track->type == MATROSKA_TRACK_TYPE_VIDEO) {
1954             MatroskaTrackPlane *planes = track->operation.combine_planes.elem;
1955
1956             st->codec->codec_type = AVMEDIA_TYPE_VIDEO;
1957             st->codec->codec_tag  = fourcc;
1958             if (bit_depth >= 0)
1959                 st->codec->bits_per_coded_sample = bit_depth;
1960             st->codec->width      = track->video.pixel_width;
1961             st->codec->height     = track->video.pixel_height;
1962             av_reduce(&st->sample_aspect_ratio.num,
1963                       &st->sample_aspect_ratio.den,
1964                       st->codec->height * track->video.display_width,
1965                       st->codec->width  * track->video.display_height,
1966                       255);
1967             if (st->codec->codec_id != AV_CODEC_ID_HEVC)
1968                 st->need_parsing = AVSTREAM_PARSE_HEADERS;
1969
1970             if (track->default_duration) {
1971                 av_reduce(&st->avg_frame_rate.num, &st->avg_frame_rate.den,
1972                           1000000000, track->default_duration, 30000);
1973 #if FF_API_R_FRAME_RATE
1974                 if (st->avg_frame_rate.num < st->avg_frame_rate.den * 1000L)
1975                     st->r_frame_rate = st->avg_frame_rate;
1976 #endif
1977             }
1978
1979             /* export stereo mode flag as metadata tag */
1980             if (track->video.stereo_mode && track->video.stereo_mode < MATROSKA_VIDEO_STEREO_MODE_COUNT)
1981                 av_dict_set(&st->metadata, "stereo_mode", ff_matroska_video_stereo_mode[track->video.stereo_mode], 0);
1982
1983             /* export alpha mode flag as metadata tag  */
1984             if (track->video.alpha_mode)
1985                 av_dict_set(&st->metadata, "alpha_mode", "1", 0);
1986
1987             /* if we have virtual track, mark the real tracks */
1988             for (j=0; j < track->operation.combine_planes.nb_elem; j++) {
1989                 char buf[32];
1990                 if (planes[j].type >= MATROSKA_VIDEO_STEREO_PLANE_COUNT)
1991                     continue;
1992                 snprintf(buf, sizeof(buf), "%s_%d",
1993                          ff_matroska_video_stereo_plane[planes[j].type], i);
1994                 for (k=0; k < matroska->tracks.nb_elem; k++)
1995                     if (planes[j].uid == tracks[k].uid) {
1996                         av_dict_set(&s->streams[k]->metadata,
1997                                     "stereo_mode", buf, 0);
1998                         break;
1999                     }
2000             }
2001         } else if (track->type == MATROSKA_TRACK_TYPE_AUDIO) {
2002             st->codec->codec_type  = AVMEDIA_TYPE_AUDIO;
2003             st->codec->sample_rate = track->audio.out_samplerate;
2004             st->codec->channels    = track->audio.channels;
2005             if (!st->codec->bits_per_coded_sample)
2006                 st->codec->bits_per_coded_sample = track->audio.bitdepth;
2007             if (st->codec->codec_id != AV_CODEC_ID_AAC)
2008                 st->need_parsing = AVSTREAM_PARSE_HEADERS;
2009             if (track->codec_delay > 0) {
2010                 st->codec->delay = av_rescale_q(track->codec_delay,
2011                                                 (AVRational){1, 1000000000},
2012                                                 (AVRational){1, st->codec->sample_rate});
2013             }
2014             if (track->seek_preroll > 0) {
2015                 av_codec_set_seek_preroll(st->codec,
2016                                           av_rescale_q(track->seek_preroll,
2017                                                        (AVRational){1, 1000000000},
2018                                                        (AVRational){1, st->codec->sample_rate}));
2019             }
2020         } else if (codec_id == AV_CODEC_ID_WEBVTT) {
2021             st->codec->codec_type = AVMEDIA_TYPE_SUBTITLE;
2022
2023             if (!strcmp(track->codec_id, "D_WEBVTT/CAPTIONS")) {
2024                 st->disposition |= AV_DISPOSITION_CAPTIONS;
2025             } else if (!strcmp(track->codec_id, "D_WEBVTT/DESCRIPTIONS")) {
2026                 st->disposition |= AV_DISPOSITION_DESCRIPTIONS;
2027             } else if (!strcmp(track->codec_id, "D_WEBVTT/METADATA")) {
2028                 st->disposition |= AV_DISPOSITION_METADATA;
2029             }
2030         } else if (track->type == MATROSKA_TRACK_TYPE_SUBTITLE) {
2031             st->codec->codec_type = AVMEDIA_TYPE_SUBTITLE;
2032 #if FF_API_ASS_SSA
2033             if (st->codec->codec_id == AV_CODEC_ID_SSA ||
2034                 st->codec->codec_id == AV_CODEC_ID_ASS)
2035 #else
2036             if (st->codec->codec_id == AV_CODEC_ID_ASS)
2037 #endif
2038                 matroska->contains_ssa = 1;
2039         }
2040     }
2041
2042     attachments = attachments_list->elem;
2043     for (j = 0; j < attachments_list->nb_elem; j++) {
2044         if (!(attachments[j].filename && attachments[j].mime &&
2045               attachments[j].bin.data && attachments[j].bin.size > 0)) {
2046             av_log(matroska->ctx, AV_LOG_ERROR, "incomplete attachment\n");
2047         } else {
2048             AVStream *st = avformat_new_stream(s, NULL);
2049             if (st == NULL)
2050                 break;
2051             av_dict_set(&st->metadata, "filename", attachments[j].filename, 0);
2052             av_dict_set(&st->metadata, "mimetype", attachments[j].mime, 0);
2053             st->codec->codec_id   = AV_CODEC_ID_NONE;
2054             st->codec->codec_type = AVMEDIA_TYPE_ATTACHMENT;
2055             if (ff_alloc_extradata(st->codec, attachments[j].bin.size))
2056                 break;
2057             memcpy(st->codec->extradata, attachments[j].bin.data,
2058                    attachments[j].bin.size);
2059
2060             for (i = 0; ff_mkv_mime_tags[i].id != AV_CODEC_ID_NONE; i++) {
2061                 if (!strncmp(ff_mkv_mime_tags[i].str, attachments[j].mime,
2062                              strlen(ff_mkv_mime_tags[i].str))) {
2063                     st->codec->codec_id = ff_mkv_mime_tags[i].id;
2064                     break;
2065                 }
2066             }
2067             attachments[j].stream = st;
2068         }
2069     }
2070
2071     chapters = chapters_list->elem;
2072     for (i = 0; i < chapters_list->nb_elem; i++)
2073         if (chapters[i].start != AV_NOPTS_VALUE && chapters[i].uid &&
2074             (max_start == 0 || chapters[i].start > max_start)) {
2075             chapters[i].chapter =
2076                 avpriv_new_chapter(s, chapters[i].uid,
2077                                    (AVRational) { 1, 1000000000 },
2078                                    chapters[i].start, chapters[i].end,
2079                                    chapters[i].title);
2080             av_dict_set(&chapters[i].chapter->metadata,
2081                         "title", chapters[i].title, 0);
2082             max_start = chapters[i].start;
2083         }
2084
2085     matroska_add_index_entries(matroska);
2086
2087     matroska_convert_tags(s);
2088
2089     return 0;
2090 }
2091
2092 /*
2093  * Put one packet in an application-supplied AVPacket struct.
2094  * Returns 0 on success or -1 on failure.
2095  */
2096 static int matroska_deliver_packet(MatroskaDemuxContext *matroska,
2097                                    AVPacket *pkt)
2098 {
2099     if (matroska->num_packets > 0) {
2100         memcpy(pkt, matroska->packets[0], sizeof(AVPacket));
2101         av_free(matroska->packets[0]);
2102         if (matroska->num_packets > 1) {
2103             void *newpackets;
2104             memmove(&matroska->packets[0], &matroska->packets[1],
2105                     (matroska->num_packets - 1) * sizeof(AVPacket *));
2106             newpackets = av_realloc(matroska->packets,
2107                                     (matroska->num_packets - 1) *
2108                                     sizeof(AVPacket *));
2109             if (newpackets)
2110                 matroska->packets = newpackets;
2111         } else {
2112             av_freep(&matroska->packets);
2113             matroska->prev_pkt = NULL;
2114         }
2115         matroska->num_packets--;
2116         return 0;
2117     }
2118
2119     return -1;
2120 }
2121
2122 /*
2123  * Free all packets in our internal queue.
2124  */
2125 static void matroska_clear_queue(MatroskaDemuxContext *matroska)
2126 {
2127     matroska->prev_pkt = NULL;
2128     if (matroska->packets) {
2129         int n;
2130         for (n = 0; n < matroska->num_packets; n++) {
2131             av_free_packet(matroska->packets[n]);
2132             av_free(matroska->packets[n]);
2133         }
2134         av_freep(&matroska->packets);
2135         matroska->num_packets = 0;
2136     }
2137 }
2138
2139 static int matroska_parse_laces(MatroskaDemuxContext *matroska, uint8_t **buf,
2140                                 int *buf_size, int type,
2141                                 uint32_t **lace_buf, int *laces)
2142 {
2143     int res = 0, n, size = *buf_size;
2144     uint8_t *data = *buf;
2145     uint32_t *lace_size;
2146
2147     if (!type) {
2148         *laces    = 1;
2149         *lace_buf = av_mallocz(sizeof(int));
2150         if (!*lace_buf)
2151             return AVERROR(ENOMEM);
2152
2153         *lace_buf[0] = size;
2154         return 0;
2155     }
2156
2157     av_assert0(size > 0);
2158     *laces    = *data + 1;
2159     data     += 1;
2160     size     -= 1;
2161     lace_size = av_mallocz(*laces * sizeof(int));
2162     if (!lace_size)
2163         return AVERROR(ENOMEM);
2164
2165     switch (type) {
2166     case 0x1: /* Xiph lacing */
2167     {
2168         uint8_t temp;
2169         uint32_t total = 0;
2170         for (n = 0; res == 0 && n < *laces - 1; n++) {
2171             while (1) {
2172                 if (size <= total) {
2173                     res = AVERROR_INVALIDDATA;
2174                     break;
2175                 }
2176                 temp          = *data;
2177                 total        += temp;
2178                 lace_size[n] += temp;
2179                 data         += 1;
2180                 size         -= 1;
2181                 if (temp != 0xff)
2182                     break;
2183             }
2184         }
2185         if (size <= total) {
2186             res = AVERROR_INVALIDDATA;
2187             break;
2188         }
2189
2190         lace_size[n] = size - total;
2191         break;
2192     }
2193
2194     case 0x2: /* fixed-size lacing */
2195         if (size % (*laces)) {
2196             res = AVERROR_INVALIDDATA;
2197             break;
2198         }
2199         for (n = 0; n < *laces; n++)
2200             lace_size[n] = size / *laces;
2201         break;
2202
2203     case 0x3: /* EBML lacing */
2204     {
2205         uint64_t num;
2206         uint64_t total;
2207         n = matroska_ebmlnum_uint(matroska, data, size, &num);
2208         if (n < 0 || num > INT_MAX) {
2209             av_log(matroska->ctx, AV_LOG_INFO,
2210                    "EBML block data error\n");
2211             res = n<0 ? n : AVERROR_INVALIDDATA;
2212             break;
2213         }
2214         data += n;
2215         size -= n;
2216         total = lace_size[0] = num;
2217         for (n = 1; res == 0 && n < *laces - 1; n++) {
2218             int64_t snum;
2219             int r;
2220             r = matroska_ebmlnum_sint(matroska, data, size, &snum);
2221             if (r < 0 || lace_size[n - 1] + snum > (uint64_t)INT_MAX) {
2222                 av_log(matroska->ctx, AV_LOG_INFO,
2223                        "EBML block data error\n");
2224                 res = r<0 ? r : AVERROR_INVALIDDATA;
2225                 break;
2226             }
2227             data        += r;
2228             size        -= r;
2229             lace_size[n] = lace_size[n - 1] + snum;
2230             total       += lace_size[n];
2231         }
2232         if (size <= total) {
2233             res = AVERROR_INVALIDDATA;
2234             break;
2235         }
2236         lace_size[*laces - 1] = size - total;
2237         break;
2238     }
2239     }
2240
2241     *buf      = data;
2242     *lace_buf = lace_size;
2243     *buf_size = size;
2244
2245     return res;
2246 }
2247
2248 static int matroska_parse_rm_audio(MatroskaDemuxContext *matroska,
2249                                    MatroskaTrack *track, AVStream *st,
2250                                    uint8_t *data, int size, uint64_t timecode,
2251                                    int64_t pos)
2252 {
2253     int a = st->codec->block_align;
2254     int sps = track->audio.sub_packet_size;
2255     int cfs = track->audio.coded_framesize;
2256     int h   = track->audio.sub_packet_h;
2257     int y   = track->audio.sub_packet_cnt;
2258     int w   = track->audio.frame_size;
2259     int x;
2260
2261     if (!track->audio.pkt_cnt) {
2262         if (track->audio.sub_packet_cnt == 0)
2263             track->audio.buf_timecode = timecode;
2264         if (st->codec->codec_id == AV_CODEC_ID_RA_288) {
2265             if (size < cfs * h / 2) {
2266                 av_log(matroska->ctx, AV_LOG_ERROR,
2267                        "Corrupt int4 RM-style audio packet size\n");
2268                 return AVERROR_INVALIDDATA;
2269             }
2270             for (x = 0; x < h / 2; x++)
2271                 memcpy(track->audio.buf + x * 2 * w + y * cfs,
2272                        data + x * cfs, cfs);
2273         } else if (st->codec->codec_id == AV_CODEC_ID_SIPR) {
2274             if (size < w) {
2275                 av_log(matroska->ctx, AV_LOG_ERROR,
2276                        "Corrupt sipr RM-style audio packet size\n");
2277                 return AVERROR_INVALIDDATA;
2278             }
2279             memcpy(track->audio.buf + y * w, data, w);
2280         } else {
2281             if (size < sps * w / sps || h<=0 || w%sps) {
2282                 av_log(matroska->ctx, AV_LOG_ERROR,
2283                        "Corrupt generic RM-style audio packet size\n");
2284                 return AVERROR_INVALIDDATA;
2285             }
2286             for (x = 0; x < w / sps; x++)
2287                 memcpy(track->audio.buf +
2288                        sps * (h * x + ((h + 1) / 2) * (y & 1) + (y >> 1)),
2289                        data + x * sps, sps);
2290         }
2291
2292         if (++track->audio.sub_packet_cnt >= h) {
2293             if (st->codec->codec_id == AV_CODEC_ID_SIPR)
2294                 ff_rm_reorder_sipr_data(track->audio.buf, h, w);
2295             track->audio.sub_packet_cnt = 0;
2296             track->audio.pkt_cnt        = h * w / a;
2297         }
2298     }
2299
2300     while (track->audio.pkt_cnt) {
2301         AVPacket *pkt = NULL;
2302         if (!(pkt = av_mallocz(sizeof(AVPacket))) || av_new_packet(pkt, a) < 0) {
2303             av_free(pkt);
2304             return AVERROR(ENOMEM);
2305         }
2306         memcpy(pkt->data,
2307                track->audio.buf + a * (h * w / a - track->audio.pkt_cnt--),
2308                a);
2309         pkt->pts                  = track->audio.buf_timecode;
2310         track->audio.buf_timecode = AV_NOPTS_VALUE;
2311         pkt->pos                  = pos;
2312         pkt->stream_index         = st->index;
2313         dynarray_add(&matroska->packets, &matroska->num_packets, pkt);
2314     }
2315
2316     return 0;
2317 }
2318
2319 /* reconstruct full wavpack blocks from mangled matroska ones */
2320 static int matroska_parse_wavpack(MatroskaTrack *track, uint8_t *src,
2321                                   uint8_t **pdst, int *size)
2322 {
2323     uint8_t *dst = NULL;
2324     int dstlen   = 0;
2325     int srclen   = *size;
2326     uint32_t samples;
2327     uint16_t ver;
2328     int ret, offset = 0;
2329
2330     if (srclen < 12 || track->stream->codec->extradata_size < 2)
2331         return AVERROR_INVALIDDATA;
2332
2333     ver = AV_RL16(track->stream->codec->extradata);
2334
2335     samples = AV_RL32(src);
2336     src    += 4;
2337     srclen -= 4;
2338
2339     while (srclen >= 8) {
2340         int multiblock;
2341         uint32_t blocksize;
2342         uint8_t *tmp;
2343
2344         uint32_t flags = AV_RL32(src);
2345         uint32_t crc   = AV_RL32(src + 4);
2346         src    += 8;
2347         srclen -= 8;
2348
2349         multiblock = (flags & 0x1800) != 0x1800;
2350         if (multiblock) {
2351             if (srclen < 4) {
2352                 ret = AVERROR_INVALIDDATA;
2353                 goto fail;
2354             }
2355             blocksize = AV_RL32(src);
2356             src      += 4;
2357             srclen   -= 4;
2358         } else
2359             blocksize = srclen;
2360
2361         if (blocksize > srclen) {
2362             ret = AVERROR_INVALIDDATA;
2363             goto fail;
2364         }
2365
2366         tmp = av_realloc(dst, dstlen + blocksize + 32);
2367         if (!tmp) {
2368             ret = AVERROR(ENOMEM);
2369             goto fail;
2370         }
2371         dst     = tmp;
2372         dstlen += blocksize + 32;
2373
2374         AV_WL32(dst + offset, MKTAG('w', 'v', 'p', 'k'));   // tag
2375         AV_WL32(dst + offset +  4, blocksize + 24);         // blocksize - 8
2376         AV_WL16(dst + offset +  8, ver);                    // version
2377         AV_WL16(dst + offset + 10, 0);                      // track/index_no
2378         AV_WL32(dst + offset + 12, 0);                      // total samples
2379         AV_WL32(dst + offset + 16, 0);                      // block index
2380         AV_WL32(dst + offset + 20, samples);                // number of samples
2381         AV_WL32(dst + offset + 24, flags);                  // flags
2382         AV_WL32(dst + offset + 28, crc);                    // crc
2383         memcpy(dst + offset + 32, src, blocksize);          // block data
2384
2385         src    += blocksize;
2386         srclen -= blocksize;
2387         offset += blocksize + 32;
2388     }
2389
2390     *pdst = dst;
2391     *size = dstlen;
2392
2393     return 0;
2394
2395 fail:
2396     av_freep(&dst);
2397     return ret;
2398 }
2399
2400 static int matroska_parse_webvtt(MatroskaDemuxContext *matroska,
2401                                  MatroskaTrack *track,
2402                                  AVStream *st,
2403                                  uint8_t *data, int data_len,
2404                                  uint64_t timecode,
2405                                  uint64_t duration,
2406                                  int64_t pos)
2407 {
2408     AVPacket *pkt;
2409     uint8_t *id, *settings, *text, *buf;
2410     int id_len, settings_len, text_len;
2411     uint8_t *p, *q;
2412     int err;
2413
2414     if (data_len <= 0)
2415         return AVERROR_INVALIDDATA;
2416
2417     p = data;
2418     q = data + data_len;
2419
2420     id = p;
2421     id_len = -1;
2422     while (p < q) {
2423         if (*p == '\r' || *p == '\n') {
2424             id_len = p - id;
2425             if (*p == '\r')
2426                 p++;
2427             break;
2428         }
2429         p++;
2430     }
2431
2432     if (p >= q || *p != '\n')
2433         return AVERROR_INVALIDDATA;
2434     p++;
2435
2436     settings = p;
2437     settings_len = -1;
2438     while (p < q) {
2439         if (*p == '\r' || *p == '\n') {
2440             settings_len = p - settings;
2441             if (*p == '\r')
2442                 p++;
2443             break;
2444         }
2445         p++;
2446     }
2447
2448     if (p >= q || *p != '\n')
2449         return AVERROR_INVALIDDATA;
2450     p++;
2451
2452     text = p;
2453     text_len = q - p;
2454     while (text_len > 0) {
2455         const int len = text_len - 1;
2456         const uint8_t c = p[len];
2457         if (c != '\r' && c != '\n')
2458             break;
2459         text_len = len;
2460     }
2461
2462     if (text_len <= 0)
2463         return AVERROR_INVALIDDATA;
2464
2465     pkt = av_mallocz(sizeof(*pkt));
2466     err = av_new_packet(pkt, text_len);
2467     if (err < 0) {
2468         av_free(pkt);
2469         return AVERROR(err);
2470     }
2471
2472     memcpy(pkt->data, text, text_len);
2473
2474     if (id_len > 0) {
2475         buf = av_packet_new_side_data(pkt,
2476                                       AV_PKT_DATA_WEBVTT_IDENTIFIER,
2477                                       id_len);
2478         if (buf == NULL) {
2479             av_free(pkt);
2480             return AVERROR(ENOMEM);
2481         }
2482         memcpy(buf, id, id_len);
2483     }
2484
2485     if (settings_len > 0) {
2486         buf = av_packet_new_side_data(pkt,
2487                                       AV_PKT_DATA_WEBVTT_SETTINGS,
2488                                       settings_len);
2489         if (buf == NULL) {
2490             av_free(pkt);
2491             return AVERROR(ENOMEM);
2492         }
2493         memcpy(buf, settings, settings_len);
2494     }
2495
2496     // Do we need this for subtitles?
2497     // pkt->flags = AV_PKT_FLAG_KEY;
2498
2499     pkt->stream_index = st->index;
2500     pkt->pts = timecode;
2501
2502     // Do we need this for subtitles?
2503     // pkt->dts = timecode;
2504
2505     pkt->duration = duration;
2506     pkt->pos = pos;
2507
2508     dynarray_add(&matroska->packets, &matroska->num_packets, pkt);
2509     matroska->prev_pkt = pkt;
2510
2511     return 0;
2512 }
2513
2514 static int matroska_parse_frame(MatroskaDemuxContext *matroska,
2515                                 MatroskaTrack *track, AVStream *st,
2516                                 uint8_t *data, int pkt_size,
2517                                 uint64_t timecode, uint64_t lace_duration,
2518                                 int64_t pos, int is_keyframe,
2519                                 uint8_t *additional, uint64_t additional_id, int additional_size,
2520                                 int64_t discard_padding)
2521 {
2522     MatroskaTrackEncoding *encodings = track->encodings.elem;
2523     uint8_t *pkt_data = data;
2524     int offset = 0, res;
2525     AVPacket *pkt;
2526
2527     if (encodings && !encodings->type && encodings->scope & 1) {
2528         res = matroska_decode_buffer(&pkt_data, &pkt_size, track);
2529         if (res < 0)
2530             return res;
2531     }
2532
2533     if (st->codec->codec_id == AV_CODEC_ID_WAVPACK) {
2534         uint8_t *wv_data;
2535         res = matroska_parse_wavpack(track, pkt_data, &wv_data, &pkt_size);
2536         if (res < 0) {
2537             av_log(matroska->ctx, AV_LOG_ERROR,
2538                    "Error parsing a wavpack block.\n");
2539             goto fail;
2540         }
2541         if (pkt_data != data)
2542             av_freep(&pkt_data);
2543         pkt_data = wv_data;
2544     }
2545
2546     if (st->codec->codec_id == AV_CODEC_ID_PRORES)
2547         offset = 8;
2548
2549     pkt = av_mallocz(sizeof(AVPacket));
2550     /* XXX: prevent data copy... */
2551     if (av_new_packet(pkt, pkt_size + offset) < 0) {
2552         av_free(pkt);
2553         res = AVERROR(ENOMEM);
2554         goto fail;
2555     }
2556
2557     if (st->codec->codec_id == AV_CODEC_ID_PRORES) {
2558         uint8_t *buf = pkt->data;
2559         bytestream_put_be32(&buf, pkt_size);
2560         bytestream_put_be32(&buf, MKBETAG('i', 'c', 'p', 'f'));
2561     }
2562
2563     memcpy(pkt->data + offset, pkt_data, pkt_size);
2564
2565     if (pkt_data != data)
2566         av_freep(&pkt_data);
2567
2568     pkt->flags        = is_keyframe;
2569     pkt->stream_index = st->index;
2570
2571     if (additional_size > 0) {
2572         uint8_t *side_data = av_packet_new_side_data(pkt,
2573                                                      AV_PKT_DATA_MATROSKA_BLOCKADDITIONAL,
2574                                                      additional_size + 8);
2575         if (side_data == NULL) {
2576             av_free_packet(pkt);
2577             av_free(pkt);
2578             return AVERROR(ENOMEM);
2579         }
2580         AV_WB64(side_data, additional_id);
2581         memcpy(side_data + 8, additional, additional_size);
2582     }
2583
2584     if (discard_padding) {
2585         uint8_t *side_data = av_packet_new_side_data(pkt,
2586                                                      AV_PKT_DATA_SKIP_SAMPLES,
2587                                                      10);
2588         if (side_data == NULL) {
2589             av_free_packet(pkt);
2590             av_free(pkt);
2591             return AVERROR(ENOMEM);
2592         }
2593         AV_WL32(side_data, 0);
2594         AV_WL32(side_data + 4, av_rescale_q(discard_padding,
2595                                             (AVRational){1, 1000000000},
2596                                             (AVRational){1, st->codec->sample_rate}));
2597     }
2598
2599     if (track->ms_compat)
2600         pkt->dts = timecode;
2601     else
2602         pkt->pts = timecode;
2603     pkt->pos = pos;
2604     if (st->codec->codec_id == AV_CODEC_ID_SUBRIP) {
2605         /*
2606          * For backward compatibility.
2607          * Historically, we have put subtitle duration
2608          * in convergence_duration, on the off chance
2609          * that the time_scale is less than 1us, which
2610          * could result in a 32bit overflow on the
2611          * normal duration field.
2612          */
2613         pkt->convergence_duration = lace_duration;
2614     }
2615
2616     if (track->type != MATROSKA_TRACK_TYPE_SUBTITLE ||
2617         lace_duration <= INT_MAX) {
2618         /*
2619          * For non subtitle tracks, just store the duration
2620          * as normal.
2621          *
2622          * If it's a subtitle track and duration value does
2623          * not overflow a uint32, then also store it normally.
2624          */
2625         pkt->duration = lace_duration;
2626     }
2627
2628 #if FF_API_ASS_SSA
2629     if (st->codec->codec_id == AV_CODEC_ID_SSA)
2630         matroska_fix_ass_packet(matroska, pkt, lace_duration);
2631
2632     if (matroska->prev_pkt                                 &&
2633         timecode                         != AV_NOPTS_VALUE &&
2634         matroska->prev_pkt->pts          == timecode       &&
2635         matroska->prev_pkt->stream_index == st->index      &&
2636         st->codec->codec_id == AV_CODEC_ID_SSA)
2637         matroska_merge_packets(matroska->prev_pkt, pkt);
2638     else {
2639         dynarray_add(&matroska->packets, &matroska->num_packets, pkt);
2640         matroska->prev_pkt = pkt;
2641     }
2642 #else
2643     dynarray_add(&matroska->packets, &matroska->num_packets, pkt);
2644     matroska->prev_pkt = pkt;
2645 #endif
2646
2647     return 0;
2648
2649 fail:
2650     if (pkt_data != data)
2651         av_freep(&pkt_data);
2652     return res;
2653 }
2654
2655 static int matroska_parse_block(MatroskaDemuxContext *matroska, uint8_t *data,
2656                                 int size, int64_t pos, uint64_t cluster_time,
2657                                 uint64_t block_duration, int is_keyframe,
2658                                 uint8_t *additional, uint64_t additional_id, int additional_size,
2659                                 int64_t cluster_pos, int64_t discard_padding)
2660 {
2661     uint64_t timecode = AV_NOPTS_VALUE;
2662     MatroskaTrack *track;
2663     int res = 0;
2664     AVStream *st;
2665     int16_t block_time;
2666     uint32_t *lace_size = NULL;
2667     int n, flags, laces = 0;
2668     uint64_t num;
2669     int trust_default_duration = 1;
2670
2671     if ((n = matroska_ebmlnum_uint(matroska, data, size, &num)) < 0) {
2672         av_log(matroska->ctx, AV_LOG_ERROR, "EBML block data error\n");
2673         return n;
2674     }
2675     data += n;
2676     size -= n;
2677
2678     track = matroska_find_track_by_num(matroska, num);
2679     if (!track || !track->stream) {
2680         av_log(matroska->ctx, AV_LOG_INFO,
2681                "Invalid stream %"PRIu64" or size %u\n", num, size);
2682         return AVERROR_INVALIDDATA;
2683     } else if (size <= 3)
2684         return 0;
2685     st = track->stream;
2686     if (st->discard >= AVDISCARD_ALL)
2687         return res;
2688     av_assert1(block_duration != AV_NOPTS_VALUE);
2689
2690     block_time = sign_extend(AV_RB16(data), 16);
2691     data      += 2;
2692     flags      = *data++;
2693     size      -= 3;
2694     if (is_keyframe == -1)
2695         is_keyframe = flags & 0x80 ? AV_PKT_FLAG_KEY : 0;
2696
2697     if (cluster_time != (uint64_t) -1 &&
2698         (block_time >= 0 || cluster_time >= -block_time)) {
2699         timecode = cluster_time + block_time;
2700         if (track->type == MATROSKA_TRACK_TYPE_SUBTITLE &&
2701             timecode < track->end_timecode)
2702             is_keyframe = 0;  /* overlapping subtitles are not key frame */
2703         if (is_keyframe)
2704             av_add_index_entry(st, cluster_pos, timecode, 0, 0,
2705                                AVINDEX_KEYFRAME);
2706     }
2707
2708     if (matroska->skip_to_keyframe &&
2709         track->type != MATROSKA_TRACK_TYPE_SUBTITLE) {
2710         if (timecode < matroska->skip_to_timecode)
2711             return res;
2712         if (is_keyframe)
2713             matroska->skip_to_keyframe = 0;
2714         else if (!st->skip_to_keyframe) {
2715             av_log(matroska->ctx, AV_LOG_ERROR, "File is broken, keyframes not correctly marked!\n");
2716             matroska->skip_to_keyframe = 0;
2717         }
2718     }
2719
2720     res = matroska_parse_laces(matroska, &data, &size, (flags & 0x06) >> 1,
2721                                &lace_size, &laces);
2722
2723     if (res)
2724         goto end;
2725
2726     if (track->audio.samplerate == 8000) {
2727         // If this is needed for more codecs, then add them here
2728         if (st->codec->codec_id == AV_CODEC_ID_AC3) {
2729             if (track->audio.samplerate != st->codec->sample_rate || !st->codec->frame_size)
2730                 trust_default_duration = 0;
2731         }
2732     }
2733
2734     if (!block_duration && trust_default_duration)
2735         block_duration = track->default_duration * laces / matroska->time_scale;
2736
2737     if (cluster_time != (uint64_t)-1 && (block_time >= 0 || cluster_time >= -block_time))
2738         track->end_timecode =
2739             FFMAX(track->end_timecode, timecode + block_duration);
2740
2741     for (n = 0; n < laces; n++) {
2742         int64_t lace_duration = block_duration*(n+1) / laces - block_duration*n / laces;
2743
2744         if (lace_size[n] > size) {
2745             av_log(matroska->ctx, AV_LOG_ERROR, "Invalid packet size\n");
2746             break;
2747         }
2748
2749         if ((st->codec->codec_id == AV_CODEC_ID_RA_288 ||
2750              st->codec->codec_id == AV_CODEC_ID_COOK   ||
2751              st->codec->codec_id == AV_CODEC_ID_SIPR   ||
2752              st->codec->codec_id == AV_CODEC_ID_ATRAC3) &&
2753             st->codec->block_align && track->audio.sub_packet_size) {
2754             res = matroska_parse_rm_audio(matroska, track, st, data,
2755                                           lace_size[n],
2756                                           timecode, pos);
2757             if (res)
2758                 goto end;
2759
2760         } else if (st->codec->codec_id == AV_CODEC_ID_WEBVTT) {
2761             res = matroska_parse_webvtt(matroska, track, st,
2762                                         data, lace_size[n],
2763                                         timecode, lace_duration,
2764                                         pos);
2765             if (res)
2766                 goto end;
2767         } else {
2768             res = matroska_parse_frame(matroska, track, st, data, lace_size[n],
2769                                        timecode, lace_duration, pos,
2770                                        !n ? is_keyframe : 0,
2771                                        additional, additional_id, additional_size,
2772                                        discard_padding);
2773             if (res)
2774                 goto end;
2775         }
2776
2777         if (timecode != AV_NOPTS_VALUE)
2778             timecode = lace_duration ? timecode + lace_duration : AV_NOPTS_VALUE;
2779         data += lace_size[n];
2780         size -= lace_size[n];
2781     }
2782
2783 end:
2784     av_free(lace_size);
2785     return res;
2786 }
2787
2788 static int matroska_parse_cluster_incremental(MatroskaDemuxContext *matroska)
2789 {
2790     EbmlList *blocks_list;
2791     MatroskaBlock *blocks;
2792     int i, res;
2793     res = ebml_parse(matroska,
2794                      matroska_cluster_incremental_parsing,
2795                      &matroska->current_cluster);
2796     if (res == 1) {
2797         /* New Cluster */
2798         if (matroska->current_cluster_pos)
2799             ebml_level_end(matroska);
2800         ebml_free(matroska_cluster, &matroska->current_cluster);
2801         memset(&matroska->current_cluster, 0, sizeof(MatroskaCluster));
2802         matroska->current_cluster_num_blocks = 0;
2803         matroska->current_cluster_pos        = avio_tell(matroska->ctx->pb);
2804         matroska->prev_pkt                   = NULL;
2805         /* sizeof the ID which was already read */
2806         if (matroska->current_id)
2807             matroska->current_cluster_pos -= 4;
2808         res = ebml_parse(matroska,
2809                          matroska_clusters_incremental,
2810                          &matroska->current_cluster);
2811         /* Try parsing the block again. */
2812         if (res == 1)
2813             res = ebml_parse(matroska,
2814                              matroska_cluster_incremental_parsing,
2815                              &matroska->current_cluster);
2816     }
2817
2818     if (!res &&
2819         matroska->current_cluster_num_blocks <
2820         matroska->current_cluster.blocks.nb_elem) {
2821         blocks_list = &matroska->current_cluster.blocks;
2822         blocks      = blocks_list->elem;
2823
2824         matroska->current_cluster_num_blocks = blocks_list->nb_elem;
2825         i                                    = blocks_list->nb_elem - 1;
2826         if (blocks[i].bin.size > 0 && blocks[i].bin.data) {
2827             int is_keyframe = blocks[i].non_simple ? !blocks[i].reference : -1;
2828             uint8_t* additional = blocks[i].additional.size > 0 ?
2829                                     blocks[i].additional.data : NULL;
2830             if (!blocks[i].non_simple)
2831                 blocks[i].duration = 0;
2832             res = matroska_parse_block(matroska, blocks[i].bin.data,
2833                                        blocks[i].bin.size, blocks[i].bin.pos,
2834                                        matroska->current_cluster.timecode,
2835                                        blocks[i].duration, is_keyframe,
2836                                        additional, blocks[i].additional_id,
2837                                        blocks[i].additional.size,
2838                                        matroska->current_cluster_pos,
2839                                        blocks[i].discard_padding);
2840         }
2841     }
2842
2843     return res;
2844 }
2845
2846 static int matroska_parse_cluster(MatroskaDemuxContext *matroska)
2847 {
2848     MatroskaCluster cluster = { 0 };
2849     EbmlList *blocks_list;
2850     MatroskaBlock *blocks;
2851     int i, res;
2852     int64_t pos;
2853
2854     if (!matroska->contains_ssa)
2855         return matroska_parse_cluster_incremental(matroska);
2856     pos = avio_tell(matroska->ctx->pb);
2857     matroska->prev_pkt = NULL;
2858     if (matroska->current_id)
2859         pos -= 4;  /* sizeof the ID which was already read */
2860     res         = ebml_parse(matroska, matroska_clusters, &cluster);
2861     blocks_list = &cluster.blocks;
2862     blocks      = blocks_list->elem;
2863     for (i = 0; i < blocks_list->nb_elem; i++)
2864         if (blocks[i].bin.size > 0 && blocks[i].bin.data) {
2865             int is_keyframe = blocks[i].non_simple ? !blocks[i].reference : -1;
2866             res = matroska_parse_block(matroska, blocks[i].bin.data,
2867                                        blocks[i].bin.size, blocks[i].bin.pos,
2868                                        cluster.timecode, blocks[i].duration,
2869                                        is_keyframe, NULL, 0, 0, pos,
2870                                        blocks[i].discard_padding);
2871         }
2872     ebml_free(matroska_cluster, &cluster);
2873     return res;
2874 }
2875
2876 static int matroska_read_packet(AVFormatContext *s, AVPacket *pkt)
2877 {
2878     MatroskaDemuxContext *matroska = s->priv_data;
2879
2880     while (matroska_deliver_packet(matroska, pkt)) {
2881         int64_t pos = avio_tell(matroska->ctx->pb);
2882         if (matroska->done)
2883             return AVERROR_EOF;
2884         if (matroska_parse_cluster(matroska) < 0)
2885             matroska_resync(matroska, pos);
2886     }
2887
2888     return 0;
2889 }
2890
2891 static int matroska_read_seek(AVFormatContext *s, int stream_index,
2892                               int64_t timestamp, int flags)
2893 {
2894     MatroskaDemuxContext *matroska = s->priv_data;
2895     MatroskaTrack *tracks = matroska->tracks.elem;
2896     AVStream *st = s->streams[stream_index];
2897     int i, index, index_sub, index_min;
2898
2899     /* Parse the CUES now since we need the index data to seek. */
2900     if (matroska->cues_parsing_deferred > 0) {
2901         matroska->cues_parsing_deferred = 0;
2902         matroska_parse_cues(matroska);
2903     }
2904
2905     if (!st->nb_index_entries)
2906         goto err;
2907     timestamp = FFMAX(timestamp, st->index_entries[0].timestamp);
2908
2909     if ((index = av_index_search_timestamp(st, timestamp, flags)) < 0) {
2910         avio_seek(s->pb, st->index_entries[st->nb_index_entries - 1].pos,
2911                   SEEK_SET);
2912         matroska->current_id = 0;
2913         while ((index = av_index_search_timestamp(st, timestamp, flags)) < 0) {
2914             matroska_clear_queue(matroska);
2915             if (matroska_parse_cluster(matroska) < 0)
2916                 break;
2917         }
2918     }
2919
2920     matroska_clear_queue(matroska);
2921     if (index < 0 || (matroska->cues_parsing_deferred < 0 && index == st->nb_index_entries - 1))
2922         goto err;
2923
2924     index_min = index;
2925     for (i = 0; i < matroska->tracks.nb_elem; i++) {
2926         tracks[i].audio.pkt_cnt        = 0;
2927         tracks[i].audio.sub_packet_cnt = 0;
2928         tracks[i].audio.buf_timecode   = AV_NOPTS_VALUE;
2929         tracks[i].end_timecode         = 0;
2930         if (tracks[i].type == MATROSKA_TRACK_TYPE_SUBTITLE &&
2931             tracks[i].stream->discard != AVDISCARD_ALL) {
2932             index_sub = av_index_search_timestamp(
2933                 tracks[i].stream, st->index_entries[index].timestamp,
2934                 AVSEEK_FLAG_BACKWARD);
2935             while (index_sub >= 0 &&
2936                   index_min >= 0 &&
2937                   tracks[i].stream->index_entries[index_sub].pos < st->index_entries[index_min].pos &&
2938                   st->index_entries[index].timestamp - tracks[i].stream->index_entries[index_sub].timestamp < 30000000000 / matroska->time_scale)
2939                 index_min--;
2940         }
2941     }
2942
2943     avio_seek(s->pb, st->index_entries[index_min].pos, SEEK_SET);
2944     matroska->current_id       = 0;
2945     if (flags & AVSEEK_FLAG_ANY) {
2946         st->skip_to_keyframe = 0;
2947         matroska->skip_to_timecode = timestamp;
2948     } else {
2949         st->skip_to_keyframe = 1;
2950         matroska->skip_to_timecode = st->index_entries[index].timestamp;
2951     }
2952     matroska->skip_to_keyframe = 1;
2953     matroska->done             = 0;
2954     matroska->num_levels       = 0;
2955     ff_update_cur_dts(s, st, st->index_entries[index].timestamp);
2956     return 0;
2957 err:
2958     // slightly hackish but allows proper fallback to
2959     // the generic seeking code.
2960     matroska_clear_queue(matroska);
2961     matroska->current_id = 0;
2962     st->skip_to_keyframe =
2963     matroska->skip_to_keyframe = 0;
2964     matroska->done = 0;
2965     matroska->num_levels = 0;
2966     return -1;
2967 }
2968
2969 static int matroska_read_close(AVFormatContext *s)
2970 {
2971     MatroskaDemuxContext *matroska = s->priv_data;
2972     MatroskaTrack *tracks = matroska->tracks.elem;
2973     int n;
2974
2975     matroska_clear_queue(matroska);
2976
2977     for (n = 0; n < matroska->tracks.nb_elem; n++)
2978         if (tracks[n].type == MATROSKA_TRACK_TYPE_AUDIO)
2979             av_free(tracks[n].audio.buf);
2980     ebml_free(matroska_cluster, &matroska->current_cluster);
2981     ebml_free(matroska_segment, matroska);
2982
2983     return 0;
2984 }
2985
2986 AVInputFormat ff_matroska_demuxer = {
2987     .name           = "matroska,webm",
2988     .long_name      = NULL_IF_CONFIG_SMALL("Matroska / WebM"),
2989     .priv_data_size = sizeof(MatroskaDemuxContext),
2990     .read_probe     = matroska_probe,
2991     .read_header    = matroska_read_header,
2992     .read_packet    = matroska_read_packet,
2993     .read_close     = matroska_read_close,
2994     .read_seek      = matroska_read_seek,
2995 };