]> git.sesse.net Git - ffmpeg/blob - libavformat/mov.c
lavc: Make AVPacket.duration int64, and deprecate convergence_duration
[ffmpeg] / libavformat / mov.c
1 /*
2  * MOV demuxer
3  * Copyright (c) 2001 Fabrice Bellard
4  * Copyright (c) 2009 Baptiste Coudurier <baptiste dot coudurier at gmail dot com>
5  *
6  * first version by Francois Revol <revol@free.fr>
7  * seek function by Gael Chardon <gael.dev@4now.net>
8  *
9  * This file is part of Libav.
10  *
11  * Libav is free software; you can redistribute it and/or
12  * modify it under the terms of the GNU Lesser General Public
13  * License as published by the Free Software Foundation; either
14  * version 2.1 of the License, or (at your option) any later version.
15  *
16  * Libav is distributed in the hope that it will be useful,
17  * but WITHOUT ANY WARRANTY; without even the implied warranty of
18  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
19  * Lesser General Public License for more details.
20  *
21  * You should have received a copy of the GNU Lesser General Public
22  * License along with Libav; if not, write to the Free Software
23  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
24  */
25
26 #include <inttypes.h>
27 #include <limits.h>
28 #include <stdint.h>
29
30 #include "libavutil/attributes.h"
31 #include "libavutil/channel_layout.h"
32 #include "libavutil/intreadwrite.h"
33 #include "libavutil/intfloat.h"
34 #include "libavutil/mathematics.h"
35 #include "libavutil/time_internal.h"
36 #include "libavutil/avstring.h"
37 #include "libavutil/dict.h"
38 #include "libavutil/opt.h"
39 #include "libavcodec/ac3tab.h"
40 #include "avformat.h"
41 #include "internal.h"
42 #include "avio_internal.h"
43 #include "riff.h"
44 #include "isom.h"
45 #include "libavcodec/get_bits.h"
46 #include "id3v1.h"
47 #include "mov_chan.h"
48 #include "replaygain.h"
49
50 #if CONFIG_ZLIB
51 #include <zlib.h>
52 #endif
53
54 #include "qtpalette.h"
55
56
57 #undef NDEBUG
58 #include <assert.h>
59
60 /* those functions parse an atom */
61 /* links atom IDs to parse functions */
62 typedef struct MOVParseTableEntry {
63     uint32_t type;
64     int (*parse)(MOVContext *ctx, AVIOContext *pb, MOVAtom atom);
65 } MOVParseTableEntry;
66
67 static int mov_read_default(MOVContext *c, AVIOContext *pb, MOVAtom atom);
68
69 static int mov_metadata_track_or_disc_number(MOVContext *c, AVIOContext *pb,
70                                              unsigned len, const char *key)
71 {
72     char buf[16];
73
74     short current, total = 0;
75     avio_rb16(pb); // unknown
76     current = avio_rb16(pb);
77     if (len >= 6)
78         total = avio_rb16(pb);
79     if (!total)
80         snprintf(buf, sizeof(buf), "%d", current);
81     else
82         snprintf(buf, sizeof(buf), "%d/%d", current, total);
83     c->fc->event_flags |= AVFMT_EVENT_FLAG_METADATA_UPDATED;
84     av_dict_set(&c->fc->metadata, key, buf, 0);
85
86     return 0;
87 }
88
89 static int mov_metadata_int8_bypass_padding(MOVContext *c, AVIOContext *pb,
90                                             unsigned len, const char *key)
91 {
92     char buf[16];
93
94     /* bypass padding bytes */
95     avio_r8(pb);
96     avio_r8(pb);
97     avio_r8(pb);
98
99     snprintf(buf, sizeof(buf), "%d", avio_r8(pb));
100     c->fc->event_flags |= AVFMT_EVENT_FLAG_METADATA_UPDATED;
101     av_dict_set(&c->fc->metadata, key, buf, 0);
102
103     return 0;
104 }
105
106 static int mov_metadata_int8_no_padding(MOVContext *c, AVIOContext *pb,
107                                         unsigned len, const char *key)
108 {
109     char buf[16];
110
111     snprintf(buf, sizeof(buf), "%d", avio_r8(pb));
112     c->fc->event_flags |= AVFMT_EVENT_FLAG_METADATA_UPDATED;
113     av_dict_set(&c->fc->metadata, key, buf, 0);
114
115     return 0;
116 }
117
118 static int mov_metadata_gnre(MOVContext *c, AVIOContext *pb,
119                              unsigned len, const char *key)
120 {
121     short genre;
122     char buf[20];
123
124     avio_r8(pb); // unknown
125
126     genre = avio_r8(pb);
127     if (genre < 1 || genre > ID3v1_GENRE_MAX)
128         return 0;
129     snprintf(buf, sizeof(buf), "%s", ff_id3v1_genre_str[genre-1]);
130     c->fc->event_flags |= AVFMT_EVENT_FLAG_METADATA_UPDATED;
131     av_dict_set(&c->fc->metadata, key, buf, 0);
132
133     return 0;
134 }
135
136 static const uint32_t mac_to_unicode[128] = {
137     0x00C4,0x00C5,0x00C7,0x00C9,0x00D1,0x00D6,0x00DC,0x00E1,
138     0x00E0,0x00E2,0x00E4,0x00E3,0x00E5,0x00E7,0x00E9,0x00E8,
139     0x00EA,0x00EB,0x00ED,0x00EC,0x00EE,0x00EF,0x00F1,0x00F3,
140     0x00F2,0x00F4,0x00F6,0x00F5,0x00FA,0x00F9,0x00FB,0x00FC,
141     0x2020,0x00B0,0x00A2,0x00A3,0x00A7,0x2022,0x00B6,0x00DF,
142     0x00AE,0x00A9,0x2122,0x00B4,0x00A8,0x2260,0x00C6,0x00D8,
143     0x221E,0x00B1,0x2264,0x2265,0x00A5,0x00B5,0x2202,0x2211,
144     0x220F,0x03C0,0x222B,0x00AA,0x00BA,0x03A9,0x00E6,0x00F8,
145     0x00BF,0x00A1,0x00AC,0x221A,0x0192,0x2248,0x2206,0x00AB,
146     0x00BB,0x2026,0x00A0,0x00C0,0x00C3,0x00D5,0x0152,0x0153,
147     0x2013,0x2014,0x201C,0x201D,0x2018,0x2019,0x00F7,0x25CA,
148     0x00FF,0x0178,0x2044,0x20AC,0x2039,0x203A,0xFB01,0xFB02,
149     0x2021,0x00B7,0x201A,0x201E,0x2030,0x00C2,0x00CA,0x00C1,
150     0x00CB,0x00C8,0x00CD,0x00CE,0x00CF,0x00CC,0x00D3,0x00D4,
151     0xF8FF,0x00D2,0x00DA,0x00DB,0x00D9,0x0131,0x02C6,0x02DC,
152     0x00AF,0x02D8,0x02D9,0x02DA,0x00B8,0x02DD,0x02DB,0x02C7,
153 };
154
155 static int mov_read_mac_string(MOVContext *c, AVIOContext *pb, int len,
156                                char *dst, int dstlen)
157 {
158     char *p = dst;
159     char *end = dst+dstlen-1;
160     int i;
161
162     for (i = 0; i < len; i++) {
163         uint8_t t, c = avio_r8(pb);
164         if (c < 0x80 && p < end)
165             *p++ = c;
166         else
167             PUT_UTF8(mac_to_unicode[c-0x80], t, if (p < end) *p++ = t;);
168     }
169     *p = 0;
170     return p - dst;
171 }
172
173 static int mov_read_covr(MOVContext *c, AVIOContext *pb, int type, int len)
174 {
175     AVPacket pkt;
176     AVStream *st;
177     MOVStreamContext *sc;
178     enum AVCodecID id;
179     int ret;
180
181     switch (type) {
182     case 0xd:  id = AV_CODEC_ID_MJPEG; break;
183     case 0xe:  id = AV_CODEC_ID_PNG;   break;
184     case 0x1b: id = AV_CODEC_ID_BMP;   break;
185     default:
186         av_log(c->fc, AV_LOG_WARNING, "Unknown cover type: 0x%x.\n", type);
187         avio_skip(pb, len);
188         return 0;
189     }
190
191     st = avformat_new_stream(c->fc, NULL);
192     if (!st)
193         return AVERROR(ENOMEM);
194     sc = av_mallocz(sizeof(*sc));
195     if (!sc)
196         return AVERROR(ENOMEM);
197     st->priv_data = sc;
198
199     ret = av_get_packet(pb, &pkt, len);
200     if (ret < 0)
201         return ret;
202
203     st->disposition              |= AV_DISPOSITION_ATTACHED_PIC;
204
205     st->attached_pic              = pkt;
206     st->attached_pic.stream_index = st->index;
207     st->attached_pic.flags       |= AV_PKT_FLAG_KEY;
208
209     st->codec->codec_type = AVMEDIA_TYPE_VIDEO;
210     st->codec->codec_id   = id;
211
212     return 0;
213 }
214
215 static int mov_metadata_loci(MOVContext *c, AVIOContext *pb, unsigned len)
216 {
217     char language[4] = { 0 };
218     char buf[100];
219     uint16_t langcode = 0;
220     double longitude, latitude;
221     const char *key = "location";
222
223     if (len < 4 + 2 + 1 + 1 + 4 + 4 + 4)
224         return AVERROR_INVALIDDATA;
225
226     avio_skip(pb, 4); // version+flags
227     langcode = avio_rb16(pb);
228     ff_mov_lang_to_iso639(langcode, language);
229     len -= 6;
230
231     len -= avio_get_str(pb, len, buf, sizeof(buf)); // place name
232     if (len < 1)
233         return AVERROR_INVALIDDATA;
234     avio_skip(pb, 1); // role
235     len -= 1;
236
237     if (len < 14)
238         return AVERROR_INVALIDDATA;
239     longitude = ((int32_t) avio_rb32(pb)) / (float) (1 << 16);
240     latitude  = ((int32_t) avio_rb32(pb)) / (float) (1 << 16);
241
242     // Try to output in the same format as the ?xyz field
243     snprintf(buf, sizeof(buf), "%+08.4f%+09.4f/", latitude, longitude);
244     if (*language && strcmp(language, "und")) {
245         char key2[16];
246         snprintf(key2, sizeof(key2), "%s-%s", key, language);
247         av_dict_set(&c->fc->metadata, key2, buf, 0);
248     }
249     c->fc->event_flags |= AVFMT_EVENT_FLAG_METADATA_UPDATED;
250     return av_dict_set(&c->fc->metadata, key, buf, 0);
251 }
252
253 static int mov_read_udta_string(MOVContext *c, AVIOContext *pb, MOVAtom atom)
254 {
255     char tmp_key[5];
256     char *str, key2[32], language[4] = {0};
257     const char *key = NULL;
258     uint16_t langcode = 0;
259     uint32_t data_type = 0, str_size, str_size_alloc;
260     int (*parse)(MOVContext*, AVIOContext*, unsigned, const char*) = NULL;
261     int raw = 0;
262
263     switch (atom.type) {
264     case MKTAG( '@','P','R','M'): key = "premiere_version"; raw = 1; break;
265     case MKTAG( '@','P','R','Q'): key = "quicktime_version"; raw = 1; break;
266     case MKTAG( 'X','M','P','_'):
267         if (c->export_xmp) { key = "xmp"; raw = 1; } break;
268     case MKTAG( 'a','A','R','T'): key = "album_artist";    break;
269     case MKTAG( 'a','k','I','D'): key = "account_type";
270         parse = mov_metadata_int8_no_padding; break;
271     case MKTAG( 'a','p','I','D'): key = "account_id"; break;
272     case MKTAG( 'c','a','t','g'): key = "category"; break;
273     case MKTAG( 'c','p','i','l'): key = "compilation";
274         parse = mov_metadata_int8_no_padding; break;
275     case MKTAG( 'c','p','r','t'): key = "copyright"; break;
276     case MKTAG( 'd','e','s','c'): key = "description"; break;
277     case MKTAG( 'd','i','s','k'): key = "disc";
278         parse = mov_metadata_track_or_disc_number; break;
279     case MKTAG( 'e','g','i','d'): key = "episode_uid";
280         parse = mov_metadata_int8_no_padding; break;
281     case MKTAG( 'g','n','r','e'): key = "genre";
282         parse = mov_metadata_gnre; break;
283     case MKTAG( 'h','d','v','d'): key = "hd_video";
284         parse = mov_metadata_int8_no_padding; break;
285     case MKTAG( 'k','e','y','w'): key = "keywords";  break;
286     case MKTAG( 'l','d','e','s'): key = "synopsis";  break;
287     case MKTAG( 'l','o','c','i'):
288         return mov_metadata_loci(c, pb, atom.size);
289     case MKTAG( 'p','c','s','t'): key = "podcast";
290         parse = mov_metadata_int8_no_padding; break;
291     case MKTAG( 'p','g','a','p'): key = "gapless_playback";
292         parse = mov_metadata_int8_no_padding; break;
293     case MKTAG( 'p','u','r','d'): key = "purchase_date"; break;
294     case MKTAG( 'r','t','n','g'): key = "rating";
295         parse = mov_metadata_int8_no_padding; break;
296     case MKTAG( 's','o','a','a'): key = "sort_album_artist"; break;
297     case MKTAG( 's','o','a','l'): key = "sort_album";   break;
298     case MKTAG( 's','o','a','r'): key = "sort_artist";  break;
299     case MKTAG( 's','o','c','o'): key = "sort_composer"; break;
300     case MKTAG( 's','o','n','m'): key = "sort_name";    break;
301     case MKTAG( 's','o','s','n'): key = "sort_show";    break;
302     case MKTAG( 's','t','i','k'): key = "media_type";
303         parse = mov_metadata_int8_no_padding; break;
304     case MKTAG( 't','r','k','n'): key = "track";
305         parse = mov_metadata_track_or_disc_number; break;
306     case MKTAG( 't','v','e','n'): key = "episode_id"; break;
307     case MKTAG( 't','v','e','s'): key = "episode_sort";
308         parse = mov_metadata_int8_bypass_padding; break;
309     case MKTAG( 't','v','n','n'): key = "network";   break;
310     case MKTAG( 't','v','s','h'): key = "show";      break;
311     case MKTAG( 't','v','s','n'): key = "season_number";
312         parse = mov_metadata_int8_bypass_padding; break;
313     case MKTAG(0xa9,'A','R','T'): key = "artist";    break;
314     case MKTAG(0xa9,'P','R','D'): key = "producer";  break;
315     case MKTAG(0xa9,'a','l','b'): key = "album";     break;
316     case MKTAG(0xa9,'a','u','t'): key = "artist";    break;
317     case MKTAG(0xa9,'c','h','p'): key = "chapter";   break;
318     case MKTAG(0xa9,'c','m','t'): key = "comment";   break;
319     case MKTAG(0xa9,'c','o','m'): key = "composer";  break;
320     case MKTAG(0xa9,'c','p','y'): key = "copyright"; break;
321     case MKTAG(0xa9,'d','a','y'): key = "date";      break;
322     case MKTAG(0xa9,'d','i','r'): key = "director";  break;
323     case MKTAG(0xa9,'d','i','s'): key = "disclaimer"; break;
324     case MKTAG(0xa9,'e','d','1'): key = "edit_date"; break;
325     case MKTAG(0xa9,'e','n','c'): key = "encoder";   break;
326     case MKTAG(0xa9,'f','m','t'): key = "original_format"; break;
327     case MKTAG(0xa9,'g','e','n'): key = "genre";     break;
328     case MKTAG(0xa9,'g','r','p'): key = "grouping";  break;
329     case MKTAG(0xa9,'h','s','t'): key = "host_computer"; break;
330     case MKTAG(0xa9,'i','n','f'): key = "comment";   break;
331     case MKTAG(0xa9,'l','y','r'): key = "lyrics";    break;
332     case MKTAG(0xa9,'m','a','k'): key = "make";      break;
333     case MKTAG(0xa9,'m','o','d'): key = "model";     break;
334     case MKTAG(0xa9,'n','a','m'): key = "title";     break;
335     case MKTAG(0xa9,'o','p','e'): key = "original_artist"; break;
336     case MKTAG(0xa9,'p','r','d'): key = "producer";  break;
337     case MKTAG(0xa9,'p','r','f'): key = "performers"; break;
338     case MKTAG(0xa9,'r','e','q'): key = "playback_requirements"; break;
339     case MKTAG(0xa9,'s','r','c'): key = "original_source"; break;
340     case MKTAG(0xa9,'s','t','3'): key = "subtitle";  break;
341     case MKTAG(0xa9,'s','w','r'): key = "encoder";   break;
342     case MKTAG(0xa9,'t','o','o'): key = "encoder";   break;
343     case MKTAG(0xa9,'t','r','k'): key = "track";     break;
344     case MKTAG(0xa9,'u','r','l'): key = "URL";       break;
345     case MKTAG(0xa9,'w','r','n'): key = "warning";   break;
346     case MKTAG(0xa9,'w','r','t'): key = "composer";  break;
347     case MKTAG(0xa9,'x','y','z'): key = "location";  break;
348     }
349
350     if (c->itunes_metadata && atom.size > 8) {
351         int data_size = avio_rb32(pb);
352         int tag = avio_rl32(pb);
353         if (tag == MKTAG('d','a','t','a')) {
354             data_type = avio_rb32(pb); // type
355             avio_rb32(pb); // unknown
356             str_size = data_size - 16;
357             atom.size -= 16;
358
359             if (atom.type == MKTAG('c', 'o', 'v', 'r')) {
360                 int ret = mov_read_covr(c, pb, data_type, str_size);
361                 if (ret < 0) {
362                     av_log(c->fc, AV_LOG_ERROR, "Error parsing cover art.\n");
363                     return ret;
364                 }
365             }
366         } else return 0;
367     } else if (atom.size > 4 && key && !c->itunes_metadata && !raw) {
368         str_size = avio_rb16(pb); // string length
369         langcode = avio_rb16(pb);
370         ff_mov_lang_to_iso639(langcode, language);
371         atom.size -= 4;
372     } else
373         str_size = atom.size;
374
375     if (c->export_all && !key) {
376         snprintf(tmp_key, 5, "%.4s", (char*)&atom.type);
377         key = tmp_key;
378     }
379
380     if (!key)
381         return 0;
382     if (atom.size < 0)
383         return AVERROR_INVALIDDATA;
384
385     // allocate twice as much as worst-case
386     str_size_alloc = (raw ? str_size : str_size * 2) + 1;
387     str = av_malloc(str_size_alloc);
388     if (!str)
389         return AVERROR(ENOMEM);
390
391     if (parse)
392         parse(c, pb, str_size, key);
393     else {
394         if (!raw && (data_type == 3 || (data_type == 0 && (langcode < 0x400 || langcode == 0x7fff)))) { // MAC Encoded
395             mov_read_mac_string(c, pb, str_size, str, str_size_alloc);
396         } else {
397             int ret = ffio_read_size(pb, str, str_size);
398             if (ret < 0) {
399                 av_free(str);
400                 return ret;
401             }
402             str[str_size] = 0;
403         }
404         c->fc->event_flags |= AVFMT_EVENT_FLAG_METADATA_UPDATED;
405         av_dict_set(&c->fc->metadata, key, str, 0);
406         if (*language && strcmp(language, "und")) {
407             snprintf(key2, sizeof(key2), "%s-%s", key, language);
408             av_dict_set(&c->fc->metadata, key2, str, 0);
409         }
410     }
411     av_log(c->fc, AV_LOG_TRACE, "lang \"%3s\" ", language);
412     av_log(c->fc, AV_LOG_TRACE, "tag \"%s\" value \"%s\" atom \"%.4s\" %d %"PRId64"\n",
413             key, str, (char*)&atom.type, str_size_alloc, atom.size);
414
415     av_freep(&str);
416     return 0;
417 }
418
419 static int mov_read_chpl(MOVContext *c, AVIOContext *pb, MOVAtom atom)
420 {
421     int64_t start;
422     int i, nb_chapters, str_len, version;
423     char str[256+1];
424     int ret;
425
426     if ((atom.size -= 5) < 0)
427         return 0;
428
429     version = avio_r8(pb);
430     avio_rb24(pb);
431     if (version)
432         avio_rb32(pb); // ???
433     nb_chapters = avio_r8(pb);
434
435     for (i = 0; i < nb_chapters; i++) {
436         if (atom.size < 9)
437             return 0;
438
439         start = avio_rb64(pb);
440         str_len = avio_r8(pb);
441
442         if ((atom.size -= 9+str_len) < 0)
443             return 0;
444
445         ret = ffio_read_size(pb, str, str_len);
446         if (ret < 0)
447             return ret;
448         str[str_len] = 0;
449         avpriv_new_chapter(c->fc, i, (AVRational){1,10000000}, start, AV_NOPTS_VALUE, str);
450     }
451     return 0;
452 }
453
454 #define MIN_DATA_ENTRY_BOX_SIZE 12
455 static int mov_read_dref(MOVContext *c, AVIOContext *pb, MOVAtom atom)
456 {
457     AVStream *st;
458     MOVStreamContext *sc;
459     int entries, i, j;
460
461     if (c->fc->nb_streams < 1)
462         return 0;
463     st = c->fc->streams[c->fc->nb_streams-1];
464     sc = st->priv_data;
465
466     avio_rb32(pb); // version + flags
467     entries = avio_rb32(pb);
468     if (entries >  (atom.size - 1) / MIN_DATA_ENTRY_BOX_SIZE + 1 ||
469         entries >= UINT_MAX / sizeof(*sc->drefs))
470         return AVERROR_INVALIDDATA;
471     av_free(sc->drefs);
472     sc->drefs = av_mallocz(entries * sizeof(*sc->drefs));
473     if (!sc->drefs)
474         return AVERROR(ENOMEM);
475     sc->drefs_count = entries;
476
477     for (i = 0; i < sc->drefs_count; i++) {
478         MOVDref *dref = &sc->drefs[i];
479         uint32_t size = avio_rb32(pb);
480         int64_t next = avio_tell(pb) + size - 4;
481
482         if (size < 12)
483             return AVERROR_INVALIDDATA;
484
485         dref->type = avio_rl32(pb);
486         avio_rb32(pb); // version + flags
487         av_log(c->fc, AV_LOG_TRACE, "type %.4s size %d\n", (char*)&dref->type, size);
488
489         if (dref->type == MKTAG('a','l','i','s') && size > 150) {
490             /* macintosh alias record */
491             uint16_t volume_len, len;
492             int16_t type;
493             int ret;
494
495             avio_skip(pb, 10);
496
497             volume_len = avio_r8(pb);
498             volume_len = FFMIN(volume_len, 27);
499             ret = ffio_read_size(pb, dref->volume, 27);
500             if (ret < 0)
501                 return ret;
502             dref->volume[volume_len] = 0;
503             av_log(c->fc, AV_LOG_DEBUG, "volume %s, len %d\n", dref->volume, volume_len);
504
505             avio_skip(pb, 12);
506
507             len = avio_r8(pb);
508             len = FFMIN(len, 63);
509             ret = ffio_read_size(pb, dref->filename, 63);
510             if (ret < 0)
511                 return ret;
512             dref->filename[len] = 0;
513             av_log(c->fc, AV_LOG_DEBUG, "filename %s, len %d\n", dref->filename, len);
514
515             avio_skip(pb, 16);
516
517             /* read next level up_from_alias/down_to_target */
518             dref->nlvl_from = avio_rb16(pb);
519             dref->nlvl_to   = avio_rb16(pb);
520             av_log(c->fc, AV_LOG_DEBUG, "nlvl from %d, nlvl to %d\n",
521                    dref->nlvl_from, dref->nlvl_to);
522
523             avio_skip(pb, 16);
524
525             for (type = 0; type != -1 && avio_tell(pb) < next; ) {
526                 if (pb->eof_reached)
527                     return AVERROR_EOF;
528                 type = avio_rb16(pb);
529                 len = avio_rb16(pb);
530                 av_log(c->fc, AV_LOG_DEBUG, "type %d, len %d\n", type, len);
531                 if (len&1)
532                     len += 1;
533                 if (type == 2 || type == 18) { // absolute path
534                     av_free(dref->path);
535                     dref->path = av_mallocz(len+1);
536                     if (!dref->path)
537                         return AVERROR(ENOMEM);
538
539                     ret = ffio_read_size(pb, dref->path, len);
540                     if (ret < 0) {
541                         av_freep(&dref->path);
542                         return ret;
543                     }
544                     if (type == 18) // no additional processing needed
545                         continue;
546                     if (len > volume_len && !strncmp(dref->path, dref->volume, volume_len)) {
547                         len -= volume_len;
548                         memmove(dref->path, dref->path+volume_len, len);
549                         dref->path[len] = 0;
550                     }
551                     for (j = 0; j < len; j++)
552                         if (dref->path[j] == ':')
553                             dref->path[j] = '/';
554                     av_log(c->fc, AV_LOG_DEBUG, "path %s\n", dref->path);
555                 } else if (type == 0) { // directory name
556                     av_free(dref->dir);
557                     dref->dir = av_malloc(len+1);
558                     if (!dref->dir)
559                         return AVERROR(ENOMEM);
560
561                     ret = ffio_read_size(pb, dref->dir, len);
562                     if (ret < 0) {
563                         av_freep(&dref->dir);
564                         return ret;
565                     }
566                     dref->dir[len] = 0;
567                     for (j = 0; j < len; j++)
568                         if (dref->dir[j] == ':')
569                             dref->dir[j] = '/';
570                     av_log(c->fc, AV_LOG_DEBUG, "dir %s\n", dref->dir);
571                 } else
572                     avio_skip(pb, len);
573             }
574         }
575         avio_seek(pb, next, SEEK_SET);
576     }
577     return 0;
578 }
579
580 static int mov_read_hdlr(MOVContext *c, AVIOContext *pb, MOVAtom atom)
581 {
582     AVStream *st;
583     uint32_t type;
584     uint32_t av_unused ctype;
585     int64_t title_size;
586     char *title_str;
587     int ret;
588
589     if (c->fc->nb_streams < 1) // meta before first trak
590         return 0;
591
592     st = c->fc->streams[c->fc->nb_streams-1];
593
594     avio_r8(pb); /* version */
595     avio_rb24(pb); /* flags */
596
597     /* component type */
598     ctype = avio_rl32(pb);
599     type = avio_rl32(pb); /* component subtype */
600
601     av_log(c->fc, AV_LOG_TRACE, "ctype= %.4s (0x%08x)\n", (char*)&ctype, ctype);
602     av_log(c->fc, AV_LOG_TRACE, "stype= %.4s\n", (char*)&type);
603
604     if     (type == MKTAG('v','i','d','e'))
605         st->codec->codec_type = AVMEDIA_TYPE_VIDEO;
606     else if (type == MKTAG('s','o','u','n'))
607         st->codec->codec_type = AVMEDIA_TYPE_AUDIO;
608     else if (type == MKTAG('m','1','a',' '))
609         st->codec->codec_id = AV_CODEC_ID_MP2;
610     else if ((type == MKTAG('s','u','b','p')) || (type == MKTAG('c','l','c','p')))
611         st->codec->codec_type = AVMEDIA_TYPE_SUBTITLE;
612
613     avio_rb32(pb); /* component  manufacture */
614     avio_rb32(pb); /* component flags */
615     avio_rb32(pb); /* component flags mask */
616
617     title_size = atom.size - 24;
618     if (title_size > 0) {
619         title_str = av_malloc(title_size + 1); /* Add null terminator */
620         if (!title_str)
621             return AVERROR(ENOMEM);
622
623         ret = ffio_read_size(pb, title_str, title_size);
624         if (ret < 0) {
625             av_freep(&title_str);
626             return ret;
627         }
628         title_str[title_size] = 0;
629         if (title_str[0]) {
630             int off = (!c->isom && title_str[0] == title_size - 1);
631             av_dict_set(&st->metadata, "handler_name", title_str + off, 0);
632         }
633         av_freep(&title_str);
634     }
635
636     return 0;
637 }
638
639 int ff_mov_read_esds(AVFormatContext *fc, AVIOContext *pb)
640 {
641     AVStream *st;
642     int tag;
643
644     if (fc->nb_streams < 1)
645         return 0;
646     st = fc->streams[fc->nb_streams-1];
647
648     avio_rb32(pb); /* version + flags */
649     ff_mp4_read_descr(fc, pb, &tag);
650     if (tag == MP4ESDescrTag) {
651         ff_mp4_parse_es_descr(pb, NULL);
652     } else
653         avio_rb16(pb); /* ID */
654
655     ff_mp4_read_descr(fc, pb, &tag);
656     if (tag == MP4DecConfigDescrTag)
657         ff_mp4_read_dec_config_descr(fc, st, pb);
658     return 0;
659 }
660
661 static int mov_read_esds(MOVContext *c, AVIOContext *pb, MOVAtom atom)
662 {
663     return ff_mov_read_esds(c->fc, pb);
664 }
665
666 static int mov_read_dac3(MOVContext *c, AVIOContext *pb, MOVAtom atom)
667 {
668     AVStream *st;
669     enum AVAudioServiceType *ast;
670     int ac3info, acmod, lfeon, bsmod;
671
672     if (c->fc->nb_streams < 1)
673         return 0;
674     st = c->fc->streams[c->fc->nb_streams-1];
675
676     ast = (enum AVAudioServiceType*)ff_stream_new_side_data(st, AV_PKT_DATA_AUDIO_SERVICE_TYPE,
677                                                             sizeof(*ast));
678     if (!ast)
679         return AVERROR(ENOMEM);
680
681     ac3info = avio_rb24(pb);
682     bsmod = (ac3info >> 14) & 0x7;
683     acmod = (ac3info >> 11) & 0x7;
684     lfeon = (ac3info >> 10) & 0x1;
685     st->codec->channels = ((int[]){2,1,2,3,3,4,4,5})[acmod] + lfeon;
686     st->codec->channel_layout = avpriv_ac3_channel_layout_tab[acmod];
687     if (lfeon)
688         st->codec->channel_layout |= AV_CH_LOW_FREQUENCY;
689     *ast = bsmod;
690     if (st->codec->channels > 1 && bsmod == 0x7)
691         *ast = AV_AUDIO_SERVICE_TYPE_KARAOKE;
692
693     st->codec->audio_service_type = *ast;
694
695     return 0;
696 }
697
698 static int mov_read_dec3(MOVContext *c, AVIOContext *pb, MOVAtom atom)
699 {
700     AVStream *st;
701     enum AVAudioServiceType *ast;
702     int eac3info, acmod, lfeon, bsmod;
703
704     if (c->fc->nb_streams < 1)
705         return 0;
706     st = c->fc->streams[c->fc->nb_streams-1];
707
708     ast = (enum AVAudioServiceType*)ff_stream_new_side_data(st, AV_PKT_DATA_AUDIO_SERVICE_TYPE,
709                                                             sizeof(*ast));
710     if (!ast)
711         return AVERROR(ENOMEM);
712
713     /* No need to parse fields for additional independent substreams and its
714      * associated dependent substreams since libavcodec's E-AC-3 decoder
715      * does not support them yet. */
716     avio_rb16(pb); /* data_rate and num_ind_sub */
717     eac3info = avio_rb24(pb);
718     bsmod = (eac3info >> 12) & 0x1f;
719     acmod = (eac3info >>  9) & 0x7;
720     lfeon = (eac3info >>  8) & 0x1;
721     st->codec->channel_layout = avpriv_ac3_channel_layout_tab[acmod];
722     if (lfeon)
723         st->codec->channel_layout |= AV_CH_LOW_FREQUENCY;
724     st->codec->channels = av_get_channel_layout_nb_channels(st->codec->channel_layout);
725     *ast = bsmod;
726     if (st->codec->channels > 1 && bsmod == 0x7)
727         *ast = AV_AUDIO_SERVICE_TYPE_KARAOKE;
728
729     st->codec->audio_service_type = *ast;
730
731     return 0;
732 }
733
734 static int mov_read_chan(MOVContext *c, AVIOContext *pb, MOVAtom atom)
735 {
736     AVStream *st;
737
738     if (c->fc->nb_streams < 1)
739         return 0;
740     st = c->fc->streams[c->fc->nb_streams-1];
741
742     if (atom.size < 16)
743         return 0;
744
745     /* skip version and flags */
746     avio_skip(pb, 4);
747
748     ff_mov_read_chan(c->fc, pb, st, atom.size - 4);
749
750     return 0;
751 }
752
753 static int mov_read_wfex(MOVContext *c, AVIOContext *pb, MOVAtom atom)
754 {
755     AVStream *st;
756
757     if (c->fc->nb_streams < 1)
758         return 0;
759     st = c->fc->streams[c->fc->nb_streams-1];
760
761     return ff_get_wav_header(c->fc, pb, st->codec, atom.size);
762 }
763
764 static int mov_read_pasp(MOVContext *c, AVIOContext *pb, MOVAtom atom)
765 {
766     const int num = avio_rb32(pb);
767     const int den = avio_rb32(pb);
768     AVStream *st;
769
770     if (c->fc->nb_streams < 1)
771         return 0;
772     st = c->fc->streams[c->fc->nb_streams-1];
773
774     if ((st->sample_aspect_ratio.den != 1 || st->sample_aspect_ratio.num) && // default
775         (den != st->sample_aspect_ratio.den || num != st->sample_aspect_ratio.num)) {
776         av_log(c->fc, AV_LOG_WARNING,
777                "sample aspect ratio already set to %d:%d, ignoring 'pasp' atom (%d:%d)\n",
778                st->sample_aspect_ratio.num, st->sample_aspect_ratio.den,
779                num, den);
780     } else if (den != 0) {
781         st->sample_aspect_ratio.num = num;
782         st->sample_aspect_ratio.den = den;
783     }
784     return 0;
785 }
786
787 /* this atom contains actual media data */
788 static int mov_read_mdat(MOVContext *c, AVIOContext *pb, MOVAtom atom)
789 {
790     if (atom.size == 0) /* wrong one (MP4) */
791         return 0;
792     c->found_mdat=1;
793     return 0; /* now go for moov */
794 }
795
796 /* read major brand, minor version and compatible brands and store them as metadata */
797 static int mov_read_ftyp(MOVContext *c, AVIOContext *pb, MOVAtom atom)
798 {
799     uint32_t minor_ver;
800     int comp_brand_size;
801     char minor_ver_str[11]; /* 32 bit integer -> 10 digits + null */
802     char* comp_brands_str;
803     uint8_t type[5] = {0};
804     int ret = ffio_read_size(pb, type, 4);
805     if (ret < 0)
806         return ret;
807
808     if (strcmp(type, "qt  "))
809         c->isom = 1;
810     av_log(c->fc, AV_LOG_DEBUG, "ISO: File Type Major Brand: %.4s\n",(char *)&type);
811     av_dict_set(&c->fc->metadata, "major_brand", type, 0);
812     minor_ver = avio_rb32(pb); /* minor version */
813     snprintf(minor_ver_str, sizeof(minor_ver_str), "%"PRIu32"", minor_ver);
814     av_dict_set(&c->fc->metadata, "minor_version", minor_ver_str, 0);
815
816     comp_brand_size = atom.size - 8;
817     if (comp_brand_size < 0)
818         return AVERROR_INVALIDDATA;
819     comp_brands_str = av_malloc(comp_brand_size + 1); /* Add null terminator */
820     if (!comp_brands_str)
821         return AVERROR(ENOMEM);
822
823     ret = ffio_read_size(pb, comp_brands_str, comp_brand_size);
824     if (ret < 0) {
825         av_freep(&comp_brands_str);
826         return ret;
827     }
828     comp_brands_str[comp_brand_size] = 0;
829     av_dict_set(&c->fc->metadata, "compatible_brands", comp_brands_str, 0);
830     av_freep(&comp_brands_str);
831
832     return 0;
833 }
834
835 /* this atom should contain all header atoms */
836 static int mov_read_moov(MOVContext *c, AVIOContext *pb, MOVAtom atom)
837 {
838     int ret;
839
840     if ((ret = mov_read_default(c, pb, atom)) < 0)
841         return ret;
842     /* we parsed the 'moov' atom, we can terminate the parsing as soon as we find the 'mdat' */
843     /* so we don't parse the whole file if over a network */
844     c->found_moov=1;
845     return 0; /* now go for mdat */
846 }
847
848 static int mov_read_moof(MOVContext *c, AVIOContext *pb, MOVAtom atom)
849 {
850     c->fragment.moof_offset = c->fragment.implicit_offset = avio_tell(pb) - 8;
851     av_log(c->fc, AV_LOG_TRACE, "moof offset %"PRIx64"\n", c->fragment.moof_offset);
852     return mov_read_default(c, pb, atom);
853 }
854
855 static void mov_metadata_creation_time(AVDictionary **metadata, time_t time)
856 {
857     char buffer[32];
858     if (time) {
859         struct tm *ptm, tmbuf;
860         time -= 2082844800;  /* seconds between 1904-01-01 and Epoch */
861         ptm = gmtime_r(&time, &tmbuf);
862         if (!ptm) return;
863         if (strftime(buffer, sizeof(buffer), "%Y-%m-%d %H:%M:%S", ptm))
864             av_dict_set(metadata, "creation_time", buffer, 0);
865     }
866 }
867
868 static int mov_read_mdhd(MOVContext *c, AVIOContext *pb, MOVAtom atom)
869 {
870     AVStream *st;
871     MOVStreamContext *sc;
872     int version;
873     char language[4] = {0};
874     unsigned lang;
875     time_t creation_time;
876
877     if (c->fc->nb_streams < 1)
878         return 0;
879     st = c->fc->streams[c->fc->nb_streams-1];
880     sc = st->priv_data;
881
882     if (sc->time_scale) {
883         av_log(c->fc, AV_LOG_ERROR, "Multiple mdhd?\n");
884         return AVERROR_INVALIDDATA;
885     }
886
887     version = avio_r8(pb);
888     if (version > 1) {
889         avpriv_request_sample(c->fc, "Version %d", version);
890         return AVERROR_PATCHWELCOME;
891     }
892     avio_rb24(pb); /* flags */
893     if (version == 1) {
894         creation_time = avio_rb64(pb);
895         avio_rb64(pb);
896     } else {
897         creation_time = avio_rb32(pb);
898         avio_rb32(pb); /* modification time */
899     }
900     mov_metadata_creation_time(&st->metadata, creation_time);
901
902     sc->time_scale = avio_rb32(pb);
903     st->duration = (version == 1) ? avio_rb64(pb) : avio_rb32(pb); /* duration */
904
905     lang = avio_rb16(pb); /* language */
906     if (ff_mov_lang_to_iso639(lang, language))
907         av_dict_set(&st->metadata, "language", language, 0);
908     avio_rb16(pb); /* quality */
909
910     return 0;
911 }
912
913 static int mov_read_mvhd(MOVContext *c, AVIOContext *pb, MOVAtom atom)
914 {
915     time_t creation_time;
916     int version = avio_r8(pb); /* version */
917     avio_rb24(pb); /* flags */
918
919     if (version == 1) {
920         creation_time = avio_rb64(pb);
921         avio_rb64(pb);
922     } else {
923         creation_time = avio_rb32(pb);
924         avio_rb32(pb); /* modification time */
925     }
926     mov_metadata_creation_time(&c->fc->metadata, creation_time);
927     c->time_scale = avio_rb32(pb); /* time scale */
928
929     av_log(c->fc, AV_LOG_TRACE, "time scale = %i\n", c->time_scale);
930
931     c->duration = (version == 1) ? avio_rb64(pb) : avio_rb32(pb); /* duration */
932     avio_rb32(pb); /* preferred scale */
933
934     avio_rb16(pb); /* preferred volume */
935
936     avio_skip(pb, 10); /* reserved */
937
938     avio_skip(pb, 36); /* display matrix */
939
940     avio_rb32(pb); /* preview time */
941     avio_rb32(pb); /* preview duration */
942     avio_rb32(pb); /* poster time */
943     avio_rb32(pb); /* selection time */
944     avio_rb32(pb); /* selection duration */
945     avio_rb32(pb); /* current time */
946     avio_rb32(pb); /* next track ID */
947
948     return 0;
949 }
950
951 static int mov_read_smi(MOVContext *c, AVIOContext *pb, MOVAtom atom)
952 {
953     AVStream *st;
954     int ret;
955
956     if (c->fc->nb_streams < 1)
957         return 0;
958     st = c->fc->streams[c->fc->nb_streams-1];
959
960     if ((uint64_t)atom.size > (1<<30))
961         return AVERROR_INVALIDDATA;
962
963     // currently SVQ3 decoder expect full STSD header - so let's fake it
964     // this should be fixed and just SMI header should be passed
965     av_free(st->codec->extradata);
966     st->codec->extradata = av_mallocz(atom.size + 0x5a + AV_INPUT_BUFFER_PADDING_SIZE);
967     if (!st->codec->extradata)
968         return AVERROR(ENOMEM);
969     st->codec->extradata_size = 0x5a + atom.size;
970     memcpy(st->codec->extradata, "SVQ3", 4); // fake
971
972     ret = ffio_read_size(pb, st->codec->extradata + 0x5a, atom.size);
973     if (ret < 0)
974         return ret;
975
976     av_log(c->fc, AV_LOG_TRACE, "Reading SMI %"PRId64"  %s\n", atom.size, st->codec->extradata + 0x5a);
977     return 0;
978 }
979
980 static int mov_read_enda(MOVContext *c, AVIOContext *pb, MOVAtom atom)
981 {
982     AVStream *st;
983     int little_endian;
984
985     if (c->fc->nb_streams < 1)
986         return 0;
987     st = c->fc->streams[c->fc->nb_streams-1];
988
989     little_endian = !!avio_rb16(pb);
990     av_log(c->fc, AV_LOG_TRACE, "enda %d\n", little_endian);
991     if (little_endian == 1) {
992         switch (st->codec->codec_id) {
993         case AV_CODEC_ID_PCM_S24BE:
994             st->codec->codec_id = AV_CODEC_ID_PCM_S24LE;
995             break;
996         case AV_CODEC_ID_PCM_S32BE:
997             st->codec->codec_id = AV_CODEC_ID_PCM_S32LE;
998             break;
999         case AV_CODEC_ID_PCM_F32BE:
1000             st->codec->codec_id = AV_CODEC_ID_PCM_F32LE;
1001             break;
1002         case AV_CODEC_ID_PCM_F64BE:
1003             st->codec->codec_id = AV_CODEC_ID_PCM_F64LE;
1004             break;
1005         default:
1006             break;
1007         }
1008     }
1009     return 0;
1010 }
1011
1012 static int mov_read_colr(MOVContext *c, AVIOContext *pb, MOVAtom atom)
1013 {
1014     AVStream *st;
1015     char color_parameter_type[5] = { 0 };
1016     uint16_t color_primaries, color_trc, color_matrix;
1017     int ret;
1018
1019     if (c->fc->nb_streams < 1)
1020         return 0;
1021     st = c->fc->streams[c->fc->nb_streams - 1];
1022
1023     ret = ffio_read_size(pb, color_parameter_type, 4);
1024     if (ret < 0)
1025         return ret;
1026     if (strncmp(color_parameter_type, "nclx", 4) &&
1027         strncmp(color_parameter_type, "nclc", 4)) {
1028         av_log(c->fc, AV_LOG_WARNING, "unsupported color_parameter_type %s\n",
1029                color_parameter_type);
1030         return 0;
1031     }
1032
1033     color_primaries = avio_rb16(pb);
1034     color_trc = avio_rb16(pb);
1035     color_matrix = avio_rb16(pb);
1036
1037     av_log(c->fc, AV_LOG_TRACE,
1038            "%s: pri %"PRIu16" trc %"PRIu16" matrix %"PRIu16"",
1039            color_parameter_type, color_primaries, color_trc, color_matrix);
1040
1041     if (!strncmp(color_parameter_type, "nclx", 4)) {
1042         uint8_t color_range = avio_r8(pb) >> 7;
1043         av_log(c->fc, AV_LOG_TRACE, " full %"PRIu8"", color_range);
1044         if (color_range)
1045             st->codec->color_range = AVCOL_RANGE_JPEG;
1046         else
1047             st->codec->color_range = AVCOL_RANGE_MPEG;
1048         /* 14496-12 references JPEG XR specs (rather than the more complete
1049          * 23001-8) so some adjusting is required */
1050         if (color_primaries >= AVCOL_PRI_FILM)
1051             color_primaries = AVCOL_PRI_UNSPECIFIED;
1052         if ((color_trc >= AVCOL_TRC_LINEAR &&
1053              color_trc <= AVCOL_TRC_LOG_SQRT) ||
1054             color_trc >= AVCOL_TRC_BT2020_10)
1055             color_trc = AVCOL_TRC_UNSPECIFIED;
1056         if (color_matrix >= AVCOL_SPC_BT2020_NCL)
1057             color_matrix = AVCOL_SPC_UNSPECIFIED;
1058         st->codec->color_primaries = color_primaries;
1059         st->codec->color_trc = color_trc;
1060         st->codec->colorspace = color_matrix;
1061     } else if (!strncmp(color_parameter_type, "nclc", 4)) {
1062         /* color primaries, Table 4-4 */
1063         switch (color_primaries) {
1064         case 1: st->codec->color_primaries = AVCOL_PRI_BT709; break;
1065         case 5: st->codec->color_primaries = AVCOL_PRI_SMPTE170M; break;
1066         case 6: st->codec->color_primaries = AVCOL_PRI_SMPTE240M; break;
1067         }
1068         /* color transfer, Table 4-5 */
1069         switch (color_trc) {
1070         case 1: st->codec->color_trc = AVCOL_TRC_BT709; break;
1071         case 7: st->codec->color_trc = AVCOL_TRC_SMPTE240M; break;
1072         }
1073         /* color matrix, Table 4-6 */
1074         switch (color_matrix) {
1075         case 1: st->codec->colorspace = AVCOL_SPC_BT709; break;
1076         case 6: st->codec->colorspace = AVCOL_SPC_BT470BG; break;
1077         case 7: st->codec->colorspace = AVCOL_SPC_SMPTE240M; break;
1078         }
1079     }
1080     av_log(c->fc, AV_LOG_TRACE, "\n");
1081
1082     return 0;
1083 }
1084
1085 static int mov_read_fiel(MOVContext *c, AVIOContext *pb, MOVAtom atom)
1086 {
1087     AVStream *st;
1088     unsigned mov_field_order;
1089     enum AVFieldOrder decoded_field_order = AV_FIELD_UNKNOWN;
1090
1091     if (c->fc->nb_streams < 1) // will happen with jp2 files
1092         return 0;
1093     st = c->fc->streams[c->fc->nb_streams-1];
1094     if (atom.size < 2)
1095         return AVERROR_INVALIDDATA;
1096     mov_field_order = avio_rb16(pb);
1097     if ((mov_field_order & 0xFF00) == 0x0100)
1098         decoded_field_order = AV_FIELD_PROGRESSIVE;
1099     else if ((mov_field_order & 0xFF00) == 0x0200) {
1100         switch (mov_field_order & 0xFF) {
1101         case 0x01: decoded_field_order = AV_FIELD_TT;
1102                    break;
1103         case 0x06: decoded_field_order = AV_FIELD_BB;
1104                    break;
1105         case 0x09: decoded_field_order = AV_FIELD_TB;
1106                    break;
1107         case 0x0E: decoded_field_order = AV_FIELD_BT;
1108                    break;
1109         }
1110     }
1111     if (decoded_field_order == AV_FIELD_UNKNOWN && mov_field_order) {
1112         av_log(NULL, AV_LOG_ERROR, "Unknown MOV field order 0x%04x\n", mov_field_order);
1113     }
1114     st->codec->field_order = decoded_field_order;
1115
1116     return 0;
1117 }
1118
1119 /* FIXME modify qdm2/svq3/h264 decoders to take full atom as extradata */
1120 static int mov_read_extradata(MOVContext *c, AVIOContext *pb, MOVAtom atom)
1121 {
1122     AVStream *st;
1123     uint64_t size;
1124     uint8_t *buf;
1125     int err;
1126
1127     if (c->fc->nb_streams < 1) // will happen with jp2 files
1128         return 0;
1129     st= c->fc->streams[c->fc->nb_streams-1];
1130     size= (uint64_t)st->codec->extradata_size + atom.size + 8 + AV_INPUT_BUFFER_PADDING_SIZE;
1131     if (size > INT_MAX || (uint64_t)atom.size > INT_MAX)
1132         return AVERROR_INVALIDDATA;
1133     if ((err = av_reallocp(&st->codec->extradata, size)) < 0) {
1134         st->codec->extradata_size = 0;
1135         return err;
1136     }
1137     buf = st->codec->extradata + st->codec->extradata_size;
1138     st->codec->extradata_size= size - AV_INPUT_BUFFER_PADDING_SIZE;
1139     AV_WB32(       buf    , atom.size + 8);
1140     AV_WL32(       buf + 4, atom.type);
1141
1142     err = ffio_read_size(pb, buf + 8, atom.size);
1143     if (err < 0)
1144         return err;
1145
1146     return 0;
1147 }
1148
1149 static int mov_read_wave(MOVContext *c, AVIOContext *pb, MOVAtom atom)
1150 {
1151     AVStream *st;
1152     int ret;
1153
1154     if (c->fc->nb_streams < 1)
1155         return 0;
1156     st = c->fc->streams[c->fc->nb_streams-1];
1157
1158     if ((uint64_t)atom.size > (1<<30))
1159         return AVERROR_INVALIDDATA;
1160
1161     if (st->codec->codec_id == AV_CODEC_ID_QDM2 || st->codec->codec_id == AV_CODEC_ID_QDMC) {
1162         // pass all frma atom to codec, needed at least for QDMC and QDM2
1163         av_free(st->codec->extradata);
1164         st->codec->extradata = av_mallocz(atom.size + AV_INPUT_BUFFER_PADDING_SIZE);
1165         if (!st->codec->extradata)
1166             return AVERROR(ENOMEM);
1167         st->codec->extradata_size = atom.size;
1168
1169         ret = ffio_read_size(pb, st->codec->extradata, atom.size);
1170         if (ret < 0)
1171             return ret;
1172     } else if (atom.size > 8) { /* to read frma, esds atoms */
1173         if ((ret = mov_read_default(c, pb, atom)) < 0)
1174             return ret;
1175     } else
1176         avio_skip(pb, atom.size);
1177     return 0;
1178 }
1179
1180 /**
1181  * This function reads atom content and puts data in extradata without tag
1182  * nor size unlike mov_read_extradata.
1183  */
1184 static int mov_read_glbl(MOVContext *c, AVIOContext *pb, MOVAtom atom)
1185 {
1186     AVStream *st;
1187     int ret;
1188
1189     if (c->fc->nb_streams < 1)
1190         return 0;
1191     st = c->fc->streams[c->fc->nb_streams-1];
1192
1193     if ((uint64_t)atom.size > (1<<30))
1194         return AVERROR_INVALIDDATA;
1195
1196     if (atom.size >= 10) {
1197         // Broken files created by legacy versions of libavformat will
1198         // wrap a whole fiel atom inside of a glbl atom.
1199         unsigned size = avio_rb32(pb);
1200         unsigned type = avio_rl32(pb);
1201         avio_seek(pb, -8, SEEK_CUR);
1202         if (type == MKTAG('f','i','e','l') && size == atom.size)
1203             return mov_read_default(c, pb, atom);
1204     }
1205     av_free(st->codec->extradata);
1206     st->codec->extradata = av_mallocz(atom.size + AV_INPUT_BUFFER_PADDING_SIZE);
1207     if (!st->codec->extradata)
1208         return AVERROR(ENOMEM);
1209     st->codec->extradata_size = atom.size;
1210
1211     ret = ffio_read_size(pb, st->codec->extradata, atom.size);
1212     if (ret < 0)
1213         return ret;
1214
1215     return 0;
1216 }
1217
1218 static int mov_read_dvc1(MOVContext *c, AVIOContext *pb, MOVAtom atom)
1219 {
1220     AVStream *st;
1221     uint8_t profile_level;
1222     int ret;
1223
1224     if (c->fc->nb_streams < 1)
1225         return 0;
1226     st = c->fc->streams[c->fc->nb_streams-1];
1227
1228     if (atom.size >= (1<<28) || atom.size < 7)
1229         return AVERROR_INVALIDDATA;
1230
1231     profile_level = avio_r8(pb);
1232     if ((profile_level & 0xf0) != 0xc0)
1233         return 0;
1234
1235     av_free(st->codec->extradata);
1236     st->codec->extradata = av_mallocz(atom.size - 7 + AV_INPUT_BUFFER_PADDING_SIZE);
1237     if (!st->codec->extradata)
1238         return AVERROR(ENOMEM);
1239     st->codec->extradata_size = atom.size - 7;
1240     avio_seek(pb, 6, SEEK_CUR);
1241
1242     ret = ffio_read_size(pb, st->codec->extradata, st->codec->extradata_size);
1243     if (ret < 0)
1244         return ret;
1245
1246     return 0;
1247 }
1248
1249 /**
1250  * An strf atom is a BITMAPINFOHEADER struct. This struct is 40 bytes itself,
1251  * but can have extradata appended at the end after the 40 bytes belonging
1252  * to the struct.
1253  */
1254 static int mov_read_strf(MOVContext *c, AVIOContext *pb, MOVAtom atom)
1255 {
1256     AVStream *st;
1257     int ret;
1258
1259     if (c->fc->nb_streams < 1)
1260         return 0;
1261     if (atom.size <= 40)
1262         return 0;
1263     st = c->fc->streams[c->fc->nb_streams-1];
1264
1265     if ((uint64_t)atom.size > (1<<30))
1266         return AVERROR_INVALIDDATA;
1267
1268     av_free(st->codec->extradata);
1269     st->codec->extradata = av_mallocz(atom.size - 40 + AV_INPUT_BUFFER_PADDING_SIZE);
1270     if (!st->codec->extradata)
1271         return AVERROR(ENOMEM);
1272     st->codec->extradata_size = atom.size - 40;
1273     avio_skip(pb, 40);
1274
1275     ret = ffio_read_size(pb, st->codec->extradata, atom.size - 40);
1276     if (ret < 0)
1277         return ret;
1278
1279     return 0;
1280 }
1281
1282 static int mov_read_stco(MOVContext *c, AVIOContext *pb, MOVAtom atom)
1283 {
1284     AVStream *st;
1285     MOVStreamContext *sc;
1286     unsigned int i, entries;
1287
1288     if (c->fc->nb_streams < 1)
1289         return 0;
1290     st = c->fc->streams[c->fc->nb_streams-1];
1291     sc = st->priv_data;
1292
1293     avio_r8(pb); /* version */
1294     avio_rb24(pb); /* flags */
1295
1296     entries = avio_rb32(pb);
1297
1298     if (!entries)
1299         return 0;
1300     if (entries >= UINT_MAX/sizeof(int64_t))
1301         return AVERROR_INVALIDDATA;
1302
1303     sc->chunk_offsets = av_malloc(entries * sizeof(int64_t));
1304     if (!sc->chunk_offsets)
1305         return AVERROR(ENOMEM);
1306     sc->chunk_count = entries;
1307
1308     if      (atom.type == MKTAG('s','t','c','o'))
1309         for (i = 0; i < entries && !pb->eof_reached; i++)
1310             sc->chunk_offsets[i] = avio_rb32(pb);
1311     else if (atom.type == MKTAG('c','o','6','4'))
1312         for (i = 0; i < entries && !pb->eof_reached; i++)
1313             sc->chunk_offsets[i] = avio_rb64(pb);
1314     else
1315         return AVERROR_INVALIDDATA;
1316
1317     sc->chunk_count = i;
1318
1319     if (pb->eof_reached)
1320         return AVERROR_EOF;
1321
1322     return 0;
1323 }
1324
1325 /**
1326  * Compute codec id for 'lpcm' tag.
1327  * See CoreAudioTypes and AudioStreamBasicDescription at Apple.
1328  */
1329 enum AVCodecID ff_mov_get_lpcm_codec_id(int bps, int flags)
1330 {
1331     /* lpcm flags:
1332      * 0x1 = float
1333      * 0x2 = big-endian
1334      * 0x4 = signed
1335      */
1336     return ff_get_pcm_codec_id(bps, flags & 1, flags & 2, flags & 4 ? -1 : 0);
1337 }
1338
1339 static int mov_codec_id(AVStream *st, uint32_t format)
1340 {
1341     int id = ff_codec_get_id(ff_codec_movaudio_tags, format);
1342
1343     if (id <= 0 &&
1344         ((format & 0xFFFF) == 'm' + ('s' << 8) ||
1345          (format & 0xFFFF) == 'T' + ('S' << 8)))
1346         id = ff_codec_get_id(ff_codec_wav_tags, av_bswap32(format) & 0xFFFF);
1347
1348     if (st->codec->codec_type != AVMEDIA_TYPE_VIDEO && id > 0) {
1349         st->codec->codec_type = AVMEDIA_TYPE_AUDIO;
1350     } else if (st->codec->codec_type != AVMEDIA_TYPE_AUDIO &&
1351                /* skip old asf mpeg4 tag */
1352                format && format != MKTAG('m','p','4','s')) {
1353         id = ff_codec_get_id(ff_codec_movvideo_tags, format);
1354         if (id <= 0)
1355             id = ff_codec_get_id(ff_codec_bmp_tags, format);
1356         if (id > 0)
1357             st->codec->codec_type = AVMEDIA_TYPE_VIDEO;
1358         else if (st->codec->codec_type == AVMEDIA_TYPE_DATA) {
1359             id = ff_codec_get_id(ff_codec_movsubtitle_tags, format);
1360             if (id > 0)
1361                 st->codec->codec_type = AVMEDIA_TYPE_SUBTITLE;
1362         }
1363     }
1364
1365     st->codec->codec_tag = format;
1366
1367     return id;
1368 }
1369
1370 static void mov_parse_stsd_video(MOVContext *c, AVIOContext *pb,
1371                                  AVStream *st, MOVStreamContext *sc)
1372 {
1373     uint8_t codec_name[32];
1374     unsigned int color_depth, len, j;
1375     int color_greyscale;
1376     int color_table_id;
1377
1378     avio_rb16(pb); /* version */
1379     avio_rb16(pb); /* revision level */
1380     avio_rb32(pb); /* vendor */
1381     avio_rb32(pb); /* temporal quality */
1382     avio_rb32(pb); /* spatial quality */
1383
1384     st->codec->width  = avio_rb16(pb); /* width */
1385     st->codec->height = avio_rb16(pb); /* height */
1386
1387     avio_rb32(pb); /* horiz resolution */
1388     avio_rb32(pb); /* vert resolution */
1389     avio_rb32(pb); /* data size, always 0 */
1390     avio_rb16(pb); /* frames per samples */
1391
1392     len = avio_r8(pb); /* codec name, pascal string */
1393     if (len > 31)
1394         len = 31;
1395     mov_read_mac_string(c, pb, len, codec_name, sizeof(codec_name));
1396     if (len < 31)
1397         avio_skip(pb, 31 - len);
1398
1399     if (codec_name[0])
1400         av_dict_set(&st->metadata, "encoder", codec_name, 0);
1401
1402     /* codec_tag YV12 triggers an UV swap in rawdec.c */
1403     if (!memcmp(codec_name, "Planar Y'CbCr 8-bit 4:2:0", 25))
1404         st->codec->codec_tag = MKTAG('I', '4', '2', '0');
1405     /* Flash Media Server uses tag H263 with Sorenson Spark */
1406     if (st->codec->codec_tag == MKTAG('H','2','6','3') &&
1407         !memcmp(codec_name, "Sorenson H263", 13))
1408         st->codec->codec_id = AV_CODEC_ID_FLV1;
1409
1410     st->codec->bits_per_coded_sample = avio_rb16(pb); /* depth */
1411     color_table_id = avio_rb16(pb); /* colortable id */
1412     av_log(c->fc, AV_LOG_TRACE, "depth %d, ctab id %d\n",
1413             st->codec->bits_per_coded_sample, color_table_id);
1414     /* figure out the palette situation */
1415     color_depth     = st->codec->bits_per_coded_sample & 0x1F;
1416     color_greyscale = st->codec->bits_per_coded_sample & 0x20;
1417
1418     /* if the depth is 2, 4, or 8 bpp, file is palettized */
1419     if ((color_depth == 2) || (color_depth == 4) || (color_depth == 8)) {
1420         /* for palette traversal */
1421         unsigned int color_start, color_count, color_end;
1422         unsigned char r, g, b;
1423
1424         if (color_greyscale) {
1425             int color_index, color_dec;
1426             /* compute the greyscale palette */
1427             st->codec->bits_per_coded_sample = color_depth;
1428             color_count = 1 << color_depth;
1429             color_index = 255;
1430             color_dec   = 256 / (color_count - 1);
1431             for (j = 0; j < color_count; j++) {
1432                 r = g = b = color_index;
1433                 sc->palette[j] = (r << 16) | (g << 8) | (b);
1434                 color_index -= color_dec;
1435                 if (color_index < 0)
1436                     color_index = 0;
1437             }
1438         } else if (color_table_id) {
1439             const uint8_t *color_table;
1440             /* if flag bit 3 is set, use the default palette */
1441             color_count = 1 << color_depth;
1442             if (color_depth == 2)
1443                 color_table = ff_qt_default_palette_4;
1444             else if (color_depth == 4)
1445                 color_table = ff_qt_default_palette_16;
1446             else
1447                 color_table = ff_qt_default_palette_256;
1448
1449             for (j = 0; j < color_count; j++) {
1450                 r = color_table[j * 3 + 0];
1451                 g = color_table[j * 3 + 1];
1452                 b = color_table[j * 3 + 2];
1453                 sc->palette[j] = (r << 16) | (g << 8) | (b);
1454             }
1455         } else {
1456             /* load the palette from the file */
1457             color_start = avio_rb32(pb);
1458             color_count = avio_rb16(pb);
1459             color_end   = avio_rb16(pb);
1460             if ((color_start <= 255) && (color_end <= 255)) {
1461                 for (j = color_start; j <= color_end; j++) {
1462                     /* each R, G, or B component is 16 bits;
1463                      * only use the top 8 bits; skip alpha bytes
1464                      * up front */
1465                     avio_r8(pb);
1466                     avio_r8(pb);
1467                     r = avio_r8(pb);
1468                     avio_r8(pb);
1469                     g = avio_r8(pb);
1470                     avio_r8(pb);
1471                     b = avio_r8(pb);
1472                     avio_r8(pb);
1473                     sc->palette[j] = (r << 16) | (g << 8) | (b);
1474                 }
1475             }
1476         }
1477         sc->has_palette = 1;
1478     }
1479 }
1480
1481 static void mov_parse_stsd_audio(MOVContext *c, AVIOContext *pb,
1482                                  AVStream *st, MOVStreamContext *sc)
1483 {
1484     int bits_per_sample, flags;
1485     uint16_t version = avio_rb16(pb);
1486
1487     avio_rb16(pb); /* revision level */
1488     avio_rb32(pb); /* vendor */
1489
1490     st->codec->channels              = avio_rb16(pb); /* channel count */
1491     st->codec->bits_per_coded_sample = avio_rb16(pb); /* sample size */
1492     av_log(c->fc, AV_LOG_TRACE, "audio channels %d\n", st->codec->channels);
1493
1494     sc->audio_cid = avio_rb16(pb);
1495     avio_rb16(pb); /* packet size = 0 */
1496
1497     st->codec->sample_rate = ((avio_rb32(pb) >> 16));
1498
1499     // Read QT version 1 fields. In version 0 these do not exist.
1500     av_log(c->fc, AV_LOG_TRACE, "version =%d, isom =%d\n", version, c->isom);
1501     if (!c->isom) {
1502         if (version == 1) {
1503             sc->samples_per_frame = avio_rb32(pb);
1504             avio_rb32(pb); /* bytes per packet */
1505             sc->bytes_per_frame = avio_rb32(pb);
1506             avio_rb32(pb); /* bytes per sample */
1507         } else if (version == 2) {
1508             avio_rb32(pb); /* sizeof struct only */
1509             st->codec->sample_rate = av_int2double(avio_rb64(pb));
1510             st->codec->channels    = avio_rb32(pb);
1511             avio_rb32(pb); /* always 0x7F000000 */
1512             st->codec->bits_per_coded_sample = avio_rb32(pb);
1513
1514             flags = avio_rb32(pb); /* lpcm format specific flag */
1515             sc->bytes_per_frame   = avio_rb32(pb);
1516             sc->samples_per_frame = avio_rb32(pb);
1517             if (st->codec->codec_tag == MKTAG('l','p','c','m'))
1518                 st->codec->codec_id =
1519                     ff_mov_get_lpcm_codec_id(st->codec->bits_per_coded_sample,
1520                                              flags);
1521         }
1522         if (version == 0 || (version == 1 && sc->audio_cid != -2)) {
1523             /* can't correctly handle variable sized packet as audio unit */
1524             switch (st->codec->codec_id) {
1525             case AV_CODEC_ID_MP2:
1526             case AV_CODEC_ID_MP3:
1527                 st->need_parsing = AVSTREAM_PARSE_FULL;
1528                 break;
1529             }
1530         }
1531     }
1532
1533     switch (st->codec->codec_id) {
1534     case AV_CODEC_ID_PCM_S8:
1535     case AV_CODEC_ID_PCM_U8:
1536         if (st->codec->bits_per_coded_sample == 16)
1537             st->codec->codec_id = AV_CODEC_ID_PCM_S16BE;
1538         break;
1539     case AV_CODEC_ID_PCM_S16LE:
1540     case AV_CODEC_ID_PCM_S16BE:
1541         if (st->codec->bits_per_coded_sample == 8)
1542             st->codec->codec_id = AV_CODEC_ID_PCM_S8;
1543         else if (st->codec->bits_per_coded_sample == 24)
1544             st->codec->codec_id =
1545                 st->codec->codec_id == AV_CODEC_ID_PCM_S16BE ?
1546                 AV_CODEC_ID_PCM_S24BE : AV_CODEC_ID_PCM_S24LE;
1547         break;
1548     /* set values for old format before stsd version 1 appeared */
1549     case AV_CODEC_ID_MACE3:
1550         sc->samples_per_frame = 6;
1551         sc->bytes_per_frame   = 2 * st->codec->channels;
1552         break;
1553     case AV_CODEC_ID_MACE6:
1554         sc->samples_per_frame = 6;
1555         sc->bytes_per_frame   = 1 * st->codec->channels;
1556         break;
1557     case AV_CODEC_ID_ADPCM_IMA_QT:
1558         sc->samples_per_frame = 64;
1559         sc->bytes_per_frame   = 34 * st->codec->channels;
1560         break;
1561     case AV_CODEC_ID_GSM:
1562         sc->samples_per_frame = 160;
1563         sc->bytes_per_frame   = 33;
1564         break;
1565     default:
1566         break;
1567     }
1568
1569     bits_per_sample = av_get_bits_per_sample(st->codec->codec_id);
1570     if (bits_per_sample) {
1571         st->codec->bits_per_coded_sample = bits_per_sample;
1572         sc->sample_size = (bits_per_sample >> 3) * st->codec->channels;
1573     }
1574 }
1575
1576 static void mov_parse_stsd_subtitle(MOVContext *c, AVIOContext *pb,
1577                                     AVStream *st, MOVStreamContext *sc,
1578                                     int size)
1579 {
1580     // ttxt stsd contains display flags, justification, background
1581     // color, fonts, and default styles, so fake an atom to read it
1582     MOVAtom fake_atom = { .size = size };
1583     // mp4s contains a regular esds atom
1584     if (st->codec->codec_tag != AV_RL32("mp4s"))
1585         mov_read_glbl(c, pb, fake_atom);
1586     st->codec->width  = sc->width;
1587     st->codec->height = sc->height;
1588 }
1589
1590 static uint32_t yuv_to_rgba(uint32_t ycbcr)
1591 {
1592     uint8_t r, g, b;
1593     int y, cb, cr;
1594
1595     y  = (ycbcr >> 16) & 0xFF;
1596     cr = (ycbcr >> 8)  & 0xFF;
1597     cb =  ycbcr        & 0xFF;
1598
1599     b = av_clip_uint8(1.164 * (y - 16)                      + 2.018 * (cb - 128));
1600     g = av_clip_uint8(1.164 * (y - 16) - 0.813 * (cr - 128) - 0.391 * (cb - 128));
1601     r = av_clip_uint8(1.164 * (y - 16) + 1.596 * (cr - 128));
1602
1603     return (r << 16) | (g << 8) | b;
1604 }
1605
1606 static int mov_rewrite_dvd_sub_extradata(AVStream *st)
1607 {
1608     char buf[256] = {0};
1609     uint8_t *src = st->codec->extradata;
1610     int i;
1611
1612     if (st->codec->extradata_size != 64)
1613         return 0;
1614
1615     if (st->codec->width > 0 &&  st->codec->height > 0)
1616         snprintf(buf, sizeof(buf), "size: %dx%d\n",
1617                  st->codec->width, st->codec->height);
1618     av_strlcat(buf, "palette: ", sizeof(buf));
1619
1620     for (i = 0; i < 16; i++) {
1621         uint32_t yuv = AV_RB32(src + i * 4);
1622         uint32_t rgba = yuv_to_rgba(yuv);
1623
1624         av_strlcatf(buf, sizeof(buf), "%06"PRIx32"%s", rgba, i != 15 ? ", " : "");
1625     }
1626
1627     if (av_strlcat(buf, "\n", sizeof(buf)) >= sizeof(buf))
1628         return 0;
1629
1630     av_freep(&st->codec->extradata);
1631     st->codec->extradata_size = 0;
1632     st->codec->extradata = av_mallocz(strlen(buf) + AV_INPUT_BUFFER_PADDING_SIZE);
1633     if (!st->codec->extradata)
1634         return AVERROR(ENOMEM);
1635     st->codec->extradata_size = strlen(buf);
1636     memcpy(st->codec->extradata, buf, st->codec->extradata_size);
1637
1638     return 0;
1639 }
1640
1641 static int mov_parse_stsd_data(MOVContext *c, AVIOContext *pb,
1642                                 AVStream *st, MOVStreamContext *sc,
1643                                 int size)
1644 {
1645     int ret;
1646
1647     if (st->codec->codec_tag == MKTAG('t','m','c','d')) {
1648         st->codec->extradata_size = size;
1649         st->codec->extradata = av_malloc(size + AV_INPUT_BUFFER_PADDING_SIZE);
1650         if (!st->codec->extradata)
1651             return AVERROR(ENOMEM);
1652         ret = ffio_read_size(pb, st->codec->extradata, size);
1653         if (ret < 0)
1654             return ret;
1655     } else {
1656         /* other codec type, just skip (rtp, mp4s ...) */
1657         avio_skip(pb, size);
1658     }
1659     return 0;
1660 }
1661
1662 static int mov_finalize_stsd_codec(MOVContext *c, AVIOContext *pb,
1663                                    AVStream *st, MOVStreamContext *sc)
1664 {
1665     if (st->codec->codec_type == AVMEDIA_TYPE_AUDIO &&
1666         !st->codec->sample_rate && sc->time_scale > 1)
1667         st->codec->sample_rate = sc->time_scale;
1668
1669     /* special codec parameters handling */
1670     switch (st->codec->codec_id) {
1671 #if CONFIG_DV_DEMUXER
1672     case AV_CODEC_ID_DVAUDIO:
1673         c->dv_fctx = avformat_alloc_context();
1674         if (!c->dv_fctx) {
1675             av_log(c->fc, AV_LOG_ERROR, "dv demux context alloc error\n");
1676             return AVERROR(ENOMEM);
1677         }
1678         c->dv_demux = avpriv_dv_init_demux(c->dv_fctx);
1679         if (!c->dv_demux) {
1680             av_log(c->fc, AV_LOG_ERROR, "dv demux context init error\n");
1681             return AVERROR(ENOMEM);
1682         }
1683         sc->dv_audio_container = 1;
1684         st->codec->codec_id    = AV_CODEC_ID_PCM_S16LE;
1685         break;
1686 #endif
1687     /* no ifdef since parameters are always those */
1688     case AV_CODEC_ID_QCELP:
1689         st->codec->channels = 1;
1690         // force sample rate for qcelp when not stored in mov
1691         if (st->codec->codec_tag != MKTAG('Q','c','l','p'))
1692             st->codec->sample_rate = 8000;
1693         break;
1694     case AV_CODEC_ID_AMR_NB:
1695         st->codec->channels    = 1;
1696         /* force sample rate for amr, stsd in 3gp does not store sample rate */
1697         st->codec->sample_rate = 8000;
1698         break;
1699     case AV_CODEC_ID_AMR_WB:
1700         st->codec->channels    = 1;
1701         st->codec->sample_rate = 16000;
1702         break;
1703     case AV_CODEC_ID_MP2:
1704     case AV_CODEC_ID_MP3:
1705         /* force type after stsd for m1a hdlr */
1706         st->codec->codec_type = AVMEDIA_TYPE_AUDIO;
1707         break;
1708     case AV_CODEC_ID_GSM:
1709     case AV_CODEC_ID_ADPCM_MS:
1710     case AV_CODEC_ID_ADPCM_IMA_WAV:
1711     case AV_CODEC_ID_ILBC:
1712         st->codec->block_align = sc->bytes_per_frame;
1713         break;
1714     case AV_CODEC_ID_ALAC:
1715         if (st->codec->extradata_size == 36) {
1716             st->codec->channels    = AV_RB8 (st->codec->extradata + 21);
1717             st->codec->sample_rate = AV_RB32(st->codec->extradata + 32);
1718         }
1719         break;
1720     case AV_CODEC_ID_VC1:
1721         st->need_parsing = AVSTREAM_PARSE_FULL;
1722         break;
1723     default:
1724         break;
1725     }
1726     return 0;
1727 }
1728
1729 static int mov_skip_multiple_stsd(MOVContext *c, AVIOContext *pb,
1730                                   int codec_tag, int format,
1731                                   int size)
1732 {
1733     int video_codec_id = ff_codec_get_id(ff_codec_movvideo_tags, format);
1734
1735     if (codec_tag &&
1736         (codec_tag == AV_RL32("avc1") ||
1737          codec_tag == AV_RL32("hvc1") ||
1738          codec_tag == AV_RL32("hev1") ||
1739          (codec_tag != format &&
1740           (c->fc->video_codec_id ? video_codec_id != c->fc->video_codec_id
1741                                  : codec_tag != MKTAG('j','p','e','g'))))) {
1742         /* Multiple fourcc, we skip JPEG. This is not correct, we should
1743          * export it as a separate AVStream but this needs a few changes
1744          * in the MOV demuxer, patch welcome. */
1745
1746         av_log(c->fc, AV_LOG_WARNING, "multiple fourcc not supported\n");
1747         avio_skip(pb, size);
1748         return 1;
1749     }
1750
1751     return 0;
1752 }
1753
1754 int ff_mov_read_stsd_entries(MOVContext *c, AVIOContext *pb, int entries)
1755 {
1756     AVStream *st;
1757     MOVStreamContext *sc;
1758     int pseudo_stream_id;
1759
1760     if (c->fc->nb_streams < 1)
1761         return 0;
1762     st = c->fc->streams[c->fc->nb_streams-1];
1763     sc = st->priv_data;
1764
1765     for (pseudo_stream_id = 0;
1766          pseudo_stream_id < entries && !pb->eof_reached;
1767          pseudo_stream_id++) {
1768         //Parsing Sample description table
1769         enum AVCodecID id;
1770         int ret, dref_id = 1;
1771         MOVAtom a = { AV_RL32("stsd") };
1772         int64_t start_pos = avio_tell(pb);
1773         uint32_t size = avio_rb32(pb); /* size */
1774         uint32_t format = avio_rl32(pb); /* data format */
1775
1776         if (size >= 16) {
1777             avio_rb32(pb); /* reserved */
1778             avio_rb16(pb); /* reserved */
1779             dref_id = avio_rb16(pb);
1780         } else {
1781             av_log(c->fc, AV_LOG_ERROR, "invalid size %"PRIu32" in stsd\n", size);
1782             return AVERROR_INVALIDDATA;
1783         }
1784
1785         if (mov_skip_multiple_stsd(c, pb, st->codec->codec_tag, format,
1786                                    size - (avio_tell(pb) - start_pos)))
1787             continue;
1788
1789         sc->pseudo_stream_id = st->codec->codec_tag ? -1 : pseudo_stream_id;
1790         sc->dref_id= dref_id;
1791
1792         id = mov_codec_id(st, format);
1793
1794         av_log(c->fc, AV_LOG_TRACE,
1795                "size=%"PRIu32" format=0x%08x codec_type=%d\n",
1796                size, format, st->codec->codec_type);
1797
1798         if (st->codec->codec_type==AVMEDIA_TYPE_VIDEO) {
1799             st->codec->codec_id = id;
1800             mov_parse_stsd_video(c, pb, st, sc);
1801         } else if (st->codec->codec_type==AVMEDIA_TYPE_AUDIO) {
1802             st->codec->codec_id = id;
1803             mov_parse_stsd_audio(c, pb, st, sc);
1804         } else if (st->codec->codec_type==AVMEDIA_TYPE_SUBTITLE){
1805             st->codec->codec_id = id;
1806             mov_parse_stsd_subtitle(c, pb, st, sc,
1807                                     size - (avio_tell(pb) - start_pos));
1808         } else {
1809             ret = mov_parse_stsd_data(c, pb, st, sc,
1810                                       size - (avio_tell(pb) - start_pos));
1811             if (ret < 0)
1812                 return ret;
1813         }
1814         /* this will read extra atoms at the end (wave, alac, damr, avcC, hvcC, SMI ...) */
1815         a.size = size - (avio_tell(pb) - start_pos);
1816         if (a.size > 8) {
1817             if ((ret = mov_read_default(c, pb, a)) < 0)
1818                 return ret;
1819         } else if (a.size > 0)
1820             avio_skip(pb, a.size);
1821     }
1822
1823     if (pb->eof_reached)
1824         return AVERROR_EOF;
1825
1826     return mov_finalize_stsd_codec(c, pb, st, sc);
1827 }
1828
1829 static int mov_read_stsd(MOVContext *c, AVIOContext *pb, MOVAtom atom)
1830 {
1831     int entries;
1832
1833     avio_r8(pb); /* version */
1834     avio_rb24(pb); /* flags */
1835     entries = avio_rb32(pb);
1836
1837     return ff_mov_read_stsd_entries(c, pb, entries);
1838 }
1839
1840 static int mov_read_stsc(MOVContext *c, AVIOContext *pb, MOVAtom atom)
1841 {
1842     AVStream *st;
1843     MOVStreamContext *sc;
1844     unsigned int i, entries;
1845
1846     if (c->fc->nb_streams < 1)
1847         return 0;
1848     st = c->fc->streams[c->fc->nb_streams-1];
1849     sc = st->priv_data;
1850
1851     avio_r8(pb); /* version */
1852     avio_rb24(pb); /* flags */
1853
1854     entries = avio_rb32(pb);
1855
1856     av_log(c->fc, AV_LOG_TRACE, "track[%i].stsc.entries = %i\n", c->fc->nb_streams-1, entries);
1857
1858     if (!entries)
1859         return 0;
1860     if (entries >= UINT_MAX / sizeof(*sc->stsc_data))
1861         return AVERROR_INVALIDDATA;
1862     sc->stsc_data = av_malloc(entries * sizeof(*sc->stsc_data));
1863     if (!sc->stsc_data)
1864         return AVERROR(ENOMEM);
1865
1866     for (i = 0; i < entries && !pb->eof_reached; i++) {
1867         sc->stsc_data[i].first = avio_rb32(pb);
1868         sc->stsc_data[i].count = avio_rb32(pb);
1869         sc->stsc_data[i].id = avio_rb32(pb);
1870     }
1871
1872     sc->stsc_count = i;
1873
1874     if (pb->eof_reached)
1875         return AVERROR_EOF;
1876
1877     return 0;
1878 }
1879
1880 static int mov_read_stps(MOVContext *c, AVIOContext *pb, MOVAtom atom)
1881 {
1882     AVStream *st;
1883     MOVStreamContext *sc;
1884     unsigned i, entries;
1885
1886     if (c->fc->nb_streams < 1)
1887         return 0;
1888     st = c->fc->streams[c->fc->nb_streams-1];
1889     sc = st->priv_data;
1890
1891     avio_rb32(pb); // version + flags
1892
1893     entries = avio_rb32(pb);
1894     if (entries >= UINT_MAX / sizeof(*sc->stps_data))
1895         return AVERROR_INVALIDDATA;
1896     sc->stps_data = av_malloc(entries * sizeof(*sc->stps_data));
1897     if (!sc->stps_data)
1898         return AVERROR(ENOMEM);
1899
1900     for (i = 0; i < entries && !pb->eof_reached; i++) {
1901         sc->stps_data[i] = avio_rb32(pb);
1902         //av_log(c->fc, AV_LOG_TRACE, "stps %d\n", sc->stps_data[i]);
1903     }
1904
1905     sc->stps_count = i;
1906
1907     if (pb->eof_reached)
1908         return AVERROR_EOF;
1909
1910     return 0;
1911 }
1912
1913 static int mov_read_stss(MOVContext *c, AVIOContext *pb, MOVAtom atom)
1914 {
1915     AVStream *st;
1916     MOVStreamContext *sc;
1917     unsigned int i, entries;
1918
1919     if (c->fc->nb_streams < 1)
1920         return 0;
1921     st = c->fc->streams[c->fc->nb_streams-1];
1922     sc = st->priv_data;
1923
1924     avio_r8(pb); /* version */
1925     avio_rb24(pb); /* flags */
1926
1927     entries = avio_rb32(pb);
1928
1929     av_log(c->fc, AV_LOG_TRACE, "keyframe_count = %d\n", entries);
1930
1931     if (!entries)
1932     {
1933         sc->keyframe_absent = 1;
1934         return 0;
1935     }
1936     if (entries >= UINT_MAX / sizeof(int))
1937         return AVERROR_INVALIDDATA;
1938     av_freep(&sc->keyframes);
1939     sc->keyframes = av_malloc(entries * sizeof(int));
1940     if (!sc->keyframes)
1941         return AVERROR(ENOMEM);
1942
1943     for (i = 0; i < entries && !pb->eof_reached; i++) {
1944         sc->keyframes[i] = avio_rb32(pb);
1945         //av_log(c->fc, AV_LOG_TRACE, "keyframes[]=%d\n", sc->keyframes[i]);
1946     }
1947
1948     sc->keyframe_count = i;
1949
1950     if (pb->eof_reached)
1951         return AVERROR_EOF;
1952
1953     return 0;
1954 }
1955
1956 static int mov_read_stsz(MOVContext *c, AVIOContext *pb, MOVAtom atom)
1957 {
1958     AVStream *st;
1959     MOVStreamContext *sc;
1960     unsigned int i, entries, sample_size, field_size, num_bytes;
1961     GetBitContext gb;
1962     unsigned char* buf;
1963     int ret;
1964
1965     if (c->fc->nb_streams < 1)
1966         return 0;
1967     st = c->fc->streams[c->fc->nb_streams-1];
1968     sc = st->priv_data;
1969
1970     avio_r8(pb); /* version */
1971     avio_rb24(pb); /* flags */
1972
1973     if (atom.type == MKTAG('s','t','s','z')) {
1974         sample_size = avio_rb32(pb);
1975         if (!sc->sample_size) /* do not overwrite value computed in stsd */
1976             sc->sample_size = sample_size;
1977         field_size = 32;
1978     } else {
1979         sample_size = 0;
1980         avio_rb24(pb); /* reserved */
1981         field_size = avio_r8(pb);
1982     }
1983     entries = avio_rb32(pb);
1984
1985     av_log(c->fc, AV_LOG_TRACE, "sample_size = %d sample_count = %d\n", sc->sample_size, entries);
1986
1987     sc->sample_count = entries;
1988     if (sample_size)
1989         return 0;
1990
1991     if (field_size != 4 && field_size != 8 && field_size != 16 && field_size != 32) {
1992         av_log(c->fc, AV_LOG_ERROR, "Invalid sample field size %d\n", field_size);
1993         return AVERROR_INVALIDDATA;
1994     }
1995
1996     if (!entries)
1997         return 0;
1998     if (entries >= UINT_MAX / sizeof(int) || entries >= (UINT_MAX - 4) / field_size)
1999         return AVERROR_INVALIDDATA;
2000     sc->sample_sizes = av_malloc(entries * sizeof(int));
2001     if (!sc->sample_sizes)
2002         return AVERROR(ENOMEM);
2003
2004     num_bytes = (entries*field_size+4)>>3;
2005
2006     buf = av_malloc(num_bytes+AV_INPUT_BUFFER_PADDING_SIZE);
2007     if (!buf) {
2008         av_freep(&sc->sample_sizes);
2009         return AVERROR(ENOMEM);
2010     }
2011
2012     ret = ffio_read_size(pb, buf, num_bytes);
2013     if (ret < 0) {
2014         av_freep(&sc->sample_sizes);
2015         av_free(buf);
2016         return ret;
2017     }
2018
2019     init_get_bits(&gb, buf, 8*num_bytes);
2020
2021     for (i = 0; i < entries && !pb->eof_reached; i++) {
2022         sc->sample_sizes[i] = get_bits_long(&gb, field_size);
2023         sc->data_size += sc->sample_sizes[i];
2024     }
2025
2026     sc->sample_count = i;
2027
2028     av_free(buf);
2029
2030     if (pb->eof_reached)
2031         return AVERROR_EOF;
2032
2033     return 0;
2034 }
2035
2036 static int mov_read_stts(MOVContext *c, AVIOContext *pb, MOVAtom atom)
2037 {
2038     AVStream *st;
2039     MOVStreamContext *sc;
2040     unsigned int i, entries;
2041     int64_t duration=0;
2042     int64_t total_sample_count=0;
2043
2044     if (c->fc->nb_streams < 1)
2045         return 0;
2046     st = c->fc->streams[c->fc->nb_streams-1];
2047     sc = st->priv_data;
2048
2049     avio_r8(pb); /* version */
2050     avio_rb24(pb); /* flags */
2051     entries = avio_rb32(pb);
2052
2053     av_log(c->fc, AV_LOG_TRACE, "track[%i].stts.entries = %i\n",
2054             c->fc->nb_streams-1, entries);
2055
2056     if (!entries)
2057         return 0;
2058     if (entries >= UINT_MAX / sizeof(*sc->stts_data))
2059         return AVERROR(EINVAL);
2060
2061     av_free(sc->stts_data);
2062     sc->stts_data = av_malloc(entries * sizeof(*sc->stts_data));
2063     if (!sc->stts_data)
2064         return AVERROR(ENOMEM);
2065
2066     for (i = 0; i < entries && !pb->eof_reached; i++) {
2067         int sample_duration;
2068         int sample_count;
2069
2070         sample_count=avio_rb32(pb);
2071         sample_duration = avio_rb32(pb);
2072         if (sample_count < 0) {
2073             av_log(c->fc, AV_LOG_ERROR, "Invalid sample_count=%d\n", sample_count);
2074             return AVERROR_INVALIDDATA;
2075         }
2076         sc->stts_data[i].count= sample_count;
2077         sc->stts_data[i].duration= sample_duration;
2078
2079         av_log(c->fc, AV_LOG_TRACE, "sample_count=%d, sample_duration=%d\n",
2080                 sample_count, sample_duration);
2081
2082         duration+=(int64_t)sample_duration*sample_count;
2083         total_sample_count+=sample_count;
2084     }
2085
2086     sc->stts_count = i;
2087
2088     if (pb->eof_reached)
2089         return AVERROR_EOF;
2090
2091     st->nb_frames= total_sample_count;
2092     if (duration)
2093         st->duration= duration;
2094     sc->track_end = duration;
2095     return 0;
2096 }
2097
2098 static int mov_read_ctts(MOVContext *c, AVIOContext *pb, MOVAtom atom)
2099 {
2100     AVStream *st;
2101     MOVStreamContext *sc;
2102     unsigned int i, entries;
2103
2104     if (c->fc->nb_streams < 1)
2105         return 0;
2106     st = c->fc->streams[c->fc->nb_streams-1];
2107     sc = st->priv_data;
2108
2109     avio_r8(pb); /* version */
2110     avio_rb24(pb); /* flags */
2111     entries = avio_rb32(pb);
2112
2113     av_log(c->fc, AV_LOG_TRACE, "track[%i].ctts.entries = %i\n", c->fc->nb_streams-1, entries);
2114
2115     av_freep(&sc->ctts_data);
2116
2117     if (!entries)
2118         return 0;
2119     if (entries >= UINT_MAX / sizeof(*sc->ctts_data))
2120         return AVERROR_INVALIDDATA;
2121     sc->ctts_data = av_realloc(NULL, entries * sizeof(*sc->ctts_data));
2122     if (!sc->ctts_data)
2123         return AVERROR(ENOMEM);
2124
2125     for (i = 0; i < entries && !pb->eof_reached; i++) {
2126         int count    =avio_rb32(pb);
2127         int duration =avio_rb32(pb);
2128
2129         sc->ctts_data[i].count   = count;
2130         sc->ctts_data[i].duration= duration;
2131         if (duration < 0)
2132             sc->dts_shift = FFMAX(sc->dts_shift, -duration);
2133     }
2134
2135     sc->ctts_count = i;
2136
2137     if (pb->eof_reached)
2138         return AVERROR_EOF;
2139
2140     av_log(c->fc, AV_LOG_TRACE, "dts shift %d\n", sc->dts_shift);
2141
2142     return 0;
2143 }
2144
2145 static int mov_read_sbgp(MOVContext *c, AVIOContext *pb, MOVAtom atom)
2146 {
2147     AVStream *st;
2148     MOVStreamContext *sc;
2149     unsigned int i, entries;
2150     uint8_t version;
2151     uint32_t grouping_type;
2152
2153     if (c->fc->nb_streams < 1)
2154         return 0;
2155     st = c->fc->streams[c->fc->nb_streams-1];
2156     sc = st->priv_data;
2157
2158     version = avio_r8(pb); /* version */
2159     avio_rb24(pb); /* flags */
2160     grouping_type = avio_rl32(pb);
2161     if (grouping_type != MKTAG( 'r','a','p',' '))
2162         return 0; /* only support 'rap ' grouping */
2163     if (version == 1)
2164         avio_rb32(pb); /* grouping_type_parameter */
2165
2166     entries = avio_rb32(pb);
2167     if (!entries)
2168         return 0;
2169     if (entries >= UINT_MAX / sizeof(*sc->rap_group))
2170         return AVERROR_INVALIDDATA;
2171     sc->rap_group = av_malloc(entries * sizeof(*sc->rap_group));
2172     if (!sc->rap_group)
2173         return AVERROR(ENOMEM);
2174
2175     for (i = 0; i < entries && !pb->eof_reached; i++) {
2176         sc->rap_group[i].count = avio_rb32(pb); /* sample_count */
2177         sc->rap_group[i].index = avio_rb32(pb); /* group_description_index */
2178     }
2179
2180     sc->rap_group_count = i;
2181
2182     return pb->eof_reached ? AVERROR_EOF : 0;
2183 }
2184
2185 static void mov_build_index(MOVContext *mov, AVStream *st)
2186 {
2187     MOVStreamContext *sc = st->priv_data;
2188     int64_t current_offset;
2189     int64_t current_dts = 0;
2190     unsigned int stts_index = 0;
2191     unsigned int stsc_index = 0;
2192     unsigned int stss_index = 0;
2193     unsigned int stps_index = 0;
2194     unsigned int i, j;
2195     uint64_t stream_size = 0;
2196
2197     /* adjust first dts according to edit list */
2198     if (sc->time_offset && mov->time_scale > 0) {
2199         if (sc->time_offset < 0)
2200             sc->time_offset = av_rescale(sc->time_offset, sc->time_scale, mov->time_scale);
2201         current_dts = -sc->time_offset;
2202         if (sc->ctts_data && sc->stts_data && sc->stts_data[0].duration &&
2203             sc->ctts_data[0].duration / sc->stts_data[0].duration > 16) {
2204             /* more than 16 frames delay, dts are likely wrong
2205                this happens with files created by iMovie */
2206             sc->wrong_dts = 1;
2207             st->codec->has_b_frames = 1;
2208         }
2209     }
2210
2211     /* only use old uncompressed audio chunk demuxing when stts specifies it */
2212     if (!(st->codec->codec_type == AVMEDIA_TYPE_AUDIO &&
2213           sc->stts_count == 1 && sc->stts_data[0].duration == 1)) {
2214         unsigned int current_sample = 0;
2215         unsigned int stts_sample = 0;
2216         unsigned int sample_size;
2217         unsigned int distance = 0;
2218         unsigned int rap_group_index = 0;
2219         unsigned int rap_group_sample = 0;
2220         int rap_group_present = sc->rap_group_count && sc->rap_group;
2221         int key_off = (sc->keyframes && sc->keyframes[0] > 0) || (sc->stps_data && sc->stps_data[0] > 0);
2222
2223         current_dts -= sc->dts_shift;
2224
2225         if (!sc->sample_count)
2226             return;
2227         if (sc->sample_count >= UINT_MAX / sizeof(*st->index_entries) - st->nb_index_entries)
2228             return;
2229         if (av_reallocp_array(&st->index_entries,
2230                               st->nb_index_entries + sc->sample_count,
2231                               sizeof(*st->index_entries)) < 0) {
2232             st->nb_index_entries = 0;
2233             return;
2234         }
2235         st->index_entries_allocated_size = (st->nb_index_entries + sc->sample_count) * sizeof(*st->index_entries);
2236
2237         for (i = 0; i < sc->chunk_count; i++) {
2238             current_offset = sc->chunk_offsets[i];
2239             while (stsc_index + 1 < sc->stsc_count &&
2240                 i + 1 == sc->stsc_data[stsc_index + 1].first)
2241                 stsc_index++;
2242             for (j = 0; j < sc->stsc_data[stsc_index].count; j++) {
2243                 int keyframe = 0;
2244                 if (current_sample >= sc->sample_count) {
2245                     av_log(mov->fc, AV_LOG_ERROR, "wrong sample count\n");
2246                     return;
2247                 }
2248
2249                 if (!sc->keyframe_absent && (!sc->keyframe_count || current_sample+key_off == sc->keyframes[stss_index])) {
2250                     keyframe = 1;
2251                     if (stss_index + 1 < sc->keyframe_count)
2252                         stss_index++;
2253                 } else if (sc->stps_count && current_sample+key_off == sc->stps_data[stps_index]) {
2254                     keyframe = 1;
2255                     if (stps_index + 1 < sc->stps_count)
2256                         stps_index++;
2257                 }
2258                 if (rap_group_present && rap_group_index < sc->rap_group_count) {
2259                     if (sc->rap_group[rap_group_index].index > 0)
2260                         keyframe = 1;
2261                     if (++rap_group_sample == sc->rap_group[rap_group_index].count) {
2262                         rap_group_sample = 0;
2263                         rap_group_index++;
2264                     }
2265                 }
2266                 if (keyframe)
2267                     distance = 0;
2268                 sample_size = sc->sample_size > 0 ? sc->sample_size : sc->sample_sizes[current_sample];
2269                 if (sc->pseudo_stream_id == -1 ||
2270                    sc->stsc_data[stsc_index].id - 1 == sc->pseudo_stream_id) {
2271                     AVIndexEntry *e = &st->index_entries[st->nb_index_entries++];
2272                     e->pos = current_offset;
2273                     e->timestamp = current_dts;
2274                     e->size = sample_size;
2275                     e->min_distance = distance;
2276                     e->flags = keyframe ? AVINDEX_KEYFRAME : 0;
2277                     av_log(mov->fc, AV_LOG_TRACE, "AVIndex stream %d, sample %d, offset %"PRIx64", dts %"PRId64", "
2278                             "size %d, distance %d, keyframe %d\n", st->index, current_sample,
2279                             current_offset, current_dts, sample_size, distance, keyframe);
2280                 }
2281
2282                 current_offset += sample_size;
2283                 stream_size += sample_size;
2284                 current_dts += sc->stts_data[stts_index].duration;
2285                 distance++;
2286                 stts_sample++;
2287                 current_sample++;
2288                 if (stts_index + 1 < sc->stts_count && stts_sample == sc->stts_data[stts_index].count) {
2289                     stts_sample = 0;
2290                     stts_index++;
2291                 }
2292             }
2293         }
2294         if (st->duration > 0)
2295             st->codec->bit_rate = stream_size*8*sc->time_scale/st->duration;
2296     } else {
2297         unsigned chunk_samples, total = 0;
2298
2299         // compute total chunk count
2300         for (i = 0; i < sc->stsc_count; i++) {
2301             unsigned count, chunk_count;
2302
2303             chunk_samples = sc->stsc_data[i].count;
2304             if (i != sc->stsc_count - 1 &&
2305                 sc->samples_per_frame && chunk_samples % sc->samples_per_frame) {
2306                 av_log(mov->fc, AV_LOG_ERROR, "error unaligned chunk\n");
2307                 return;
2308             }
2309
2310             if (sc->samples_per_frame >= 160) { // gsm
2311                 count = chunk_samples / sc->samples_per_frame;
2312             } else if (sc->samples_per_frame > 1) {
2313                 unsigned samples = (1024/sc->samples_per_frame)*sc->samples_per_frame;
2314                 count = (chunk_samples+samples-1) / samples;
2315             } else {
2316                 count = (chunk_samples+1023) / 1024;
2317             }
2318
2319             if (i < sc->stsc_count - 1)
2320                 chunk_count = sc->stsc_data[i+1].first - sc->stsc_data[i].first;
2321             else
2322                 chunk_count = sc->chunk_count - (sc->stsc_data[i].first - 1);
2323             total += chunk_count * count;
2324         }
2325
2326         av_log(mov->fc, AV_LOG_TRACE, "chunk count %d\n", total);
2327         if (total >= UINT_MAX / sizeof(*st->index_entries) - st->nb_index_entries)
2328             return;
2329         if (av_reallocp_array(&st->index_entries,
2330                               st->nb_index_entries + total,
2331                               sizeof(*st->index_entries)) < 0) {
2332             st->nb_index_entries = 0;
2333             return;
2334         }
2335         st->index_entries_allocated_size = (st->nb_index_entries + total) * sizeof(*st->index_entries);
2336
2337         // populate index
2338         for (i = 0; i < sc->chunk_count; i++) {
2339             current_offset = sc->chunk_offsets[i];
2340             if (stsc_index + 1 < sc->stsc_count &&
2341                 i + 1 == sc->stsc_data[stsc_index + 1].first)
2342                 stsc_index++;
2343             chunk_samples = sc->stsc_data[stsc_index].count;
2344
2345             while (chunk_samples > 0) {
2346                 AVIndexEntry *e;
2347                 unsigned size, samples;
2348
2349                 if (sc->samples_per_frame > 1 && !sc->bytes_per_frame) {
2350                     avpriv_request_sample(mov->fc,
2351                            "Zero bytes per frame, but %d samples per frame",
2352                            sc->samples_per_frame);
2353                     return;
2354                 }
2355
2356                 if (sc->samples_per_frame >= 160) { // gsm
2357                     samples = sc->samples_per_frame;
2358                     size = sc->bytes_per_frame;
2359                 } else {
2360                     if (sc->samples_per_frame > 1) {
2361                         samples = FFMIN((1024 / sc->samples_per_frame)*
2362                                         sc->samples_per_frame, chunk_samples);
2363                         size = (samples / sc->samples_per_frame) * sc->bytes_per_frame;
2364                     } else {
2365                         samples = FFMIN(1024, chunk_samples);
2366                         size = samples * sc->sample_size;
2367                     }
2368                 }
2369
2370                 if (st->nb_index_entries >= total) {
2371                     av_log(mov->fc, AV_LOG_ERROR, "wrong chunk count %d\n", total);
2372                     return;
2373                 }
2374                 e = &st->index_entries[st->nb_index_entries++];
2375                 e->pos = current_offset;
2376                 e->timestamp = current_dts;
2377                 e->size = size;
2378                 e->min_distance = 0;
2379                 e->flags = AVINDEX_KEYFRAME;
2380                 av_log(mov->fc, AV_LOG_TRACE, "AVIndex stream %d, chunk %d, offset %"PRIx64", dts %"PRId64", "
2381                         "size %d, duration %d\n", st->index, i, current_offset, current_dts,
2382                         size, samples);
2383
2384                 current_offset += size;
2385                 current_dts += samples;
2386                 chunk_samples -= samples;
2387             }
2388         }
2389     }
2390 }
2391
2392 static int mov_open_dref(AVIOContext **pb, char *src, MOVDref *ref,
2393                          AVIOInterruptCB *int_cb)
2394 {
2395     /* try relative path, we do not try the absolute because it can leak information about our
2396        system to an attacker */
2397     if (ref->nlvl_to > 0 && ref->nlvl_from > 0) {
2398         char filename[1024];
2399         char *src_path;
2400         int i, l;
2401
2402         /* find a source dir */
2403         src_path = strrchr(src, '/');
2404         if (src_path)
2405             src_path++;
2406         else
2407             src_path = src;
2408
2409         /* find a next level down to target */
2410         for (i = 0, l = strlen(ref->path) - 1; l >= 0; l--)
2411             if (ref->path[l] == '/') {
2412                 if (i == ref->nlvl_to - 1)
2413                     break;
2414                 else
2415                     i++;
2416             }
2417
2418         /* compose filename if next level down to target was found */
2419         if (i == ref->nlvl_to - 1 && src_path - src  < sizeof(filename)) {
2420             memcpy(filename, src, src_path - src);
2421             filename[src_path - src] = 0;
2422
2423             for (i = 1; i < ref->nlvl_from; i++)
2424                 av_strlcat(filename, "../", 1024);
2425
2426             av_strlcat(filename, ref->path + l + 1, 1024);
2427
2428             if (!avio_open2(pb, filename, AVIO_FLAG_READ, int_cb, NULL))
2429                 return 0;
2430         }
2431     }
2432
2433     return AVERROR(ENOENT);
2434 }
2435
2436 static int mov_read_trak(MOVContext *c, AVIOContext *pb, MOVAtom atom)
2437 {
2438     AVStream *st;
2439     MOVStreamContext *sc;
2440     int ret;
2441
2442     st = avformat_new_stream(c->fc, NULL);
2443     if (!st) return AVERROR(ENOMEM);
2444     st->id = c->fc->nb_streams;
2445     sc = av_mallocz(sizeof(MOVStreamContext));
2446     if (!sc) return AVERROR(ENOMEM);
2447
2448     st->priv_data = sc;
2449     st->codec->codec_type = AVMEDIA_TYPE_DATA;
2450     sc->ffindex = st->index;
2451
2452     if ((ret = mov_read_default(c, pb, atom)) < 0)
2453         return ret;
2454
2455     /* sanity checks */
2456     if (sc->chunk_count && (!sc->stts_count || !sc->stsc_count ||
2457                             (!sc->sample_size && !sc->sample_count))) {
2458         av_log(c->fc, AV_LOG_ERROR, "stream %d, missing mandatory atoms, broken header\n",
2459                st->index);
2460         return 0;
2461     }
2462
2463     if (sc->time_scale <= 0) {
2464         av_log(c->fc, AV_LOG_WARNING, "stream %d, timescale not set\n", st->index);
2465         sc->time_scale = c->time_scale;
2466         if (sc->time_scale <= 0)
2467             sc->time_scale = 1;
2468     }
2469
2470     avpriv_set_pts_info(st, 64, 1, sc->time_scale);
2471
2472     mov_build_index(c, st);
2473
2474     if (sc->dref_id-1 < sc->drefs_count && sc->drefs[sc->dref_id-1].path) {
2475         MOVDref *dref = &sc->drefs[sc->dref_id - 1];
2476         if (mov_open_dref(&sc->pb, c->fc->filename, dref, &c->fc->interrupt_callback) < 0)
2477             av_log(c->fc, AV_LOG_ERROR,
2478                    "stream %d, error opening alias: path='%s', dir='%s', "
2479                    "filename='%s', volume='%s', nlvl_from=%d, nlvl_to=%d\n",
2480                    st->index, dref->path, dref->dir, dref->filename,
2481                    dref->volume, dref->nlvl_from, dref->nlvl_to);
2482     } else
2483         sc->pb = c->fc->pb;
2484
2485     if (st->codec->codec_type == AVMEDIA_TYPE_VIDEO) {
2486         if (!st->sample_aspect_ratio.num &&
2487             (st->codec->width != sc->width || st->codec->height != sc->height)) {
2488             st->sample_aspect_ratio = av_d2q(((double)st->codec->height * sc->width) /
2489                                              ((double)st->codec->width * sc->height), INT_MAX);
2490         }
2491     }
2492
2493     // done for ai5q, ai52, ai55, ai1q, ai12 and ai15.
2494     if (!st->codec->extradata_size && st->codec->codec_id == AV_CODEC_ID_H264 &&
2495         TAG_IS_AVCI(st->codec->codec_tag)) {
2496         ret = ff_generate_avci_extradata(st);
2497         if (ret < 0)
2498             return ret;
2499     }
2500
2501     switch (st->codec->codec_id) {
2502 #if CONFIG_H261_DECODER
2503     case AV_CODEC_ID_H261:
2504 #endif
2505 #if CONFIG_H263_DECODER
2506     case AV_CODEC_ID_H263:
2507 #endif
2508 #if CONFIG_MPEG4_DECODER
2509     case AV_CODEC_ID_MPEG4:
2510 #endif
2511         st->codec->width = 0; /* let decoder init width/height */
2512         st->codec->height= 0;
2513         break;
2514     }
2515
2516     /* Do not need those anymore. */
2517     av_freep(&sc->chunk_offsets);
2518     av_freep(&sc->stsc_data);
2519     av_freep(&sc->sample_sizes);
2520     av_freep(&sc->keyframes);
2521     av_freep(&sc->stts_data);
2522     av_freep(&sc->stps_data);
2523     av_freep(&sc->rap_group);
2524
2525     return 0;
2526 }
2527
2528 static int mov_read_ilst(MOVContext *c, AVIOContext *pb, MOVAtom atom)
2529 {
2530     int ret;
2531     c->itunes_metadata = 1;
2532     ret = mov_read_default(c, pb, atom);
2533     c->itunes_metadata = 0;
2534     return ret;
2535 }
2536
2537 static int mov_read_replaygain(MOVContext *c, AVIOContext *pb, int size)
2538 {
2539     int64_t end = avio_tell(pb) + size;
2540     uint8_t *key = NULL, *val = NULL;
2541     int i;
2542
2543     for (i = 0; i < 2; i++) {
2544         uint8_t **p;
2545         uint32_t len, tag;
2546         int ret;
2547
2548         if (end - avio_tell(pb) <= 12)
2549             break;
2550
2551         len = avio_rb32(pb);
2552         tag = avio_rl32(pb);
2553         avio_skip(pb, 4); // flags
2554
2555         if (len < 12 || len - 12 > end - avio_tell(pb))
2556             break;
2557         len -= 12;
2558
2559         if (tag == MKTAG('n', 'a', 'm', 'e'))
2560             p = &key;
2561         else if (tag == MKTAG('d', 'a', 't', 'a') && len > 4) {
2562             avio_skip(pb, 4);
2563             len -= 4;
2564             p = &val;
2565         } else
2566             break;
2567
2568         *p = av_malloc(len + 1);
2569         if (!*p)
2570             break;
2571         ret = ffio_read_size(pb, *p, len);
2572         if (ret < 0) {
2573             av_freep(p);
2574             return ret;
2575         }
2576         (*p)[len] = 0;
2577     }
2578
2579     if (key && val) {
2580         av_dict_set(&c->fc->metadata, key, val,
2581                     AV_DICT_DONT_STRDUP_KEY | AV_DICT_DONT_STRDUP_VAL);
2582         key = val = NULL;
2583     }
2584
2585     avio_seek(pb, end, SEEK_SET);
2586     av_freep(&key);
2587     av_freep(&val);
2588     return 0;
2589 }
2590
2591 static int mov_read_custom(MOVContext *c, AVIOContext *pb, MOVAtom atom)
2592 {
2593     int64_t end = avio_tell(pb) + atom.size;
2594     uint32_t tag, len;
2595
2596     if (atom.size < 8)
2597         goto fail;
2598
2599     len = avio_rb32(pb);
2600     tag = avio_rl32(pb);
2601
2602     if (len > atom.size)
2603         goto fail;
2604
2605     if (tag == MKTAG('m', 'e', 'a', 'n') && len > 12) {
2606         uint8_t domain[128];
2607         int domain_len;
2608
2609         avio_skip(pb, 4); // flags
2610         len -= 12;
2611
2612         domain_len = avio_get_str(pb, len, domain, sizeof(domain));
2613         avio_skip(pb, len - domain_len);
2614         if (!strcmp(domain, "org.hydrogenaudio.replaygain"))
2615             return mov_read_replaygain(c, pb, end - avio_tell(pb));
2616     }
2617
2618 fail:
2619     av_log(c->fc, AV_LOG_VERBOSE,
2620            "Unhandled or malformed custom metadata of size %"PRId64"\n", atom.size);
2621     return 0;
2622 }
2623
2624 static int mov_read_meta(MOVContext *c, AVIOContext *pb, MOVAtom atom)
2625 {
2626     while (atom.size > 8) {
2627         uint32_t tag = avio_rl32(pb);
2628         atom.size -= 4;
2629         if (tag == MKTAG('h','d','l','r')) {
2630             avio_seek(pb, -8, SEEK_CUR);
2631             atom.size += 8;
2632             return mov_read_default(c, pb, atom);
2633         }
2634     }
2635     return 0;
2636 }
2637
2638 static int mov_read_tkhd(MOVContext *c, AVIOContext *pb, MOVAtom atom)
2639 {
2640     int i;
2641     int width;
2642     int height;
2643     int64_t disp_transform[2];
2644     int display_matrix[3][3];
2645     AVStream *st;
2646     MOVStreamContext *sc;
2647     int version;
2648     int flags;
2649
2650     if (c->fc->nb_streams < 1)
2651         return 0;
2652     st = c->fc->streams[c->fc->nb_streams-1];
2653     sc = st->priv_data;
2654
2655     version = avio_r8(pb);
2656     flags = avio_rb24(pb);
2657     st->disposition |= (flags & MOV_TKHD_FLAG_ENABLED) ? AV_DISPOSITION_DEFAULT : 0;
2658
2659     if (version == 1) {
2660         avio_rb64(pb);
2661         avio_rb64(pb);
2662     } else {
2663         avio_rb32(pb); /* creation time */
2664         avio_rb32(pb); /* modification time */
2665     }
2666     st->id = (int)avio_rb32(pb); /* track id (NOT 0 !)*/
2667     avio_rb32(pb); /* reserved */
2668
2669     /* highlevel (considering edits) duration in movie timebase */
2670     (version == 1) ? avio_rb64(pb) : avio_rb32(pb);
2671     avio_rb32(pb); /* reserved */
2672     avio_rb32(pb); /* reserved */
2673
2674     avio_rb16(pb); /* layer */
2675     avio_rb16(pb); /* alternate group */
2676     avio_rb16(pb); /* volume */
2677     avio_rb16(pb); /* reserved */
2678
2679     //read in the display matrix (outlined in ISO 14496-12, Section 6.2.2)
2680     // they're kept in fixed point format through all calculations
2681     // save u,v,z to store the whole matrix in the AV_PKT_DATA_DISPLAYMATRIX
2682     // side data, but the scale factor is not needed to calculate aspect ratio
2683     for (i = 0; i < 3; i++) {
2684         display_matrix[i][0] = avio_rb32(pb);   // 16.16 fixed point
2685         display_matrix[i][1] = avio_rb32(pb);   // 16.16 fixed point
2686         display_matrix[i][2] = avio_rb32(pb);   //  2.30 fixed point
2687     }
2688
2689     width = avio_rb32(pb);       // 16.16 fixed point track width
2690     height = avio_rb32(pb);      // 16.16 fixed point track height
2691     sc->width = width >> 16;
2692     sc->height = height >> 16;
2693
2694     // save the matrix when it is not the default identity
2695     if (display_matrix[0][0] != (1 << 16) ||
2696         display_matrix[1][1] != (1 << 16) ||
2697         display_matrix[2][2] != (1 << 30) ||
2698         display_matrix[0][1] || display_matrix[0][2] ||
2699         display_matrix[1][0] || display_matrix[1][2] ||
2700         display_matrix[2][0] || display_matrix[2][1]) {
2701         int i, j;
2702
2703         av_freep(&sc->display_matrix);
2704         sc->display_matrix = av_malloc(sizeof(int32_t) * 9);
2705         if (!sc->display_matrix)
2706             return AVERROR(ENOMEM);
2707
2708         for (i = 0; i < 3; i++)
2709             for (j = 0; j < 3; j++)
2710                 sc->display_matrix[i * 3 + j] = display_matrix[i][j];
2711     }
2712
2713     // transform the display width/height according to the matrix
2714     // skip this when the display matrix is the identity one
2715     // to keep the same scale, use [width height 1<<16]
2716     if (width && height && sc->display_matrix) {
2717         for (i = 0; i < 2; i++)
2718             disp_transform[i] =
2719                 (int64_t)  width  * display_matrix[0][i] +
2720                 (int64_t)  height * display_matrix[1][i] +
2721                 ((int64_t) display_matrix[2][i] << 16);
2722
2723         //sample aspect ratio is new width/height divided by old width/height
2724         if (disp_transform[0] > 0 && disp_transform[1] > 0)
2725             st->sample_aspect_ratio = av_d2q(
2726                 ((double) disp_transform[0] * height) /
2727                 ((double) disp_transform[1] * width), INT_MAX);
2728     }
2729     return 0;
2730 }
2731
2732 static int mov_read_tfhd(MOVContext *c, AVIOContext *pb, MOVAtom atom)
2733 {
2734     MOVFragment *frag = &c->fragment;
2735     MOVTrackExt *trex = NULL;
2736     int flags, track_id, i;
2737
2738     avio_r8(pb); /* version */
2739     flags = avio_rb24(pb);
2740
2741     track_id = avio_rb32(pb);
2742     if (!track_id)
2743         return AVERROR_INVALIDDATA;
2744     frag->track_id = track_id;
2745     for (i = 0; i < c->trex_count; i++)
2746         if (c->trex_data[i].track_id == frag->track_id) {
2747             trex = &c->trex_data[i];
2748             break;
2749         }
2750     if (!trex) {
2751         av_log(c->fc, AV_LOG_ERROR, "could not find corresponding trex\n");
2752         return AVERROR_INVALIDDATA;
2753     }
2754
2755     frag->base_data_offset = flags & MOV_TFHD_BASE_DATA_OFFSET ?
2756                              avio_rb64(pb) : flags & MOV_TFHD_DEFAULT_BASE_IS_MOOF ?
2757                              frag->moof_offset : frag->implicit_offset;
2758     frag->stsd_id  = flags & MOV_TFHD_STSD_ID ? avio_rb32(pb) : trex->stsd_id;
2759
2760     frag->duration = flags & MOV_TFHD_DEFAULT_DURATION ?
2761                      avio_rb32(pb) : trex->duration;
2762     frag->size     = flags & MOV_TFHD_DEFAULT_SIZE ?
2763                      avio_rb32(pb) : trex->size;
2764     frag->flags    = flags & MOV_TFHD_DEFAULT_FLAGS ?
2765                      avio_rb32(pb) : trex->flags;
2766     av_log(c->fc, AV_LOG_TRACE, "frag flags 0x%x\n", frag->flags);
2767     return 0;
2768 }
2769
2770 static int mov_read_chap(MOVContext *c, AVIOContext *pb, MOVAtom atom)
2771 {
2772     c->chapter_track = avio_rb32(pb);
2773     return 0;
2774 }
2775
2776 static int mov_read_trex(MOVContext *c, AVIOContext *pb, MOVAtom atom)
2777 {
2778     MOVTrackExt *trex;
2779     int err;
2780
2781     if ((uint64_t)c->trex_count+1 >= UINT_MAX / sizeof(*c->trex_data))
2782         return AVERROR_INVALIDDATA;
2783     if ((err = av_reallocp_array(&c->trex_data, c->trex_count + 1,
2784                                  sizeof(*c->trex_data))) < 0) {
2785         c->trex_count = 0;
2786         return err;
2787     }
2788     trex = &c->trex_data[c->trex_count++];
2789     avio_r8(pb); /* version */
2790     avio_rb24(pb); /* flags */
2791     trex->track_id = avio_rb32(pb);
2792     trex->stsd_id  = avio_rb32(pb);
2793     trex->duration = avio_rb32(pb);
2794     trex->size     = avio_rb32(pb);
2795     trex->flags    = avio_rb32(pb);
2796     return 0;
2797 }
2798
2799 static int mov_read_tfdt(MOVContext *c, AVIOContext *pb, MOVAtom atom)
2800 {
2801     MOVFragment *frag = &c->fragment;
2802     AVStream *st = NULL;
2803     MOVStreamContext *sc;
2804     int version, i;
2805
2806     for (i = 0; i < c->fc->nb_streams; i++) {
2807         if (c->fc->streams[i]->id == frag->track_id) {
2808             st = c->fc->streams[i];
2809             break;
2810         }
2811     }
2812     if (!st) {
2813         av_log(c->fc, AV_LOG_ERROR, "could not find corresponding track id %d\n", frag->track_id);
2814         return AVERROR_INVALIDDATA;
2815     }
2816     sc = st->priv_data;
2817     if (sc->pseudo_stream_id + 1 != frag->stsd_id)
2818         return 0;
2819     version = avio_r8(pb);
2820     avio_rb24(pb); /* flags */
2821     if (version) {
2822         sc->track_end = avio_rb64(pb);
2823     } else {
2824         sc->track_end = avio_rb32(pb);
2825     }
2826     return 0;
2827 }
2828
2829 static int mov_read_trun(MOVContext *c, AVIOContext *pb, MOVAtom atom)
2830 {
2831     MOVFragment *frag = &c->fragment;
2832     AVStream *st = NULL;
2833     MOVStreamContext *sc;
2834     MOVStts *ctts_data;
2835     uint64_t offset;
2836     int64_t dts;
2837     int data_offset = 0;
2838     unsigned entries, first_sample_flags = frag->flags;
2839     int flags, distance, i, err;
2840
2841     for (i = 0; i < c->fc->nb_streams; i++) {
2842         if (c->fc->streams[i]->id == frag->track_id) {
2843             st = c->fc->streams[i];
2844             break;
2845         }
2846     }
2847     if (!st) {
2848         av_log(c->fc, AV_LOG_ERROR, "could not find corresponding track id %d\n", frag->track_id);
2849         return AVERROR_INVALIDDATA;
2850     }
2851     sc = st->priv_data;
2852     if (sc->pseudo_stream_id+1 != frag->stsd_id)
2853         return 0;
2854     avio_r8(pb); /* version */
2855     flags = avio_rb24(pb);
2856     entries = avio_rb32(pb);
2857     av_log(c->fc, AV_LOG_TRACE, "flags 0x%x entries %d\n", flags, entries);
2858
2859     /* Always assume the presence of composition time offsets.
2860      * Without this assumption, for instance, we cannot deal with a track in fragmented movies that meet the following.
2861      *  1) in the initial movie, there are no samples.
2862      *  2) in the first movie fragment, there is only one sample without composition time offset.
2863      *  3) in the subsequent movie fragments, there are samples with composition time offset. */
2864     if (!sc->ctts_count && sc->sample_count)
2865     {
2866         /* Complement ctts table if moov atom doesn't have ctts atom. */
2867         ctts_data = av_realloc(NULL, sizeof(*sc->ctts_data));
2868         if (!ctts_data)
2869             return AVERROR(ENOMEM);
2870         sc->ctts_data = ctts_data;
2871         sc->ctts_data[sc->ctts_count].count = sc->sample_count;
2872         sc->ctts_data[sc->ctts_count].duration = 0;
2873         sc->ctts_count++;
2874     }
2875     if ((uint64_t)entries+sc->ctts_count >= UINT_MAX/sizeof(*sc->ctts_data))
2876         return AVERROR_INVALIDDATA;
2877     if ((err = av_reallocp_array(&sc->ctts_data, entries + sc->ctts_count,
2878                                  sizeof(*sc->ctts_data))) < 0) {
2879         sc->ctts_count = 0;
2880         return err;
2881     }
2882     if (flags & MOV_TRUN_DATA_OFFSET)        data_offset        = avio_rb32(pb);
2883     if (flags & MOV_TRUN_FIRST_SAMPLE_FLAGS) first_sample_flags = avio_rb32(pb);
2884     dts    = sc->track_end - sc->time_offset;
2885     offset = frag->base_data_offset + data_offset;
2886     distance = 0;
2887     av_log(c->fc, AV_LOG_TRACE, "first sample flags 0x%x\n", first_sample_flags);
2888     for (i = 0; i < entries && !pb->eof_reached; i++) {
2889         unsigned sample_size = frag->size;
2890         int sample_flags = i ? frag->flags : first_sample_flags;
2891         unsigned sample_duration = frag->duration;
2892         int keyframe = 0;
2893
2894         if (flags & MOV_TRUN_SAMPLE_DURATION) sample_duration = avio_rb32(pb);
2895         if (flags & MOV_TRUN_SAMPLE_SIZE)     sample_size     = avio_rb32(pb);
2896         if (flags & MOV_TRUN_SAMPLE_FLAGS)    sample_flags    = avio_rb32(pb);
2897         sc->ctts_data[sc->ctts_count].count = 1;
2898         sc->ctts_data[sc->ctts_count].duration = (flags & MOV_TRUN_SAMPLE_CTS) ?
2899                                                   avio_rb32(pb) : 0;
2900         sc->ctts_count++;
2901         if (st->codec->codec_type == AVMEDIA_TYPE_AUDIO)
2902             keyframe = 1;
2903         else
2904             keyframe =
2905                 !(sample_flags & (MOV_FRAG_SAMPLE_FLAG_IS_NON_SYNC |
2906                                   MOV_FRAG_SAMPLE_FLAG_DEPENDS_YES));
2907         if (keyframe)
2908             distance = 0;
2909         av_add_index_entry(st, offset, dts, sample_size, distance,
2910                            keyframe ? AVINDEX_KEYFRAME : 0);
2911         av_log(c->fc, AV_LOG_TRACE, "AVIndex stream %d, sample %d, offset %"PRIx64", dts %"PRId64", "
2912                 "size %d, distance %d, keyframe %d\n", st->index, sc->sample_count+i,
2913                 offset, dts, sample_size, distance, keyframe);
2914         distance++;
2915         dts += sample_duration;
2916         offset += sample_size;
2917         sc->data_size += sample_size;
2918     }
2919
2920     if (pb->eof_reached)
2921         return AVERROR_EOF;
2922
2923     frag->implicit_offset = offset;
2924     st->duration = sc->track_end = dts + sc->time_offset;
2925     return 0;
2926 }
2927
2928 /* this atom should be null (from specs), but some buggy files put the 'moov' atom inside it... */
2929 /* like the files created with Adobe Premiere 5.0, for samples see */
2930 /* http://graphics.tudelft.nl/~wouter/publications/soundtests/ */
2931 static int mov_read_wide(MOVContext *c, AVIOContext *pb, MOVAtom atom)
2932 {
2933     int err;
2934
2935     if (atom.size < 8)
2936         return 0; /* continue */
2937     if (avio_rb32(pb) != 0) { /* 0 sized mdat atom... use the 'wide' atom size */
2938         avio_skip(pb, atom.size - 4);
2939         return 0;
2940     }
2941     atom.type = avio_rl32(pb);
2942     atom.size -= 8;
2943     if (atom.type != MKTAG('m','d','a','t')) {
2944         avio_skip(pb, atom.size);
2945         return 0;
2946     }
2947     err = mov_read_mdat(c, pb, atom);
2948     return err;
2949 }
2950
2951 static int mov_read_cmov(MOVContext *c, AVIOContext *pb, MOVAtom atom)
2952 {
2953 #if CONFIG_ZLIB
2954     AVIOContext ctx;
2955     uint8_t *cmov_data;
2956     uint8_t *moov_data; /* uncompressed data */
2957     long cmov_len, moov_len;
2958     int ret = -1;
2959
2960     avio_rb32(pb); /* dcom atom */
2961     if (avio_rl32(pb) != MKTAG('d','c','o','m'))
2962         return AVERROR_INVALIDDATA;
2963     if (avio_rl32(pb) != MKTAG('z','l','i','b')) {
2964         av_log(c->fc, AV_LOG_ERROR, "unknown compression for cmov atom !");
2965         return AVERROR_INVALIDDATA;
2966     }
2967     avio_rb32(pb); /* cmvd atom */
2968     if (avio_rl32(pb) != MKTAG('c','m','v','d'))
2969         return AVERROR_INVALIDDATA;
2970     moov_len = avio_rb32(pb); /* uncompressed size */
2971     cmov_len = atom.size - 6 * 4;
2972
2973     cmov_data = av_malloc(cmov_len);
2974     if (!cmov_data)
2975         return AVERROR(ENOMEM);
2976     moov_data = av_malloc(moov_len);
2977     if (!moov_data) {
2978         av_free(cmov_data);
2979         return AVERROR(ENOMEM);
2980     }
2981     ret = ffio_read_size(pb, cmov_data, cmov_len);
2982     if (ret < 0)
2983         goto free_and_return;
2984
2985     if (uncompress (moov_data, (uLongf *) &moov_len, (const Bytef *)cmov_data, cmov_len) != Z_OK)
2986         goto free_and_return;
2987     if (ffio_init_context(&ctx, moov_data, moov_len, 0, NULL, NULL, NULL, NULL) != 0)
2988         goto free_and_return;
2989     atom.type = MKTAG('m','o','o','v');
2990     atom.size = moov_len;
2991     ret = mov_read_default(c, &ctx, atom);
2992 free_and_return:
2993     av_free(moov_data);
2994     av_free(cmov_data);
2995     return ret;
2996 #else
2997     av_log(c->fc, AV_LOG_ERROR, "this file requires zlib support compiled in\n");
2998     return AVERROR(ENOSYS);
2999 #endif
3000 }
3001
3002 /* edit list atom */
3003 static int mov_read_elst(MOVContext *c, AVIOContext *pb, MOVAtom atom)
3004 {
3005     MOVStreamContext *sc;
3006     int i, edit_count, version;
3007
3008     if (c->fc->nb_streams < 1)
3009         return 0;
3010     sc = c->fc->streams[c->fc->nb_streams-1]->priv_data;
3011
3012     version = avio_r8(pb); /* version */
3013     avio_rb24(pb); /* flags */
3014     edit_count = avio_rb32(pb); /* entries */
3015
3016     if ((uint64_t)edit_count*12+8 > atom.size)
3017         return AVERROR_INVALIDDATA;
3018
3019     for (i=0; i<edit_count; i++){
3020         int64_t time;
3021         int64_t duration;
3022         if (version == 1) {
3023             duration = avio_rb64(pb);
3024             time     = avio_rb64(pb);
3025         } else {
3026             duration = avio_rb32(pb); /* segment duration */
3027             time     = (int32_t)avio_rb32(pb); /* media time */
3028         }
3029         avio_rb32(pb); /* Media rate */
3030         if (i == 0 && time >= -1) {
3031             sc->time_offset = time != -1 ? time : -duration;
3032         }
3033     }
3034
3035     if (edit_count > 1)
3036         av_log(c->fc, AV_LOG_WARNING, "multiple edit list entries, "
3037                "a/v desync might occur, patch welcome\n");
3038
3039     av_log(c->fc, AV_LOG_TRACE, "track[%i].edit_count = %i\n", c->fc->nb_streams-1, edit_count);
3040     return 0;
3041 }
3042
3043 static const MOVParseTableEntry mov_default_parse_table[] = {
3044 { MKTAG('a','v','s','s'), mov_read_extradata },
3045 { MKTAG('c','h','p','l'), mov_read_chpl },
3046 { MKTAG('c','o','6','4'), mov_read_stco },
3047 { MKTAG('c','o','l','r'), mov_read_colr },
3048 { MKTAG('c','t','t','s'), mov_read_ctts }, /* composition time to sample */
3049 { MKTAG('d','i','n','f'), mov_read_default },
3050 { MKTAG('d','r','e','f'), mov_read_dref },
3051 { MKTAG('e','d','t','s'), mov_read_default },
3052 { MKTAG('e','l','s','t'), mov_read_elst },
3053 { MKTAG('e','n','d','a'), mov_read_enda },
3054 { MKTAG('f','i','e','l'), mov_read_fiel },
3055 { MKTAG('f','t','y','p'), mov_read_ftyp },
3056 { MKTAG('g','l','b','l'), mov_read_glbl },
3057 { MKTAG('h','d','l','r'), mov_read_hdlr },
3058 { MKTAG('i','l','s','t'), mov_read_ilst },
3059 { MKTAG('j','p','2','h'), mov_read_extradata },
3060 { MKTAG('m','d','a','t'), mov_read_mdat },
3061 { MKTAG('m','d','h','d'), mov_read_mdhd },
3062 { MKTAG('m','d','i','a'), mov_read_default },
3063 { MKTAG('m','e','t','a'), mov_read_meta },
3064 { MKTAG('m','i','n','f'), mov_read_default },
3065 { MKTAG('m','o','o','f'), mov_read_moof },
3066 { MKTAG('m','o','o','v'), mov_read_moov },
3067 { MKTAG('m','v','e','x'), mov_read_default },
3068 { MKTAG('m','v','h','d'), mov_read_mvhd },
3069 { MKTAG('S','M','I',' '), mov_read_smi }, /* Sorenson extension ??? */
3070 { MKTAG('a','l','a','c'), mov_read_extradata }, /* alac specific atom */
3071 { MKTAG('a','v','c','C'), mov_read_glbl },
3072 { MKTAG('p','a','s','p'), mov_read_pasp },
3073 { MKTAG('s','t','b','l'), mov_read_default },
3074 { MKTAG('s','t','c','o'), mov_read_stco },
3075 { MKTAG('s','t','p','s'), mov_read_stps },
3076 { MKTAG('s','t','r','f'), mov_read_strf },
3077 { MKTAG('s','t','s','c'), mov_read_stsc },
3078 { MKTAG('s','t','s','d'), mov_read_stsd }, /* sample description */
3079 { MKTAG('s','t','s','s'), mov_read_stss }, /* sync sample */
3080 { MKTAG('s','t','s','z'), mov_read_stsz }, /* sample size */
3081 { MKTAG('s','t','t','s'), mov_read_stts },
3082 { MKTAG('s','t','z','2'), mov_read_stsz }, /* compact sample size */
3083 { MKTAG('t','k','h','d'), mov_read_tkhd }, /* track header */
3084 { MKTAG('t','f','d','t'), mov_read_tfdt },
3085 { MKTAG('t','f','h','d'), mov_read_tfhd }, /* track fragment header */
3086 { MKTAG('t','r','a','k'), mov_read_trak },
3087 { MKTAG('t','r','a','f'), mov_read_default },
3088 { MKTAG('t','r','e','f'), mov_read_default },
3089 { MKTAG('c','h','a','p'), mov_read_chap },
3090 { MKTAG('t','r','e','x'), mov_read_trex },
3091 { MKTAG('t','r','u','n'), mov_read_trun },
3092 { MKTAG('u','d','t','a'), mov_read_default },
3093 { MKTAG('w','a','v','e'), mov_read_wave },
3094 { MKTAG('e','s','d','s'), mov_read_esds },
3095 { MKTAG('d','a','c','3'), mov_read_dac3 }, /* AC-3 info */
3096 { MKTAG('d','e','c','3'), mov_read_dec3 }, /* EAC-3 info */
3097 { MKTAG('w','i','d','e'), mov_read_wide }, /* place holder */
3098 { MKTAG('w','f','e','x'), mov_read_wfex },
3099 { MKTAG('c','m','o','v'), mov_read_cmov },
3100 { MKTAG('c','h','a','n'), mov_read_chan }, /* channel layout */
3101 { MKTAG('d','v','c','1'), mov_read_dvc1 },
3102 { MKTAG('s','b','g','p'), mov_read_sbgp },
3103 { MKTAG('h','v','c','C'), mov_read_glbl },
3104 { MKTAG('-','-','-','-'), mov_read_custom },
3105 { 0, NULL }
3106 };
3107
3108 static int mov_read_default(MOVContext *c, AVIOContext *pb, MOVAtom atom)
3109 {
3110     int64_t total_size = 0;
3111     MOVAtom a;
3112     int i;
3113
3114     if (atom.size < 0)
3115         atom.size = INT64_MAX;
3116     while (total_size + 8 < atom.size && !pb->eof_reached) {
3117         int (*parse)(MOVContext*, AVIOContext*, MOVAtom) = NULL;
3118         a.size = atom.size;
3119         a.type=0;
3120         if (atom.size >= 8) {
3121             a.size = avio_rb32(pb);
3122             a.type = avio_rl32(pb);
3123         }
3124         av_log(c->fc, AV_LOG_TRACE, "type: %08x '%.4s' parent:'%.4s' sz: %"PRId64" %"PRId64" %"PRId64"\n",
3125                 a.type, (char*)&a.type, (char*)&atom.type, a.size, total_size, atom.size);
3126         total_size += 8;
3127         if (a.size == 1) { /* 64 bit extended size */
3128             a.size = avio_rb64(pb) - 8;
3129             total_size += 8;
3130         }
3131         if (a.size == 0) {
3132             a.size = atom.size - total_size;
3133             if (a.size <= 8)
3134                 break;
3135         }
3136         a.size -= 8;
3137         if (a.size < 0)
3138             break;
3139         a.size = FFMIN(a.size, atom.size - total_size);
3140
3141         for (i = 0; mov_default_parse_table[i].type; i++)
3142             if (mov_default_parse_table[i].type == a.type) {
3143                 parse = mov_default_parse_table[i].parse;
3144                 break;
3145             }
3146
3147         // container is user data
3148         if (!parse && (atom.type == MKTAG('u','d','t','a') ||
3149                        atom.type == MKTAG('i','l','s','t')))
3150             parse = mov_read_udta_string;
3151
3152         if (!parse) { /* skip leaf atoms data */
3153             avio_skip(pb, a.size);
3154         } else {
3155             int64_t start_pos = avio_tell(pb);
3156             int64_t left;
3157             int err = parse(c, pb, a);
3158             if (err < 0)
3159                 return err;
3160             if (c->found_moov && c->found_mdat &&
3161                 ((!pb->seekable || c->fc->flags & AVFMT_FLAG_IGNIDX) ||
3162                  start_pos + a.size == avio_size(pb))) {
3163                 if (!pb->seekable || c->fc->flags & AVFMT_FLAG_IGNIDX)
3164                     c->next_root_atom = start_pos + a.size;
3165                 return 0;
3166             }
3167             left = a.size - avio_tell(pb) + start_pos;
3168             if (left > 0) /* skip garbage at atom end */
3169                 avio_skip(pb, left);
3170             else if (left < 0) {
3171                 av_log(c->fc, AV_LOG_WARNING,
3172                        "overread end of atom '%.4s' by %"PRId64" bytes\n",
3173                        (char*)&a.type, -left);
3174                 avio_seek(pb, left, SEEK_CUR);
3175             }
3176         }
3177
3178         total_size += a.size;
3179     }
3180
3181     if (total_size < atom.size && atom.size < 0x7ffff)
3182         avio_skip(pb, atom.size - total_size);
3183
3184     return 0;
3185 }
3186
3187 static int mov_probe(AVProbeData *p)
3188 {
3189     unsigned int offset;
3190     uint32_t tag;
3191     int score = 0;
3192
3193     /* check file header */
3194     offset = 0;
3195     for (;;) {
3196         /* ignore invalid offset */
3197         if ((offset + 8) > (unsigned int)p->buf_size)
3198             return score;
3199         tag = AV_RL32(p->buf + offset + 4);
3200         switch(tag) {
3201         /* check for obvious tags */
3202         case MKTAG('j','P',' ',' '): /* jpeg 2000 signature */
3203         case MKTAG('m','o','o','v'):
3204         case MKTAG('m','d','a','t'):
3205         case MKTAG('p','n','o','t'): /* detect movs with preview pics like ew.mov and april.mov */
3206         case MKTAG('u','d','t','a'): /* Packet Video PVAuthor adds this and a lot of more junk */
3207         case MKTAG('f','t','y','p'):
3208             return AVPROBE_SCORE_MAX;
3209         /* those are more common words, so rate then a bit less */
3210         case MKTAG('e','d','i','w'): /* xdcam files have reverted first tags */
3211         case MKTAG('w','i','d','e'):
3212         case MKTAG('f','r','e','e'):
3213         case MKTAG('j','u','n','k'):
3214         case MKTAG('p','i','c','t'):
3215             return AVPROBE_SCORE_MAX - 5;
3216         case MKTAG(0x82,0x82,0x7f,0x7d):
3217         case MKTAG('s','k','i','p'):
3218         case MKTAG('u','u','i','d'):
3219         case MKTAG('p','r','f','l'):
3220             offset = AV_RB32(p->buf+offset) + offset;
3221             /* if we only find those cause probedata is too small at least rate them */
3222             score = AVPROBE_SCORE_EXTENSION;
3223             break;
3224         default:
3225             /* unrecognized tag */
3226             return score;
3227         }
3228     }
3229 }
3230
3231 // must be done after parsing all trak because there's no order requirement
3232 static void mov_read_chapters(AVFormatContext *s)
3233 {
3234     MOVContext *mov = s->priv_data;
3235     AVStream *st = NULL;
3236     MOVStreamContext *sc;
3237     int64_t cur_pos;
3238     int i;
3239
3240     for (i = 0; i < s->nb_streams; i++)
3241         if (s->streams[i]->id == mov->chapter_track) {
3242             st = s->streams[i];
3243             break;
3244         }
3245     if (!st) {
3246         av_log(s, AV_LOG_ERROR, "Referenced QT chapter track not found\n");
3247         return;
3248     }
3249
3250     st->discard = AVDISCARD_ALL;
3251     sc = st->priv_data;
3252     cur_pos = avio_tell(sc->pb);
3253
3254     for (i = 0; i < st->nb_index_entries; i++) {
3255         AVIndexEntry *sample = &st->index_entries[i];
3256         int64_t end = i+1 < st->nb_index_entries ? st->index_entries[i+1].timestamp : st->duration;
3257         uint8_t *title;
3258         uint16_t ch;
3259         int len, title_len;
3260
3261         if (avio_seek(sc->pb, sample->pos, SEEK_SET) != sample->pos) {
3262             av_log(s, AV_LOG_ERROR, "Chapter %d not found in file\n", i);
3263             goto finish;
3264         }
3265
3266         // the first two bytes are the length of the title
3267         len = avio_rb16(sc->pb);
3268         if (len > sample->size-2)
3269             continue;
3270         title_len = 2*len + 1;
3271         if (!(title = av_mallocz(title_len)))
3272             goto finish;
3273
3274         // The samples could theoretically be in any encoding if there's an encd
3275         // atom following, but in practice are only utf-8 or utf-16, distinguished
3276         // instead by the presence of a BOM
3277         if (!len) {
3278             title[0] = 0;
3279         } else {
3280             ch = avio_rb16(sc->pb);
3281             if (ch == 0xfeff)
3282                 avio_get_str16be(sc->pb, len, title, title_len);
3283             else if (ch == 0xfffe)
3284                 avio_get_str16le(sc->pb, len, title, title_len);
3285             else {
3286                 AV_WB16(title, ch);
3287                 if (len == 1 || len == 2)
3288                     title[len] = 0;
3289                 else
3290                     avio_get_str(sc->pb, len - 2, title + 2, title_len - 2);
3291             }
3292         }
3293
3294         avpriv_new_chapter(s, i, st->time_base, sample->timestamp, end, title);
3295         av_freep(&title);
3296     }
3297 finish:
3298     avio_seek(sc->pb, cur_pos, SEEK_SET);
3299 }
3300
3301 static int mov_read_close(AVFormatContext *s)
3302 {
3303     MOVContext *mov = s->priv_data;
3304     int i, j;
3305
3306     for (i = 0; i < s->nb_streams; i++) {
3307         AVStream *st = s->streams[i];
3308         MOVStreamContext *sc = st->priv_data;
3309
3310         av_freep(&sc->ctts_data);
3311         for (j = 0; j < sc->drefs_count; j++) {
3312             av_freep(&sc->drefs[j].path);
3313             av_freep(&sc->drefs[j].dir);
3314         }
3315         av_freep(&sc->drefs);
3316         if (sc->pb && sc->pb != s->pb)
3317             avio_close(sc->pb);
3318
3319         av_freep(&sc->chunk_offsets);
3320         av_freep(&sc->stsc_data);
3321         av_freep(&sc->sample_sizes);
3322         av_freep(&sc->keyframes);
3323         av_freep(&sc->stts_data);
3324         av_freep(&sc->stps_data);
3325         av_freep(&sc->rap_group);
3326         av_freep(&sc->display_matrix);
3327     }
3328
3329     if (mov->dv_demux) {
3330         avformat_free_context(mov->dv_fctx);
3331         mov->dv_fctx = NULL;
3332     }
3333
3334     av_freep(&mov->trex_data);
3335
3336     return 0;
3337 }
3338
3339 static int mov_read_header(AVFormatContext *s)
3340 {
3341     MOVContext *mov = s->priv_data;
3342     AVIOContext *pb = s->pb;
3343     int err;
3344     MOVAtom atom = { AV_RL32("root") };
3345     int i;
3346
3347     mov->fc = s;
3348     /* .mov and .mp4 aren't streamable anyway (only progressive download if moov is before mdat) */
3349     if (pb->seekable)
3350         atom.size = avio_size(pb);
3351     else
3352         atom.size = INT64_MAX;
3353
3354     /* check MOV header */
3355     if ((err = mov_read_default(mov, pb, atom)) < 0) {
3356         av_log(s, AV_LOG_ERROR, "error reading header: %d\n", err);
3357         mov_read_close(s);
3358         return err;
3359     }
3360     if (!mov->found_moov) {
3361         av_log(s, AV_LOG_ERROR, "moov atom not found\n");
3362         mov_read_close(s);
3363         return AVERROR_INVALIDDATA;
3364     }
3365     av_log(mov->fc, AV_LOG_TRACE, "on_parse_exit_offset=%"PRId64"\n", avio_tell(pb));
3366
3367     if (pb->seekable && mov->chapter_track > 0)
3368         mov_read_chapters(s);
3369
3370     for (i = 0; i < s->nb_streams; i++) {
3371         AVStream *st = s->streams[i];
3372         MOVStreamContext *sc = st->priv_data;
3373
3374         if (st->codec->codec_type == AVMEDIA_TYPE_SUBTITLE) {
3375             if (st->codec->width <= 0 || st->codec->height <= 0) {
3376                 st->codec->width  = sc->width;
3377                 st->codec->height = sc->height;
3378             }
3379             if (st->codec->codec_id == AV_CODEC_ID_DVD_SUBTITLE) {
3380                 if ((err = mov_rewrite_dvd_sub_extradata(st)) < 0)
3381                     return err;
3382             }
3383         }
3384     }
3385
3386     if (mov->trex_data) {
3387         for (i = 0; i < s->nb_streams; i++) {
3388             AVStream *st = s->streams[i];
3389             MOVStreamContext *sc = st->priv_data;
3390             if (st->duration > 0)
3391                 st->codec->bit_rate = sc->data_size * 8 * sc->time_scale / st->duration;
3392         }
3393     }
3394
3395     for (i = 0; i < s->nb_streams; i++) {
3396         AVStream *st = s->streams[i];
3397         MOVStreamContext *sc = st->priv_data;
3398
3399         switch (st->codec->codec_type) {
3400         case AVMEDIA_TYPE_AUDIO:
3401             err = ff_replaygain_export(st, s->metadata);
3402             if (err < 0) {
3403                 mov_read_close(s);
3404                 return err;
3405             }
3406             break;
3407         case AVMEDIA_TYPE_VIDEO:
3408             if (sc->display_matrix) {
3409                 AVPacketSideData *sd, *tmp;
3410
3411                 tmp = av_realloc_array(st->side_data,
3412                                        st->nb_side_data + 1, sizeof(*tmp));
3413                 if (!tmp)
3414                     return AVERROR(ENOMEM);
3415
3416                 st->side_data = tmp;
3417                 st->nb_side_data++;
3418
3419                 sd = &st->side_data[st->nb_side_data - 1];
3420                 sd->type = AV_PKT_DATA_DISPLAYMATRIX;
3421                 sd->size = sizeof(int32_t) * 9;
3422                 sd->data = (uint8_t*)sc->display_matrix;
3423                 sc->display_matrix = NULL;
3424             }
3425             break;
3426         }
3427     }
3428
3429     return 0;
3430 }
3431
3432 static AVIndexEntry *mov_find_next_sample(AVFormatContext *s, AVStream **st)
3433 {
3434     AVIndexEntry *sample = NULL;
3435     int64_t best_dts = INT64_MAX;
3436     int i;
3437     for (i = 0; i < s->nb_streams; i++) {
3438         AVStream *avst = s->streams[i];
3439         MOVStreamContext *msc = avst->priv_data;
3440         if (msc->pb && msc->current_sample < avst->nb_index_entries) {
3441             AVIndexEntry *current_sample = &avst->index_entries[msc->current_sample];
3442             int64_t dts = av_rescale(current_sample->timestamp, AV_TIME_BASE, msc->time_scale);
3443             av_log(s, AV_LOG_TRACE, "stream %d, sample %d, dts %"PRId64"\n", i, msc->current_sample, dts);
3444             if (!sample || (!s->pb->seekable && current_sample->pos < sample->pos) ||
3445                 (s->pb->seekable &&
3446                  ((msc->pb != s->pb && dts < best_dts) || (msc->pb == s->pb &&
3447                  ((FFABS(best_dts - dts) <= AV_TIME_BASE && current_sample->pos < sample->pos) ||
3448                   (FFABS(best_dts - dts) > AV_TIME_BASE && dts < best_dts)))))) {
3449                 sample = current_sample;
3450                 best_dts = dts;
3451                 *st = avst;
3452             }
3453         }
3454     }
3455     return sample;
3456 }
3457
3458 static int mov_read_packet(AVFormatContext *s, AVPacket *pkt)
3459 {
3460     MOVContext *mov = s->priv_data;
3461     MOVStreamContext *sc;
3462     AVIndexEntry *sample;
3463     AVStream *st = NULL;
3464     int ret;
3465  retry:
3466     sample = mov_find_next_sample(s, &st);
3467     if (!sample) {
3468         mov->found_mdat = 0;
3469         if (!mov->next_root_atom)
3470             return AVERROR_EOF;
3471         avio_seek(s->pb, mov->next_root_atom, SEEK_SET);
3472         mov->next_root_atom = 0;
3473         if (mov_read_default(mov, s->pb, (MOVAtom){ AV_RL32("root"), INT64_MAX }) < 0 ||
3474             s->pb->eof_reached)
3475             return AVERROR_EOF;
3476         av_log(s, AV_LOG_TRACE, "read fragments, offset 0x%"PRIx64"\n", avio_tell(s->pb));
3477         goto retry;
3478     }
3479     sc = st->priv_data;
3480     /* must be done just before reading, to avoid infinite loop on sample */
3481     sc->current_sample++;
3482
3483     if (st->discard != AVDISCARD_ALL) {
3484         if (avio_seek(sc->pb, sample->pos, SEEK_SET) != sample->pos) {
3485             av_log(mov->fc, AV_LOG_ERROR, "stream %d, offset 0x%"PRIx64": partial file\n",
3486                    sc->ffindex, sample->pos);
3487             return AVERROR_INVALIDDATA;
3488         }
3489         ret = av_get_packet(sc->pb, pkt, sample->size);
3490         if (ret < 0)
3491             return ret;
3492         if (sc->has_palette) {
3493             uint8_t *pal;
3494
3495             pal = av_packet_new_side_data(pkt, AV_PKT_DATA_PALETTE, AVPALETTE_SIZE);
3496             if (!pal) {
3497                 av_log(mov->fc, AV_LOG_ERROR, "Cannot append palette to packet\n");
3498             } else {
3499                 memcpy(pal, sc->palette, AVPALETTE_SIZE);
3500                 sc->has_palette = 0;
3501             }
3502         }
3503 #if CONFIG_DV_DEMUXER
3504         if (mov->dv_demux && sc->dv_audio_container) {
3505             avpriv_dv_produce_packet(mov->dv_demux, pkt, pkt->data, pkt->size);
3506             av_free(pkt->data);
3507             pkt->size = 0;
3508             ret = avpriv_dv_get_packet(mov->dv_demux, pkt);
3509             if (ret < 0)
3510                 return ret;
3511         }
3512 #endif
3513     }
3514
3515     pkt->stream_index = sc->ffindex;
3516     pkt->dts = sample->timestamp;
3517     if (sc->ctts_data && sc->ctts_index < sc->ctts_count) {
3518         pkt->pts = pkt->dts + sc->dts_shift + sc->ctts_data[sc->ctts_index].duration;
3519         /* update ctts context */
3520         sc->ctts_sample++;
3521         if (sc->ctts_index < sc->ctts_count &&
3522             sc->ctts_data[sc->ctts_index].count == sc->ctts_sample) {
3523             sc->ctts_index++;
3524             sc->ctts_sample = 0;
3525         }
3526         if (sc->wrong_dts)
3527             pkt->dts = AV_NOPTS_VALUE;
3528     } else {
3529         int64_t next_dts = (sc->current_sample < st->nb_index_entries) ?
3530             st->index_entries[sc->current_sample].timestamp : st->duration;
3531         pkt->duration = next_dts - pkt->dts;
3532         pkt->pts = pkt->dts;
3533     }
3534     if (st->discard == AVDISCARD_ALL)
3535         goto retry;
3536     pkt->flags |= sample->flags & AVINDEX_KEYFRAME ? AV_PKT_FLAG_KEY : 0;
3537     pkt->pos = sample->pos;
3538     av_log(s, AV_LOG_TRACE, "stream %d, pts %"PRId64", dts %"PRId64", pos 0x%"PRIx64", duration %"PRId64"\n",
3539             pkt->stream_index, pkt->pts, pkt->dts, pkt->pos, pkt->duration);
3540     return 0;
3541 }
3542
3543 static int mov_seek_stream(AVFormatContext *s, AVStream *st, int64_t timestamp, int flags)
3544 {
3545     MOVStreamContext *sc = st->priv_data;
3546     int sample, time_sample;
3547     int i;
3548
3549     sample = av_index_search_timestamp(st, timestamp, flags);
3550     av_log(s, AV_LOG_TRACE, "stream %d, timestamp %"PRId64", sample %d\n", st->index, timestamp, sample);
3551     if (sample < 0 && st->nb_index_entries && timestamp < st->index_entries[0].timestamp)
3552         sample = 0;
3553     if (sample < 0) /* not sure what to do */
3554         return AVERROR_INVALIDDATA;
3555     sc->current_sample = sample;
3556     av_log(s, AV_LOG_TRACE, "stream %d, found sample %d\n", st->index, sc->current_sample);
3557     /* adjust ctts index */
3558     if (sc->ctts_data) {
3559         time_sample = 0;
3560         for (i = 0; i < sc->ctts_count; i++) {
3561             int next = time_sample + sc->ctts_data[i].count;
3562             if (next > sc->current_sample) {
3563                 sc->ctts_index = i;
3564                 sc->ctts_sample = sc->current_sample - time_sample;
3565                 break;
3566             }
3567             time_sample = next;
3568         }
3569     }
3570     return sample;
3571 }
3572
3573 static int mov_read_seek(AVFormatContext *s, int stream_index, int64_t sample_time, int flags)
3574 {
3575     MOVContext *mc = s->priv_data;
3576     AVStream *st;
3577     int sample;
3578     int i;
3579
3580     if (stream_index >= s->nb_streams)
3581         return AVERROR_INVALIDDATA;
3582     if (sample_time < 0)
3583         sample_time = 0;
3584
3585     st = s->streams[stream_index];
3586     sample = mov_seek_stream(s, st, sample_time, flags);
3587     if (sample < 0)
3588         return sample;
3589
3590     if (mc->seek_individually) {
3591         /* adjust seek timestamp to found sample timestamp */
3592         int64_t seek_timestamp = st->index_entries[sample].timestamp;
3593
3594         for (i = 0; i < s->nb_streams; i++) {
3595             int64_t timestamp;
3596             st = s->streams[i];
3597             if (stream_index == i)
3598                 continue;
3599
3600             timestamp = av_rescale_q(seek_timestamp, s->streams[stream_index]->time_base, st->time_base);
3601             mov_seek_stream(s, st, timestamp, flags);
3602         }
3603     } else {
3604         for (i = 0; i < s->nb_streams; i++) {
3605             MOVStreamContext *sc;
3606             st = s->streams[i];
3607             sc = st->priv_data;
3608             sc->current_sample = 0;
3609         }
3610         while (1) {
3611             MOVStreamContext *sc;
3612             AVIndexEntry *entry = mov_find_next_sample(s, &st);
3613             if (!entry)
3614                 return AVERROR_INVALIDDATA;
3615             sc = st->priv_data;
3616             if (sc->ffindex == stream_index && sc->current_sample == sample)
3617                 break;
3618             sc->current_sample++;
3619         }
3620     }
3621     return 0;
3622 }
3623
3624 #define OFFSET(x) offsetof(MOVContext, x)
3625 #define FLAGS AV_OPT_FLAG_VIDEO_PARAM | AV_OPT_FLAG_DECODING_PARAM
3626 static const AVOption mov_options[] = {
3627     {"seek_streams_individually",
3628         "Seek each stream individually to the to the closest point",
3629         OFFSET(seek_individually), AV_OPT_TYPE_INT, { .i64 = 1 },
3630         0, 1, FLAGS},
3631     { "export_all", "Export unrecognized metadata entries", OFFSET(export_all),
3632         AV_OPT_TYPE_INT, { .i64 = 0 }, 0, 1, .flags = FLAGS },
3633     { "export_xmp", "Export full XMP metadata", OFFSET(export_xmp),
3634         AV_OPT_TYPE_INT, { .i64 = 0 }, 0, 1, .flags = FLAGS },
3635     { NULL },
3636 };
3637
3638 static const AVClass mov_class = {
3639     .class_name = "mov,mp4,m4a,3gp,3g2,mj2",
3640     .item_name  = av_default_item_name,
3641     .option     = mov_options,
3642     .version    = LIBAVUTIL_VERSION_INT,
3643 };
3644
3645 AVInputFormat ff_mov_demuxer = {
3646     .name           = "mov,mp4,m4a,3gp,3g2,mj2",
3647     .long_name      = NULL_IF_CONFIG_SMALL("QuickTime / MOV"),
3648     .priv_class     = &mov_class,
3649     .priv_data_size = sizeof(MOVContext),
3650     .extensions     = "mov,mp4,m4a,3gp,3g2,mj2",
3651     .read_probe     = mov_probe,
3652     .read_header    = mov_read_header,
3653     .read_packet    = mov_read_packet,
3654     .read_close     = mov_read_close,
3655     .read_seek      = mov_read_seek,
3656 };