]> git.sesse.net Git - ffmpeg/blob - libavformat/mov.c
Extract the pure plaintext from mov text subtitles.
[ffmpeg] / libavformat / mov.c
1 /*
2  * MOV demuxer
3  * Copyright (c) 2001 Fabrice Bellard.
4  *
5  * This file is part of FFmpeg.
6  *
7  * FFmpeg is free software; you can redistribute it and/or
8  * modify it under the terms of the GNU Lesser General Public
9  * License as published by the Free Software Foundation; either
10  * version 2.1 of the License, or (at your option) any later version.
11  *
12  * FFmpeg is distributed in the hope that it will be useful,
13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
15  * Lesser General Public License for more details.
16  *
17  * You should have received a copy of the GNU Lesser General Public
18  * License along with FFmpeg; if not, write to the Free Software
19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
20  */
21
22 #include <limits.h>
23
24 //#define DEBUG
25
26 #include "avformat.h"
27 #include "riff.h"
28 #include "isom.h"
29 #include "dv.h"
30
31 #ifdef CONFIG_ZLIB
32 #include <zlib.h>
33 #endif
34
35 /*
36  * First version by Francois Revol revol@free.fr
37  * Seek function by Gael Chardon gael.dev@4now.net
38  *
39  * Features and limitations:
40  * - reads most of the QT files I have (at least the structure),
41  *   Sample QuickTime files with mp3 audio can be found at: http://www.3ivx.com/showcase.html
42  * - the code is quite ugly... maybe I won't do it recursive next time :-)
43  *
44  * Funny I didn't know about http://sourceforge.net/projects/qt-ffmpeg/
45  * when coding this :) (it's a writer anyway)
46  *
47  * Reference documents:
48  * http://www.geocities.com/xhelmboyx/quicktime/formats/qtm-layout.txt
49  * Apple:
50  *  http://developer.apple.com/documentation/QuickTime/QTFF/
51  *  http://developer.apple.com/documentation/QuickTime/QTFF/qtff.pdf
52  * QuickTime is a trademark of Apple (AFAIK :))
53  */
54
55 #include "qtpalette.h"
56
57
58 #undef NDEBUG
59 #include <assert.h>
60
61 /* the QuickTime file format is quite convoluted...
62  * it has lots of index tables, each indexing something in another one...
63  * Here we just use what is needed to read the chunks
64  */
65
66 typedef struct {
67     int first;
68     int count;
69     int id;
70 } MOV_stsc_t;
71
72 typedef struct {
73     uint32_t type;
74     int64_t offset;
75     int64_t size; /* total size (excluding the size and type fields) */
76 } MOV_atom_t;
77
78 typedef struct {
79     offset_t offset;
80     int64_t size;
81 } MOV_mdat_t;
82
83 struct MOVParseTableEntry;
84
85 typedef struct MOVStreamContext {
86     int ffindex; /* the ffmpeg stream id */
87     int next_chunk;
88     unsigned int chunk_count;
89     int64_t *chunk_offsets;
90     unsigned int stts_count;
91     MOV_stts_t *stts_data;
92     unsigned int ctts_count;
93     MOV_stts_t *ctts_data;
94     unsigned int edit_count; /* number of 'edit' (elst atom) */
95     unsigned int sample_to_chunk_sz;
96     MOV_stsc_t *sample_to_chunk;
97     int sample_to_ctime_index;
98     int sample_to_ctime_sample;
99     unsigned int sample_size;
100     unsigned int sample_count;
101     int *sample_sizes;
102     unsigned int keyframe_count;
103     int *keyframes;
104     int time_scale;
105     int time_rate;
106     int current_sample;
107     unsigned int bytes_per_frame;
108     unsigned int samples_per_frame;
109     int dv_audio_container;
110     int pseudo_stream_id;
111 } MOVStreamContext;
112
113 typedef struct MOVContext {
114     AVFormatContext *fc;
115     int time_scale;
116     int64_t duration; /* duration of the longest track */
117     int found_moov; /* when both 'moov' and 'mdat' sections has been found */
118     int found_mdat; /* we suppose we have enough data to read the file */
119     AVPaletteControl palette_control;
120     MOV_mdat_t *mdat_list;
121     int mdat_count;
122     DVDemuxContext *dv_demux;
123     AVFormatContext *dv_fctx;
124     int isom; /* 1 if file is ISO Media (mp4/3gp) */
125 } MOVContext;
126
127
128 /* XXX: it's the first time I make a recursive parser I think... sorry if it's ugly :P */
129
130 /* those functions parse an atom */
131 /* return code:
132  1: found what I wanted, exit
133  0: continue to parse next atom
134  -1: error occured, exit
135  */
136 /* links atom IDs to parse functions */
137 typedef struct MOVParseTableEntry {
138     uint32_t type;
139     int (*parse)(MOVContext *ctx, ByteIOContext *pb, MOV_atom_t atom);
140 } MOVParseTableEntry;
141
142 static const MOVParseTableEntry mov_default_parse_table[];
143
144 static int mov_read_default(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
145 {
146     int64_t total_size = 0;
147     MOV_atom_t a;
148     int i;
149     int err = 0;
150
151     a.offset = atom.offset;
152
153     if (atom.size < 0)
154         atom.size = INT64_MAX;
155     while(((total_size + 8) < atom.size) && !url_feof(pb) && !err) {
156         a.size = atom.size;
157         a.type=0;
158         if(atom.size >= 8) {
159             a.size = get_be32(pb);
160             a.type = get_le32(pb);
161         }
162         total_size += 8;
163         a.offset += 8;
164         dprintf(c->fc, "type: %08x  %.4s  sz: %"PRIx64"  %"PRIx64"   %"PRIx64"\n",
165                 a.type, (char*)&a.type, a.size, atom.size, total_size);
166         if (a.size == 1) { /* 64 bit extended size */
167             a.size = get_be64(pb) - 8;
168             a.offset += 8;
169             total_size += 8;
170         }
171         if (a.size == 0) {
172             a.size = atom.size - total_size;
173             if (a.size <= 8)
174                 break;
175         }
176         a.size -= 8;
177         if(a.size < 0)
178             break;
179         a.size = FFMIN(a.size, atom.size - total_size);
180
181         for (i = 0; mov_default_parse_table[i].type != 0
182              && mov_default_parse_table[i].type != a.type; i++)
183             /* empty */;
184
185         if (mov_default_parse_table[i].type == 0) { /* skip leaf atoms data */
186             url_fskip(pb, a.size);
187         } else {
188             offset_t start_pos = url_ftell(pb);
189             int64_t left;
190             err = mov_default_parse_table[i].parse(c, pb, a);
191             if (c->found_moov && c->found_mdat)
192                 break;
193             left = a.size - url_ftell(pb) + start_pos;
194             if (left > 0) /* skip garbage at atom end */
195                 url_fskip(pb, left);
196         }
197
198         a.offset += a.size;
199         total_size += a.size;
200     }
201
202     if (!err && total_size < atom.size && atom.size < 0x7ffff) {
203         url_fskip(pb, atom.size - total_size);
204     }
205
206     return err;
207 }
208
209 static int mov_read_hdlr(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
210 {
211     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
212     uint32_t type;
213     uint32_t ctype;
214
215     get_byte(pb); /* version */
216     get_byte(pb); get_byte(pb); get_byte(pb); /* flags */
217
218     /* component type */
219     ctype = get_le32(pb);
220     type = get_le32(pb); /* component subtype */
221
222     dprintf(c->fc, "ctype= %c%c%c%c (0x%08x)\n", *((char *)&ctype), ((char *)&ctype)[1],
223             ((char *)&ctype)[2], ((char *)&ctype)[3], (int) ctype);
224     dprintf(c->fc, "stype= %c%c%c%c\n",
225             *((char *)&type), ((char *)&type)[1], ((char *)&type)[2], ((char *)&type)[3]);
226     if(!ctype)
227         c->isom = 1;
228     if(type == MKTAG('v', 'i', 'd', 'e'))
229         st->codec->codec_type = CODEC_TYPE_VIDEO;
230     else if(type == MKTAG('s', 'o', 'u', 'n'))
231         st->codec->codec_type = CODEC_TYPE_AUDIO;
232     else if(type == MKTAG('m', '1', 'a', ' '))
233         st->codec->codec_id = CODEC_ID_MP2;
234     else if(type == MKTAG('s', 'u', 'b', 'p')) {
235         st->codec->codec_type = CODEC_TYPE_SUBTITLE;
236         st->codec->codec_id = CODEC_ID_DVD_SUBTITLE;
237     }
238     get_be32(pb); /* component  manufacture */
239     get_be32(pb); /* component flags */
240     get_be32(pb); /* component flags mask */
241
242     if(atom.size <= 24)
243         return 0; /* nothing left to read */
244
245     url_fskip(pb, atom.size - (url_ftell(pb) - atom.offset));
246     return 0;
247 }
248
249 static int mp4_read_descr_len(ByteIOContext *pb)
250 {
251     int len = 0;
252     int count = 4;
253     while (count--) {
254         int c = get_byte(pb);
255         len = (len << 7) | (c & 0x7f);
256         if (!(c & 0x80))
257             break;
258     }
259     return len;
260 }
261
262 static int mp4_read_descr(MOVContext *c, ByteIOContext *pb, int *tag)
263 {
264     int len;
265     *tag = get_byte(pb);
266     len = mp4_read_descr_len(pb);
267     dprintf(c->fc, "MPEG4 description: tag=0x%02x len=%d\n", *tag, len);
268     return len;
269 }
270
271 #define MP4ESDescrTag                   0x03
272 #define MP4DecConfigDescrTag            0x04
273 #define MP4DecSpecificDescrTag          0x05
274
275 static int mov_read_esds(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
276 {
277     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
278     int tag, len;
279
280     get_be32(pb); /* version + flags */
281     len = mp4_read_descr(c, pb, &tag);
282     if (tag == MP4ESDescrTag) {
283         get_be16(pb); /* ID */
284         get_byte(pb); /* priority */
285     } else
286         get_be16(pb); /* ID */
287
288     len = mp4_read_descr(c, pb, &tag);
289     if (tag == MP4DecConfigDescrTag) {
290         int object_type_id = get_byte(pb);
291         get_byte(pb); /* stream type */
292         get_be24(pb); /* buffer size db */
293         get_be32(pb); /* max bitrate */
294         get_be32(pb); /* avg bitrate */
295
296         st->codec->codec_id= codec_get_id(ff_mp4_obj_type, object_type_id);
297         dprintf(c->fc, "esds object type id %d\n", object_type_id);
298         len = mp4_read_descr(c, pb, &tag);
299         if (tag == MP4DecSpecificDescrTag) {
300             dprintf(c->fc, "Specific MPEG4 header len=%d\n", len);
301             st->codec->extradata = av_mallocz(len + FF_INPUT_BUFFER_PADDING_SIZE);
302             if (st->codec->extradata) {
303                 get_buffer(pb, st->codec->extradata, len);
304                 st->codec->extradata_size = len;
305                 /* from mplayer */
306                 if ((*st->codec->extradata >> 3) == 29) {
307                     st->codec->codec_id = CODEC_ID_MP3ON4;
308                 }
309             }
310         }
311     }
312     return 0;
313 }
314
315 /* this atom contains actual media data */
316 static int mov_read_mdat(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
317 {
318     if(atom.size == 0) /* wrong one (MP4) */
319         return 0;
320     c->mdat_list = av_realloc(c->mdat_list, (c->mdat_count + 1) * sizeof(*c->mdat_list));
321     c->mdat_list[c->mdat_count].offset = atom.offset;
322     c->mdat_list[c->mdat_count].size = atom.size;
323     c->mdat_count++;
324     c->found_mdat=1;
325     if(c->found_moov)
326         return 1; /* found both, just go */
327     url_fskip(pb, atom.size);
328     return 0; /* now go for moov */
329 }
330
331 static int mov_read_ftyp(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
332 {
333     uint32_t type = get_le32(pb);
334
335     if (type != MKTAG('q','t',' ',' '))
336         c->isom = 1;
337     av_log(c->fc, AV_LOG_DEBUG, "ISO: File Type Major Brand: %.4s\n",(char *)&type);
338     get_be32(pb); /* minor version */
339     url_fskip(pb, atom.size - 8);
340     return 0;
341 }
342
343 /* this atom should contain all header atoms */
344 static int mov_read_moov(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
345 {
346     if (mov_read_default(c, pb, atom) < 0)
347         return -1;
348     /* we parsed the 'moov' atom, we can terminate the parsing as soon as we find the 'mdat' */
349     /* so we don't parse the whole file if over a network */
350     c->found_moov=1;
351     if(c->found_mdat)
352         return 1; /* found both, just go */
353     return 0; /* now go for mdat */
354 }
355
356
357 static int mov_read_mdhd(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
358 {
359     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
360     MOVStreamContext *sc = st->priv_data;
361     int version = get_byte(pb);
362     int lang;
363
364     if (version > 1)
365         return 1; /* unsupported */
366
367     get_byte(pb); get_byte(pb);
368     get_byte(pb); /* flags */
369
370     if (version == 1) {
371         get_be64(pb);
372         get_be64(pb);
373     } else {
374         get_be32(pb); /* creation time */
375         get_be32(pb); /* modification time */
376     }
377
378     sc->time_scale = get_be32(pb);
379     st->duration = (version == 1) ? get_be64(pb) : get_be32(pb); /* duration */
380
381     lang = get_be16(pb); /* language */
382     ff_mov_lang_to_iso639(lang, st->language);
383     get_be16(pb); /* quality */
384
385     return 0;
386 }
387
388 static int mov_read_mvhd(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
389 {
390     int version = get_byte(pb); /* version */
391     get_byte(pb); get_byte(pb); get_byte(pb); /* flags */
392
393     if (version == 1) {
394         get_be64(pb);
395         get_be64(pb);
396     } else {
397         get_be32(pb); /* creation time */
398         get_be32(pb); /* modification time */
399     }
400     c->time_scale = get_be32(pb); /* time scale */
401
402     dprintf(c->fc, "time scale = %i\n", c->time_scale);
403
404     c->duration = (version == 1) ? get_be64(pb) : get_be32(pb); /* duration */
405     get_be32(pb); /* preferred scale */
406
407     get_be16(pb); /* preferred volume */
408
409     url_fskip(pb, 10); /* reserved */
410
411     url_fskip(pb, 36); /* display matrix */
412
413     get_be32(pb); /* preview time */
414     get_be32(pb); /* preview duration */
415     get_be32(pb); /* poster time */
416     get_be32(pb); /* selection time */
417     get_be32(pb); /* selection duration */
418     get_be32(pb); /* current time */
419     get_be32(pb); /* next track ID */
420
421     return 0;
422 }
423
424 static int mov_read_smi(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
425 {
426     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
427
428     if((uint64_t)atom.size > (1<<30))
429         return -1;
430
431     // currently SVQ3 decoder expect full STSD header - so let's fake it
432     // this should be fixed and just SMI header should be passed
433     av_free(st->codec->extradata);
434     st->codec->extradata_size = 0x5a + atom.size;
435     st->codec->extradata = av_mallocz(st->codec->extradata_size + FF_INPUT_BUFFER_PADDING_SIZE);
436
437     if (st->codec->extradata) {
438         memcpy(st->codec->extradata, "SVQ3", 4); // fake
439         get_buffer(pb, st->codec->extradata + 0x5a, atom.size);
440         dprintf(c->fc, "Reading SMI %"PRId64"  %s\n", atom.size, st->codec->extradata + 0x5a);
441     } else
442         url_fskip(pb, atom.size);
443
444     return 0;
445 }
446
447 static int mov_read_enda(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
448 {
449     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
450     int little_endian = get_be16(pb);
451
452     if (little_endian) {
453         switch (st->codec->codec_id) {
454         case CODEC_ID_PCM_S24BE:
455             st->codec->codec_id = CODEC_ID_PCM_S24LE;
456             break;
457         case CODEC_ID_PCM_S32BE:
458             st->codec->codec_id = CODEC_ID_PCM_S32LE;
459             break;
460         default:
461             break;
462         }
463     }
464     return 0;
465 }
466
467 /* FIXME modify qdm2/svq3/h264 decoders to take full atom as extradata */
468 static int mov_read_extradata(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
469 {
470     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
471     uint64_t size= (uint64_t)st->codec->extradata_size + atom.size + 8 + FF_INPUT_BUFFER_PADDING_SIZE;
472     uint8_t *buf;
473     if(size > INT_MAX || (uint64_t)atom.size > INT_MAX)
474         return -1;
475     buf= av_realloc(st->codec->extradata, size);
476     if(!buf)
477         return -1;
478     st->codec->extradata= buf;
479     buf+= st->codec->extradata_size;
480     st->codec->extradata_size= size - FF_INPUT_BUFFER_PADDING_SIZE;
481     AV_WB32(       buf    , atom.size + 8);
482     AV_WL32(       buf + 4, atom.type);
483     get_buffer(pb, buf + 8, atom.size);
484     return 0;
485 }
486
487 static int mov_read_wave(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
488 {
489     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
490
491     if((uint64_t)atom.size > (1<<30))
492         return -1;
493
494     if (st->codec->codec_id == CODEC_ID_QDM2) {
495         // pass all frma atom to codec, needed at least for QDM2
496         av_free(st->codec->extradata);
497         st->codec->extradata_size = atom.size;
498         st->codec->extradata = av_mallocz(st->codec->extradata_size + FF_INPUT_BUFFER_PADDING_SIZE);
499
500         if (st->codec->extradata) {
501             get_buffer(pb, st->codec->extradata, atom.size);
502         } else
503             url_fskip(pb, atom.size);
504     } else if (atom.size > 8) { /* to read frma, esds atoms */
505         if (mov_read_default(c, pb, atom) < 0)
506             return -1;
507     } else
508         url_fskip(pb, atom.size);
509     return 0;
510 }
511
512 /**
513  * This function reads atom content and puts data in extradata without tag
514  * nor size unlike mov_read_extradata.
515  */
516 static int mov_read_glbl(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
517 {
518     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
519
520     if((uint64_t)atom.size > (1<<30))
521         return -1;
522
523     av_free(st->codec->extradata);
524
525     st->codec->extradata_size = atom.size;
526     st->codec->extradata = av_mallocz(st->codec->extradata_size + FF_INPUT_BUFFER_PADDING_SIZE);
527
528     if (st->codec->extradata) {
529         get_buffer(pb, st->codec->extradata, atom.size);
530     } else
531         url_fskip(pb, atom.size);
532
533     return 0;
534 }
535
536 static int mov_read_stco(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
537 {
538     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
539     MOVStreamContext *sc = st->priv_data;
540     unsigned int i, entries;
541
542     get_byte(pb); /* version */
543     get_byte(pb); get_byte(pb); get_byte(pb); /* flags */
544
545     entries = get_be32(pb);
546
547     if(entries >= UINT_MAX/sizeof(int64_t))
548         return -1;
549
550     sc->chunk_count = entries;
551     sc->chunk_offsets = av_malloc(entries * sizeof(int64_t));
552     if (!sc->chunk_offsets)
553         return -1;
554     if (atom.type == MKTAG('s', 't', 'c', 'o')) {
555         for(i=0; i<entries; i++) {
556             sc->chunk_offsets[i] = get_be32(pb);
557         }
558     } else if (atom.type == MKTAG('c', 'o', '6', '4')) {
559         for(i=0; i<entries; i++) {
560             sc->chunk_offsets[i] = get_be64(pb);
561         }
562     } else
563         return -1;
564
565     return 0;
566 }
567
568 static int mov_read_stsd(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
569 {
570     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
571     MOVStreamContext *sc = st->priv_data;
572     int entries, frames_per_sample;
573     uint32_t format;
574     uint8_t codec_name[32];
575
576     /* for palette traversal */
577     unsigned int color_depth;
578     unsigned int color_start;
579     unsigned int color_count;
580     unsigned int color_end;
581     int color_index;
582     int color_dec;
583     int color_greyscale;
584     const uint8_t *color_table;
585     int j, pseudo_stream_id;
586     unsigned char r, g, b;
587
588     get_byte(pb); /* version */
589     get_byte(pb); get_byte(pb); get_byte(pb); /* flags */
590
591     entries = get_be32(pb);
592
593     for(pseudo_stream_id=0; pseudo_stream_id<entries; pseudo_stream_id++) { //Parsing Sample description table
594         enum CodecID id;
595         MOV_atom_t a = { 0, 0, 0 };
596         offset_t start_pos = url_ftell(pb);
597         int size = get_be32(pb); /* size */
598         format = get_le32(pb); /* data format */
599
600         get_be32(pb); /* reserved */
601         get_be16(pb); /* reserved */
602         get_be16(pb); /* index */
603
604         if (st->codec->codec_tag && st->codec->codec_tag != MKTAG('j', 'p', 'e', 'g')) {
605             /* multiple fourcc, we skip jpeg, this isnt correct, we should export it as
606                seperate AVStream but this needs a few changes in the mov demuxer, patch
607                welcome */
608             url_fskip(pb, size - (url_ftell(pb) - start_pos));
609             continue;
610         }
611         sc->pseudo_stream_id= pseudo_stream_id;
612
613         st->codec->codec_tag = format;
614         id = codec_get_id(codec_movaudio_tags, format);
615         if (id<=0 && (format&0xFFFF) == 'm' + ('s'<<8))
616             id = codec_get_id(codec_wav_tags, bswap_32(format)&0xFFFF);
617
618         if (st->codec->codec_type != CODEC_TYPE_VIDEO && id > 0) {
619             st->codec->codec_type = CODEC_TYPE_AUDIO;
620         } else if (st->codec->codec_type != CODEC_TYPE_AUDIO && /* do not overwrite codec type */
621                    format && format != MKTAG('m', 'p', '4', 's')) { /* skip old asf mpeg4 tag */
622             id = codec_get_id(codec_movvideo_tags, format);
623             if (id <= 0)
624                 id = codec_get_id(codec_bmp_tags, format);
625             if (id > 0)
626                 st->codec->codec_type = CODEC_TYPE_VIDEO;
627             else if(st->codec->codec_type == CODEC_TYPE_DATA){
628                 id = codec_get_id(ff_codec_movsubtitle_tags, format);
629                 if(id > 0)
630                     st->codec->codec_type = CODEC_TYPE_SUBTITLE;
631             }
632         }
633
634         dprintf(c->fc, "size=%d 4CC= %c%c%c%c codec_type=%d\n", size,
635                 (format >> 0) & 0xff, (format >> 8) & 0xff, (format >> 16) & 0xff,
636                 (format >> 24) & 0xff, st->codec->codec_type);
637
638         if(st->codec->codec_type==CODEC_TYPE_VIDEO) {
639             st->codec->codec_id = id;
640             get_be16(pb); /* version */
641             get_be16(pb); /* revision level */
642             get_be32(pb); /* vendor */
643             get_be32(pb); /* temporal quality */
644             get_be32(pb); /* spatial quality */
645
646             st->codec->width = get_be16(pb); /* width */
647             st->codec->height = get_be16(pb); /* height */
648
649             get_be32(pb); /* horiz resolution */
650             get_be32(pb); /* vert resolution */
651             get_be32(pb); /* data size, always 0 */
652             frames_per_sample = get_be16(pb); /* frames per samples */
653
654             dprintf(c->fc, "frames/samples = %d\n", frames_per_sample);
655
656             get_buffer(pb, codec_name, 32); /* codec name, pascal string (FIXME: true for mp4?) */
657             if (codec_name[0] <= 31) {
658                 memcpy(st->codec->codec_name, &codec_name[1],codec_name[0]);
659                 st->codec->codec_name[codec_name[0]] = 0;
660             }
661
662             st->codec->bits_per_sample = get_be16(pb); /* depth */
663             st->codec->color_table_id = get_be16(pb); /* colortable id */
664
665             /* figure out the palette situation */
666             color_depth = st->codec->bits_per_sample & 0x1F;
667             color_greyscale = st->codec->bits_per_sample & 0x20;
668
669             /* if the depth is 2, 4, or 8 bpp, file is palettized */
670             if ((color_depth == 2) || (color_depth == 4) ||
671                 (color_depth == 8)) {
672                 if (color_greyscale) {
673                     /* compute the greyscale palette */
674                     color_count = 1 << color_depth;
675                     color_index = 255;
676                     color_dec = 256 / (color_count - 1);
677                     for (j = 0; j < color_count; j++) {
678                         r = g = b = color_index;
679                         c->palette_control.palette[j] =
680                             (r << 16) | (g << 8) | (b);
681                         color_index -= color_dec;
682                         if (color_index < 0)
683                             color_index = 0;
684                     }
685                 } else if (st->codec->color_table_id & 0x08) {
686                     /* if flag bit 3 is set, use the default palette */
687                     color_count = 1 << color_depth;
688                     if (color_depth == 2)
689                         color_table = ff_qt_default_palette_4;
690                     else if (color_depth == 4)
691                         color_table = ff_qt_default_palette_16;
692                     else
693                         color_table = ff_qt_default_palette_256;
694
695                     for (j = 0; j < color_count; j++) {
696                         r = color_table[j * 4 + 0];
697                         g = color_table[j * 4 + 1];
698                         b = color_table[j * 4 + 2];
699                         c->palette_control.palette[j] =
700                             (r << 16) | (g << 8) | (b);
701                     }
702                 } else {
703                     /* load the palette from the file */
704                     color_start = get_be32(pb);
705                     color_count = get_be16(pb);
706                     color_end = get_be16(pb);
707                     if ((color_start <= 255) &&
708                         (color_end <= 255)) {
709                         for (j = color_start; j <= color_end; j++) {
710                             /* each R, G, or B component is 16 bits;
711                              * only use the top 8 bits; skip alpha bytes
712                              * up front */
713                             get_byte(pb);
714                             get_byte(pb);
715                             r = get_byte(pb);
716                             get_byte(pb);
717                             g = get_byte(pb);
718                             get_byte(pb);
719                             b = get_byte(pb);
720                             get_byte(pb);
721                             c->palette_control.palette[j] =
722                                 (r << 16) | (g << 8) | (b);
723                         }
724                     }
725                 }
726                 st->codec->palctrl = &c->palette_control;
727                 st->codec->palctrl->palette_changed = 1;
728             } else
729                 st->codec->palctrl = NULL;
730         } else if(st->codec->codec_type==CODEC_TYPE_AUDIO) {
731             int bits_per_sample;
732             uint16_t version = get_be16(pb);
733
734             st->codec->codec_id = id;
735             get_be16(pb); /* revision level */
736             get_be32(pb); /* vendor */
737
738             st->codec->channels = get_be16(pb);             /* channel count */
739             dprintf(c->fc, "audio channels %d\n", st->codec->channels);
740             st->codec->bits_per_sample = get_be16(pb);      /* sample size */
741             /* do we need to force to 16 for AMR ? */
742
743             /* handle specific s8 codec */
744             get_be16(pb); /* compression id = 0*/
745             get_be16(pb); /* packet size = 0 */
746
747             st->codec->sample_rate = ((get_be32(pb) >> 16));
748
749             switch (st->codec->codec_id) {
750             case CODEC_ID_PCM_S8:
751             case CODEC_ID_PCM_U8:
752                 if (st->codec->bits_per_sample == 16)
753                     st->codec->codec_id = CODEC_ID_PCM_S16BE;
754                 break;
755             case CODEC_ID_PCM_S16LE:
756             case CODEC_ID_PCM_S16BE:
757                 if (st->codec->bits_per_sample == 8)
758                     st->codec->codec_id = CODEC_ID_PCM_S8;
759                 else if (st->codec->bits_per_sample == 24)
760                     st->codec->codec_id = CODEC_ID_PCM_S24BE;
761                 break;
762             default:
763                 break;
764             }
765
766             //Read QT version 1 fields. In version 0 these do not exist.
767             dprintf(c->fc, "version =%d, isom =%d\n",version,c->isom);
768             if(!c->isom) {
769                 if(version==1) {
770                     sc->samples_per_frame = get_be32(pb);
771                     get_be32(pb); /* bytes per packet */
772                     sc->bytes_per_frame = get_be32(pb);
773                     get_be32(pb); /* bytes per sample */
774                 } else if(version==2) {
775                     get_be32(pb); /* sizeof struct only */
776                     st->codec->sample_rate = av_int2dbl(get_be64(pb)); /* float 64 */
777                     st->codec->channels = get_be32(pb);
778                     get_be32(pb); /* always 0x7F000000 */
779                     get_be32(pb); /* bits per channel if sound is uncompressed */
780                     get_be32(pb); /* lcpm format specific flag */
781                     get_be32(pb); /* bytes per audio packet if constant */
782                     get_be32(pb); /* lpcm frames per audio packet if constant */
783                 }
784             }
785
786             bits_per_sample = av_get_bits_per_sample(st->codec->codec_id);
787             if (bits_per_sample) {
788                 st->codec->bits_per_sample = bits_per_sample;
789                 sc->sample_size = (bits_per_sample >> 3) * st->codec->channels;
790             }
791         } else {
792             /* other codec type, just skip (rtp, mp4s, tmcd ...) */
793             url_fskip(pb, size - (url_ftell(pb) - start_pos));
794         }
795         /* this will read extra atoms at the end (wave, alac, damr, avcC, SMI ...) */
796         a.size = size - (url_ftell(pb) - start_pos);
797         if (a.size > 8) {
798             if (mov_read_default(c, pb, a) < 0)
799                 return -1;
800         } else if (a.size > 0)
801             url_fskip(pb, a.size);
802     }
803
804     if(st->codec->codec_type==CODEC_TYPE_AUDIO && st->codec->sample_rate==0 && sc->time_scale>1) {
805         st->codec->sample_rate= sc->time_scale;
806     }
807
808     /* special codec parameters handling */
809     switch (st->codec->codec_id) {
810 #ifdef CONFIG_H261_DECODER
811     case CODEC_ID_H261:
812 #endif
813 #ifdef CONFIG_H263_DECODER
814     case CODEC_ID_H263:
815 #endif
816 #ifdef CONFIG_MPEG4_DECODER
817     case CODEC_ID_MPEG4:
818 #endif
819         st->codec->width= 0; /* let decoder init width/height */
820         st->codec->height= 0;
821         break;
822 #ifdef CONFIG_LIBFAAD
823     case CODEC_ID_AAC:
824 #endif
825 #ifdef CONFIG_VORBIS_DECODER
826     case CODEC_ID_VORBIS:
827 #endif
828     case CODEC_ID_MP3ON4:
829         st->codec->sample_rate= 0; /* let decoder init parameters properly */
830         break;
831 #ifdef CONFIG_DV_DEMUXER
832     case CODEC_ID_DVAUDIO:
833         c->dv_fctx = av_alloc_format_context();
834         c->dv_demux = dv_init_demux(c->dv_fctx);
835         if (!c->dv_demux) {
836             av_log(c->fc, AV_LOG_ERROR, "dv demux context init error\n");
837             return -1;
838         }
839         sc->dv_audio_container = 1;
840         st->codec->codec_id = CODEC_ID_PCM_S16LE;
841         break;
842 #endif
843     /* no ifdef since parameters are always those */
844     case CODEC_ID_AMR_WB:
845         st->codec->sample_rate= 16000;
846         st->codec->channels= 1; /* really needed */
847         break;
848     case CODEC_ID_AMR_NB:
849         st->codec->sample_rate= 8000;
850         st->codec->channels= 1; /* really needed */
851         break;
852     case CODEC_ID_MP2:
853     case CODEC_ID_MP3:
854         st->codec->codec_type = CODEC_TYPE_AUDIO; /* force type after stsd for m1a hdlr */
855         st->need_parsing = AVSTREAM_PARSE_FULL;
856         break;
857     case CODEC_ID_ADPCM_MS:
858     case CODEC_ID_ADPCM_IMA_WAV:
859         st->codec->block_align = sc->bytes_per_frame;
860         break;
861     default:
862         break;
863     }
864
865     return 0;
866 }
867
868 static int mov_read_stsc(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
869 {
870     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
871     MOVStreamContext *sc = st->priv_data;
872     unsigned int i, entries;
873
874     get_byte(pb); /* version */
875     get_byte(pb); get_byte(pb); get_byte(pb); /* flags */
876
877     entries = get_be32(pb);
878
879     if(entries >= UINT_MAX / sizeof(MOV_stsc_t))
880         return -1;
881
882     dprintf(c->fc, "track[%i].stsc.entries = %i\n", c->fc->nb_streams-1, entries);
883
884     sc->sample_to_chunk_sz = entries;
885     sc->sample_to_chunk = av_malloc(entries * sizeof(MOV_stsc_t));
886     if (!sc->sample_to_chunk)
887         return -1;
888     for(i=0; i<entries; i++) {
889         sc->sample_to_chunk[i].first = get_be32(pb);
890         sc->sample_to_chunk[i].count = get_be32(pb);
891         sc->sample_to_chunk[i].id = get_be32(pb);
892     }
893     return 0;
894 }
895
896 static int mov_read_stss(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
897 {
898     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
899     MOVStreamContext *sc = st->priv_data;
900     unsigned int i, entries;
901
902     get_byte(pb); /* version */
903     get_byte(pb); get_byte(pb); get_byte(pb); /* flags */
904
905     entries = get_be32(pb);
906
907     if(entries >= UINT_MAX / sizeof(int))
908         return -1;
909
910     sc->keyframe_count = entries;
911
912     dprintf(c->fc, "keyframe_count = %d\n", sc->keyframe_count);
913
914     sc->keyframes = av_malloc(entries * sizeof(int));
915     if (!sc->keyframes)
916         return -1;
917     for(i=0; i<entries; i++) {
918         sc->keyframes[i] = get_be32(pb);
919         //dprintf(c->fc, "keyframes[]=%d\n", sc->keyframes[i]);
920     }
921     return 0;
922 }
923
924 static int mov_read_stsz(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
925 {
926     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
927     MOVStreamContext *sc = st->priv_data;
928     unsigned int i, entries, sample_size;
929
930     get_byte(pb); /* version */
931     get_byte(pb); get_byte(pb); get_byte(pb); /* flags */
932
933     sample_size = get_be32(pb);
934     if (!sc->sample_size) /* do not overwrite value computed in stsd */
935         sc->sample_size = sample_size;
936     entries = get_be32(pb);
937     if(entries >= UINT_MAX / sizeof(int))
938         return -1;
939
940     sc->sample_count = entries;
941     if (sample_size)
942         return 0;
943
944     dprintf(c->fc, "sample_size = %d sample_count = %d\n", sc->sample_size, sc->sample_count);
945
946     sc->sample_sizes = av_malloc(entries * sizeof(int));
947     if (!sc->sample_sizes)
948         return -1;
949     for(i=0; i<entries; i++) {
950         sc->sample_sizes[i] = get_be32(pb);
951         dprintf(c->fc, "sample_sizes[]=%d\n", sc->sample_sizes[i]);
952     }
953     return 0;
954 }
955
956 static int mov_read_stts(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
957 {
958     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
959     MOVStreamContext *sc = st->priv_data;
960     unsigned int i, entries;
961     int64_t duration=0;
962     int64_t total_sample_count=0;
963
964     get_byte(pb); /* version */
965     get_byte(pb); get_byte(pb); get_byte(pb); /* flags */
966     entries = get_be32(pb);
967     if(entries >= UINT_MAX / sizeof(MOV_stts_t))
968         return -1;
969
970     sc->stts_count = entries;
971     sc->stts_data = av_malloc(entries * sizeof(MOV_stts_t));
972     if (!sc->stts_data)
973         return -1;
974     dprintf(c->fc, "track[%i].stts.entries = %i\n", c->fc->nb_streams-1, entries);
975
976     sc->time_rate=0;
977
978     for(i=0; i<entries; i++) {
979         int sample_duration;
980         int sample_count;
981
982         sample_count=get_be32(pb);
983         sample_duration = get_be32(pb);
984         sc->stts_data[i].count= sample_count;
985         sc->stts_data[i].duration= sample_duration;
986
987         sc->time_rate= ff_gcd(sc->time_rate, sample_duration);
988
989         dprintf(c->fc, "sample_count=%d, sample_duration=%d\n",sample_count,sample_duration);
990
991         duration+=(int64_t)sample_duration*sample_count;
992         total_sample_count+=sample_count;
993     }
994
995     st->nb_frames= total_sample_count;
996     if(duration)
997         st->duration= duration;
998     return 0;
999 }
1000
1001 static int mov_read_ctts(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
1002 {
1003     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
1004     MOVStreamContext *sc = st->priv_data;
1005     unsigned int i, entries;
1006
1007     get_byte(pb); /* version */
1008     get_byte(pb); get_byte(pb); get_byte(pb); /* flags */
1009     entries = get_be32(pb);
1010     if(entries >= UINT_MAX / sizeof(MOV_stts_t))
1011         return -1;
1012
1013     sc->ctts_count = entries;
1014     sc->ctts_data = av_malloc(entries * sizeof(MOV_stts_t));
1015     if (!sc->ctts_data)
1016         return -1;
1017     dprintf(c->fc, "track[%i].ctts.entries = %i\n", c->fc->nb_streams-1, entries);
1018
1019     for(i=0; i<entries; i++) {
1020         int count    =get_be32(pb);
1021         int duration =get_be32(pb);
1022
1023         if (duration < 0) {
1024             av_log(c->fc, AV_LOG_ERROR, "negative ctts, ignoring\n");
1025             sc->ctts_count = 0;
1026             url_fskip(pb, 8 * (entries - i - 1));
1027             break;
1028         }
1029         sc->ctts_data[i].count   = count;
1030         sc->ctts_data[i].duration= duration;
1031
1032         sc->time_rate= ff_gcd(sc->time_rate, duration);
1033     }
1034     return 0;
1035 }
1036
1037 static int mov_read_trak(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
1038 {
1039     AVStream *st;
1040     MOVStreamContext *sc;
1041
1042     st = av_new_stream(c->fc, c->fc->nb_streams);
1043     if (!st) return -2;
1044     sc = av_mallocz(sizeof(MOVStreamContext));
1045     if (!sc) {
1046         av_free(st);
1047         return -1;
1048     }
1049
1050     st->priv_data = sc;
1051     st->codec->codec_type = CODEC_TYPE_DATA;
1052     st->start_time = 0; /* XXX: check */
1053
1054     return mov_read_default(c, pb, atom);
1055 }
1056
1057 static void mov_parse_udta_string(ByteIOContext *pb, char *str, int size)
1058 {
1059     uint16_t str_size = get_be16(pb); /* string length */;
1060
1061     get_be16(pb); /* skip language */
1062     get_buffer(pb, str, FFMIN(size, str_size));
1063 }
1064
1065 static int mov_read_udta(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
1066 {
1067     uint64_t end = url_ftell(pb) + atom.size;
1068
1069     while (url_ftell(pb) + 8 < end) {
1070         uint32_t tag_size = get_be32(pb);
1071         uint32_t tag      = get_le32(pb);
1072         uint64_t next     = url_ftell(pb) + tag_size - 8;
1073
1074         if (next > end) // stop if tag_size is wrong
1075             break;
1076
1077         switch (tag) {
1078         case MKTAG(0xa9,'n','a','m'):
1079             mov_parse_udta_string(pb, c->fc->title,     sizeof(c->fc->title));
1080             break;
1081         case MKTAG(0xa9,'w','r','t'):
1082             mov_parse_udta_string(pb, c->fc->author,    sizeof(c->fc->author));
1083             break;
1084         case MKTAG(0xa9,'c','p','y'):
1085             mov_parse_udta_string(pb, c->fc->copyright, sizeof(c->fc->copyright));
1086             break;
1087         case MKTAG(0xa9,'i','n','f'):
1088             mov_parse_udta_string(pb, c->fc->comment,   sizeof(c->fc->comment));
1089             break;
1090         default:
1091             break;
1092         }
1093
1094         url_fseek(pb, next, SEEK_SET);
1095     }
1096
1097     return 0;
1098 }
1099
1100 static int mov_read_tkhd(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
1101 {
1102     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
1103     int version = get_byte(pb);
1104
1105     get_byte(pb); get_byte(pb);
1106     get_byte(pb); /* flags */
1107     /*
1108     MOV_TRACK_ENABLED 0x0001
1109     MOV_TRACK_IN_MOVIE 0x0002
1110     MOV_TRACK_IN_PREVIEW 0x0004
1111     MOV_TRACK_IN_POSTER 0x0008
1112     */
1113
1114     if (version == 1) {
1115         get_be64(pb);
1116         get_be64(pb);
1117     } else {
1118         get_be32(pb); /* creation time */
1119         get_be32(pb); /* modification time */
1120     }
1121     st->id = (int)get_be32(pb); /* track id (NOT 0 !)*/
1122     get_be32(pb); /* reserved */
1123     st->start_time = 0; /* check */
1124     (version == 1) ? get_be64(pb) : get_be32(pb); /* highlevel (considering edits) duration in movie timebase */
1125     get_be32(pb); /* reserved */
1126     get_be32(pb); /* reserved */
1127
1128     get_be16(pb); /* layer */
1129     get_be16(pb); /* alternate group */
1130     get_be16(pb); /* volume */
1131     get_be16(pb); /* reserved */
1132
1133     url_fskip(pb, 36); /* display matrix */
1134
1135     /* those are fixed-point */
1136     get_be32(pb); /* track width */
1137     get_be32(pb); /* track height */
1138
1139     return 0;
1140 }
1141
1142 /* this atom should be null (from specs), but some buggy files put the 'moov' atom inside it... */
1143 /* like the files created with Adobe Premiere 5.0, for samples see */
1144 /* http://graphics.tudelft.nl/~wouter/publications/soundtests/ */
1145 static int mov_read_wide(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
1146 {
1147     int err;
1148
1149     if (atom.size < 8)
1150         return 0; /* continue */
1151     if (get_be32(pb) != 0) { /* 0 sized mdat atom... use the 'wide' atom size */
1152         url_fskip(pb, atom.size - 4);
1153         return 0;
1154     }
1155     atom.type = get_le32(pb);
1156     atom.offset += 8;
1157     atom.size -= 8;
1158     if (atom.type != MKTAG('m', 'd', 'a', 't')) {
1159         url_fskip(pb, atom.size);
1160         return 0;
1161     }
1162     err = mov_read_mdat(c, pb, atom);
1163     return err;
1164 }
1165
1166 static int mov_read_cmov(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
1167 {
1168 #ifdef CONFIG_ZLIB
1169     ByteIOContext ctx;
1170     uint8_t *cmov_data;
1171     uint8_t *moov_data; /* uncompressed data */
1172     long cmov_len, moov_len;
1173     int ret;
1174
1175     get_be32(pb); /* dcom atom */
1176     if (get_le32(pb) != MKTAG( 'd', 'c', 'o', 'm' ))
1177         return -1;
1178     if (get_le32(pb) != MKTAG( 'z', 'l', 'i', 'b' )) {
1179         av_log(NULL, AV_LOG_ERROR, "unknown compression for cmov atom !");
1180         return -1;
1181     }
1182     get_be32(pb); /* cmvd atom */
1183     if (get_le32(pb) != MKTAG( 'c', 'm', 'v', 'd' ))
1184         return -1;
1185     moov_len = get_be32(pb); /* uncompressed size */
1186     cmov_len = atom.size - 6 * 4;
1187
1188     cmov_data = av_malloc(cmov_len);
1189     if (!cmov_data)
1190         return -1;
1191     moov_data = av_malloc(moov_len);
1192     if (!moov_data) {
1193         av_free(cmov_data);
1194         return -1;
1195     }
1196     get_buffer(pb, cmov_data, cmov_len);
1197     if(uncompress (moov_data, (uLongf *) &moov_len, (const Bytef *)cmov_data, cmov_len) != Z_OK)
1198         return -1;
1199     if(init_put_byte(&ctx, moov_data, moov_len, 0, NULL, NULL, NULL, NULL) != 0)
1200         return -1;
1201     atom.type = MKTAG( 'm', 'o', 'o', 'v' );
1202     atom.offset = 0;
1203     atom.size = moov_len;
1204 #ifdef DEBUG
1205 //    { int fd = open("/tmp/uncompheader.mov", O_WRONLY | O_CREAT); write(fd, moov_data, moov_len); close(fd); }
1206 #endif
1207     ret = mov_read_default(c, &ctx, atom);
1208     av_free(moov_data);
1209     av_free(cmov_data);
1210     return ret;
1211 #else
1212     av_log(c->fc, AV_LOG_ERROR, "this file requires zlib support compiled in\n");
1213     return -1;
1214 #endif
1215 }
1216
1217 /* edit list atom */
1218 static int mov_read_elst(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
1219 {
1220     MOVStreamContext *sc = c->fc->streams[c->fc->nb_streams-1]->priv_data;
1221     int i, edit_count;
1222
1223     get_byte(pb); /* version */
1224     get_byte(pb); get_byte(pb); get_byte(pb); /* flags */
1225     edit_count= sc->edit_count = get_be32(pb);     /* entries */
1226
1227     for(i=0; i<edit_count; i++){
1228         get_be32(pb); /* Track duration */
1229         get_be32(pb); /* Media time */
1230         get_be32(pb); /* Media rate */
1231     }
1232     dprintf(c->fc, "track[%i].edit_count = %i\n", c->fc->nb_streams-1, sc->edit_count);
1233     return 0;
1234 }
1235
1236 static const MOVParseTableEntry mov_default_parse_table[] = {
1237 /* mp4 atoms */
1238 { MKTAG( 'c', 'o', '6', '4' ), mov_read_stco },
1239 { MKTAG( 'c', 't', 't', 's' ), mov_read_ctts }, /* composition time to sample */
1240 { MKTAG( 'e', 'd', 't', 's' ), mov_read_default },
1241 { MKTAG( 'e', 'l', 's', 't' ), mov_read_elst },
1242 { MKTAG( 'e', 'n', 'd', 'a' ), mov_read_enda },
1243 { MKTAG( 'f', 'i', 'e', 'l' ), mov_read_extradata },
1244 { MKTAG( 'f', 't', 'y', 'p' ), mov_read_ftyp },
1245 { MKTAG( 'g', 'l', 'b', 'l' ), mov_read_glbl },
1246 { MKTAG( 'h', 'd', 'l', 'r' ), mov_read_hdlr },
1247 { MKTAG( 'j', 'p', '2', 'h' ), mov_read_extradata },
1248 { MKTAG( 'm', 'd', 'a', 't' ), mov_read_mdat },
1249 { MKTAG( 'm', 'd', 'h', 'd' ), mov_read_mdhd },
1250 { MKTAG( 'm', 'd', 'i', 'a' ), mov_read_default },
1251 { MKTAG( 'm', 'i', 'n', 'f' ), mov_read_default },
1252 { MKTAG( 'm', 'o', 'o', 'v' ), mov_read_moov },
1253 { MKTAG( 'm', 'v', 'h', 'd' ), mov_read_mvhd },
1254 { MKTAG( 'S', 'M', 'I', ' ' ), mov_read_smi }, /* Sorenson extension ??? */
1255 { MKTAG( 'a', 'l', 'a', 'c' ), mov_read_extradata }, /* alac specific atom */
1256 { MKTAG( 'a', 'v', 'c', 'C' ), mov_read_glbl },
1257 { MKTAG( 's', 't', 'b', 'l' ), mov_read_default },
1258 { MKTAG( 's', 't', 'c', 'o' ), mov_read_stco },
1259 { MKTAG( 's', 't', 's', 'c' ), mov_read_stsc },
1260 { MKTAG( 's', 't', 's', 'd' ), mov_read_stsd }, /* sample description */
1261 { MKTAG( 's', 't', 's', 's' ), mov_read_stss }, /* sync sample */
1262 { MKTAG( 's', 't', 's', 'z' ), mov_read_stsz }, /* sample size */
1263 { MKTAG( 's', 't', 't', 's' ), mov_read_stts },
1264 { MKTAG( 't', 'k', 'h', 'd' ), mov_read_tkhd }, /* track header */
1265 { MKTAG( 't', 'r', 'a', 'k' ), mov_read_trak },
1266 { MKTAG( 'u', 'd', 't', 'a' ), mov_read_udta },
1267 { MKTAG( 'w', 'a', 'v', 'e' ), mov_read_wave },
1268 { MKTAG( 'e', 's', 'd', 's' ), mov_read_esds },
1269 { MKTAG( 'w', 'i', 'd', 'e' ), mov_read_wide }, /* place holder */
1270 { MKTAG( 'c', 'm', 'o', 'v' ), mov_read_cmov },
1271 { 0, NULL }
1272 };
1273
1274 /* XXX: is it sufficient ? */
1275 static int mov_probe(AVProbeData *p)
1276 {
1277     unsigned int offset;
1278     uint32_t tag;
1279     int score = 0;
1280
1281     /* check file header */
1282     offset = 0;
1283     for(;;) {
1284         /* ignore invalid offset */
1285         if ((offset + 8) > (unsigned int)p->buf_size)
1286             return score;
1287         tag = AV_RL32(p->buf + offset + 4);
1288         switch(tag) {
1289         /* check for obvious tags */
1290         case MKTAG( 'j', 'P', ' ', ' ' ): /* jpeg 2000 signature */
1291         case MKTAG( 'm', 'o', 'o', 'v' ):
1292         case MKTAG( 'm', 'd', 'a', 't' ):
1293         case MKTAG( 'p', 'n', 'o', 't' ): /* detect movs with preview pics like ew.mov and april.mov */
1294         case MKTAG( 'u', 'd', 't', 'a' ): /* Packet Video PVAuthor adds this and a lot of more junk */
1295             return AVPROBE_SCORE_MAX;
1296         /* those are more common words, so rate then a bit less */
1297         case MKTAG( 'e', 'd', 'i', 'w' ): /* xdcam files have reverted first tags */
1298         case MKTAG( 'w', 'i', 'd', 'e' ):
1299         case MKTAG( 'f', 'r', 'e', 'e' ):
1300         case MKTAG( 'j', 'u', 'n', 'k' ):
1301         case MKTAG( 'p', 'i', 'c', 't' ):
1302             return AVPROBE_SCORE_MAX - 5;
1303         case MKTAG( 'f', 't', 'y', 'p' ):
1304         case MKTAG( 's', 'k', 'i', 'p' ):
1305         case MKTAG( 'u', 'u', 'i', 'd' ):
1306             offset = AV_RB32(p->buf+offset) + offset;
1307             /* if we only find those cause probedata is too small at least rate them */
1308             score = AVPROBE_SCORE_MAX - 50;
1309             break;
1310         default:
1311             /* unrecognized tag */
1312             return score;
1313         }
1314     }
1315     return score;
1316 }
1317
1318 static void mov_build_index(MOVContext *mov, AVStream *st)
1319 {
1320     MOVStreamContext *sc = st->priv_data;
1321     offset_t current_offset;
1322     int64_t current_dts = 0;
1323     unsigned int stts_index = 0;
1324     unsigned int stsc_index = 0;
1325     unsigned int stss_index = 0;
1326     unsigned int i, j, k;
1327
1328     if (sc->sample_sizes || st->codec->codec_type == CODEC_TYPE_VIDEO || sc->dv_audio_container) {
1329         unsigned int current_sample = 0;
1330         unsigned int stts_sample = 0;
1331         unsigned int keyframe, sample_size;
1332         unsigned int distance = 0;
1333
1334         st->nb_frames = sc->sample_count;
1335         for (i = 0; i < sc->chunk_count; i++) {
1336             current_offset = sc->chunk_offsets[i];
1337             if (stsc_index + 1 < sc->sample_to_chunk_sz &&
1338                 i + 1 == sc->sample_to_chunk[stsc_index + 1].first)
1339                 stsc_index++;
1340             for (j = 0; j < sc->sample_to_chunk[stsc_index].count; j++) {
1341                 if (current_sample >= sc->sample_count) {
1342                     av_log(mov->fc, AV_LOG_ERROR, "wrong sample count\n");
1343                     goto out;
1344                 }
1345                 keyframe = !sc->keyframe_count || current_sample + 1 == sc->keyframes[stss_index];
1346                 if (keyframe) {
1347                     distance = 0;
1348                     if (stss_index + 1 < sc->keyframe_count)
1349                         stss_index++;
1350                 }
1351                 sample_size = sc->sample_size > 0 ? sc->sample_size : sc->sample_sizes[current_sample];
1352                 dprintf(mov->fc, "AVIndex stream %d, sample %d, offset %"PRIx64", dts %"PRId64", "
1353                         "size %d, distance %d, keyframe %d\n", st->index, current_sample,
1354                         current_offset, current_dts, sample_size, distance, keyframe);
1355                 if(sc->sample_to_chunk[stsc_index].id - 1 == sc->pseudo_stream_id)
1356                     av_add_index_entry(st, current_offset, current_dts, sample_size, distance,
1357                                     keyframe ? AVINDEX_KEYFRAME : 0);
1358                 current_offset += sample_size;
1359                 assert(sc->stts_data[stts_index].duration % sc->time_rate == 0);
1360                 current_dts += sc->stts_data[stts_index].duration / sc->time_rate;
1361                 distance++;
1362                 stts_sample++;
1363                 current_sample++;
1364                 if (stts_index + 1 < sc->stts_count && stts_sample == sc->stts_data[stts_index].count) {
1365                     stts_sample = 0;
1366                     stts_index++;
1367                 }
1368             }
1369         }
1370     } else { /* read whole chunk */
1371         unsigned int chunk_samples, chunk_size, chunk_duration;
1372         for (i = 0; i < sc->chunk_count; i++) {
1373             current_offset = sc->chunk_offsets[i];
1374             if (stsc_index + 1 < sc->sample_to_chunk_sz &&
1375                 i + 1 == sc->sample_to_chunk[stsc_index + 1].first)
1376                 stsc_index++;
1377             chunk_samples = sc->sample_to_chunk[stsc_index].count;
1378             /* get chunk size */
1379             if (sc->sample_size > 1 ||
1380                 st->codec->codec_id == CODEC_ID_PCM_U8 || st->codec->codec_id == CODEC_ID_PCM_S8)
1381                 chunk_size = chunk_samples * sc->sample_size;
1382             else if (sc->samples_per_frame > 0 &&
1383                      (chunk_samples * sc->bytes_per_frame % sc->samples_per_frame == 0))
1384                 chunk_size = chunk_samples * sc->bytes_per_frame / sc->samples_per_frame;
1385             else { /* workaround to find nearest next chunk offset */
1386                 chunk_size = INT_MAX;
1387                 for (j = 0; j < mov->fc->nb_streams; j++) {
1388                     MOVStreamContext *msc = mov->fc->streams[j]->priv_data;
1389                     for (k = msc->next_chunk; k < msc->chunk_count; k++) {
1390                         if (msc->chunk_offsets[k] > current_offset &&
1391                             msc->chunk_offsets[k] - current_offset < chunk_size) {
1392                             chunk_size = msc->chunk_offsets[k] - current_offset;
1393                             msc->next_chunk = k;
1394                             break;
1395                         }
1396                     }
1397                 }
1398                 /* check for last chunk */
1399                 if (chunk_size == INT_MAX)
1400                     for (j = 0; j < mov->mdat_count; j++) {
1401                         dprintf(mov->fc, "mdat %d, offset %"PRIx64", size %"PRId64", current offset %"PRIx64"\n",
1402                                 j, mov->mdat_list[j].offset, mov->mdat_list[j].size, current_offset);
1403                         if (mov->mdat_list[j].offset <= current_offset &&
1404                             mov->mdat_list[j].offset + mov->mdat_list[j].size > current_offset)
1405                             chunk_size = mov->mdat_list[j].offset + mov->mdat_list[j].size - current_offset;
1406                     }
1407                 assert(chunk_size != INT_MAX);
1408                 for (j = 0; j < mov->fc->nb_streams; j++) {
1409                     MOVStreamContext *msc = mov->fc->streams[j]->priv_data;
1410                     msc->next_chunk = 0;
1411                 }
1412             }
1413             av_add_index_entry(st, current_offset, current_dts, chunk_size, 0, AVINDEX_KEYFRAME);
1414             /* get chunk duration */
1415             chunk_duration = 0;
1416             while (chunk_samples > 0) {
1417                 if (chunk_samples < sc->stts_data[stts_index].count) {
1418                     chunk_duration += sc->stts_data[stts_index].duration * chunk_samples;
1419                     sc->stts_data[stts_index].count -= chunk_samples;
1420                     break;
1421                 } else {
1422                     chunk_duration += sc->stts_data[stts_index].duration * chunk_samples;
1423                     chunk_samples -= sc->stts_data[stts_index].count;
1424                     if (stts_index + 1 < sc->stts_count) {
1425                         stts_index++;
1426                     }
1427                 }
1428             }
1429             dprintf(mov->fc, "AVIndex stream %d, chunk %d, offset %"PRIx64", dts %"PRId64", size %d, "
1430                     "duration %d\n", st->index, i, current_offset, current_dts, chunk_size, chunk_duration);
1431             assert(chunk_duration % sc->time_rate == 0);
1432             current_dts += chunk_duration / sc->time_rate;
1433         }
1434     }
1435  out:
1436     /* adjust sample count to avindex entries */
1437     sc->sample_count = st->nb_index_entries;
1438 }
1439
1440 static int mov_read_header(AVFormatContext *s, AVFormatParameters *ap)
1441 {
1442     MOVContext *mov = s->priv_data;
1443     ByteIOContext *pb = s->pb;
1444     int i, err;
1445     MOV_atom_t atom = { 0, 0, 0 };
1446
1447     mov->fc = s;
1448
1449     if(!url_is_streamed(pb)) /* .mov and .mp4 aren't streamable anyway (only progressive download if moov is before mdat) */
1450         atom.size = url_fsize(pb);
1451     else
1452         atom.size = INT64_MAX;
1453
1454     /* check MOV header */
1455     err = mov_read_default(mov, pb, atom);
1456     if (err<0 || (!mov->found_moov && !mov->found_mdat)) {
1457         av_log(s, AV_LOG_ERROR, "mov: header not found !!! (err:%d, moov:%d, mdat:%d) pos:%"PRId64"\n",
1458                 err, mov->found_moov, mov->found_mdat, url_ftell(pb));
1459         return -1;
1460     }
1461     dprintf(mov->fc, "on_parse_exit_offset=%d\n", (int) url_ftell(pb));
1462
1463     for(i=0; i<s->nb_streams; i++) {
1464         AVStream *st = s->streams[i];
1465         MOVStreamContext *sc = st->priv_data;
1466         /* sanity checks */
1467         if(!sc->stts_count || !sc->chunk_count || !sc->sample_to_chunk_sz ||
1468            (!sc->sample_size && !sc->sample_count)){
1469             av_log(s, AV_LOG_ERROR, "missing mandatory atoms, broken header\n");
1470             sc->sample_count = 0; //ignore track
1471             continue;
1472         }
1473         if(!sc->time_rate)
1474             sc->time_rate=1;
1475         if(!sc->time_scale)
1476             sc->time_scale= mov->time_scale;
1477         av_set_pts_info(st, 64, sc->time_rate, sc->time_scale);
1478
1479         if (st->codec->codec_type == CODEC_TYPE_AUDIO && sc->stts_count == 1)
1480             st->codec->frame_size = sc->stts_data[0].duration;
1481
1482         if(st->duration != AV_NOPTS_VALUE){
1483             assert(st->duration % sc->time_rate == 0);
1484             st->duration /= sc->time_rate;
1485         }
1486         sc->ffindex = i;
1487         mov_build_index(mov, st);
1488     }
1489
1490     for(i=0; i<s->nb_streams; i++) {
1491         MOVStreamContext *sc = s->streams[i]->priv_data;
1492         /* Do not need those anymore. */
1493         av_freep(&sc->chunk_offsets);
1494         av_freep(&sc->sample_to_chunk);
1495         av_freep(&sc->sample_sizes);
1496         av_freep(&sc->keyframes);
1497         av_freep(&sc->stts_data);
1498     }
1499     av_freep(&mov->mdat_list);
1500     return 0;
1501 }
1502
1503 static int mov_read_packet(AVFormatContext *s, AVPacket *pkt)
1504 {
1505     MOVContext *mov = s->priv_data;
1506     MOVStreamContext *sc = 0;
1507     AVIndexEntry *sample = 0;
1508     int64_t best_dts = INT64_MAX;
1509     int i;
1510
1511     for (i = 0; i < s->nb_streams; i++) {
1512         AVStream *st = s->streams[i];
1513         MOVStreamContext *msc = st->priv_data;
1514         if (st->discard != AVDISCARD_ALL && msc->current_sample < msc->sample_count) {
1515             AVIndexEntry *current_sample = &st->index_entries[msc->current_sample];
1516             int64_t dts = av_rescale(current_sample->timestamp * (int64_t)msc->time_rate,
1517                                      AV_TIME_BASE, msc->time_scale);
1518             dprintf(s, "stream %d, sample %d, dts %"PRId64"\n", i, msc->current_sample, dts);
1519             if (!sample || (url_is_streamed(s->pb) && current_sample->pos < sample->pos) ||
1520                 (!url_is_streamed(s->pb) &&
1521                  ((FFABS(best_dts - dts) <= AV_TIME_BASE && current_sample->pos < sample->pos) ||
1522                   (FFABS(best_dts - dts) > AV_TIME_BASE && dts < best_dts)))) {
1523                 sample = current_sample;
1524                 best_dts = dts;
1525                 sc = msc;
1526             }
1527         }
1528     }
1529     if (!sample)
1530         return -1;
1531     /* must be done just before reading, to avoid infinite loop on sample */
1532     sc->current_sample++;
1533     if (url_fseek(s->pb, sample->pos, SEEK_SET) != sample->pos) {
1534         av_log(mov->fc, AV_LOG_ERROR, "stream %d, offset 0x%"PRIx64": partial file\n",
1535                sc->ffindex, sample->pos);
1536         return -1;
1537     }
1538 #ifdef CONFIG_DV_DEMUXER
1539     if (sc->dv_audio_container) {
1540         dv_get_packet(mov->dv_demux, pkt);
1541         dprintf(s, "dv audio pkt size %d\n", pkt->size);
1542     } else {
1543 #endif
1544         av_get_packet(s->pb, pkt, sample->size);
1545         if (s->streams[sc->ffindex]->codec->codec_id == CODEC_ID_TEXT) {
1546             int textlen = FFMIN(AV_RB16(pkt->data), sample->size - 2);
1547             textlen = FFMAX(textlen, 0);
1548             memmove(pkt->data, pkt->data + 2, textlen);
1549             pkt->size = textlen;
1550         }
1551 #ifdef CONFIG_DV_DEMUXER
1552         if (mov->dv_demux) {
1553             void *pkt_destruct_func = pkt->destruct;
1554             dv_produce_packet(mov->dv_demux, pkt, pkt->data, pkt->size);
1555             pkt->destruct = pkt_destruct_func;
1556         }
1557     }
1558 #endif
1559     pkt->stream_index = sc->ffindex;
1560     pkt->dts = sample->timestamp;
1561     if (sc->ctts_data) {
1562         assert(sc->ctts_data[sc->sample_to_ctime_index].duration % sc->time_rate == 0);
1563         pkt->pts = pkt->dts + sc->ctts_data[sc->sample_to_ctime_index].duration / sc->time_rate;
1564         /* update ctts context */
1565         sc->sample_to_ctime_sample++;
1566         if (sc->sample_to_ctime_index < sc->ctts_count &&
1567             sc->ctts_data[sc->sample_to_ctime_index].count == sc->sample_to_ctime_sample) {
1568             sc->sample_to_ctime_index++;
1569             sc->sample_to_ctime_sample = 0;
1570         }
1571     } else {
1572         pkt->pts = pkt->dts;
1573     }
1574     pkt->flags |= sample->flags & AVINDEX_KEYFRAME ? PKT_FLAG_KEY : 0;
1575     pkt->pos = sample->pos;
1576     dprintf(s, "stream %d, pts %"PRId64", dts %"PRId64", pos 0x%"PRIx64", duration %d\n",
1577             pkt->stream_index, pkt->pts, pkt->dts, pkt->pos, pkt->duration);
1578     return 0;
1579 }
1580
1581 static int mov_seek_stream(AVStream *st, int64_t timestamp, int flags)
1582 {
1583     MOVStreamContext *sc = st->priv_data;
1584     int sample, time_sample;
1585     int i;
1586
1587     sample = av_index_search_timestamp(st, timestamp, flags);
1588     dprintf(st->codec, "stream %d, timestamp %"PRId64", sample %d\n", st->index, timestamp, sample);
1589     if (sample < 0) /* not sure what to do */
1590         return -1;
1591     sc->current_sample = sample;
1592     dprintf(st->codec, "stream %d, found sample %d\n", st->index, sc->current_sample);
1593     /* adjust ctts index */
1594     if (sc->ctts_data) {
1595         time_sample = 0;
1596         for (i = 0; i < sc->ctts_count; i++) {
1597             int next = time_sample + sc->ctts_data[i].count;
1598             if (next > sc->current_sample) {
1599                 sc->sample_to_ctime_index = i;
1600                 sc->sample_to_ctime_sample = sc->current_sample - time_sample;
1601                 break;
1602             }
1603             time_sample = next;
1604         }
1605     }
1606     return sample;
1607 }
1608
1609 static int mov_read_seek(AVFormatContext *s, int stream_index, int64_t sample_time, int flags)
1610 {
1611     AVStream *st;
1612     int64_t seek_timestamp, timestamp;
1613     int sample;
1614     int i;
1615
1616     if (stream_index >= s->nb_streams)
1617         return -1;
1618
1619     st = s->streams[stream_index];
1620     sample = mov_seek_stream(st, sample_time, flags);
1621     if (sample < 0)
1622         return -1;
1623
1624     /* adjust seek timestamp to found sample timestamp */
1625     seek_timestamp = st->index_entries[sample].timestamp;
1626
1627     for (i = 0; i < s->nb_streams; i++) {
1628         st = s->streams[i];
1629         if (stream_index == i || st->discard == AVDISCARD_ALL)
1630             continue;
1631
1632         timestamp = av_rescale_q(seek_timestamp, s->streams[stream_index]->time_base, st->time_base);
1633         mov_seek_stream(st, timestamp, flags);
1634     }
1635     return 0;
1636 }
1637
1638 static int mov_read_close(AVFormatContext *s)
1639 {
1640     int i;
1641     MOVContext *mov = s->priv_data;
1642     for(i=0; i<s->nb_streams; i++) {
1643         MOVStreamContext *sc = s->streams[i]->priv_data;
1644         av_freep(&sc->ctts_data);
1645     }
1646     if(mov->dv_demux){
1647         for(i=0; i<mov->dv_fctx->nb_streams; i++){
1648             av_freep(&mov->dv_fctx->streams[i]->codec);
1649             av_freep(&mov->dv_fctx->streams[i]);
1650         }
1651         av_freep(&mov->dv_fctx);
1652         av_freep(&mov->dv_demux);
1653     }
1654     return 0;
1655 }
1656
1657 AVInputFormat mov_demuxer = {
1658     "mov,mp4,m4a,3gp,3g2,mj2",
1659     "QuickTime/MPEG4/Motion JPEG 2000 format",
1660     sizeof(MOVContext),
1661     mov_probe,
1662     mov_read_header,
1663     mov_read_packet,
1664     mov_read_close,
1665     mov_read_seek,
1666 };