]> git.sesse.net Git - ffmpeg/blob - libavformat/movenc.c
movenc: write correct format hvcc when tag is hvc1
[ffmpeg] / libavformat / movenc.c
1 /*
2  * MOV, 3GP, MP4 muxer
3  * Copyright (c) 2003 Thomas Raivio
4  * Copyright (c) 2004 Gildas Bazin <gbazin at videolan dot org>
5  * Copyright (c) 2009 Baptiste Coudurier <baptiste dot coudurier at gmail dot com>
6  *
7  * This file is part of Libav.
8  *
9  * Libav is free software; you can redistribute it and/or
10  * modify it under the terms of the GNU Lesser General Public
11  * License as published by the Free Software Foundation; either
12  * version 2.1 of the License, or (at your option) any later version.
13  *
14  * Libav is distributed in the hope that it will be useful,
15  * but WITHOUT ANY WARRANTY; without even the implied warranty of
16  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
17  * Lesser General Public License for more details.
18  *
19  * You should have received a copy of the GNU Lesser General Public
20  * License along with Libav; if not, write to the Free Software
21  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
22  */
23
24 #include <stdint.h>
25 #include <inttypes.h>
26
27 #include "movenc.h"
28 #include "avformat.h"
29 #include "avio_internal.h"
30 #include "riff.h"
31 #include "avio.h"
32 #include "isom.h"
33 #include "avc.h"
34
35 #include "libavcodec/internal.h"
36 #include "libavcodec/bitstream.h"
37 #include "libavcodec/put_bits.h"
38 #include "libavcodec/vc1_common.h"
39 #include "internal.h"
40 #include "libavutil/avstring.h"
41 #include "libavutil/intfloat.h"
42 #include "libavutil/mathematics.h"
43 #include "libavutil/opt.h"
44 #include "libavutil/dict.h"
45 #include "hevc.h"
46 #include "rtpenc.h"
47 #include "mov_chan.h"
48
49 static const AVOption options[] = {
50     { "movflags", "MOV muxer flags", offsetof(MOVMuxContext, flags), AV_OPT_TYPE_FLAGS, {.i64 = 0}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
51     { "rtphint", "Add RTP hint tracks", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_RTP_HINT}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
52     { "empty_moov", "Make the initial moov atom empty", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_EMPTY_MOOV}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
53     { "frag_keyframe", "Fragment at video keyframes", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_FRAG_KEYFRAME}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
54     { "separate_moof", "Write separate moof/mdat atoms for each track", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_SEPARATE_MOOF}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
55     { "frag_custom", "Flush fragments on caller requests", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_FRAG_CUSTOM}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
56     { "isml", "Create a live smooth streaming feed (for pushing to a publishing point)", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_ISML}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
57     { "faststart", "Run a second pass to put the index (moov atom) at the beginning of the file", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_FASTSTART}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
58     { "omit_tfhd_offset", "Omit the base data offset in tfhd atoms", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_OMIT_TFHD_OFFSET}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
59     { "disable_chpl", "Disable Nero chapter atom", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_DISABLE_CHPL}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
60     { "default_base_moof", "Set the default-base-is-moof flag in tfhd atoms", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_DEFAULT_BASE_MOOF}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
61     { "dash", "Write DASH compatible fragmented MP4", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_DASH}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
62     { "frag_discont", "Signal that the next fragment is discontinuous from earlier ones", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_FRAG_DISCONT}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
63     { "delay_moov", "Delay writing the initial moov until the first fragment is cut, or until the first fragment flush", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_DELAY_MOOV}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
64     { "global_sidx", "Write a global sidx index at the start of the file", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_GLOBAL_SIDX}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
65     { "skip_trailer", "Skip writing the mfra/tfra/mfro trailer for fragmented files", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_SKIP_TRAILER}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
66     { "negative_cts_offsets", "Use negative CTS offsets (reducing the need for edit lists)", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_NEGATIVE_CTS_OFFSETS}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
67     FF_RTP_FLAG_OPTS(MOVMuxContext, rtp_flags),
68     { "skip_iods", "Skip writing iods atom.", offsetof(MOVMuxContext, iods_skip), AV_OPT_TYPE_INT, {.i64 = 0}, 0, 1, AV_OPT_FLAG_ENCODING_PARAM},
69     { "iods_audio_profile", "iods audio profile atom.", offsetof(MOVMuxContext, iods_audio_profile), AV_OPT_TYPE_INT, {.i64 = -1}, -1, 255, AV_OPT_FLAG_ENCODING_PARAM},
70     { "iods_video_profile", "iods video profile atom.", offsetof(MOVMuxContext, iods_video_profile), AV_OPT_TYPE_INT, {.i64 = -1}, -1, 255, AV_OPT_FLAG_ENCODING_PARAM},
71     { "frag_duration", "Maximum fragment duration", offsetof(MOVMuxContext, max_fragment_duration), AV_OPT_TYPE_INT, {.i64 = 0}, 0, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM},
72     { "min_frag_duration", "Minimum fragment duration", offsetof(MOVMuxContext, min_fragment_duration), AV_OPT_TYPE_INT, {.i64 = 0}, 0, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM},
73     { "frag_size", "Maximum fragment size", offsetof(MOVMuxContext, max_fragment_size), AV_OPT_TYPE_INT, {.i64 = 0}, 0, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM},
74     { "ism_lookahead", "Number of lookahead entries for ISM files", offsetof(MOVMuxContext, ism_lookahead), AV_OPT_TYPE_INT, {.i64 = 0}, 0, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM},
75     { "brand",    "Override major brand", offsetof(MOVMuxContext, major_brand),   AV_OPT_TYPE_STRING, {.str = NULL}, .flags = AV_OPT_FLAG_ENCODING_PARAM },
76     { "use_editlist", "use edit list", offsetof(MOVMuxContext, use_editlist), AV_OPT_TYPE_INT, {.i64 = -1}, -1, 1, AV_OPT_FLAG_ENCODING_PARAM},
77     { "fragment_index", "Fragment number of the next fragment", offsetof(MOVMuxContext, fragments), AV_OPT_TYPE_INT, {.i64 = 1}, 1, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM},
78     { "frag_interleave", "Interleave samples within fragments (max number of consecutive samples, lower is tighter interleaving, but with more overhead)", offsetof(MOVMuxContext, frag_interleave), AV_OPT_TYPE_INT, {.i64 = 0}, 0, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM },
79     { NULL },
80 };
81
82 #define MOV_CLASS(flavor)\
83 static const AVClass flavor ## _muxer_class = {\
84     .class_name = #flavor " muxer",\
85     .item_name  = av_default_item_name,\
86     .option     = options,\
87     .version    = LIBAVUTIL_VERSION_INT,\
88 };
89
90 static int utf8len(const uint8_t *b)
91 {
92     int len = 0;
93     int val;
94     while (*b) {
95         GET_UTF8(val, *b++, return -1;)
96         len++;
97     }
98     return len;
99 }
100
101 //FIXME support 64 bit variant with wide placeholders
102 static int64_t update_size(AVIOContext *pb, int64_t pos)
103 {
104     int64_t curpos = avio_tell(pb);
105     avio_seek(pb, pos, SEEK_SET);
106     avio_wb32(pb, curpos - pos); /* rewrite size */
107     avio_seek(pb, curpos, SEEK_SET);
108
109     return curpos - pos;
110 }
111
112 static int co64_required(const MOVTrack *track)
113 {
114     if (track->entry > 0 && track->cluster[track->entry - 1].pos + track->data_offset > UINT32_MAX)
115         return 1;
116     return 0;
117 }
118
119 /* Chunk offset atom */
120 static int mov_write_stco_tag(AVIOContext *pb, MOVTrack *track)
121 {
122     int i;
123     int mode64 = co64_required(track); // use 32 bit size variant if possible
124     int64_t pos = avio_tell(pb);
125     avio_wb32(pb, 0); /* size */
126     if (mode64) {
127         ffio_wfourcc(pb, "co64");
128     } else
129         ffio_wfourcc(pb, "stco");
130     avio_wb32(pb, 0); /* version & flags */
131     avio_wb32(pb, track->entry); /* entry count */
132     for (i = 0; i < track->entry; i++) {
133         if (mode64 == 1)
134             avio_wb64(pb, track->cluster[i].pos + track->data_offset);
135         else
136             avio_wb32(pb, track->cluster[i].pos + track->data_offset);
137     }
138     return update_size(pb, pos);
139 }
140
141 /* Sample size atom */
142 static int mov_write_stsz_tag(AVIOContext *pb, MOVTrack *track)
143 {
144     int equalChunks = 1;
145     int i, j, entries = 0, tst = -1, oldtst = -1;
146
147     int64_t pos = avio_tell(pb);
148     avio_wb32(pb, 0); /* size */
149     ffio_wfourcc(pb, "stsz");
150     avio_wb32(pb, 0); /* version & flags */
151
152     for (i = 0; i < track->entry; i++) {
153         tst = track->cluster[i].size / track->cluster[i].entries;
154         if (oldtst != -1 && tst != oldtst)
155             equalChunks = 0;
156         oldtst = tst;
157         entries += track->cluster[i].entries;
158     }
159     if (equalChunks && track->entry) {
160         int sSize = track->entry ? track->cluster[0].size / track->cluster[0].entries : 0;
161         sSize = FFMAX(1, sSize); // adpcm mono case could make sSize == 0
162         avio_wb32(pb, sSize); // sample size
163         avio_wb32(pb, entries); // sample count
164     } else {
165         avio_wb32(pb, 0); // sample size
166         avio_wb32(pb, entries); // sample count
167         for (i = 0; i < track->entry; i++) {
168             for (j = 0; j < track->cluster[i].entries; j++) {
169                 avio_wb32(pb, track->cluster[i].size /
170                           track->cluster[i].entries);
171             }
172         }
173     }
174     return update_size(pb, pos);
175 }
176
177 /* Sample to chunk atom */
178 static int mov_write_stsc_tag(AVIOContext *pb, MOVTrack *track)
179 {
180     int index = 0, oldval = -1, i;
181     int64_t entryPos, curpos;
182
183     int64_t pos = avio_tell(pb);
184     avio_wb32(pb, 0); /* size */
185     ffio_wfourcc(pb, "stsc");
186     avio_wb32(pb, 0); // version & flags
187     entryPos = avio_tell(pb);
188     avio_wb32(pb, track->entry); // entry count
189     for (i = 0; i < track->entry; i++) {
190         if (oldval != track->cluster[i].samples_in_chunk) {
191             avio_wb32(pb, i + 1); // first chunk
192             avio_wb32(pb, track->cluster[i].samples_in_chunk); // samples per chunk
193             avio_wb32(pb, 0x1); // sample description index
194             oldval = track->cluster[i].samples_in_chunk;
195             index++;
196         }
197     }
198     curpos = avio_tell(pb);
199     avio_seek(pb, entryPos, SEEK_SET);
200     avio_wb32(pb, index); // rewrite size
201     avio_seek(pb, curpos, SEEK_SET);
202
203     return update_size(pb, pos);
204 }
205
206 /* Sync sample atom */
207 static int mov_write_stss_tag(AVIOContext *pb, MOVTrack *track, uint32_t flag)
208 {
209     int64_t curpos, entryPos;
210     int i, index = 0;
211     int64_t pos = avio_tell(pb);
212     avio_wb32(pb, 0); // size
213     ffio_wfourcc(pb, flag == MOV_SYNC_SAMPLE ? "stss" : "stps");
214     avio_wb32(pb, 0); // version & flags
215     entryPos = avio_tell(pb);
216     avio_wb32(pb, track->entry); // entry count
217     for (i = 0; i < track->entry; i++) {
218         if (track->cluster[i].flags & flag) {
219             avio_wb32(pb, i + 1);
220             index++;
221         }
222     }
223     curpos = avio_tell(pb);
224     avio_seek(pb, entryPos, SEEK_SET);
225     avio_wb32(pb, index); // rewrite size
226     avio_seek(pb, curpos, SEEK_SET);
227     return update_size(pb, pos);
228 }
229
230 static int mov_write_amr_tag(AVIOContext *pb, MOVTrack *track)
231 {
232     avio_wb32(pb, 0x11); /* size */
233     if (track->mode == MODE_MOV) ffio_wfourcc(pb, "samr");
234     else                         ffio_wfourcc(pb, "damr");
235     ffio_wfourcc(pb, "FFMP");
236     avio_w8(pb, 0); /* decoder version */
237
238     avio_wb16(pb, 0x81FF); /* Mode set (all modes for AMR_NB) */
239     avio_w8(pb, 0x00); /* Mode change period (no restriction) */
240     avio_w8(pb, 0x01); /* Frames per sample */
241     return 0x11;
242 }
243
244 static int mov_write_ac3_tag(AVIOContext *pb, MOVTrack *track)
245 {
246     BitstreamContext bc;
247     PutBitContext pbc;
248     uint8_t buf[3];
249     int fscod, bsid, bsmod, acmod, lfeon, frmsizecod;
250
251     if (track->vos_len < 7)
252         return -1;
253
254     avio_wb32(pb, 11);
255     ffio_wfourcc(pb, "dac3");
256
257     bitstream_init8(&bc, track->vos_data + 4, track->vos_len - 4);
258     fscod      = bitstream_read(&bc, 2);
259     frmsizecod = bitstream_read(&bc, 6);
260     bsid       = bitstream_read(&bc, 5);
261     bsmod      = bitstream_read(&bc, 3);
262     acmod      = bitstream_read(&bc, 3);
263     if (acmod == 2) {
264         bitstream_skip(&bc, 2); // dsurmod
265     } else {
266         if ((acmod & 1) && acmod != 1)
267             bitstream_skip(&bc, 2); // cmixlev
268         if (acmod & 4)
269             bitstream_skip(&bc, 2); // surmixlev
270     }
271     lfeon = bitstream_read_bit(&bc);
272
273     init_put_bits(&pbc, buf, sizeof(buf));
274     put_bits(&pbc, 2, fscod);
275     put_bits(&pbc, 5, bsid);
276     put_bits(&pbc, 3, bsmod);
277     put_bits(&pbc, 3, acmod);
278     put_bits(&pbc, 1, lfeon);
279     put_bits(&pbc, 5, frmsizecod >> 1); // bit_rate_code
280     put_bits(&pbc, 5, 0); // reserved
281
282     flush_put_bits(&pbc);
283     avio_write(pb, buf, sizeof(buf));
284
285     return 11;
286 }
287
288 /**
289  * This function writes extradata "as is".
290  * Extradata must be formatted like a valid atom (with size and tag).
291  */
292 static int mov_write_extradata_tag(AVIOContext *pb, MOVTrack *track)
293 {
294     avio_write(pb, track->par->extradata, track->par->extradata_size);
295     return track->par->extradata_size;
296 }
297
298 static void put_descr(AVIOContext *pb, int tag, unsigned int size)
299 {
300     int i = 3;
301     avio_w8(pb, tag);
302     for (; i > 0; i--)
303         avio_w8(pb, (size >> (7 * i)) | 0x80);
304     avio_w8(pb, size & 0x7F);
305 }
306
307 static int mov_write_esds_tag(AVIOContext *pb, MOVTrack *track) // Basic
308 {
309     AVCPBProperties *props;
310     int64_t pos = avio_tell(pb);
311     int decoder_specific_info_len = track->vos_len ? 5 + track->vos_len : 0;
312
313     avio_wb32(pb, 0); // size
314     ffio_wfourcc(pb, "esds");
315     avio_wb32(pb, 0); // Version
316
317     // ES descriptor
318     put_descr(pb, 0x03, 3 + 5+13 + decoder_specific_info_len + 5+1);
319     avio_wb16(pb, track->track_id);
320     avio_w8(pb, 0x00); // flags (= no flags)
321
322     // DecoderConfig descriptor
323     put_descr(pb, 0x04, 13 + decoder_specific_info_len);
324
325     // Object type indication
326     if ((track->par->codec_id == AV_CODEC_ID_MP2 ||
327          track->par->codec_id == AV_CODEC_ID_MP3) &&
328         track->par->sample_rate > 24000)
329         avio_w8(pb, 0x6B); // 11172-3
330     else
331         avio_w8(pb, ff_codec_get_tag(ff_mp4_obj_type, track->par->codec_id));
332
333     // the following fields is made of 6 bits to identify the streamtype (4 for video, 5 for audio)
334     // plus 1 bit to indicate upstream and 1 bit set to 1 (reserved)
335     if (track->par->codec_id == AV_CODEC_ID_DVD_SUBTITLE)
336         avio_w8(pb, (0x38 << 2) | 1); // flags (= NeroSubpicStream)
337     else if (track->par->codec_type == AVMEDIA_TYPE_AUDIO)
338         avio_w8(pb, 0x15); // flags (= Audiostream)
339     else
340         avio_w8(pb, 0x11); // flags (= Visualstream)
341
342     props = (AVCPBProperties*)av_stream_get_side_data(track->st, AV_PKT_DATA_CPB_PROPERTIES,
343                                                       NULL);
344
345     avio_wb24(pb, props ? props->buffer_size / 8 : 0); // Buffersize DB
346
347     avio_wb32(pb, props ? FFMAX(props->max_bitrate, props->avg_bitrate) : track->par->bit_rate); // maxbitrate (FIXME should be max rate in any 1 sec window)
348     if (!props || !props->min_bitrate || props->max_bitrate != props->min_bitrate)
349         avio_wb32(pb, 0); // vbr
350     else
351         avio_wb32(pb, props->max_bitrate); // avg bitrate
352
353     if (track->vos_len) {
354         // DecoderSpecific info descriptor
355         put_descr(pb, 0x05, track->vos_len);
356         avio_write(pb, track->vos_data, track->vos_len);
357     }
358
359     // SL descriptor
360     put_descr(pb, 0x06, 1);
361     avio_w8(pb, 0x02);
362     return update_size(pb, pos);
363 }
364
365 static int mov_write_ms_tag(AVFormatContext *s, AVIOContext *pb, MOVTrack *track)
366 {
367     int64_t pos = avio_tell(pb);
368     avio_wb32(pb, 0);
369     avio_wl32(pb, track->tag); // store it byteswapped
370     track->par->codec_tag = av_bswap16(track->tag >> 16);
371     ff_put_wav_header(s, pb, track->st->codecpar);
372     return update_size(pb, pos);
373 }
374
375 static int mov_write_wfex_tag(AVFormatContext *s, AVIOContext *pb, MOVTrack *track)
376 {
377     int64_t pos = avio_tell(pb);
378     avio_wb32(pb, 0);
379     ffio_wfourcc(pb, "wfex");
380     ff_put_wav_header(s, pb, track->st->codecpar);
381     return update_size(pb, pos);
382 }
383
384 static int mov_write_chan_tag(AVFormatContext *s, AVIOContext *pb, MOVTrack *track)
385 {
386     uint32_t layout_tag, bitmap;
387     int64_t pos = avio_tell(pb);
388
389     layout_tag = ff_mov_get_channel_layout_tag(track->par->codec_id,
390                                                track->par->channel_layout,
391                                                &bitmap);
392     if (!layout_tag) {
393         av_log(s, AV_LOG_WARNING, "not writing 'chan' tag due to "
394                "lack of channel information\n");
395         return 0;
396     }
397
398     avio_wb32(pb, 0);           // Size
399     ffio_wfourcc(pb, "chan");   // Type
400     avio_w8(pb, 0);             // Version
401     avio_wb24(pb, 0);           // Flags
402     avio_wb32(pb, layout_tag);  // mChannelLayoutTag
403     avio_wb32(pb, bitmap);      // mChannelBitmap
404     avio_wb32(pb, 0);           // mNumberChannelDescriptions
405
406     return update_size(pb, pos);
407 }
408
409 static int mov_write_wave_tag(AVFormatContext *s, AVIOContext *pb, MOVTrack *track)
410 {
411     int64_t pos = avio_tell(pb);
412
413     avio_wb32(pb, 0);     /* size */
414     ffio_wfourcc(pb, "wave");
415
416     avio_wb32(pb, 12);    /* size */
417     ffio_wfourcc(pb, "frma");
418     avio_wl32(pb, track->tag);
419
420     if (track->par->codec_id == AV_CODEC_ID_AAC) {
421         /* useless atom needed by mplayer, ipod, not needed by quicktime */
422         avio_wb32(pb, 12); /* size */
423         ffio_wfourcc(pb, "mp4a");
424         avio_wb32(pb, 0);
425         mov_write_esds_tag(pb, track);
426     } else if (track->par->codec_id == AV_CODEC_ID_AMR_NB) {
427         mov_write_amr_tag(pb, track);
428     } else if (track->par->codec_id == AV_CODEC_ID_AC3) {
429         mov_write_ac3_tag(pb, track);
430     } else if (track->par->codec_id == AV_CODEC_ID_ALAC) {
431         mov_write_extradata_tag(pb, track);
432     } else if (track->par->codec_id == AV_CODEC_ID_ADPCM_MS ||
433                track->par->codec_id == AV_CODEC_ID_ADPCM_IMA_WAV) {
434         mov_write_ms_tag(s, pb, track);
435     }
436
437     avio_wb32(pb, 8);     /* size */
438     avio_wb32(pb, 0);     /* null tag */
439
440     return update_size(pb, pos);
441 }
442
443 static int mov_write_dvc1_structs(MOVTrack *track, uint8_t *buf)
444 {
445     uint8_t *unescaped;
446     const uint8_t *start, *next, *end = track->vos_data + track->vos_len;
447     int unescaped_size, seq_found = 0;
448     int level = 0, interlace = 0;
449     int packet_seq   = track->vc1_info.packet_seq;
450     int packet_entry = track->vc1_info.packet_entry;
451     int slices       = track->vc1_info.slices;
452     PutBitContext pbc;
453
454     if (track->start_dts == AV_NOPTS_VALUE) {
455         /* No packets written yet, vc1_info isn't authoritative yet. */
456         /* Assume inline sequence and entry headers. */
457         packet_seq = packet_entry = 1;
458         av_log(NULL, AV_LOG_WARNING,
459                "moov atom written before any packets, unable to write correct "
460                "dvc1 atom. Set the delay_moov flag to fix this.\n");
461     }
462
463     unescaped = av_mallocz(track->vos_len + AV_INPUT_BUFFER_PADDING_SIZE);
464     if (!unescaped)
465         return AVERROR(ENOMEM);
466     start = find_next_marker(track->vos_data, end);
467     for (next = start; next < end; start = next) {
468         BitstreamContext bc;
469         int size;
470         next = find_next_marker(start + 4, end);
471         size = next - start - 4;
472         if (size <= 0)
473             continue;
474         unescaped_size = vc1_unescape_buffer(start + 4, size, unescaped);
475         bitstream_init8(&bc, unescaped, unescaped_size);
476         if (AV_RB32(start) == VC1_CODE_SEQHDR) {
477             int profile = bitstream_read(&bc, 2);
478             if (profile != PROFILE_ADVANCED) {
479                 av_free(unescaped);
480                 return AVERROR(ENOSYS);
481             }
482             seq_found = 1;
483             level = bitstream_read(&bc, 3);
484             /* chromaformat, frmrtq_postproc, bitrtq_postproc, postprocflag,
485              * width, height */
486             bitstream_skip(&bc, 2 + 3 + 5 + 1 + 2 * 12);
487             bitstream_skip(&bc, 1); /* broadcast */
488             interlace = bitstream_read_bit(&bc);
489             bitstream_skip(&bc, 4); /* tfcntrflag, finterpflag, reserved, psf */
490         }
491     }
492     if (!seq_found) {
493         av_free(unescaped);
494         return AVERROR(ENOSYS);
495     }
496
497     init_put_bits(&pbc, buf, 7);
498     /* VC1DecSpecStruc */
499     put_bits(&pbc, 4, 12); /* profile - advanced */
500     put_bits(&pbc, 3, level);
501     put_bits(&pbc, 1, 0); /* reserved */
502     /* VC1AdvDecSpecStruc */
503     put_bits(&pbc, 3, level);
504     put_bits(&pbc, 1, 0); /* cbr */
505     put_bits(&pbc, 6, 0); /* reserved */
506     put_bits(&pbc, 1, !interlace); /* no interlace */
507     put_bits(&pbc, 1, !packet_seq); /* no multiple seq */
508     put_bits(&pbc, 1, !packet_entry); /* no multiple entry */
509     put_bits(&pbc, 1, !slices); /* no slice code */
510     put_bits(&pbc, 1, 0); /* no bframe */
511     put_bits(&pbc, 1, 0); /* reserved */
512
513     /* framerate */
514     if (track->st->avg_frame_rate.num > 0 && track->st->avg_frame_rate.den > 0)
515         put_bits32(&pbc, track->st->avg_frame_rate.num / track->st->avg_frame_rate.den);
516     else
517         put_bits32(&pbc, 0xffffffff);
518
519     flush_put_bits(&pbc);
520
521     av_free(unescaped);
522
523     return 0;
524 }
525
526 static int mov_write_dvc1_tag(AVIOContext *pb, MOVTrack *track)
527 {
528     uint8_t buf[7] = { 0 };
529     int ret;
530
531     if ((ret = mov_write_dvc1_structs(track, buf)) < 0)
532         return ret;
533
534     avio_wb32(pb, track->vos_len + 8 + sizeof(buf));
535     ffio_wfourcc(pb, "dvc1");
536     avio_write(pb, buf, sizeof(buf));
537     avio_write(pb, track->vos_data, track->vos_len);
538
539     return 0;
540 }
541
542 static int mov_write_glbl_tag(AVIOContext *pb, MOVTrack *track)
543 {
544     avio_wb32(pb, track->vos_len + 8);
545     ffio_wfourcc(pb, "glbl");
546     avio_write(pb, track->vos_data, track->vos_len);
547     return 8 + track->vos_len;
548 }
549
550 /**
551  * Compute flags for 'lpcm' tag.
552  * See CoreAudioTypes and AudioStreamBasicDescription at Apple.
553  */
554 static int mov_get_lpcm_flags(enum AVCodecID codec_id)
555 {
556     switch (codec_id) {
557     case AV_CODEC_ID_PCM_F32BE:
558     case AV_CODEC_ID_PCM_F64BE:
559         return 11;
560     case AV_CODEC_ID_PCM_F32LE:
561     case AV_CODEC_ID_PCM_F64LE:
562         return 9;
563     case AV_CODEC_ID_PCM_U8:
564         return 10;
565     case AV_CODEC_ID_PCM_S16BE:
566     case AV_CODEC_ID_PCM_S24BE:
567     case AV_CODEC_ID_PCM_S32BE:
568         return 14;
569     case AV_CODEC_ID_PCM_S8:
570     case AV_CODEC_ID_PCM_S16LE:
571     case AV_CODEC_ID_PCM_S24LE:
572     case AV_CODEC_ID_PCM_S32LE:
573         return 12;
574     default:
575         return 0;
576     }
577 }
578
579 static int get_cluster_duration(MOVTrack *track, int cluster_idx)
580 {
581     int64_t next_dts;
582
583     if (cluster_idx >= track->entry)
584         return 0;
585
586     if (cluster_idx + 1 == track->entry)
587         next_dts = track->track_duration + track->start_dts;
588     else
589         next_dts = track->cluster[cluster_idx + 1].dts;
590
591     return next_dts - track->cluster[cluster_idx].dts;
592 }
593
594 static int get_samples_per_packet(MOVTrack *track)
595 {
596     int i, first_duration;
597
598     /* use 1 for raw PCM */
599     if (!track->audio_vbr)
600         return 1;
601
602     /* check to see if duration is constant for all clusters */
603     if (!track->entry)
604         return 0;
605     first_duration = get_cluster_duration(track, 0);
606     for (i = 1; i < track->entry; i++) {
607         if (get_cluster_duration(track, i) != first_duration)
608             return 0;
609     }
610     return first_duration;
611 }
612
613 static int mov_write_audio_tag(AVFormatContext *s, AVIOContext *pb, MOVTrack *track)
614 {
615     int64_t pos = avio_tell(pb);
616     int version = 0;
617     uint32_t tag = track->tag;
618
619     if (track->mode == MODE_MOV) {
620         if (mov_get_lpcm_flags(track->par->codec_id))
621             tag = AV_RL32("lpcm");
622         version = 2;
623     }
624
625     avio_wb32(pb, 0); /* size */
626     avio_wl32(pb, tag); // store it byteswapped
627     avio_wb32(pb, 0); /* Reserved */
628     avio_wb16(pb, 0); /* Reserved */
629     avio_wb16(pb, 1); /* Data-reference index, XXX  == 1 */
630
631     /* SoundDescription */
632     avio_wb16(pb, version); /* Version */
633     avio_wb16(pb, 0); /* Revision level */
634     avio_wb32(pb, 0); /* Reserved */
635
636     if (version == 2) {
637         avio_wb16(pb, 3);
638         avio_wb16(pb, 16);
639         avio_wb16(pb, 0xfffe);
640         avio_wb16(pb, 0);
641         avio_wb32(pb, 0x00010000);
642         avio_wb32(pb, 72);
643         avio_wb64(pb, av_double2int(track->par->sample_rate));
644         avio_wb32(pb, track->par->channels);
645         avio_wb32(pb, 0x7F000000);
646         avio_wb32(pb, av_get_bits_per_sample(track->par->codec_id));
647         avio_wb32(pb, mov_get_lpcm_flags(track->par->codec_id));
648         avio_wb32(pb, track->sample_size);
649         avio_wb32(pb, get_samples_per_packet(track));
650     } else {
651         /* reserved for mp4/3gp */
652         avio_wb16(pb, 2);
653         avio_wb16(pb, 16);
654         avio_wb16(pb, 0);
655
656         avio_wb16(pb, 0); /* packet size (= 0) */
657         avio_wb16(pb, track->par->sample_rate <= UINT16_MAX ?
658                       track->par->sample_rate : 0);
659         avio_wb16(pb, 0); /* Reserved */
660     }
661
662     if (track->mode == MODE_MOV &&
663         (track->par->codec_id == AV_CODEC_ID_AAC           ||
664          track->par->codec_id == AV_CODEC_ID_AC3           ||
665          track->par->codec_id == AV_CODEC_ID_AMR_NB        ||
666          track->par->codec_id == AV_CODEC_ID_ALAC          ||
667          track->par->codec_id == AV_CODEC_ID_ADPCM_MS      ||
668          track->par->codec_id == AV_CODEC_ID_ADPCM_IMA_WAV))
669         mov_write_wave_tag(s, pb, track);
670     else if (track->tag == MKTAG('m','p','4','a'))
671         mov_write_esds_tag(pb, track);
672     else if (track->par->codec_id == AV_CODEC_ID_AMR_NB)
673         mov_write_amr_tag(pb, track);
674     else if (track->par->codec_id == AV_CODEC_ID_AC3)
675         mov_write_ac3_tag(pb, track);
676     else if (track->par->codec_id == AV_CODEC_ID_ALAC)
677         mov_write_extradata_tag(pb, track);
678     else if (track->par->codec_id == AV_CODEC_ID_WMAPRO)
679         mov_write_wfex_tag(s, pb, track);
680     else if (track->vos_len > 0)
681         mov_write_glbl_tag(pb, track);
682
683     if (track->mode == MODE_MOV && track->par->codec_type == AVMEDIA_TYPE_AUDIO)
684         mov_write_chan_tag(s, pb, track);
685
686     return update_size(pb, pos);
687 }
688
689 static int mov_write_d263_tag(AVIOContext *pb)
690 {
691     avio_wb32(pb, 0xf); /* size */
692     ffio_wfourcc(pb, "d263");
693     ffio_wfourcc(pb, "FFMP");
694     avio_w8(pb, 0); /* decoder version */
695     /* FIXME use AVCodecContext level/profile, when encoder will set values */
696     avio_w8(pb, 0xa); /* level */
697     avio_w8(pb, 0); /* profile */
698     return 0xf;
699 }
700
701 /* TODO: No idea about these values */
702 static int mov_write_svq3_tag(AVIOContext *pb)
703 {
704     avio_wb32(pb, 0x15);
705     ffio_wfourcc(pb, "SMI ");
706     ffio_wfourcc(pb, "SEQH");
707     avio_wb32(pb, 0x5);
708     avio_wb32(pb, 0xe2c0211d);
709     avio_wb32(pb, 0xc0000000);
710     avio_w8(pb, 0);
711     return 0x15;
712 }
713
714 static int mov_write_avcc_tag(AVIOContext *pb, MOVTrack *track)
715 {
716     int64_t pos = avio_tell(pb);
717
718     avio_wb32(pb, 0);
719     ffio_wfourcc(pb, "avcC");
720     ff_isom_write_avcc(pb, track->vos_data, track->vos_len);
721     return update_size(pb, pos);
722 }
723
724 static int mov_write_hvcc_tag(AVIOContext *pb, MOVTrack *track)
725 {
726     int64_t pos = avio_tell(pb);
727
728     avio_wb32(pb, 0);
729     ffio_wfourcc(pb, "hvcC");
730     if (track->tag == MKTAG('h','v','c','1'))
731         ff_isom_write_hvcc(pb, track->vos_data, track->vos_len, 1);
732     else
733         ff_isom_write_hvcc(pb, track->vos_data, track->vos_len, 0);
734     return update_size(pb, pos);
735 }
736
737 /* also used by all avid codecs (dv, imx, meridien) and their variants */
738 static int mov_write_avid_tag(AVIOContext *pb, MOVTrack *track)
739 {
740     int i;
741     avio_wb32(pb, 24); /* size */
742     ffio_wfourcc(pb, "ACLR");
743     ffio_wfourcc(pb, "ACLR");
744     ffio_wfourcc(pb, "0001");
745     avio_wb32(pb, 2); /* yuv range: full 1 / normal 2 */
746     avio_wb32(pb, 0); /* unknown */
747
748     avio_wb32(pb, 24); /* size */
749     ffio_wfourcc(pb, "APRG");
750     ffio_wfourcc(pb, "APRG");
751     ffio_wfourcc(pb, "0001");
752     avio_wb32(pb, 1); /* unknown */
753     avio_wb32(pb, 0); /* unknown */
754
755     avio_wb32(pb, 120); /* size */
756     ffio_wfourcc(pb, "ARES");
757     ffio_wfourcc(pb, "ARES");
758     ffio_wfourcc(pb, "0001");
759     avio_wb32(pb, AV_RB32(track->vos_data + 0x28)); /* dnxhd cid, some id ? */
760     avio_wb32(pb, track->par->width);
761     /* values below are based on samples created with quicktime and avid codecs */
762     if (track->vos_data[5] & 2) { // interlaced
763         avio_wb32(pb, track->par->height / 2);
764         avio_wb32(pb, 2); /* unknown */
765         avio_wb32(pb, 0); /* unknown */
766         avio_wb32(pb, 4); /* unknown */
767     } else {
768         avio_wb32(pb, track->par->height);
769         avio_wb32(pb, 1); /* unknown */
770         avio_wb32(pb, 0); /* unknown */
771         if (track->par->height == 1080)
772             avio_wb32(pb, 5); /* unknown */
773         else
774             avio_wb32(pb, 6); /* unknown */
775     }
776     /* padding */
777     for (i = 0; i < 10; i++)
778         avio_wb64(pb, 0);
779
780     /* extra padding for stsd needed */
781     avio_wb32(pb, 0);
782     return 0;
783 }
784
785 static int mov_get_dv_codec_tag(AVFormatContext *s, MOVTrack *track)
786 {
787     int tag;
788
789     if (track->par->width == 720) /* SD */
790         if (track->par->height == 480) /* NTSC */
791             if  (track->par->format  == AV_PIX_FMT_YUV422P) tag = MKTAG('d','v','5','n');
792             else                                            tag = MKTAG('d','v','c',' ');
793         else if (track->par->format  == AV_PIX_FMT_YUV422P) tag = MKTAG('d','v','5','p');
794         else if (track->par->format  == AV_PIX_FMT_YUV420P) tag = MKTAG('d','v','c','p');
795         else                                                tag = MKTAG('d','v','p','p');
796     else if (track->par->height == 720) /* HD 720 line */
797         if  (track->st->time_base.den == 50)                tag = MKTAG('d','v','h','q');
798         else                                                tag = MKTAG('d','v','h','p');
799     else if (track->par->height == 1080) /* HD 1080 line */
800         if  (track->st->time_base.den == 25)                tag = MKTAG('d','v','h','5');
801         else                                                tag = MKTAG('d','v','h','6');
802     else {
803         av_log(s, AV_LOG_ERROR, "unsupported height for dv codec\n");
804         return 0;
805     }
806
807     return tag;
808 }
809
810 static const struct {
811     enum AVPixelFormat pix_fmt;
812     uint32_t tag;
813     unsigned bps;
814 } mov_pix_fmt_tags[] = {
815     { AV_PIX_FMT_YUYV422, MKTAG('y','u','v','s'),  0 },
816     { AV_PIX_FMT_UYVY422, MKTAG('2','v','u','y'),  0 },
817     { AV_PIX_FMT_RGB555BE,MKTAG('r','a','w',' '), 16 },
818     { AV_PIX_FMT_RGB555LE,MKTAG('L','5','5','5'), 16 },
819     { AV_PIX_FMT_RGB565LE,MKTAG('L','5','6','5'), 16 },
820     { AV_PIX_FMT_RGB565BE,MKTAG('B','5','6','5'), 16 },
821     { AV_PIX_FMT_GRAY16BE,MKTAG('b','1','6','g'), 16 },
822     { AV_PIX_FMT_RGB24,   MKTAG('r','a','w',' '), 24 },
823     { AV_PIX_FMT_BGR24,   MKTAG('2','4','B','G'), 24 },
824     { AV_PIX_FMT_ARGB,    MKTAG('r','a','w',' '), 32 },
825     { AV_PIX_FMT_BGRA,    MKTAG('B','G','R','A'), 32 },
826     { AV_PIX_FMT_RGBA,    MKTAG('R','G','B','A'), 32 },
827     { AV_PIX_FMT_ABGR,    MKTAG('A','B','G','R'), 32 },
828     { AV_PIX_FMT_RGB48BE, MKTAG('b','4','8','r'), 48 },
829 };
830
831 static int mov_get_rawvideo_codec_tag(AVFormatContext *s, MOVTrack *track)
832 {
833     int tag = track->par->codec_tag;
834     int i;
835
836     for (i = 0; i < FF_ARRAY_ELEMS(mov_pix_fmt_tags); i++) {
837         if (track->par->format == mov_pix_fmt_tags[i].pix_fmt) {
838             tag = mov_pix_fmt_tags[i].tag;
839             track->par->bits_per_coded_sample = mov_pix_fmt_tags[i].bps;
840             break;
841         }
842     }
843
844     return tag;
845 }
846
847 static int mov_get_codec_tag(AVFormatContext *s, MOVTrack *track)
848 {
849     int tag = track->par->codec_tag;
850
851     if (!tag || (s->strict_std_compliance >= FF_COMPLIANCE_NORMAL &&
852                  (track->par->codec_id == AV_CODEC_ID_DVVIDEO ||
853                   track->par->codec_id == AV_CODEC_ID_RAWVIDEO ||
854                   track->par->codec_id == AV_CODEC_ID_H263 ||
855                   av_get_bits_per_sample(track->par->codec_id)))) { // pcm audio
856         if (track->par->codec_id == AV_CODEC_ID_DVVIDEO)
857             tag = mov_get_dv_codec_tag(s, track);
858         else if (track->par->codec_id == AV_CODEC_ID_RAWVIDEO)
859             tag = mov_get_rawvideo_codec_tag(s, track);
860         else if (track->par->codec_type == AVMEDIA_TYPE_VIDEO) {
861             tag = ff_codec_get_tag(ff_codec_movvideo_tags, track->par->codec_id);
862             if (!tag) { // if no mac fcc found, try with Microsoft tags
863                 tag = ff_codec_get_tag(ff_codec_bmp_tags, track->par->codec_id);
864                 if (tag)
865                     av_log(s, AV_LOG_WARNING, "Using MS style video codec tag, "
866                            "the file may be unplayable!\n");
867             }
868         } else if (track->par->codec_type == AVMEDIA_TYPE_AUDIO) {
869             tag = ff_codec_get_tag(ff_codec_movaudio_tags, track->par->codec_id);
870             if (!tag) { // if no mac fcc found, try with Microsoft tags
871                 int ms_tag = ff_codec_get_tag(ff_codec_wav_tags, track->par->codec_id);
872                 if (ms_tag) {
873                     tag = MKTAG('m', 's', ((ms_tag >> 8) & 0xff), (ms_tag & 0xff));
874                     av_log(s, AV_LOG_WARNING, "Using MS style audio codec tag, "
875                            "the file may be unplayable!\n");
876                 }
877             }
878         } else if (track->par->codec_type == AVMEDIA_TYPE_SUBTITLE)
879             tag = ff_codec_get_tag(ff_codec_movsubtitle_tags, track->par->codec_id);
880     }
881
882     return tag;
883 }
884
885 static int mov_find_codec_tag(AVFormatContext *s, MOVTrack *track)
886 {
887     int tag;
888
889     if (track->mode == MODE_MP4 || track->mode == MODE_PSP)
890         tag = track->par->codec_tag;
891     else if (track->mode == MODE_ISM)
892         tag = track->par->codec_tag;
893     else if (track->mode == MODE_IPOD) {
894         if (!av_match_ext(s->filename, "m4a") &&
895             !av_match_ext(s->filename, "m4v"))
896             av_log(s, AV_LOG_WARNING, "Warning, extension is not .m4a nor .m4v "
897                    "Quicktime/Ipod might not play the file\n");
898         tag = track->par->codec_tag;
899     } else if (track->mode & MODE_3GP)
900         tag = track->par->codec_tag;
901     else if (track->mode == MODE_F4V)
902         tag = track->par->codec_tag;
903     else
904         tag = mov_get_codec_tag(s, track);
905
906     return tag;
907 }
908
909 /** Write uuid atom.
910  * Needed to make file play in iPods running newest firmware
911  * goes after avcC atom in moov.trak.mdia.minf.stbl.stsd.avc1
912  */
913 static int mov_write_uuid_tag_ipod(AVIOContext *pb)
914 {
915     avio_wb32(pb, 28);
916     ffio_wfourcc(pb, "uuid");
917     avio_wb32(pb, 0x6b6840f2);
918     avio_wb32(pb, 0x5f244fc5);
919     avio_wb32(pb, 0xba39a51b);
920     avio_wb32(pb, 0xcf0323f3);
921     avio_wb32(pb, 0x0);
922     return 28;
923 }
924
925 static const uint16_t fiel_data[] = {
926     0x0000, 0x0100, 0x0201, 0x0206, 0x0209, 0x020e
927 };
928
929 static int mov_write_fiel_tag(AVIOContext *pb, MOVTrack *track)
930 {
931     unsigned mov_field_order = 0;
932     if (track->par->field_order < FF_ARRAY_ELEMS(fiel_data))
933         mov_field_order = fiel_data[track->par->field_order];
934     else
935         return 0;
936     avio_wb32(pb, 10);
937     ffio_wfourcc(pb, "fiel");
938     avio_wb16(pb, mov_field_order);
939     return 10;
940 }
941
942 static int mov_write_subtitle_tag(AVIOContext *pb, MOVTrack *track)
943 {
944     int64_t pos = avio_tell(pb);
945     avio_wb32(pb, 0);    /* size */
946     avio_wl32(pb, track->tag); // store it byteswapped
947     avio_wb32(pb, 0);    /* Reserved */
948     avio_wb16(pb, 0);    /* Reserved */
949     avio_wb16(pb, 1);    /* Data-reference index */
950
951     if (track->par->codec_id == AV_CODEC_ID_DVD_SUBTITLE)
952         mov_write_esds_tag(pb, track);
953     else if (track->par->extradata_size)
954         avio_write(pb, track->par->extradata, track->par->extradata_size);
955
956     return update_size(pb, pos);
957 }
958
959 static int mov_write_pasp_tag(AVIOContext *pb, MOVTrack *track)
960 {
961     AVRational sar;
962     av_reduce(&sar.num, &sar.den, track->par->sample_aspect_ratio.num,
963               track->par->sample_aspect_ratio.den, INT_MAX);
964
965     avio_wb32(pb, 16);
966     ffio_wfourcc(pb, "pasp");
967     avio_wb32(pb, sar.num);
968     avio_wb32(pb, sar.den);
969     return 16;
970 }
971
972 static int mov_write_video_tag(AVIOContext *pb, MOVTrack *track)
973 {
974     AVDictionaryEntry *encoder;
975     int64_t pos = avio_tell(pb);
976     char compressor_name[32] = { 0 };
977
978     avio_wb32(pb, 0); /* size */
979     avio_wl32(pb, track->tag); // store it byteswapped
980     avio_wb32(pb, 0); /* Reserved */
981     avio_wb16(pb, 0); /* Reserved */
982     avio_wb16(pb, 1); /* Data-reference index */
983
984     avio_wb16(pb, 0); /* Codec stream version */
985     avio_wb16(pb, 0); /* Codec stream revision (=0) */
986     if (track->mode == MODE_MOV) {
987         ffio_wfourcc(pb, "FFMP"); /* Vendor */
988         if (track->par->codec_id == AV_CODEC_ID_RAWVIDEO) {
989             avio_wb32(pb, 0); /* Temporal Quality */
990             avio_wb32(pb, 0x400); /* Spatial Quality = lossless*/
991         } else {
992             avio_wb32(pb, 0x200); /* Temporal Quality = normal */
993             avio_wb32(pb, 0x200); /* Spatial Quality = normal */
994         }
995     } else {
996         avio_wb32(pb, 0); /* Reserved */
997         avio_wb32(pb, 0); /* Reserved */
998         avio_wb32(pb, 0); /* Reserved */
999     }
1000     avio_wb16(pb, track->par->width); /* Video width */
1001     avio_wb16(pb, track->height); /* Video height */
1002     avio_wb32(pb, 0x00480000); /* Horizontal resolution 72dpi */
1003     avio_wb32(pb, 0x00480000); /* Vertical resolution 72dpi */
1004     avio_wb32(pb, 0); /* Data size (= 0) */
1005     avio_wb16(pb, 1); /* Frame count (= 1) */
1006
1007     /* FIXME not sure, ISO 14496-1 draft where it shall be set to 0 */
1008     if (track->mode == MODE_MOV &&
1009         (encoder = av_dict_get(track->st->metadata, "encoder", NULL, 0)))
1010         av_strlcpy(compressor_name, encoder->value, 32);
1011     avio_w8(pb, strlen(compressor_name));
1012     avio_write(pb, compressor_name, 31);
1013
1014     if (track->mode == MODE_MOV && track->par->bits_per_coded_sample)
1015         avio_wb16(pb, track->par->bits_per_coded_sample);
1016     else
1017         avio_wb16(pb, 0x18); /* Reserved */
1018     avio_wb16(pb, 0xffff); /* Reserved */
1019     if (track->tag == MKTAG('m','p','4','v'))
1020         mov_write_esds_tag(pb, track);
1021     else if (track->par->codec_id == AV_CODEC_ID_H263)
1022         mov_write_d263_tag(pb);
1023     else if (track->par->codec_id == AV_CODEC_ID_SVQ3)
1024         mov_write_svq3_tag(pb);
1025     else if (track->par->codec_id == AV_CODEC_ID_DNXHD)
1026         mov_write_avid_tag(pb, track);
1027     else if (track->par->codec_id == AV_CODEC_ID_HEVC)
1028         mov_write_hvcc_tag(pb, track);
1029     else if (track->par->codec_id == AV_CODEC_ID_H264) {
1030         mov_write_avcc_tag(pb, track);
1031         if (track->mode == MODE_IPOD)
1032             mov_write_uuid_tag_ipod(pb);
1033     } else if (track->par->field_order != AV_FIELD_UNKNOWN)
1034         mov_write_fiel_tag(pb, track);
1035     else if (track->par->codec_id == AV_CODEC_ID_VC1 && track->vos_len > 0)
1036         mov_write_dvc1_tag(pb, track);
1037     else if (track->par->codec_id == AV_CODEC_ID_VP6F ||
1038              track->par->codec_id == AV_CODEC_ID_VP6A) {
1039         /* Don't write any potential extradata here - the cropping
1040          * is signalled via the normal width/height fields. */
1041     } else if (track->vos_len > 0)
1042         mov_write_glbl_tag(pb, track);
1043
1044     if (track->par->sample_aspect_ratio.den && track->par->sample_aspect_ratio.num &&
1045         track->par->sample_aspect_ratio.den != track->par->sample_aspect_ratio.num) {
1046         mov_write_pasp_tag(pb, track);
1047     }
1048
1049     return update_size(pb, pos);
1050 }
1051
1052 static int mov_write_rtp_tag(AVIOContext *pb, MOVTrack *track)
1053 {
1054     int64_t pos = avio_tell(pb);
1055     avio_wb32(pb, 0); /* size */
1056     ffio_wfourcc(pb, "rtp ");
1057     avio_wb32(pb, 0); /* Reserved */
1058     avio_wb16(pb, 0); /* Reserved */
1059     avio_wb16(pb, 1); /* Data-reference index */
1060
1061     avio_wb16(pb, 1); /* Hint track version */
1062     avio_wb16(pb, 1); /* Highest compatible version */
1063     avio_wb32(pb, track->max_packet_size); /* Max packet size */
1064
1065     avio_wb32(pb, 12); /* size */
1066     ffio_wfourcc(pb, "tims");
1067     avio_wb32(pb, track->timescale);
1068
1069     return update_size(pb, pos);
1070 }
1071
1072 static int mov_write_tmcd_tag(AVIOContext *pb, MOVTrack *track)
1073 {
1074     int64_t pos = avio_tell(pb);
1075
1076     avio_wb32(pb, 0); /* size */
1077     ffio_wfourcc(pb, "tmcd");               /* Data format */
1078     avio_wb32(pb, 0);                       /* Reserved */
1079     avio_wb32(pb, 1);                       /* Data reference index */
1080     if (track->par->extradata_size)
1081         avio_write(pb, track->par->extradata, track->par->extradata_size);
1082     return update_size(pb, pos);
1083 }
1084
1085 static int mov_write_stsd_tag(AVFormatContext *s, AVIOContext *pb, MOVTrack *track)
1086 {
1087     int64_t pos = avio_tell(pb);
1088     avio_wb32(pb, 0); /* size */
1089     ffio_wfourcc(pb, "stsd");
1090     avio_wb32(pb, 0); /* version & flags */
1091     avio_wb32(pb, 1); /* entry count */
1092     if (track->par->codec_type == AVMEDIA_TYPE_VIDEO)
1093         mov_write_video_tag(pb, track);
1094     else if (track->par->codec_type == AVMEDIA_TYPE_AUDIO)
1095         mov_write_audio_tag(s, pb, track);
1096     else if (track->par->codec_type == AVMEDIA_TYPE_SUBTITLE)
1097         mov_write_subtitle_tag(pb, track);
1098     else if (track->par->codec_tag == MKTAG('r','t','p',' '))
1099         mov_write_rtp_tag(pb, track);
1100     else if (track->par->codec_tag == MKTAG('t','m','c','d'))
1101         mov_write_tmcd_tag(pb, track);
1102     return update_size(pb, pos);
1103 }
1104
1105 static int mov_write_ctts_tag(AVFormatContext *s, AVIOContext *pb, MOVTrack *track)
1106 {
1107     MOVMuxContext *mov = s->priv_data;
1108     MOVStts *ctts_entries;
1109     uint32_t entries = 0;
1110     uint32_t atom_size;
1111     int i;
1112
1113     ctts_entries = av_malloc((track->entry + 1) * sizeof(*ctts_entries)); /* worst case */
1114     if (!ctts_entries)
1115         return AVERROR(ENOMEM);
1116     ctts_entries[0].count = 1;
1117     ctts_entries[0].duration = track->cluster[0].cts;
1118     for (i = 1; i < track->entry; i++) {
1119         if (track->cluster[i].cts == ctts_entries[entries].duration) {
1120             ctts_entries[entries].count++; /* compress */
1121         } else {
1122             entries++;
1123             ctts_entries[entries].duration = track->cluster[i].cts;
1124             ctts_entries[entries].count = 1;
1125         }
1126     }
1127     entries++; /* last one */
1128     atom_size = 16 + (entries * 8);
1129     avio_wb32(pb, atom_size); /* size */
1130     ffio_wfourcc(pb, "ctts");
1131     if (mov->flags & FF_MOV_FLAG_NEGATIVE_CTS_OFFSETS)
1132         avio_w8(pb, 1); /* version */
1133     else
1134         avio_w8(pb, 0); /* version */
1135     avio_wb24(pb, 0); /* flags */
1136     avio_wb32(pb, entries); /* entry count */
1137     for (i = 0; i < entries; i++) {
1138         avio_wb32(pb, ctts_entries[i].count);
1139         avio_wb32(pb, ctts_entries[i].duration);
1140     }
1141     av_free(ctts_entries);
1142     return atom_size;
1143 }
1144
1145 /* Time to sample atom */
1146 static int mov_write_stts_tag(AVIOContext *pb, MOVTrack *track)
1147 {
1148     MOVStts *stts_entries = NULL;
1149     uint32_t entries = -1;
1150     uint32_t atom_size;
1151     int i;
1152
1153     if (track->par->codec_type == AVMEDIA_TYPE_AUDIO && !track->audio_vbr) {
1154         stts_entries = av_malloc(sizeof(*stts_entries)); /* one entry */
1155         if (!stts_entries)
1156             return AVERROR(ENOMEM);
1157         stts_entries[0].count = track->sample_count;
1158         stts_entries[0].duration = 1;
1159         entries = 1;
1160     } else {
1161         if (track->entry) {
1162             stts_entries = av_malloc(track->entry * sizeof(*stts_entries)); /* worst case */
1163             if (!stts_entries)
1164                 return AVERROR(ENOMEM);
1165         }
1166         for (i = 0; i < track->entry; i++) {
1167             int duration = get_cluster_duration(track, i);
1168             if (i && duration == stts_entries[entries].duration) {
1169                 stts_entries[entries].count++; /* compress */
1170             } else {
1171                 entries++;
1172                 stts_entries[entries].duration = duration;
1173                 stts_entries[entries].count = 1;
1174             }
1175         }
1176         entries++; /* last one */
1177     }
1178     atom_size = 16 + (entries * 8);
1179     avio_wb32(pb, atom_size); /* size */
1180     ffio_wfourcc(pb, "stts");
1181     avio_wb32(pb, 0); /* version & flags */
1182     avio_wb32(pb, entries); /* entry count */
1183     for (i = 0; i < entries; i++) {
1184         avio_wb32(pb, stts_entries[i].count);
1185         avio_wb32(pb, stts_entries[i].duration);
1186     }
1187     av_free(stts_entries);
1188     return atom_size;
1189 }
1190
1191 static int mov_write_dref_tag(AVIOContext *pb)
1192 {
1193     avio_wb32(pb, 28); /* size */
1194     ffio_wfourcc(pb, "dref");
1195     avio_wb32(pb, 0); /* version & flags */
1196     avio_wb32(pb, 1); /* entry count */
1197
1198     avio_wb32(pb, 0xc); /* size */
1199     ffio_wfourcc(pb, "url ");
1200     avio_wb32(pb, 1); /* version & flags */
1201
1202     return 28;
1203 }
1204
1205 static int mov_write_stbl_tag(AVFormatContext *s, AVIOContext *pb, MOVTrack *track)
1206 {
1207     int64_t pos = avio_tell(pb);
1208     avio_wb32(pb, 0); /* size */
1209     ffio_wfourcc(pb, "stbl");
1210     mov_write_stsd_tag(s, pb, track);
1211     mov_write_stts_tag(pb, track);
1212     if ((track->par->codec_type == AVMEDIA_TYPE_VIDEO ||
1213          track->par->codec_tag == MKTAG('r','t','p',' ')) &&
1214         track->has_keyframes && track->has_keyframes < track->entry)
1215         mov_write_stss_tag(pb, track, MOV_SYNC_SAMPLE);
1216     if (track->mode == MODE_MOV && track->flags & MOV_TRACK_STPS)
1217         mov_write_stss_tag(pb, track, MOV_PARTIAL_SYNC_SAMPLE);
1218     if (track->par->codec_type == AVMEDIA_TYPE_VIDEO &&
1219         track->flags & MOV_TRACK_CTTS && track->entry)
1220         mov_write_ctts_tag(s, pb, track);
1221     mov_write_stsc_tag(pb, track);
1222     mov_write_stsz_tag(pb, track);
1223     mov_write_stco_tag(pb, track);
1224     return update_size(pb, pos);
1225 }
1226
1227 static int mov_write_dinf_tag(AVIOContext *pb)
1228 {
1229     int64_t pos = avio_tell(pb);
1230     avio_wb32(pb, 0); /* size */
1231     ffio_wfourcc(pb, "dinf");
1232     mov_write_dref_tag(pb);
1233     return update_size(pb, pos);
1234 }
1235
1236 static int mov_write_nmhd_tag(AVIOContext *pb)
1237 {
1238     avio_wb32(pb, 12);
1239     ffio_wfourcc(pb, "nmhd");
1240     avio_wb32(pb, 0);
1241     return 12;
1242 }
1243
1244 static int mov_write_gmhd_tag(AVIOContext *pb)
1245 {
1246     avio_wb32(pb, 0x20);   /* size */
1247     ffio_wfourcc(pb, "gmhd");
1248     avio_wb32(pb, 0x18);   /* gmin size */
1249     ffio_wfourcc(pb, "gmin");/* generic media info */
1250     avio_wb32(pb, 0);      /* version & flags */
1251     avio_wb16(pb, 0x40);   /* graphics mode = */
1252     avio_wb16(pb, 0x8000); /* opColor (r?) */
1253     avio_wb16(pb, 0x8000); /* opColor (g?) */
1254     avio_wb16(pb, 0x8000); /* opColor (b?) */
1255     avio_wb16(pb, 0);      /* balance */
1256     avio_wb16(pb, 0);      /* reserved */
1257     return 0x20;
1258 }
1259
1260 static int mov_write_smhd_tag(AVIOContext *pb)
1261 {
1262     avio_wb32(pb, 16); /* size */
1263     ffio_wfourcc(pb, "smhd");
1264     avio_wb32(pb, 0); /* version & flags */
1265     avio_wb16(pb, 0); /* reserved (balance, normally = 0) */
1266     avio_wb16(pb, 0); /* reserved */
1267     return 16;
1268 }
1269
1270 static int mov_write_vmhd_tag(AVIOContext *pb)
1271 {
1272     avio_wb32(pb, 0x14); /* size (always 0x14) */
1273     ffio_wfourcc(pb, "vmhd");
1274     avio_wb32(pb, 0x01); /* version & flags */
1275     avio_wb64(pb, 0); /* reserved (graphics mode = copy) */
1276     return 0x14;
1277 }
1278
1279 static int is_clcp_track(MOVTrack *track)
1280 {
1281     return track->tag == MKTAG('c','7','0','8') ||
1282            track->tag == MKTAG('c','6','0','8');
1283 }
1284
1285 static int mov_write_hdlr_tag(AVFormatContext *s, AVIOContext *pb, MOVTrack *track)
1286 {
1287     const char *hdlr, *descr = NULL, *hdlr_type = NULL;
1288     int64_t pos = avio_tell(pb);
1289
1290     hdlr      = "dhlr";
1291     hdlr_type = "url ";
1292     descr     = "DataHandler";
1293
1294     if (track) {
1295         hdlr = (track->mode == MODE_MOV) ? "mhlr" : "\0\0\0\0";
1296         if (track->par->codec_type == AVMEDIA_TYPE_VIDEO) {
1297             hdlr_type = "vide";
1298             descr     = "VideoHandler";
1299         } else if (track->par->codec_type == AVMEDIA_TYPE_AUDIO) {
1300             hdlr_type = "soun";
1301             descr     = "SoundHandler";
1302         } else if (track->par->codec_type == AVMEDIA_TYPE_SUBTITLE) {
1303             if (track->tag == MKTAG('t','x','3','g')) {
1304                 hdlr_type = "sbtl";
1305             } else if (track->tag == MKTAG('m','p','4','s')) {
1306                 hdlr_type = "subp";
1307             } else if (is_clcp_track(track)) {
1308                 hdlr_type = "clcp";
1309             } else {
1310                 hdlr_type = "text";
1311             }
1312             descr = "SubtitleHandler";
1313         } else if (track->par->codec_tag == MKTAG('r','t','p',' ')) {
1314             hdlr_type = "hint";
1315             descr     = "HintHandler";
1316         } else if (track->par->codec_tag == MKTAG('t','m','c','d')) {
1317             hdlr_type = "tmcd";
1318             descr = "TimeCodeHandler";
1319         } else {
1320             char tag_buf[32];
1321             av_get_codec_tag_string(tag_buf, sizeof(tag_buf),
1322                                     track->par->codec_tag);
1323
1324             av_log(s, AV_LOG_WARNING,
1325                    "Unknown hldr_type for %s / 0x%04"PRIX32", writing dummy values\n",
1326                    tag_buf, track->par->codec_tag);
1327         }
1328         if (track->st) {
1329             // hdlr.name is used by some players to identify the content title
1330             // of the track. So if an alternate handler description is
1331             // specified, use it.
1332             AVDictionaryEntry *t;
1333             t = av_dict_get(track->st->metadata, "handler", NULL, 0);
1334             if (t && utf8len(t->value))
1335                 descr = t->value;
1336         }
1337     }
1338
1339     avio_wb32(pb, 0); /* size */
1340     ffio_wfourcc(pb, "hdlr");
1341     avio_wb32(pb, 0); /* Version & flags */
1342     avio_write(pb, hdlr, 4); /* handler */
1343     ffio_wfourcc(pb, hdlr_type); /* handler type */
1344     avio_wb32(pb, 0); /* reserved */
1345     avio_wb32(pb, 0); /* reserved */
1346     avio_wb32(pb, 0); /* reserved */
1347     if (!track || track->mode == MODE_MOV)
1348         avio_w8(pb, strlen(descr)); /* pascal string */
1349     avio_write(pb, descr, strlen(descr)); /* handler description */
1350     if (track && track->mode != MODE_MOV)
1351         avio_w8(pb, 0); /* c string */
1352     return update_size(pb, pos);
1353 }
1354
1355 static int mov_write_hmhd_tag(AVIOContext *pb)
1356 {
1357     /* This atom must be present, but leaving the values at zero
1358      * seems harmless. */
1359     avio_wb32(pb, 28); /* size */
1360     ffio_wfourcc(pb, "hmhd");
1361     avio_wb32(pb, 0); /* version, flags */
1362     avio_wb16(pb, 0); /* maxPDUsize */
1363     avio_wb16(pb, 0); /* avgPDUsize */
1364     avio_wb32(pb, 0); /* maxbitrate */
1365     avio_wb32(pb, 0); /* avgbitrate */
1366     avio_wb32(pb, 0); /* reserved */
1367     return 28;
1368 }
1369
1370 static int mov_write_minf_tag(AVFormatContext *s, AVIOContext *pb, MOVTrack *track)
1371 {
1372     int64_t pos = avio_tell(pb);
1373     avio_wb32(pb, 0); /* size */
1374     ffio_wfourcc(pb, "minf");
1375     if (track->par->codec_type == AVMEDIA_TYPE_VIDEO)
1376         mov_write_vmhd_tag(pb);
1377     else if (track->par->codec_type == AVMEDIA_TYPE_AUDIO)
1378         mov_write_smhd_tag(pb);
1379     else if (track->par->codec_type == AVMEDIA_TYPE_SUBTITLE) {
1380         if (track->tag == MKTAG('t','e','x','t') || is_clcp_track(track)) {
1381             mov_write_gmhd_tag(pb);
1382         } else {
1383             mov_write_nmhd_tag(pb);
1384         }
1385     } else if (track->tag == MKTAG('r','t','p',' ')) {
1386         mov_write_hmhd_tag(pb);
1387     } else if (track->tag == MKTAG('t','m','c','d')) {
1388         mov_write_gmhd_tag(pb);
1389     }
1390     if (track->mode == MODE_MOV) /* FIXME: Why do it for MODE_MOV only ? */
1391         mov_write_hdlr_tag(s, pb, NULL);
1392     mov_write_dinf_tag(pb);
1393     mov_write_stbl_tag(s, pb, track);
1394     return update_size(pb, pos);
1395 }
1396
1397 static int mov_write_mdhd_tag(AVIOContext *pb, MOVMuxContext *mov,
1398                               MOVTrack *track)
1399 {
1400     int version = track->track_duration < INT32_MAX ? 0 : 1;
1401
1402     if (track->mode == MODE_ISM)
1403         version = 1;
1404
1405     (version == 1) ? avio_wb32(pb, 44) : avio_wb32(pb, 32); /* size */
1406     ffio_wfourcc(pb, "mdhd");
1407     avio_w8(pb, version);
1408     avio_wb24(pb, 0); /* flags */
1409     if (version == 1) {
1410         avio_wb64(pb, track->time);
1411         avio_wb64(pb, track->time);
1412     } else {
1413         avio_wb32(pb, track->time); /* creation time */
1414         avio_wb32(pb, track->time); /* modification time */
1415     }
1416     avio_wb32(pb, track->timescale); /* time scale (sample rate for audio) */
1417     if (!track->entry && mov->mode == MODE_ISM)
1418         (version == 1) ? avio_wb64(pb, UINT64_C(0xffffffffffffffff)) : avio_wb32(pb, 0xffffffff);
1419     else if (!track->entry)
1420         (version == 1) ? avio_wb64(pb, 0) : avio_wb32(pb, 0);
1421     else
1422         (version == 1) ? avio_wb64(pb, track->track_duration) : avio_wb32(pb, track->track_duration); /* duration */
1423     avio_wb16(pb, track->language); /* language */
1424     avio_wb16(pb, 0); /* reserved (quality) */
1425
1426     if (version != 0 && track->mode == MODE_MOV) {
1427         av_log(NULL, AV_LOG_ERROR,
1428                "FATAL error, file duration too long for timebase, this file will not be\n"
1429                "playable with quicktime. Choose a different timebase or a different\n"
1430                "container format\n");
1431     }
1432
1433     return 32;
1434 }
1435
1436 static int mov_write_mdia_tag(AVFormatContext *s, AVIOContext *pb,
1437                               MOVMuxContext *mov, MOVTrack *track)
1438 {
1439     int64_t pos = avio_tell(pb);
1440     avio_wb32(pb, 0); /* size */
1441     ffio_wfourcc(pb, "mdia");
1442     mov_write_mdhd_tag(pb, mov, track);
1443     mov_write_hdlr_tag(s, pb, track);
1444     mov_write_minf_tag(s, pb, track);
1445     return update_size(pb, pos);
1446 }
1447
1448 static int mov_write_tkhd_tag(AVIOContext *pb, MOVMuxContext *mov,
1449                               MOVTrack *track, AVStream *st)
1450 {
1451     int64_t duration = av_rescale_rnd(track->track_duration, MOV_TIMESCALE,
1452                                       track->timescale, AV_ROUND_UP);
1453     int version = duration < INT32_MAX ? 0 : 1;
1454     int flags   = MOV_TKHD_FLAG_IN_MOVIE;
1455     int group   = 0;
1456
1457     uint32_t *display_matrix = NULL;
1458     int      display_matrix_size, i;
1459
1460     if (st) {
1461         if (mov->per_stream_grouping)
1462             group = st->index;
1463         else
1464             group = st->codecpar->codec_type;
1465
1466         display_matrix = (uint32_t*)av_stream_get_side_data(st, AV_PKT_DATA_DISPLAYMATRIX,
1467                                                             &display_matrix_size);
1468         if (display_matrix && display_matrix_size < 9 * sizeof(*display_matrix))
1469             display_matrix = NULL;
1470     }
1471
1472     if (track->flags & MOV_TRACK_ENABLED)
1473         flags |= MOV_TKHD_FLAG_ENABLED;
1474
1475     if (track->mode == MODE_ISM)
1476         version = 1;
1477
1478     (version == 1) ? avio_wb32(pb, 104) : avio_wb32(pb, 92); /* size */
1479     ffio_wfourcc(pb, "tkhd");
1480     avio_w8(pb, version);
1481     avio_wb24(pb, flags);
1482     if (version == 1) {
1483         avio_wb64(pb, track->time);
1484         avio_wb64(pb, track->time);
1485     } else {
1486         avio_wb32(pb, track->time); /* creation time */
1487         avio_wb32(pb, track->time); /* modification time */
1488     }
1489     avio_wb32(pb, track->track_id); /* track-id */
1490     avio_wb32(pb, 0); /* reserved */
1491     if (!track->entry && mov->mode == MODE_ISM)
1492         (version == 1) ? avio_wb64(pb, UINT64_C(0xffffffffffffffff)) : avio_wb32(pb, 0xffffffff);
1493     else if (!track->entry)
1494         (version == 1) ? avio_wb64(pb, 0) : avio_wb32(pb, 0);
1495     else
1496         (version == 1) ? avio_wb64(pb, duration) : avio_wb32(pb, duration);
1497
1498     avio_wb32(pb, 0); /* reserved */
1499     avio_wb32(pb, 0); /* reserved */
1500     avio_wb16(pb, 0); /* layer */
1501     avio_wb16(pb, group); /* alternate group) */
1502     /* Volume, only for audio */
1503     if (track->par->codec_type == AVMEDIA_TYPE_AUDIO)
1504         avio_wb16(pb, 0x0100);
1505     else
1506         avio_wb16(pb, 0);
1507     avio_wb16(pb, 0); /* reserved */
1508
1509     /* Matrix structure */
1510     if (display_matrix) {
1511         for (i = 0; i < 9; i++)
1512             avio_wb32(pb, display_matrix[i]);
1513     } else {
1514         avio_wb32(pb, 0x00010000); /* reserved */
1515         avio_wb32(pb, 0x0); /* reserved */
1516         avio_wb32(pb, 0x0); /* reserved */
1517         avio_wb32(pb, 0x0); /* reserved */
1518         avio_wb32(pb, 0x00010000); /* reserved */
1519         avio_wb32(pb, 0x0); /* reserved */
1520         avio_wb32(pb, 0x0); /* reserved */
1521         avio_wb32(pb, 0x0); /* reserved */
1522         avio_wb32(pb, 0x40000000); /* reserved */
1523     }
1524
1525     /* Track width and height, for visual only */
1526     if (st && (track->par->codec_type == AVMEDIA_TYPE_VIDEO ||
1527                track->par->codec_type == AVMEDIA_TYPE_SUBTITLE)) {
1528         if (track->mode == MODE_MOV) {
1529             avio_wb32(pb, track->par->width << 16);
1530             avio_wb32(pb, track->height << 16);
1531         } else {
1532             double sample_aspect_ratio = av_q2d(st->sample_aspect_ratio);
1533             if (!sample_aspect_ratio || track->height != track->par->height)
1534                 sample_aspect_ratio = 1;
1535             avio_wb32(pb, sample_aspect_ratio * track->par->width * 0x10000);
1536             avio_wb32(pb, track->height * 0x10000);
1537         }
1538     } else {
1539         avio_wb32(pb, 0);
1540         avio_wb32(pb, 0);
1541     }
1542     return 0x5c;
1543 }
1544
1545 static int mov_write_tapt_tag(AVIOContext *pb, MOVTrack *track)
1546 {
1547     int32_t width = av_rescale(track->par->sample_aspect_ratio.num, track->par->width,
1548                                track->par->sample_aspect_ratio.den);
1549
1550     int64_t pos = avio_tell(pb);
1551
1552     avio_wb32(pb, 0); /* size */
1553     ffio_wfourcc(pb, "tapt");
1554
1555     avio_wb32(pb, 20);
1556     ffio_wfourcc(pb, "clef");
1557     avio_wb32(pb, 0);
1558     avio_wb32(pb, width << 16);
1559     avio_wb32(pb, track->par->height << 16);
1560
1561     avio_wb32(pb, 20);
1562     ffio_wfourcc(pb, "prof");
1563     avio_wb32(pb, 0);
1564     avio_wb32(pb, width << 16);
1565     avio_wb32(pb, track->par->height << 16);
1566
1567     avio_wb32(pb, 20);
1568     ffio_wfourcc(pb, "enof");
1569     avio_wb32(pb, 0);
1570     avio_wb32(pb, track->par->width << 16);
1571     avio_wb32(pb, track->par->height << 16);
1572
1573     return update_size(pb, pos);
1574 }
1575
1576 // This box seems important for the psp playback ... without it the movie seems to hang
1577 static int mov_write_edts_tag(AVIOContext *pb, MOVMuxContext *mov,
1578                               MOVTrack *track)
1579 {
1580     int64_t duration = av_rescale_rnd(track->track_duration, MOV_TIMESCALE,
1581                                       track->timescale, AV_ROUND_UP);
1582     int version = duration < INT32_MAX ? 0 : 1;
1583     int entry_size, entry_count, size;
1584     int64_t delay, start_ct = track->start_cts;
1585     delay = av_rescale_rnd(track->start_dts + start_ct, MOV_TIMESCALE,
1586                            track->timescale, AV_ROUND_DOWN);
1587     version |= delay < INT32_MAX ? 0 : 1;
1588
1589     entry_size = (version == 1) ? 20 : 12;
1590     entry_count = 1 + (delay > 0);
1591     size = 24 + entry_count * entry_size;
1592
1593     /* write the atom data */
1594     avio_wb32(pb, size);
1595     ffio_wfourcc(pb, "edts");
1596     avio_wb32(pb, size - 8);
1597     ffio_wfourcc(pb, "elst");
1598     avio_w8(pb, version);
1599     avio_wb24(pb, 0); /* flags */
1600
1601     avio_wb32(pb, entry_count);
1602     if (delay > 0) { /* add an empty edit to delay presentation */
1603         /* In the positive delay case, the delay includes the cts
1604          * offset, and the second edit list entry below trims out
1605          * the same amount from the actual content. This makes sure
1606          * that the offset last sample is included in the edit
1607          * list duration as well. */
1608         if (version == 1) {
1609             avio_wb64(pb, delay);
1610             avio_wb64(pb, -1);
1611         } else {
1612             avio_wb32(pb, delay);
1613             avio_wb32(pb, -1);
1614         }
1615         avio_wb32(pb, 0x00010000);
1616     } else {
1617         /* Avoid accidentally ending up with start_ct = -1 which has got a
1618          * special meaning. Normally start_ct should end up positive or zero
1619          * here, but use FFMIN in case dts is a a small positive integer
1620          * rounded to 0 when represented in MOV_TIMESCALE units. */
1621         start_ct  = -FFMIN(track->start_dts, 0);
1622         /* Note, this delay is calculated from the pts of the first sample,
1623          * ensuring that we don't reduce the duration for cases with
1624          * dts<0 pts=0. */
1625         duration += delay;
1626     }
1627
1628     /* For fragmented files, we don't know the full length yet. Setting
1629      * duration to 0 allows us to only specify the offset, including
1630      * the rest of the content (from all future fragments) without specifying
1631      * an explicit duration. */
1632     if (mov->flags & FF_MOV_FLAG_FRAGMENT)
1633         duration = 0;
1634
1635     /* duration */
1636     if (version == 1) {
1637         avio_wb64(pb, duration);
1638         avio_wb64(pb, start_ct);
1639     } else {
1640         avio_wb32(pb, duration);
1641         avio_wb32(pb, start_ct);
1642     }
1643     avio_wb32(pb, 0x00010000);
1644     return size;
1645 }
1646
1647 static int mov_write_tref_tag(AVIOContext *pb, MOVTrack *track)
1648 {
1649     avio_wb32(pb, 20);   // size
1650     ffio_wfourcc(pb, "tref");
1651     avio_wb32(pb, 12);   // size (subatom)
1652     avio_wl32(pb, track->tref_tag);
1653     avio_wb32(pb, track->tref_id);
1654     return 20;
1655 }
1656
1657 // goes at the end of each track!  ... Critical for PSP playback ("Incompatible data" without it)
1658 static int mov_write_uuid_tag_psp(AVIOContext *pb, MOVTrack *mov)
1659 {
1660     avio_wb32(pb, 0x34); /* size ... reports as 28 in mp4box! */
1661     ffio_wfourcc(pb, "uuid");
1662     ffio_wfourcc(pb, "USMT");
1663     avio_wb32(pb, 0x21d24fce);
1664     avio_wb32(pb, 0xbb88695c);
1665     avio_wb32(pb, 0xfac9c740);
1666     avio_wb32(pb, 0x1c);     // another size here!
1667     ffio_wfourcc(pb, "MTDT");
1668     avio_wb32(pb, 0x00010012);
1669     avio_wb32(pb, 0x0a);
1670     avio_wb32(pb, 0x55c40000);
1671     avio_wb32(pb, 0x1);
1672     avio_wb32(pb, 0x0);
1673     return 0x34;
1674 }
1675
1676 static int mov_write_udta_sdp(AVIOContext *pb, MOVTrack *track)
1677 {
1678     AVFormatContext *ctx = track->rtp_ctx;
1679     char buf[1000] = "";
1680     int len;
1681
1682     ff_sdp_write_media(buf, sizeof(buf), ctx->streams[0], track->src_track,
1683                        NULL, NULL, 0, 0, ctx);
1684     av_strlcatf(buf, sizeof(buf), "a=control:streamid=%d\r\n", track->track_id);
1685     len = strlen(buf);
1686
1687     avio_wb32(pb, len + 24);
1688     ffio_wfourcc(pb, "udta");
1689     avio_wb32(pb, len + 16);
1690     ffio_wfourcc(pb, "hnti");
1691     avio_wb32(pb, len + 8);
1692     ffio_wfourcc(pb, "sdp ");
1693     avio_write(pb, buf, len);
1694     return len + 24;
1695 }
1696
1697 static int mov_write_track_metadata(AVIOContext *pb, AVStream *st,
1698                                     const char *tag, const char *str)
1699 {
1700     int64_t pos = avio_tell(pb);
1701     AVDictionaryEntry *t = av_dict_get(st->metadata, str, NULL, 0);
1702     if (!t || !utf8len(t->value))
1703         return 0;
1704
1705     avio_wb32(pb, 0);   /* size */
1706     ffio_wfourcc(pb, tag); /* type */
1707     avio_write(pb, t->value, strlen(t->value)); /* UTF8 string value */
1708     return update_size(pb, pos);
1709 }
1710
1711 static int mov_write_track_udta_tag(AVIOContext *pb, MOVMuxContext *mov,
1712                                     AVStream *st)
1713 {
1714     AVIOContext *pb_buf;
1715     int ret, size;
1716     uint8_t *buf;
1717
1718     if (!st)
1719         return 0;
1720
1721     ret = avio_open_dyn_buf(&pb_buf);
1722     if (ret < 0)
1723         return ret;
1724
1725     if (mov->mode & MODE_MP4)
1726         mov_write_track_metadata(pb_buf, st, "name", "title");
1727
1728     if ((size = avio_close_dyn_buf(pb_buf, &buf)) > 0) {
1729         avio_wb32(pb, size + 8);
1730         ffio_wfourcc(pb, "udta");
1731         avio_write(pb, buf, size);
1732     }
1733     av_free(buf);
1734
1735     return 0;
1736 }
1737
1738 static int mov_write_trak_tag(AVIOContext *pb, MOVMuxContext *mov,
1739                               MOVTrack *track, AVStream *st)
1740 {
1741     int64_t pos = avio_tell(pb);
1742     int entry_backup = track->entry;
1743     /* If we want to have an empty moov, but some samples already have been
1744      * buffered (delay_moov), pretend that no samples have been written yet. */
1745     if (mov->flags & FF_MOV_FLAG_EMPTY_MOOV)
1746         track->entry = 0;
1747
1748     avio_wb32(pb, 0); /* size */
1749     ffio_wfourcc(pb, "trak");
1750     mov_write_tkhd_tag(pb, mov, track, st);
1751     if (track->start_dts != AV_NOPTS_VALUE &&
1752         (track->mode == MODE_PSP || track->start_dts || is_clcp_track(track))) {
1753         if (mov->use_editlist)
1754             mov_write_edts_tag(pb, mov, track);  // PSP Movies require edts box
1755         else if ((track->entry && track->cluster[0].dts) || track->mode == MODE_PSP || is_clcp_track(track))
1756             av_log(mov->fc, AV_LOG_WARNING,
1757                    "Not writing any edit list even though one would have been required\n");
1758     }
1759     if (track->tref_tag)
1760         mov_write_tref_tag(pb, track);
1761     mov_write_mdia_tag(mov->fc, pb, mov, track);
1762     if (track->mode == MODE_PSP)
1763         mov_write_uuid_tag_psp(pb, track); // PSP Movies require this uuid box
1764     if (track->tag == MKTAG('r','t','p',' '))
1765         mov_write_udta_sdp(pb, track);
1766     if (track->mode == MODE_MOV) {
1767         if (track->par->codec_type == AVMEDIA_TYPE_VIDEO) {
1768             double sample_aspect_ratio = av_q2d(st->sample_aspect_ratio);
1769             if ((0.0 != sample_aspect_ratio && 1.0 != sample_aspect_ratio)) {
1770                 mov_write_tapt_tag(pb, track);
1771             }
1772         }
1773         if (is_clcp_track(track)) {
1774             mov_write_tapt_tag(pb, track);
1775         }
1776     }
1777     mov_write_track_udta_tag(pb, mov, st);
1778     track->entry = entry_backup;
1779     return update_size(pb, pos);
1780 }
1781
1782 static int mov_write_iods_tag(AVIOContext *pb, MOVMuxContext *mov)
1783 {
1784     int i, has_audio = 0, has_video = 0;
1785     int64_t pos = avio_tell(pb);
1786     int audio_profile = mov->iods_audio_profile;
1787     int video_profile = mov->iods_video_profile;
1788     for (i = 0; i < mov->nb_streams; i++) {
1789         if (mov->tracks[i].entry > 0 || mov->flags & FF_MOV_FLAG_EMPTY_MOOV) {
1790             has_audio |= mov->tracks[i].par->codec_type == AVMEDIA_TYPE_AUDIO;
1791             has_video |= mov->tracks[i].par->codec_type == AVMEDIA_TYPE_VIDEO;
1792         }
1793     }
1794     if (audio_profile < 0)
1795         audio_profile = 0xFF - has_audio;
1796     if (video_profile < 0)
1797         video_profile = 0xFF - has_video;
1798     avio_wb32(pb, 0x0); /* size */
1799     ffio_wfourcc(pb, "iods");
1800     avio_wb32(pb, 0);    /* version & flags */
1801     put_descr(pb, 0x10, 7);
1802     avio_wb16(pb, 0x004f);
1803     avio_w8(pb, 0xff);
1804     avio_w8(pb, 0xff);
1805     avio_w8(pb, audio_profile);
1806     avio_w8(pb, video_profile);
1807     avio_w8(pb, 0xff);
1808     return update_size(pb, pos);
1809 }
1810
1811 static int mov_write_trex_tag(AVIOContext *pb, MOVTrack *track)
1812 {
1813     avio_wb32(pb, 0x20); /* size */
1814     ffio_wfourcc(pb, "trex");
1815     avio_wb32(pb, 0);   /* version & flags */
1816     avio_wb32(pb, track->track_id); /* track ID */
1817     avio_wb32(pb, 1);   /* default sample description index */
1818     avio_wb32(pb, 0);   /* default sample duration */
1819     avio_wb32(pb, 0);   /* default sample size */
1820     avio_wb32(pb, 0);   /* default sample flags */
1821     return 0;
1822 }
1823
1824 static int mov_write_mvex_tag(AVIOContext *pb, MOVMuxContext *mov)
1825 {
1826     int64_t pos = avio_tell(pb);
1827     int i;
1828     avio_wb32(pb, 0x0); /* size */
1829     ffio_wfourcc(pb, "mvex");
1830     for (i = 0; i < mov->nb_streams; i++)
1831         mov_write_trex_tag(pb, &mov->tracks[i]);
1832     return update_size(pb, pos);
1833 }
1834
1835 static int mov_write_mvhd_tag(AVIOContext *pb, MOVMuxContext *mov)
1836 {
1837     int max_track_id = 1, i;
1838     int64_t max_track_len_temp, max_track_len = 0;
1839     int version;
1840
1841     for (i = 0; i < mov->nb_streams; i++) {
1842         if (mov->tracks[i].entry > 0 && mov->tracks[i].timescale) {
1843             max_track_len_temp = av_rescale_rnd(mov->tracks[i].track_duration,
1844                                                 MOV_TIMESCALE,
1845                                                 mov->tracks[i].timescale,
1846                                                 AV_ROUND_UP);
1847             if (max_track_len < max_track_len_temp)
1848                 max_track_len = max_track_len_temp;
1849             if (max_track_id < mov->tracks[i].track_id)
1850                 max_track_id = mov->tracks[i].track_id;
1851         }
1852     }
1853     /* If using delay_moov, make sure the output is the same as if no
1854      * samples had been written yet. */
1855     if (mov->flags & FF_MOV_FLAG_EMPTY_MOOV) {
1856         max_track_len = 0;
1857         max_track_id  = 1;
1858     }
1859
1860     version = max_track_len < UINT32_MAX ? 0 : 1;
1861     (version == 1) ? avio_wb32(pb, 120) : avio_wb32(pb, 108); /* size */
1862     ffio_wfourcc(pb, "mvhd");
1863     avio_w8(pb, version);
1864     avio_wb24(pb, 0); /* flags */
1865     if (version == 1) {
1866         avio_wb64(pb, mov->time);
1867         avio_wb64(pb, mov->time);
1868     } else {
1869         avio_wb32(pb, mov->time); /* creation time */
1870         avio_wb32(pb, mov->time); /* modification time */
1871     }
1872     avio_wb32(pb, MOV_TIMESCALE);
1873     (version == 1) ? avio_wb64(pb, max_track_len) : avio_wb32(pb, max_track_len); /* duration of longest track */
1874
1875     avio_wb32(pb, 0x00010000); /* reserved (preferred rate) 1.0 = normal */
1876     avio_wb16(pb, 0x0100); /* reserved (preferred volume) 1.0 = normal */
1877     avio_wb16(pb, 0); /* reserved */
1878     avio_wb32(pb, 0); /* reserved */
1879     avio_wb32(pb, 0); /* reserved */
1880
1881     /* Matrix structure */
1882     avio_wb32(pb, 0x00010000); /* reserved */
1883     avio_wb32(pb, 0x0); /* reserved */
1884     avio_wb32(pb, 0x0); /* reserved */
1885     avio_wb32(pb, 0x0); /* reserved */
1886     avio_wb32(pb, 0x00010000); /* reserved */
1887     avio_wb32(pb, 0x0); /* reserved */
1888     avio_wb32(pb, 0x0); /* reserved */
1889     avio_wb32(pb, 0x0); /* reserved */
1890     avio_wb32(pb, 0x40000000); /* reserved */
1891
1892     avio_wb32(pb, 0); /* reserved (preview time) */
1893     avio_wb32(pb, 0); /* reserved (preview duration) */
1894     avio_wb32(pb, 0); /* reserved (poster time) */
1895     avio_wb32(pb, 0); /* reserved (selection time) */
1896     avio_wb32(pb, 0); /* reserved (selection duration) */
1897     avio_wb32(pb, 0); /* reserved (current time) */
1898     avio_wb32(pb, max_track_id + 1); /* Next track id */
1899     return 0x6c;
1900 }
1901
1902 static int mov_write_itunes_hdlr_tag(AVIOContext *pb, MOVMuxContext *mov,
1903                                      AVFormatContext *s)
1904 {
1905     avio_wb32(pb, 33); /* size */
1906     ffio_wfourcc(pb, "hdlr");
1907     avio_wb32(pb, 0);
1908     avio_wb32(pb, 0);
1909     ffio_wfourcc(pb, "mdir");
1910     ffio_wfourcc(pb, "appl");
1911     avio_wb32(pb, 0);
1912     avio_wb32(pb, 0);
1913     avio_w8(pb, 0);
1914     return 33;
1915 }
1916
1917 /* helper function to write a data tag with the specified string as data */
1918 static int mov_write_string_data_tag(AVIOContext *pb, const char *data, int lang, int long_style)
1919 {
1920     if (long_style) {
1921         int size = 16 + strlen(data);
1922         avio_wb32(pb, size); /* size */
1923         ffio_wfourcc(pb, "data");
1924         avio_wb32(pb, 1);
1925         avio_wb32(pb, 0);
1926         avio_write(pb, data, strlen(data));
1927         return size;
1928     } else {
1929         if (!lang)
1930             lang = ff_mov_iso639_to_lang("und", 1);
1931         avio_wb16(pb, strlen(data)); /* string length */
1932         avio_wb16(pb, lang);
1933         avio_write(pb, data, strlen(data));
1934         return strlen(data) + 4;
1935     }
1936 }
1937
1938 static int mov_write_string_tag(AVIOContext *pb, const char *name,
1939                                 const char *value, int lang, int long_style)
1940 {
1941     int size = 0;
1942     if (value && value[0]) {
1943         int64_t pos = avio_tell(pb);
1944         avio_wb32(pb, 0); /* size */
1945         ffio_wfourcc(pb, name);
1946         mov_write_string_data_tag(pb, value, lang, long_style);
1947         size = update_size(pb, pos);
1948     }
1949     return size;
1950 }
1951
1952 static AVDictionaryEntry *get_metadata_lang(AVFormatContext *s,
1953                                             const char *tag, int *lang)
1954 {
1955     int l, len, len2;
1956     AVDictionaryEntry *t, *t2 = NULL;
1957     char tag2[16];
1958
1959     *lang = 0;
1960
1961     if (!(t = av_dict_get(s->metadata, tag, NULL, 0)))
1962         return NULL;
1963
1964     len = strlen(t->key);
1965     snprintf(tag2, sizeof(tag2), "%s-", tag);
1966     while ((t2 = av_dict_get(s->metadata, tag2, t2, AV_DICT_IGNORE_SUFFIX))) {
1967         len2 = strlen(t2->key);
1968         if (len2 == len + 4 && !strcmp(t->value, t2->value)
1969             && (l = ff_mov_iso639_to_lang(&t2->key[len2 - 3], 1)) >= 0) {
1970             *lang = l;
1971             return t;
1972         }
1973     }
1974     return t;
1975 }
1976
1977 static int mov_write_string_metadata(AVFormatContext *s, AVIOContext *pb,
1978                                      const char *name, const char *tag,
1979                                      int long_style)
1980 {
1981     int lang;
1982     AVDictionaryEntry *t = get_metadata_lang(s, tag, &lang);
1983     if (!t)
1984         return 0;
1985     return mov_write_string_tag(pb, name, t->value, lang, long_style);
1986 }
1987
1988 /* 3GPP TS 26.244 */
1989 static int mov_write_loci_tag(AVFormatContext *s, AVIOContext *pb)
1990 {
1991     int lang;
1992     int64_t pos = avio_tell(pb);
1993     double latitude, longitude, altitude;
1994     int32_t latitude_fix, longitude_fix, altitude_fix;
1995     AVDictionaryEntry *t = get_metadata_lang(s, "location", &lang);
1996     const char *ptr, *place = "";
1997     char *end;
1998     const char *astronomical_body = "earth";
1999     if (!t)
2000         return 0;
2001
2002     ptr = t->value;
2003     longitude = strtod(ptr, &end);
2004     if (end == ptr) {
2005         av_log(s, AV_LOG_WARNING, "malformed location metadata\n");
2006         return 0;
2007     }
2008     ptr = end;
2009     latitude = strtod(ptr, &end);
2010     if (end == ptr) {
2011         av_log(s, AV_LOG_WARNING, "malformed location metadata\n");
2012         return 0;
2013     }
2014     ptr = end;
2015     altitude = strtod(ptr, &end);
2016     /* If no altitude was present, the default 0 should be fine */
2017     if (*end == '/')
2018         place = end + 1;
2019
2020     latitude_fix  = (int32_t) ((1 << 16) * latitude);
2021     longitude_fix = (int32_t) ((1 << 16) * longitude);
2022     altitude_fix  = (int32_t) ((1 << 16) * altitude);
2023
2024     avio_wb32(pb, 0);         /* size */
2025     ffio_wfourcc(pb, "loci"); /* type */
2026     avio_wb32(pb, 0);         /* version + flags */
2027     avio_wb16(pb, lang);
2028     avio_write(pb, place, strlen(place) + 1);
2029     avio_w8(pb, 0);           /* role of place (0 == shooting location, 1 == real location, 2 == fictional location) */
2030     avio_wb32(pb, latitude_fix);
2031     avio_wb32(pb, longitude_fix);
2032     avio_wb32(pb, altitude_fix);
2033     avio_write(pb, astronomical_body, strlen(astronomical_body) + 1);
2034     avio_w8(pb, 0);           /* additional notes, null terminated string */
2035
2036     return update_size(pb, pos);
2037 }
2038
2039 /* iTunes track number */
2040 static int mov_write_trkn_tag(AVIOContext *pb, MOVMuxContext *mov,
2041                               AVFormatContext *s)
2042 {
2043     AVDictionaryEntry *t = av_dict_get(s->metadata, "track", NULL, 0);
2044     int size = 0, track = t ? atoi(t->value) : 0;
2045     if (track) {
2046         avio_wb32(pb, 32); /* size */
2047         ffio_wfourcc(pb, "trkn");
2048         avio_wb32(pb, 24); /* size */
2049         ffio_wfourcc(pb, "data");
2050         avio_wb32(pb, 0);        // 8 bytes empty
2051         avio_wb32(pb, 0);
2052         avio_wb16(pb, 0);        // empty
2053         avio_wb16(pb, track);    // track number
2054         avio_wb16(pb, 0);        // total track number
2055         avio_wb16(pb, 0);        // empty
2056         size = 32;
2057     }
2058     return size;
2059 }
2060
2061 /* iTunes meta data list */
2062 static int mov_write_ilst_tag(AVIOContext *pb, MOVMuxContext *mov,
2063                               AVFormatContext *s)
2064 {
2065     int64_t pos = avio_tell(pb);
2066     avio_wb32(pb, 0); /* size */
2067     ffio_wfourcc(pb, "ilst");
2068     mov_write_string_metadata(s, pb, "\251nam", "title"    , 1);
2069     mov_write_string_metadata(s, pb, "\251ART", "artist"   , 1);
2070     mov_write_string_metadata(s, pb, "aART", "album_artist", 1);
2071     mov_write_string_metadata(s, pb, "\251wrt", "composer" , 1);
2072     mov_write_string_metadata(s, pb, "\251alb", "album"    , 1);
2073     mov_write_string_metadata(s, pb, "\251day", "date"     , 1);
2074     if (!mov_write_string_metadata(s, pb, "\251too", "encoding_tool", 1)) {
2075         if (!(s->flags & AVFMT_FLAG_BITEXACT))
2076             mov_write_string_tag(pb, "\251too", LIBAVFORMAT_IDENT, 0, 1);
2077     }
2078     mov_write_string_metadata(s, pb, "\251cmt", "comment"  , 1);
2079     mov_write_string_metadata(s, pb, "\251gen", "genre"    , 1);
2080     mov_write_string_metadata(s, pb, "\251cpy", "copyright", 1);
2081     mov_write_string_metadata(s, pb, "\251grp", "grouping" , 1);
2082     mov_write_string_metadata(s, pb, "\251lyr", "lyrics"   , 1);
2083     mov_write_string_metadata(s, pb, "desc",    "description",1);
2084     mov_write_string_metadata(s, pb, "ldes",    "synopsis" , 1);
2085     mov_write_string_metadata(s, pb, "tvsh",    "show"     , 1);
2086     mov_write_string_metadata(s, pb, "tven",    "episode_id",1);
2087     mov_write_string_metadata(s, pb, "tvnn",    "network"  , 1);
2088     mov_write_trkn_tag(pb, mov, s);
2089     return update_size(pb, pos);
2090 }
2091
2092 /* iTunes meta data tag */
2093 static int mov_write_meta_tag(AVIOContext *pb, MOVMuxContext *mov,
2094                               AVFormatContext *s)
2095 {
2096     int size = 0;
2097     int64_t pos = avio_tell(pb);
2098     avio_wb32(pb, 0); /* size */
2099     ffio_wfourcc(pb, "meta");
2100     avio_wb32(pb, 0);
2101     mov_write_itunes_hdlr_tag(pb, mov, s);
2102     mov_write_ilst_tag(pb, mov, s);
2103     size = update_size(pb, pos);
2104     return size;
2105 }
2106
2107 static int ascii_to_wc(AVIOContext *pb, const uint8_t *b)
2108 {
2109     int val;
2110     while (*b) {
2111         GET_UTF8(val, *b++, return -1;)
2112         avio_wb16(pb, val);
2113     }
2114     avio_wb16(pb, 0x00);
2115     return 0;
2116 }
2117
2118 static uint16_t language_code(const char *str)
2119 {
2120     return (((str[0] - 0x60) & 0x1F) << 10) +
2121            (((str[1] - 0x60) & 0x1F) <<  5) +
2122            (( str[2] - 0x60) & 0x1F);
2123 }
2124
2125 static int mov_write_3gp_udta_tag(AVIOContext *pb, AVFormatContext *s,
2126                                   const char *tag, const char *str)
2127 {
2128     int64_t pos = avio_tell(pb);
2129     AVDictionaryEntry *t = av_dict_get(s->metadata, str, NULL, 0);
2130     if (!t || !utf8len(t->value))
2131         return 0;
2132     avio_wb32(pb, 0);   /* size */
2133     ffio_wfourcc(pb, tag); /* type */
2134     avio_wb32(pb, 0);   /* version + flags */
2135     if (!strcmp(tag, "yrrc"))
2136         avio_wb16(pb, atoi(t->value));
2137     else {
2138         avio_wb16(pb, language_code("eng")); /* language */
2139         avio_write(pb, t->value, strlen(t->value) + 1); /* UTF8 string value */
2140         if (!strcmp(tag, "albm") &&
2141             (t = av_dict_get(s->metadata, "track", NULL, 0)))
2142             avio_w8(pb, atoi(t->value));
2143     }
2144     return update_size(pb, pos);
2145 }
2146
2147 static int mov_write_chpl_tag(AVIOContext *pb, AVFormatContext *s)
2148 {
2149     int64_t pos = avio_tell(pb);
2150     int i, nb_chapters = FFMIN(s->nb_chapters, 255);
2151
2152     avio_wb32(pb, 0);            // size
2153     ffio_wfourcc(pb, "chpl");
2154     avio_wb32(pb, 0x01000000);   // version + flags
2155     avio_wb32(pb, 0);            // unknown
2156     avio_w8(pb, nb_chapters);
2157
2158     for (i = 0; i < nb_chapters; i++) {
2159         AVChapter *c = s->chapters[i];
2160         AVDictionaryEntry *t;
2161         avio_wb64(pb, av_rescale_q(c->start, c->time_base, (AVRational){1,10000000}));
2162
2163         if ((t = av_dict_get(c->metadata, "title", NULL, 0))) {
2164             int len = FFMIN(strlen(t->value), 255);
2165             avio_w8(pb, len);
2166             avio_write(pb, t->value, len);
2167         } else
2168             avio_w8(pb, 0);
2169     }
2170     return update_size(pb, pos);
2171 }
2172
2173 static int mov_write_udta_tag(AVIOContext *pb, MOVMuxContext *mov,
2174                               AVFormatContext *s)
2175 {
2176     AVIOContext *pb_buf;
2177     int ret, size;
2178     uint8_t *buf;
2179
2180     ret = avio_open_dyn_buf(&pb_buf);
2181     if (ret < 0)
2182         return ret;
2183
2184     if (mov->mode & MODE_3GP) {
2185         mov_write_3gp_udta_tag(pb_buf, s, "perf", "artist");
2186         mov_write_3gp_udta_tag(pb_buf, s, "titl", "title");
2187         mov_write_3gp_udta_tag(pb_buf, s, "auth", "author");
2188         mov_write_3gp_udta_tag(pb_buf, s, "gnre", "genre");
2189         mov_write_3gp_udta_tag(pb_buf, s, "dscp", "comment");
2190         mov_write_3gp_udta_tag(pb_buf, s, "albm", "album");
2191         mov_write_3gp_udta_tag(pb_buf, s, "cprt", "copyright");
2192         mov_write_3gp_udta_tag(pb_buf, s, "yrrc", "date");
2193         mov_write_loci_tag(s, pb_buf);
2194     } else if (mov->mode == MODE_MOV) { // the title field breaks gtkpod with mp4 and my suspicion is that stuff is not valid in mp4
2195         mov_write_string_metadata(s, pb_buf, "\251ART", "artist",      0);
2196         mov_write_string_metadata(s, pb_buf, "\251nam", "title",       0);
2197         mov_write_string_metadata(s, pb_buf, "\251aut", "author",      0);
2198         mov_write_string_metadata(s, pb_buf, "\251alb", "album",       0);
2199         mov_write_string_metadata(s, pb_buf, "\251day", "date",        0);
2200         if (!(s->flags & AVFMT_FLAG_BITEXACT))
2201             mov_write_string_metadata(s, pb_buf, "\251swr", "encoder", 0);
2202         mov_write_string_metadata(s, pb_buf, "\251des", "comment",     0);
2203         mov_write_string_metadata(s, pb_buf, "\251gen", "genre",       0);
2204         mov_write_string_metadata(s, pb_buf, "\251cpy", "copyright",   0);
2205         mov_write_string_metadata(s, pb_buf, "\251mak", "make",        0);
2206         mov_write_string_metadata(s, pb_buf, "\251mod", "model",       0);
2207         mov_write_string_metadata(s, pb_buf, "\251xyz", "location",    0);
2208     } else {
2209         /* iTunes meta data */
2210         mov_write_meta_tag(pb_buf, mov, s);
2211         mov_write_loci_tag(s, pb_buf);
2212     }
2213
2214     if (s->nb_chapters && !(mov->flags & FF_MOV_FLAG_DISABLE_CHPL))
2215         mov_write_chpl_tag(pb_buf, s);
2216
2217     if ((size = avio_close_dyn_buf(pb_buf, &buf)) > 0) {
2218         avio_wb32(pb, size + 8);
2219         ffio_wfourcc(pb, "udta");
2220         avio_write(pb, buf, size);
2221     }
2222     av_free(buf);
2223
2224     return 0;
2225 }
2226
2227 static void mov_write_psp_udta_tag(AVIOContext *pb,
2228                                    const char *str, const char *lang, int type)
2229 {
2230     int len = utf8len(str) + 1;
2231     if (len <= 0)
2232         return;
2233     avio_wb16(pb, len * 2 + 10);        /* size */
2234     avio_wb32(pb, type);                /* type */
2235     avio_wb16(pb, language_code(lang)); /* language */
2236     avio_wb16(pb, 0x01);                /* ? */
2237     ascii_to_wc(pb, str);
2238 }
2239
2240 static int mov_write_uuidusmt_tag(AVIOContext *pb, AVFormatContext *s)
2241 {
2242     AVDictionaryEntry *title = av_dict_get(s->metadata, "title", NULL, 0);
2243     int64_t pos, pos2;
2244
2245     if (title) {
2246         pos = avio_tell(pb);
2247         avio_wb32(pb, 0); /* size placeholder*/
2248         ffio_wfourcc(pb, "uuid");
2249         ffio_wfourcc(pb, "USMT");
2250         avio_wb32(pb, 0x21d24fce); /* 96 bit UUID */
2251         avio_wb32(pb, 0xbb88695c);
2252         avio_wb32(pb, 0xfac9c740);
2253
2254         pos2 = avio_tell(pb);
2255         avio_wb32(pb, 0); /* size placeholder*/
2256         ffio_wfourcc(pb, "MTDT");
2257         avio_wb16(pb, 4);
2258
2259         // ?
2260         avio_wb16(pb, 0x0C);                 /* size */
2261         avio_wb32(pb, 0x0B);                 /* type */
2262         avio_wb16(pb, language_code("und")); /* language */
2263         avio_wb16(pb, 0x0);                  /* ? */
2264         avio_wb16(pb, 0x021C);               /* data */
2265
2266         mov_write_psp_udta_tag(pb, LIBAVCODEC_IDENT,      "eng", 0x04);
2267         mov_write_psp_udta_tag(pb, title->value,          "eng", 0x01);
2268         mov_write_psp_udta_tag(pb, "2006/04/01 11:11:11", "und", 0x03);
2269
2270         update_size(pb, pos2);
2271         return update_size(pb, pos);
2272     }
2273
2274     return 0;
2275 }
2276
2277 static int mov_write_moov_tag(AVIOContext *pb, MOVMuxContext *mov,
2278                               AVFormatContext *s)
2279 {
2280     int i;
2281     int64_t pos = avio_tell(pb);
2282     avio_wb32(pb, 0); /* size placeholder*/
2283     ffio_wfourcc(pb, "moov");
2284
2285     for (i = 0; i < mov->nb_streams; i++) {
2286         if (mov->tracks[i].entry <= 0 && !(mov->flags & FF_MOV_FLAG_FRAGMENT))
2287             continue;
2288
2289         mov->tracks[i].time     = mov->time;
2290         mov->tracks[i].track_id = i + 1;
2291     }
2292
2293     if (mov->chapter_track)
2294         for (i = 0; i < s->nb_streams; i++) {
2295             mov->tracks[i].tref_tag = MKTAG('c','h','a','p');
2296             mov->tracks[i].tref_id  = mov->tracks[mov->chapter_track].track_id;
2297         }
2298     for (i = 0; i < mov->nb_streams; i++) {
2299         MOVTrack *track = &mov->tracks[i];
2300         if (track->tag == MKTAG('r','t','p',' ')) {
2301             track->tref_tag = MKTAG('h','i','n','t');
2302             track->tref_id = mov->tracks[track->src_track].track_id;
2303         } else if (track->par->codec_type == AVMEDIA_TYPE_AUDIO) {
2304             int * fallback, size;
2305             fallback = (int*)av_stream_get_side_data(track->st,
2306                                                      AV_PKT_DATA_FALLBACK_TRACK,
2307                                                      &size);
2308             if (fallback != NULL && size == sizeof(int)) {
2309                 if (*fallback >= 0 && *fallback < mov->nb_streams) {
2310                     track->tref_tag = MKTAG('f','a','l','l');
2311                     track->tref_id = mov->tracks[*fallback].track_id;
2312                 }
2313             }
2314         }
2315     }
2316
2317     mov_write_mvhd_tag(pb, mov);
2318     if (mov->mode != MODE_MOV && !mov->iods_skip)
2319         mov_write_iods_tag(pb, mov);
2320     for (i = 0; i < mov->nb_streams; i++) {
2321         if (mov->tracks[i].entry > 0 || mov->flags & FF_MOV_FLAG_FRAGMENT) {
2322             mov_write_trak_tag(pb, mov, &(mov->tracks[i]), i < s->nb_streams ? s->streams[i] : NULL);
2323         }
2324     }
2325     if (mov->flags & FF_MOV_FLAG_FRAGMENT)
2326         mov_write_mvex_tag(pb, mov); /* QuickTime requires trak to precede this */
2327
2328     if (mov->mode == MODE_PSP)
2329         mov_write_uuidusmt_tag(pb, s);
2330     else
2331         mov_write_udta_tag(pb, mov, s);
2332
2333     return update_size(pb, pos);
2334 }
2335
2336 static void param_write_int(AVIOContext *pb, const char *name, int value)
2337 {
2338     avio_printf(pb, "<param name=\"%s\" value=\"%d\" valuetype=\"data\"/>\n", name, value);
2339 }
2340
2341 static void param_write_string(AVIOContext *pb, const char *name, const char *value)
2342 {
2343     avio_printf(pb, "<param name=\"%s\" value=\"%s\" valuetype=\"data\"/>\n", name, value);
2344 }
2345
2346 static void param_write_hex(AVIOContext *pb, const char *name, const uint8_t *value, int len)
2347 {
2348     char buf[150];
2349     len = FFMIN(sizeof(buf) / 2 - 1, len);
2350     ff_data_to_hex(buf, value, len, 0);
2351     buf[2 * len] = '\0';
2352     avio_printf(pb, "<param name=\"%s\" value=\"%s\" valuetype=\"data\"/>\n", name, buf);
2353 }
2354
2355 static int mov_write_isml_manifest(AVIOContext *pb, MOVMuxContext *mov)
2356 {
2357     int64_t pos = avio_tell(pb);
2358     int i;
2359     static const uint8_t uuid[] = {
2360         0xa5, 0xd4, 0x0b, 0x30, 0xe8, 0x14, 0x11, 0xdd,
2361         0xba, 0x2f, 0x08, 0x00, 0x20, 0x0c, 0x9a, 0x66
2362     };
2363
2364     avio_wb32(pb, 0);
2365     ffio_wfourcc(pb, "uuid");
2366     avio_write(pb, uuid, sizeof(uuid));
2367     avio_wb32(pb, 0);
2368
2369     avio_printf(pb, "<?xml version=\"1.0\" encoding=\"utf-8\"?>\n");
2370     avio_printf(pb, "<smil xmlns=\"http://www.w3.org/2001/SMIL20/Language\">\n");
2371     avio_printf(pb, "<head>\n");
2372     avio_printf(pb, "<meta name=\"creator\" content=\"%s\" />\n",
2373                     LIBAVFORMAT_IDENT);
2374     avio_printf(pb, "</head>\n");
2375     avio_printf(pb, "<body>\n");
2376     avio_printf(pb, "<switch>\n");
2377     for (i = 0; i < mov->nb_streams; i++) {
2378         MOVTrack *track = &mov->tracks[i];
2379         const char *type;
2380         /* track->track_id is initialized in write_moov, and thus isn't known
2381          * here yet */
2382         int track_id = i + 1;
2383
2384         if (track->par->codec_type == AVMEDIA_TYPE_VIDEO) {
2385             type = "video";
2386         } else if (track->par->codec_type == AVMEDIA_TYPE_AUDIO) {
2387             type = "audio";
2388         } else {
2389             continue;
2390         }
2391         avio_printf(pb, "<%s systemBitrate=\"%d\">\n", type,
2392                                                        track->par->bit_rate);
2393         param_write_int(pb, "systemBitrate", track->par->bit_rate);
2394         param_write_int(pb, "trackID", track_id);
2395         if (track->par->codec_type == AVMEDIA_TYPE_VIDEO) {
2396             if (track->par->codec_id == AV_CODEC_ID_H264) {
2397                 uint8_t *ptr;
2398                 int size = track->par->extradata_size;
2399                 if (!ff_avc_write_annexb_extradata(track->par->extradata, &ptr,
2400                                                    &size)) {
2401                     param_write_hex(pb, "CodecPrivateData",
2402                                     ptr ? ptr : track->par->extradata,
2403                                     size);
2404                     av_free(ptr);
2405                 }
2406                 param_write_string(pb, "FourCC", "H264");
2407             } else if (track->par->codec_id == AV_CODEC_ID_VC1) {
2408                 param_write_string(pb, "FourCC", "WVC1");
2409                 param_write_hex(pb, "CodecPrivateData", track->par->extradata,
2410                                 track->par->extradata_size);
2411             }
2412             param_write_int(pb, "MaxWidth", track->par->width);
2413             param_write_int(pb, "MaxHeight", track->par->height);
2414             param_write_int(pb, "DisplayWidth", track->par->width);
2415             param_write_int(pb, "DisplayHeight", track->par->height);
2416         } else {
2417             if (track->par->codec_id == AV_CODEC_ID_AAC) {
2418                 param_write_string(pb, "FourCC", "AACL");
2419             } else if (track->par->codec_id == AV_CODEC_ID_WMAPRO) {
2420                 param_write_string(pb, "FourCC", "WMAP");
2421             }
2422             param_write_hex(pb, "CodecPrivateData", track->par->extradata,
2423                             track->par->extradata_size);
2424             param_write_int(pb, "AudioTag", ff_codec_get_tag(ff_codec_wav_tags,
2425                                                              track->par->codec_id));
2426             param_write_int(pb, "Channels", track->par->channels);
2427             param_write_int(pb, "SamplingRate", track->par->sample_rate);
2428             param_write_int(pb, "BitsPerSample", 16);
2429             param_write_int(pb, "PacketSize", track->par->block_align ?
2430                                               track->par->block_align : 4);
2431         }
2432         avio_printf(pb, "</%s>\n", type);
2433     }
2434     avio_printf(pb, "</switch>\n");
2435     avio_printf(pb, "</body>\n");
2436     avio_printf(pb, "</smil>\n");
2437
2438     return update_size(pb, pos);
2439 }
2440
2441 static int mov_write_mfhd_tag(AVIOContext *pb, MOVMuxContext *mov)
2442 {
2443     avio_wb32(pb, 16);
2444     ffio_wfourcc(pb, "mfhd");
2445     avio_wb32(pb, 0);
2446     avio_wb32(pb, mov->fragments);
2447     return 0;
2448 }
2449
2450 static uint32_t get_sample_flags(MOVTrack *track, MOVIentry *entry)
2451 {
2452     return entry->flags & MOV_SYNC_SAMPLE ? MOV_FRAG_SAMPLE_FLAG_DEPENDS_NO :
2453            (MOV_FRAG_SAMPLE_FLAG_DEPENDS_YES | MOV_FRAG_SAMPLE_FLAG_IS_NON_SYNC);
2454 }
2455
2456 static int mov_write_tfhd_tag(AVIOContext *pb, MOVMuxContext *mov,
2457                               MOVTrack *track, int64_t moof_offset)
2458 {
2459     int64_t pos = avio_tell(pb);
2460     uint32_t flags = MOV_TFHD_DEFAULT_SIZE | MOV_TFHD_DEFAULT_DURATION |
2461                      MOV_TFHD_BASE_DATA_OFFSET;
2462     if (!track->entry) {
2463         flags |= MOV_TFHD_DURATION_IS_EMPTY;
2464     } else {
2465         flags |= MOV_TFHD_DEFAULT_FLAGS;
2466     }
2467     if (mov->flags & FF_MOV_FLAG_OMIT_TFHD_OFFSET)
2468         flags &= ~MOV_TFHD_BASE_DATA_OFFSET;
2469     if (mov->flags & FF_MOV_FLAG_DEFAULT_BASE_MOOF) {
2470         flags &= ~MOV_TFHD_BASE_DATA_OFFSET;
2471         flags |= MOV_TFHD_DEFAULT_BASE_IS_MOOF;
2472     }
2473
2474     /* Don't set a default sample size, the silverlight player refuses
2475      * to play files with that set. Don't set a default sample duration,
2476      * WMP freaks out if it is set. Don't set a base data offset, PIFF
2477      * file format says it MUST NOT be set. */
2478     if (track->mode == MODE_ISM)
2479         flags &= ~(MOV_TFHD_DEFAULT_SIZE | MOV_TFHD_DEFAULT_DURATION |
2480                    MOV_TFHD_BASE_DATA_OFFSET);
2481
2482     avio_wb32(pb, 0); /* size placeholder */
2483     ffio_wfourcc(pb, "tfhd");
2484     avio_w8(pb, 0); /* version */
2485     avio_wb24(pb, flags);
2486
2487     avio_wb32(pb, track->track_id); /* track-id */
2488     if (flags & MOV_TFHD_BASE_DATA_OFFSET)
2489         avio_wb64(pb, moof_offset);
2490     if (flags & MOV_TFHD_DEFAULT_DURATION) {
2491         track->default_duration = get_cluster_duration(track, 0);
2492         avio_wb32(pb, track->default_duration);
2493     }
2494     if (flags & MOV_TFHD_DEFAULT_SIZE) {
2495         track->default_size = track->entry ? track->cluster[0].size : 1;
2496         avio_wb32(pb, track->default_size);
2497     } else
2498         track->default_size = -1;
2499
2500     if (flags & MOV_TFHD_DEFAULT_FLAGS) {
2501         /* Set the default flags based on the second sample, if available.
2502          * If the first sample is different, that can be signaled via a separate field. */
2503         if (track->entry > 1)
2504             track->default_sample_flags = get_sample_flags(track, &track->cluster[1]);
2505         else
2506             track->default_sample_flags =
2507                 track->par->codec_type == AVMEDIA_TYPE_VIDEO ?
2508                 (MOV_FRAG_SAMPLE_FLAG_DEPENDS_YES | MOV_FRAG_SAMPLE_FLAG_IS_NON_SYNC) :
2509                 MOV_FRAG_SAMPLE_FLAG_DEPENDS_NO;
2510         avio_wb32(pb, track->default_sample_flags);
2511     }
2512
2513     return update_size(pb, pos);
2514 }
2515
2516 static int mov_write_trun_tag(AVIOContext *pb, MOVMuxContext *mov,
2517                               MOVTrack *track, int moof_size,
2518                               int first, int end)
2519 {
2520     int64_t pos = avio_tell(pb);
2521     uint32_t flags = MOV_TRUN_DATA_OFFSET;
2522     int i;
2523
2524     for (i = first; i < end; i++) {
2525         if (get_cluster_duration(track, i) != track->default_duration)
2526             flags |= MOV_TRUN_SAMPLE_DURATION;
2527         if (track->cluster[i].size != track->default_size)
2528             flags |= MOV_TRUN_SAMPLE_SIZE;
2529         if (i > first && get_sample_flags(track, &track->cluster[i]) != track->default_sample_flags)
2530             flags |= MOV_TRUN_SAMPLE_FLAGS;
2531     }
2532     if (!(flags & MOV_TRUN_SAMPLE_FLAGS) && track->entry > 0 &&
2533          get_sample_flags(track, &track->cluster[0]) != track->default_sample_flags)
2534         flags |= MOV_TRUN_FIRST_SAMPLE_FLAGS;
2535     if (track->flags & MOV_TRACK_CTTS)
2536         flags |= MOV_TRUN_SAMPLE_CTS;
2537
2538     avio_wb32(pb, 0); /* size placeholder */
2539     ffio_wfourcc(pb, "trun");
2540     if (mov->flags & FF_MOV_FLAG_NEGATIVE_CTS_OFFSETS)
2541         avio_w8(pb, 1); /* version */
2542     else
2543         avio_w8(pb, 0); /* version */
2544     avio_wb24(pb, flags);
2545
2546     avio_wb32(pb, end - first); /* sample count */
2547     if (mov->flags & FF_MOV_FLAG_OMIT_TFHD_OFFSET &&
2548         !(mov->flags & FF_MOV_FLAG_DEFAULT_BASE_MOOF) &&
2549         !mov->first_trun)
2550         avio_wb32(pb, 0); /* Later tracks follow immediately after the previous one */
2551     else
2552         avio_wb32(pb, moof_size + 8 + track->data_offset +
2553                       track->cluster[first].pos); /* data offset */
2554     if (flags & MOV_TRUN_FIRST_SAMPLE_FLAGS)
2555         avio_wb32(pb, get_sample_flags(track, &track->cluster[first]));
2556
2557     for (i = first; i < end; i++) {
2558         if (flags & MOV_TRUN_SAMPLE_DURATION)
2559             avio_wb32(pb, get_cluster_duration(track, i));
2560         if (flags & MOV_TRUN_SAMPLE_SIZE)
2561             avio_wb32(pb, track->cluster[i].size);
2562         if (flags & MOV_TRUN_SAMPLE_FLAGS)
2563             avio_wb32(pb, get_sample_flags(track, &track->cluster[i]));
2564         if (flags & MOV_TRUN_SAMPLE_CTS)
2565             avio_wb32(pb, track->cluster[i].cts);
2566     }
2567
2568     mov->first_trun = 0;
2569     return update_size(pb, pos);
2570 }
2571
2572 static int mov_write_tfxd_tag(AVIOContext *pb, MOVTrack *track)
2573 {
2574     int64_t pos = avio_tell(pb);
2575     static const uint8_t uuid[] = {
2576         0x6d, 0x1d, 0x9b, 0x05, 0x42, 0xd5, 0x44, 0xe6,
2577         0x80, 0xe2, 0x14, 0x1d, 0xaf, 0xf7, 0x57, 0xb2
2578     };
2579
2580     avio_wb32(pb, 0); /* size placeholder */
2581     ffio_wfourcc(pb, "uuid");
2582     avio_write(pb, uuid, sizeof(uuid));
2583     avio_w8(pb, 1);
2584     avio_wb24(pb, 0);
2585     avio_wb64(pb, track->start_dts + track->frag_start +
2586                   track->cluster[0].cts);
2587     avio_wb64(pb, track->end_pts -
2588                   (track->cluster[0].dts + track->cluster[0].cts));
2589
2590     return update_size(pb, pos);
2591 }
2592
2593 static int mov_write_tfrf_tag(AVIOContext *pb, MOVMuxContext *mov,
2594                               MOVTrack *track, int entry)
2595 {
2596     int n = track->nb_frag_info - 1 - entry, i;
2597     int size = 8 + 16 + 4 + 1 + 16*n;
2598     static const uint8_t uuid[] = {
2599         0xd4, 0x80, 0x7e, 0xf2, 0xca, 0x39, 0x46, 0x95,
2600         0x8e, 0x54, 0x26, 0xcb, 0x9e, 0x46, 0xa7, 0x9f
2601     };
2602
2603     if (entry < 0)
2604         return 0;
2605
2606     avio_seek(pb, track->frag_info[entry].tfrf_offset, SEEK_SET);
2607     avio_wb32(pb, size);
2608     ffio_wfourcc(pb, "uuid");
2609     avio_write(pb, uuid, sizeof(uuid));
2610     avio_w8(pb, 1);
2611     avio_wb24(pb, 0);
2612     avio_w8(pb, n);
2613     for (i = 0; i < n; i++) {
2614         int index = entry + 1 + i;
2615         avio_wb64(pb, track->frag_info[index].time);
2616         avio_wb64(pb, track->frag_info[index].duration);
2617     }
2618     if (n < mov->ism_lookahead) {
2619         int free_size = 16 * (mov->ism_lookahead - n);
2620         avio_wb32(pb, free_size);
2621         ffio_wfourcc(pb, "free");
2622         for (i = 0; i < free_size - 8; i++)
2623             avio_w8(pb, 0);
2624     }
2625
2626     return 0;
2627 }
2628
2629 static int mov_write_tfrf_tags(AVIOContext *pb, MOVMuxContext *mov,
2630                                MOVTrack *track)
2631 {
2632     int64_t pos = avio_tell(pb);
2633     int i;
2634     for (i = 0; i < mov->ism_lookahead; i++) {
2635         /* Update the tfrf tag for the last ism_lookahead fragments,
2636          * nb_frag_info - 1 is the next fragment to be written. */
2637         mov_write_tfrf_tag(pb, mov, track, track->nb_frag_info - 2 - i);
2638     }
2639     avio_seek(pb, pos, SEEK_SET);
2640     return 0;
2641 }
2642
2643 static int mov_add_tfra_entries(AVIOContext *pb, MOVMuxContext *mov, int tracks,
2644                                 int size)
2645 {
2646     int i;
2647     for (i = 0; i < mov->nb_streams; i++) {
2648         MOVTrack *track = &mov->tracks[i];
2649         MOVFragmentInfo *info;
2650         if ((tracks >= 0 && i != tracks) || !track->entry)
2651             continue;
2652         track->nb_frag_info++;
2653         if (track->nb_frag_info >= track->frag_info_capacity) {
2654             unsigned new_capacity = track->nb_frag_info + MOV_FRAG_INFO_ALLOC_INCREMENT;
2655             if (av_reallocp_array(&track->frag_info,
2656                                   new_capacity,
2657                                   sizeof(*track->frag_info)))
2658                 return AVERROR(ENOMEM);
2659             track->frag_info_capacity = new_capacity;
2660         }
2661         info = &track->frag_info[track->nb_frag_info - 1];
2662         info->offset   = avio_tell(pb);
2663         info->size     = size;
2664         // Try to recreate the original pts for the first packet
2665         // from the fields we have stored
2666         info->time     = track->start_dts + track->frag_start +
2667                          track->cluster[0].cts;
2668         info->duration = track->end_pts -
2669                          (track->cluster[0].dts + track->cluster[0].cts);
2670         // If the pts is less than zero, we will have trimmed
2671         // away parts of the media track using an edit list,
2672         // and the corresponding start presentation time is zero.
2673         if (info->time < 0) {
2674             info->duration += info->time;
2675             info->time = 0;
2676         }
2677         info->tfrf_offset = 0;
2678         mov_write_tfrf_tags(pb, mov, track);
2679     }
2680     return 0;
2681 }
2682
2683 static void mov_prune_frag_info(MOVMuxContext *mov, int tracks, int max)
2684 {
2685     int i;
2686     for (i = 0; i < mov->nb_streams; i++) {
2687         MOVTrack *track = &mov->tracks[i];
2688         if ((tracks >= 0 && i != tracks) || !track->entry)
2689             continue;
2690         if (track->nb_frag_info > max) {
2691             memmove(track->frag_info, track->frag_info + (track->nb_frag_info - max), max * sizeof(*track->frag_info));
2692             track->nb_frag_info = max;
2693         }
2694     }
2695 }
2696
2697 static int mov_write_tfdt_tag(AVIOContext *pb, MOVTrack *track)
2698 {
2699     int64_t pos = avio_tell(pb);
2700
2701     avio_wb32(pb, 0); /* size */
2702     ffio_wfourcc(pb, "tfdt");
2703     avio_w8(pb, 1); /* version */
2704     avio_wb24(pb, 0);
2705     avio_wb64(pb, track->frag_start);
2706     return update_size(pb, pos);
2707 }
2708
2709 static int mov_write_traf_tag(AVIOContext *pb, MOVMuxContext *mov,
2710                               MOVTrack *track, int64_t moof_offset,
2711                               int moof_size)
2712 {
2713     int64_t pos = avio_tell(pb);
2714     int i, start = 0;
2715     avio_wb32(pb, 0); /* size placeholder */
2716     ffio_wfourcc(pb, "traf");
2717
2718     mov_write_tfhd_tag(pb, mov, track, moof_offset);
2719     if (mov->mode != MODE_ISM)
2720         mov_write_tfdt_tag(pb, track);
2721     for (i = 1; i < track->entry; i++) {
2722         if (track->cluster[i].pos != track->cluster[i - 1].pos + track->cluster[i - 1].size) {
2723             mov_write_trun_tag(pb, mov, track, moof_size, start, i);
2724             start = i;
2725         }
2726     }
2727     mov_write_trun_tag(pb, mov, track, moof_size, start, track->entry);
2728     if (mov->mode == MODE_ISM) {
2729         mov_write_tfxd_tag(pb, track);
2730
2731         if (mov->ism_lookahead) {
2732             int i, size = 16 + 4 + 1 + 16 * mov->ism_lookahead;
2733
2734             if (track->nb_frag_info > 0) {
2735                 MOVFragmentInfo *info = &track->frag_info[track->nb_frag_info - 1];
2736                 if (!info->tfrf_offset)
2737                     info->tfrf_offset = avio_tell(pb);
2738             }
2739             avio_wb32(pb, 8 + size);
2740             ffio_wfourcc(pb, "free");
2741             for (i = 0; i < size; i++)
2742                 avio_w8(pb, 0);
2743         }
2744     }
2745
2746     return update_size(pb, pos);
2747 }
2748
2749 static int mov_write_moof_tag_internal(AVIOContext *pb, MOVMuxContext *mov,
2750                                        int tracks, int moof_size)
2751 {
2752     int64_t pos = avio_tell(pb);
2753     int i;
2754
2755     avio_wb32(pb, 0); /* size placeholder */
2756     ffio_wfourcc(pb, "moof");
2757     mov->first_trun = 1;
2758
2759     mov_write_mfhd_tag(pb, mov);
2760     for (i = 0; i < mov->nb_streams; i++) {
2761         MOVTrack *track = &mov->tracks[i];
2762         if (tracks >= 0 && i != tracks)
2763             continue;
2764         if (!track->entry)
2765             continue;
2766         mov_write_traf_tag(pb, mov, track, pos, moof_size);
2767     }
2768
2769     return update_size(pb, pos);
2770 }
2771
2772 static int mov_write_sidx_tag(AVIOContext *pb,
2773                               MOVTrack *track, int ref_size, int total_sidx_size)
2774 {
2775     int64_t pos = avio_tell(pb), offset_pos, end_pos;
2776     int64_t presentation_time, duration, offset;
2777     int starts_with_SAP, i, entries;
2778
2779     if (track->entry) {
2780         entries = 1;
2781         presentation_time = track->start_dts + track->frag_start +
2782                             track->cluster[0].cts;
2783         duration = track->end_pts -
2784                    (track->cluster[0].dts + track->cluster[0].cts);
2785         starts_with_SAP = track->cluster[0].flags & MOV_SYNC_SAMPLE;
2786
2787         // pts<0 should be cut away using edts
2788         if (presentation_time < 0) {
2789             duration += presentation_time;
2790             presentation_time = 0;
2791         }
2792     } else {
2793         entries = track->nb_frag_info;
2794         if (entries <= 0)
2795             return 0;
2796         presentation_time = track->frag_info[0].time;
2797     }
2798
2799     avio_wb32(pb, 0); /* size */
2800     ffio_wfourcc(pb, "sidx");
2801     avio_w8(pb, 1); /* version */
2802     avio_wb24(pb, 0);
2803     avio_wb32(pb, track->track_id); /* reference_ID */
2804     avio_wb32(pb, track->timescale); /* timescale */
2805     avio_wb64(pb, presentation_time); /* earliest_presentation_time */
2806     offset_pos = avio_tell(pb);
2807     avio_wb64(pb, 0); /* first_offset (offset to referenced moof) */
2808     avio_wb16(pb, 0); /* reserved */
2809
2810     avio_wb16(pb, entries); /* reference_count */
2811     for (i = 0; i < entries; i++) {
2812         if (!track->entry) {
2813             if (i > 1 && track->frag_info[i].offset != track->frag_info[i - 1].offset + track->frag_info[i - 1].size) {
2814                av_log(NULL, AV_LOG_ERROR, "Non-consecutive fragments, writing incorrect sidx\n");
2815             }
2816             duration = track->frag_info[i].duration;
2817             ref_size = track->frag_info[i].size;
2818             starts_with_SAP = 1;
2819         }
2820         avio_wb32(pb, (0 << 31) | (ref_size & 0x7fffffff)); /* reference_type (0 = media) | referenced_size */
2821         avio_wb32(pb, duration); /* subsegment_duration */
2822         avio_wb32(pb, (starts_with_SAP << 31) | (0 << 28) | 0); /* starts_with_SAP | SAP_type | SAP_delta_time */
2823     }
2824
2825     end_pos = avio_tell(pb);
2826     offset = pos + total_sidx_size - end_pos;
2827     avio_seek(pb, offset_pos, SEEK_SET);
2828     avio_wb64(pb, offset);
2829     avio_seek(pb, end_pos, SEEK_SET);
2830     return update_size(pb, pos);
2831 }
2832
2833 static int mov_write_sidx_tags(AVIOContext *pb, MOVMuxContext *mov,
2834                                int tracks, int ref_size)
2835 {
2836     int i, round, ret;
2837     AVIOContext *avio_buf;
2838     int total_size = 0;
2839     for (round = 0; round < 2; round++) {
2840         // First run one round to calculate the total size of all
2841         // sidx atoms.
2842         // This would be much simpler if we'd only write one sidx
2843         // atom, for the first track in the moof.
2844         if (round == 0) {
2845             if ((ret = ffio_open_null_buf(&avio_buf)) < 0)
2846                 return ret;
2847         } else {
2848             avio_buf = pb;
2849         }
2850         for (i = 0; i < mov->nb_streams; i++) {
2851             MOVTrack *track = &mov->tracks[i];
2852             if (tracks >= 0 && i != tracks)
2853                 continue;
2854             // When writing a sidx for the full file, entry is 0, but
2855             // we want to include all tracks. ref_size is 0 in this case,
2856             // since we read it from frag_info instead.
2857             if (!track->entry && ref_size > 0)
2858                 continue;
2859             total_size -= mov_write_sidx_tag(avio_buf, track, ref_size,
2860                                              total_size);
2861         }
2862         if (round == 0)
2863             total_size = ffio_close_null_buf(avio_buf);
2864     }
2865     return 0;
2866 }
2867
2868 static int mov_write_moof_tag(AVIOContext *pb, MOVMuxContext *mov, int tracks,
2869                               int64_t mdat_size)
2870 {
2871     AVIOContext *avio_buf;
2872     int ret, moof_size;
2873
2874     if ((ret = ffio_open_null_buf(&avio_buf)) < 0)
2875         return ret;
2876     mov_write_moof_tag_internal(avio_buf, mov, tracks, 0);
2877     moof_size = ffio_close_null_buf(avio_buf);
2878
2879     if (mov->flags & FF_MOV_FLAG_DASH && !(mov->flags & FF_MOV_FLAG_GLOBAL_SIDX))
2880         mov_write_sidx_tags(pb, mov, tracks, moof_size + 8 + mdat_size);
2881
2882     if (mov->flags & FF_MOV_FLAG_GLOBAL_SIDX ||
2883         !(mov->flags & FF_MOV_FLAG_SKIP_TRAILER) ||
2884         mov->ism_lookahead) {
2885         if ((ret = mov_add_tfra_entries(pb, mov, tracks, moof_size + 8 + mdat_size)) < 0)
2886             return ret;
2887         if (!(mov->flags & FF_MOV_FLAG_GLOBAL_SIDX) &&
2888             mov->flags & FF_MOV_FLAG_SKIP_TRAILER) {
2889             mov_prune_frag_info(mov, tracks, mov->ism_lookahead + 1);
2890         }
2891     }
2892
2893     return mov_write_moof_tag_internal(pb, mov, tracks, moof_size);
2894 }
2895
2896 static int mov_write_tfra_tag(AVIOContext *pb, MOVTrack *track)
2897 {
2898     int64_t pos = avio_tell(pb);
2899     int i;
2900
2901     avio_wb32(pb, 0); /* size placeholder */
2902     ffio_wfourcc(pb, "tfra");
2903     avio_w8(pb, 1); /* version */
2904     avio_wb24(pb, 0);
2905
2906     avio_wb32(pb, track->track_id);
2907     avio_wb32(pb, 0); /* length of traf/trun/sample num */
2908     avio_wb32(pb, track->nb_frag_info);
2909     for (i = 0; i < track->nb_frag_info; i++) {
2910         avio_wb64(pb, track->frag_info[i].time);
2911         avio_wb64(pb, track->frag_info[i].offset + track->data_offset);
2912         avio_w8(pb, 1); /* traf number */
2913         avio_w8(pb, 1); /* trun number */
2914         avio_w8(pb, 1); /* sample number */
2915     }
2916
2917     return update_size(pb, pos);
2918 }
2919
2920 static int mov_write_mfra_tag(AVIOContext *pb, MOVMuxContext *mov)
2921 {
2922     int64_t pos = avio_tell(pb);
2923     int i;
2924
2925     avio_wb32(pb, 0); /* size placeholder */
2926     ffio_wfourcc(pb, "mfra");
2927     /* An empty mfra atom is enough to indicate to the publishing point that
2928      * the stream has ended. */
2929     if (mov->flags & FF_MOV_FLAG_ISML)
2930         return update_size(pb, pos);
2931
2932     for (i = 0; i < mov->nb_streams; i++) {
2933         MOVTrack *track = &mov->tracks[i];
2934         if (track->nb_frag_info)
2935             mov_write_tfra_tag(pb, track);
2936     }
2937
2938     avio_wb32(pb, 16);
2939     ffio_wfourcc(pb, "mfro");
2940     avio_wb32(pb, 0); /* version + flags */
2941     avio_wb32(pb, avio_tell(pb) + 4 - pos);
2942
2943     return update_size(pb, pos);
2944 }
2945
2946 static int mov_write_mdat_tag(AVIOContext *pb, MOVMuxContext *mov)
2947 {
2948     avio_wb32(pb, 8);    // placeholder for extended size field (64 bit)
2949     ffio_wfourcc(pb, mov->mode == MODE_MOV ? "wide" : "free");
2950
2951     mov->mdat_pos = avio_tell(pb);
2952     avio_wb32(pb, 0); /* size placeholder*/
2953     ffio_wfourcc(pb, "mdat");
2954     return 0;
2955 }
2956
2957 /* TODO: This needs to be more general */
2958 static int mov_write_ftyp_tag(AVIOContext *pb, AVFormatContext *s)
2959 {
2960     MOVMuxContext *mov = s->priv_data;
2961     int64_t pos = avio_tell(pb);
2962     int has_h264 = 0, has_video = 0;
2963     int minor = 0x200;
2964     int i;
2965
2966     for (i = 0; i < s->nb_streams; i++) {
2967         AVStream *st = s->streams[i];
2968         if (st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO)
2969             has_video = 1;
2970         if (st->codecpar->codec_id == AV_CODEC_ID_H264)
2971             has_h264 = 1;
2972     }
2973
2974     avio_wb32(pb, 0); /* size */
2975     ffio_wfourcc(pb, "ftyp");
2976
2977     if (mov->major_brand && strlen(mov->major_brand) >= 4)
2978         ffio_wfourcc(pb, mov->major_brand);
2979     else if (mov->mode == MODE_3GP) {
2980         ffio_wfourcc(pb, has_h264 ? "3gp6"  : "3gp4");
2981         minor =     has_h264 ?   0x100 :   0x200;
2982     } else if (mov->mode & MODE_3G2) {
2983         ffio_wfourcc(pb, has_h264 ? "3g2b"  : "3g2a");
2984         minor =     has_h264 ? 0x20000 : 0x10000;
2985     } else if (mov->mode == MODE_PSP)
2986         ffio_wfourcc(pb, "MSNV");
2987     else if (mov->mode == MODE_MP4 && mov->flags & FF_MOV_FLAG_DEFAULT_BASE_MOOF)
2988         ffio_wfourcc(pb, "iso5"); // Required when using default-base-is-moof
2989     else if (mov->mode == MODE_MP4 && mov->flags & FF_MOV_FLAG_NEGATIVE_CTS_OFFSETS)
2990         ffio_wfourcc(pb, "iso4");
2991     else if (mov->mode == MODE_MP4)
2992         ffio_wfourcc(pb, "isom");
2993     else if (mov->mode == MODE_IPOD)
2994         ffio_wfourcc(pb, has_video ? "M4V ":"M4A ");
2995     else if (mov->mode == MODE_ISM)
2996         ffio_wfourcc(pb, "isml");
2997     else if (mov->mode == MODE_F4V)
2998         ffio_wfourcc(pb, "f4v ");
2999     else
3000         ffio_wfourcc(pb, "qt  ");
3001
3002     avio_wb32(pb, minor);
3003
3004     if (mov->mode == MODE_MOV)
3005         ffio_wfourcc(pb, "qt  ");
3006     else if (mov->mode == MODE_ISM) {
3007         ffio_wfourcc(pb, "piff");
3008     } else if (!(mov->flags & FF_MOV_FLAG_DEFAULT_BASE_MOOF)) {
3009         ffio_wfourcc(pb, "isom");
3010         ffio_wfourcc(pb, "iso2");
3011         if (has_h264)
3012             ffio_wfourcc(pb, "avc1");
3013     }
3014
3015     // We add tfdt atoms when fragmenting, signal this with the iso6 compatible
3016     // brand. This is compatible with users that don't understand tfdt.
3017     if (mov->flags & FF_MOV_FLAG_FRAGMENT && mov->mode != MODE_ISM)
3018         ffio_wfourcc(pb, "iso6");
3019
3020     if (mov->mode == MODE_3GP)
3021         ffio_wfourcc(pb, has_h264 ? "3gp6":"3gp4");
3022     else if (mov->mode & MODE_3G2)
3023         ffio_wfourcc(pb, has_h264 ? "3g2b":"3g2a");
3024     else if (mov->mode == MODE_PSP)
3025         ffio_wfourcc(pb, "MSNV");
3026     else if (mov->mode == MODE_MP4)
3027         ffio_wfourcc(pb, "mp41");
3028
3029     if (mov->flags & FF_MOV_FLAG_DASH && mov->flags & FF_MOV_FLAG_GLOBAL_SIDX)
3030         ffio_wfourcc(pb, "dash");
3031
3032     return update_size(pb, pos);
3033 }
3034
3035 static void mov_write_uuidprof_tag(AVIOContext *pb, AVFormatContext *s)
3036 {
3037     AVStream       *video_st    = s->streams[0];
3038     AVCodecParameters *video_par = s->streams[0]->codecpar;
3039     AVCodecParameters *audio_par = s->streams[1]->codecpar;
3040     int audio_rate = audio_par->sample_rate;
3041     // TODO: should be avg_frame_rate
3042     int frame_rate = ((video_st->time_base.den) * (0x10000)) / (video_st->time_base.num);
3043     int audio_kbitrate = audio_par->bit_rate / 1000;
3044     int video_kbitrate = FFMIN(video_par->bit_rate / 1000, 800 - audio_kbitrate);
3045
3046     avio_wb32(pb, 0x94); /* size */
3047     ffio_wfourcc(pb, "uuid");
3048     ffio_wfourcc(pb, "PROF");
3049
3050     avio_wb32(pb, 0x21d24fce); /* 96 bit UUID */
3051     avio_wb32(pb, 0xbb88695c);
3052     avio_wb32(pb, 0xfac9c740);
3053
3054     avio_wb32(pb, 0x0);  /* ? */
3055     avio_wb32(pb, 0x3);  /* 3 sections ? */
3056
3057     avio_wb32(pb, 0x14); /* size */
3058     ffio_wfourcc(pb, "FPRF");
3059     avio_wb32(pb, 0x0);  /* ? */
3060     avio_wb32(pb, 0x0);  /* ? */
3061     avio_wb32(pb, 0x0);  /* ? */
3062
3063     avio_wb32(pb, 0x2c);  /* size */
3064     ffio_wfourcc(pb, "APRF"); /* audio */
3065     avio_wb32(pb, 0x0);
3066     avio_wb32(pb, 0x2);   /* TrackID */
3067     ffio_wfourcc(pb, "mp4a");
3068     avio_wb32(pb, 0x20f);
3069     avio_wb32(pb, 0x0);
3070     avio_wb32(pb, audio_kbitrate);
3071     avio_wb32(pb, audio_kbitrate);
3072     avio_wb32(pb, audio_rate);
3073     avio_wb32(pb, audio_par->channels);
3074
3075     avio_wb32(pb, 0x34);  /* size */
3076     ffio_wfourcc(pb, "VPRF");   /* video */
3077     avio_wb32(pb, 0x0);
3078     avio_wb32(pb, 0x1);    /* TrackID */
3079     if (video_par->codec_id == AV_CODEC_ID_H264) {
3080         ffio_wfourcc(pb, "avc1");
3081         avio_wb16(pb, 0x014D);
3082         avio_wb16(pb, 0x0015);
3083     } else {
3084         ffio_wfourcc(pb, "mp4v");
3085         avio_wb16(pb, 0x0000);
3086         avio_wb16(pb, 0x0103);
3087     }
3088     avio_wb32(pb, 0x0);
3089     avio_wb32(pb, video_kbitrate);
3090     avio_wb32(pb, video_kbitrate);
3091     avio_wb32(pb, frame_rate);
3092     avio_wb32(pb, frame_rate);
3093     avio_wb16(pb, video_par->width);
3094     avio_wb16(pb, video_par->height);
3095     avio_wb32(pb, 0x010001); /* ? */
3096 }
3097
3098 static int mov_write_identification(AVIOContext *pb, AVFormatContext *s)
3099 {
3100     MOVMuxContext *mov = s->priv_data;
3101     mov_write_ftyp_tag(pb,s);
3102     if (mov->mode == MODE_PSP) {
3103         if (s->nb_streams != 2) {
3104             av_log(s, AV_LOG_ERROR, "PSP mode need one video and one audio stream\n");
3105             return AVERROR(EINVAL);
3106         }
3107         mov_write_uuidprof_tag(pb, s);
3108     }
3109     return 0;
3110 }
3111
3112 static int mov_parse_mpeg2_frame(AVPacket *pkt, uint32_t *flags)
3113 {
3114     uint32_t c = -1;
3115     int i, closed_gop = 0;
3116
3117     for (i = 0; i < pkt->size - 4; i++) {
3118         c = (c << 8) + pkt->data[i];
3119         if (c == 0x1b8) { // gop
3120             closed_gop = pkt->data[i + 4] >> 6 & 0x01;
3121         } else if (c == 0x100) { // pic
3122             int temp_ref = (pkt->data[i + 1] << 2) | (pkt->data[i + 2] >> 6);
3123             if (!temp_ref || closed_gop) // I picture is not reordered
3124                 *flags = MOV_SYNC_SAMPLE;
3125             else
3126                 *flags = MOV_PARTIAL_SYNC_SAMPLE;
3127             break;
3128         }
3129     }
3130     return 0;
3131 }
3132
3133 static void mov_parse_vc1_frame(AVPacket *pkt, MOVTrack *trk)
3134 {
3135     const uint8_t *start, *next, *end = pkt->data + pkt->size;
3136     int seq = 0, entry = 0;
3137     int key = pkt->flags & AV_PKT_FLAG_KEY;
3138     start = find_next_marker(pkt->data, end);
3139     for (next = start; next < end; start = next) {
3140         next = find_next_marker(start + 4, end);
3141         switch (AV_RB32(start)) {
3142         case VC1_CODE_SEQHDR:
3143             seq = 1;
3144             break;
3145         case VC1_CODE_ENTRYPOINT:
3146             entry = 1;
3147             break;
3148         case VC1_CODE_SLICE:
3149             trk->vc1_info.slices = 1;
3150             break;
3151         }
3152     }
3153     if (!trk->entry && trk->vc1_info.first_packet_seen)
3154         trk->vc1_info.first_frag_written = 1;
3155     if (!trk->entry && !trk->vc1_info.first_frag_written) {
3156         /* First packet in first fragment */
3157         trk->vc1_info.first_packet_seq   = seq;
3158         trk->vc1_info.first_packet_entry = entry;
3159         trk->vc1_info.first_packet_seen  = 1;
3160     } else if ((seq && !trk->vc1_info.packet_seq) ||
3161                (entry && !trk->vc1_info.packet_entry)) {
3162         int i;
3163         for (i = 0; i < trk->entry; i++)
3164             trk->cluster[i].flags &= ~MOV_SYNC_SAMPLE;
3165         trk->has_keyframes = 0;
3166         if (seq)
3167             trk->vc1_info.packet_seq = 1;
3168         if (entry)
3169             trk->vc1_info.packet_entry = 1;
3170         if (!trk->vc1_info.first_frag_written) {
3171             /* First fragment */
3172             if ((!seq   || trk->vc1_info.first_packet_seq) &&
3173                 (!entry || trk->vc1_info.first_packet_entry)) {
3174                 /* First packet had the same headers as this one, readd the
3175                  * sync sample flag. */
3176                 trk->cluster[0].flags |= MOV_SYNC_SAMPLE;
3177                 trk->has_keyframes = 1;
3178             }
3179         }
3180     }
3181     if (trk->vc1_info.packet_seq && trk->vc1_info.packet_entry)
3182         key = seq && entry;
3183     else if (trk->vc1_info.packet_seq)
3184         key = seq;
3185     else if (trk->vc1_info.packet_entry)
3186         key = entry;
3187     if (key) {
3188         trk->cluster[trk->entry].flags |= MOV_SYNC_SAMPLE;
3189         trk->has_keyframes++;
3190     }
3191 }
3192
3193 static int mov_flush_fragment_interleaving(AVFormatContext *s, MOVTrack *track)
3194 {
3195     MOVMuxContext *mov = s->priv_data;
3196     int ret, buf_size;
3197     uint8_t *buf;
3198     int i, offset;
3199
3200     if (!track->mdat_buf)
3201         return 0;
3202     if (!mov->mdat_buf) {
3203         if ((ret = avio_open_dyn_buf(&mov->mdat_buf)) < 0)
3204             return ret;
3205     }
3206     buf_size = avio_close_dyn_buf(track->mdat_buf, &buf);
3207     track->mdat_buf = NULL;
3208
3209     offset = avio_tell(mov->mdat_buf);
3210     avio_write(mov->mdat_buf, buf, buf_size);
3211     av_free(buf);
3212
3213     for (i = track->entries_flushed; i < track->entry; i++)
3214         track->cluster[i].pos += offset;
3215     track->entries_flushed = track->entry;
3216     return 0;
3217 }
3218
3219 static int mov_flush_fragment(AVFormatContext *s, int force)
3220 {
3221     MOVMuxContext *mov = s->priv_data;
3222     int i, first_track = -1;
3223     int64_t mdat_size = 0;
3224     int has_video = 0, starts_with_key = 0, first_video_track = 1;
3225
3226     if (!(mov->flags & FF_MOV_FLAG_FRAGMENT))
3227         return 0;
3228
3229     // Try to fill in the duration of the last packet in each stream
3230     // from queued packets in the interleave queues. If the flushing
3231     // of fragments was triggered automatically by an AVPacket, we
3232     // already have reliable info for the end of that track, but other
3233     // tracks may need to be filled in.
3234     for (i = 0; i < s->nb_streams; i++) {
3235         MOVTrack *track = &mov->tracks[i];
3236         if (!track->end_reliable) {
3237             AVPacket pkt;
3238             if (!ff_interleaved_peek(s, i, &pkt, 1)) {
3239                 if (track->dts_shift != AV_NOPTS_VALUE)
3240                     pkt.dts += track->dts_shift;
3241                 track->track_duration = pkt.dts - track->start_dts;
3242                 if (pkt.pts != AV_NOPTS_VALUE)
3243                     track->end_pts = pkt.pts;
3244                 else
3245                     track->end_pts = pkt.dts;
3246             }
3247         }
3248     }
3249
3250     for (i = 0; i < mov->nb_streams; i++) {
3251         MOVTrack *track = &mov->tracks[i];
3252         if (track->entry <= 1)
3253             continue;
3254         // Sample durations are calculated as the diff of dts values,
3255         // but for the last sample in a fragment, we don't know the dts
3256         // of the first sample in the next fragment, so we have to rely
3257         // on what was set as duration in the AVPacket. Not all callers
3258         // set this though, so we might want to replace it with an
3259         // estimate if it currently is zero.
3260         if (get_cluster_duration(track, track->entry - 1) != 0)
3261             continue;
3262         // Use the duration (i.e. dts diff) of the second last sample for
3263         // the last one. This is a wild guess (and fatal if it turns out
3264         // to be too long), but probably the best we can do - having a zero
3265         // duration is bad as well.
3266         track->track_duration += get_cluster_duration(track, track->entry - 2);
3267         track->end_pts        += get_cluster_duration(track, track->entry - 2);
3268         if (!mov->missing_duration_warned) {
3269             av_log(s, AV_LOG_WARNING,
3270                    "Estimating the duration of the last packet in a "
3271                    "fragment, consider setting the duration field in "
3272                    "AVPacket instead.\n");
3273             mov->missing_duration_warned = 1;
3274         }
3275     }
3276
3277     if (!mov->moov_written) {
3278         int64_t pos = avio_tell(s->pb);
3279         int ret;
3280         AVIOContext *moov_buf;
3281         uint8_t *buf;
3282         int buf_size;
3283
3284         for (i = 0; i < mov->nb_streams; i++)
3285             if (!mov->tracks[i].entry)
3286                 break;
3287         /* Don't write the initial moov unless all tracks have data */
3288         if (i < mov->nb_streams && !force)
3289             return 0;
3290
3291         if ((ret = ffio_open_null_buf(&moov_buf)) < 0)
3292             return ret;
3293         mov_write_moov_tag(moov_buf, mov, s);
3294         buf_size = ffio_close_null_buf(moov_buf);
3295         for (i = 0; i < mov->nb_streams; i++)
3296             mov->tracks[i].data_offset = pos + buf_size + 8;
3297
3298         avio_write_marker(s->pb, AV_NOPTS_VALUE, AVIO_DATA_MARKER_HEADER);
3299         if (mov->flags & FF_MOV_FLAG_DELAY_MOOV)
3300             mov_write_identification(s->pb, s);
3301         mov_write_moov_tag(s->pb, mov, s);
3302
3303         if (mov->flags & FF_MOV_FLAG_DELAY_MOOV) {
3304             if (mov->flags & FF_MOV_FLAG_GLOBAL_SIDX)
3305                 mov->reserved_header_pos = avio_tell(s->pb);
3306             avio_flush(s->pb);
3307             mov->moov_written = 1;
3308             return 0;
3309         }
3310
3311         buf_size = avio_close_dyn_buf(mov->mdat_buf, &buf);
3312         mov->mdat_buf = NULL;
3313         avio_wb32(s->pb, buf_size + 8);
3314         ffio_wfourcc(s->pb, "mdat");
3315         avio_write(s->pb, buf, buf_size);
3316         av_free(buf);
3317
3318         if (mov->flags & FF_MOV_FLAG_GLOBAL_SIDX)
3319             mov->reserved_header_pos = avio_tell(s->pb);
3320
3321         mov->moov_written = 1;
3322         mov->mdat_size = 0;
3323         for (i = 0; i < mov->nb_streams; i++) {
3324             if (mov->tracks[i].entry)
3325                 mov->tracks[i].frag_start += mov->tracks[i].start_dts +
3326                                              mov->tracks[i].track_duration -
3327                                              mov->tracks[i].cluster[0].dts;
3328             mov->tracks[i].entry = 0;
3329             mov->tracks[i].end_reliable = 0;
3330         }
3331         avio_flush(s->pb);
3332         return 0;
3333     }
3334
3335     if (mov->frag_interleave) {
3336         for (i = 0; i < mov->nb_streams; i++) {
3337             MOVTrack *track = &mov->tracks[i];
3338             int ret;
3339             if ((ret = mov_flush_fragment_interleaving(s, track)) < 0)
3340                 return ret;
3341         }
3342
3343         if (!mov->mdat_buf)
3344             return 0;
3345         mdat_size = avio_tell(mov->mdat_buf);
3346     }
3347
3348     for (i = 0; i < mov->nb_streams; i++) {
3349         MOVTrack *track = &mov->tracks[i];
3350         if (mov->flags & FF_MOV_FLAG_SEPARATE_MOOF || mov->frag_interleave)
3351             track->data_offset = 0;
3352         else
3353             track->data_offset = mdat_size;
3354         if (track->par->codec_type == AVMEDIA_TYPE_VIDEO) {
3355             has_video = 1;
3356             if (first_video_track) {
3357                 if (track->entry)
3358                     starts_with_key = track->cluster[0].flags & MOV_SYNC_SAMPLE;
3359                 first_video_track = 0;
3360             }
3361         }
3362         if (!track->entry)
3363             continue;
3364         if (track->mdat_buf)
3365             mdat_size += avio_tell(track->mdat_buf);
3366         if (first_track < 0)
3367             first_track = i;
3368     }
3369
3370     if (!mdat_size)
3371         return 0;
3372
3373     avio_write_marker(s->pb,
3374                       av_rescale(mov->tracks[first_track].cluster[0].dts, AV_TIME_BASE, mov->tracks[first_track].timescale),
3375                       (has_video ? starts_with_key : mov->tracks[first_track].cluster[0].flags & MOV_SYNC_SAMPLE) ? AVIO_DATA_MARKER_SYNC_POINT : AVIO_DATA_MARKER_BOUNDARY_POINT);
3376
3377     for (i = 0; i < mov->nb_streams; i++) {
3378         MOVTrack *track = &mov->tracks[i];
3379         int buf_size, write_moof = 1, moof_tracks = -1;
3380         uint8_t *buf;
3381         int64_t duration = 0;
3382
3383         if (track->entry)
3384             duration = track->start_dts + track->track_duration -
3385                        track->cluster[0].dts;
3386         if (mov->flags & FF_MOV_FLAG_SEPARATE_MOOF) {
3387             if (!track->mdat_buf)
3388                 continue;
3389             mdat_size = avio_tell(track->mdat_buf);
3390             moof_tracks = i;
3391         } else {
3392             write_moof = i == first_track;
3393         }
3394
3395         if (write_moof) {
3396             avio_flush(s->pb);
3397
3398             mov_write_moof_tag(s->pb, mov, moof_tracks, mdat_size);
3399             mov->fragments++;
3400
3401             avio_wb32(s->pb, mdat_size + 8);
3402             ffio_wfourcc(s->pb, "mdat");
3403         }
3404
3405         if (track->entry)
3406             track->frag_start += duration;
3407         track->entry = 0;
3408         track->entries_flushed = 0;
3409         track->end_reliable = 0;
3410         if (!mov->frag_interleave) {
3411             if (!track->mdat_buf)
3412                 continue;
3413             buf_size = avio_close_dyn_buf(track->mdat_buf, &buf);
3414             track->mdat_buf = NULL;
3415         } else {
3416             if (!mov->mdat_buf)
3417                 continue;
3418             buf_size = avio_close_dyn_buf(mov->mdat_buf, &buf);
3419             mov->mdat_buf = NULL;
3420         }
3421
3422         avio_write(s->pb, buf, buf_size);
3423         av_free(buf);
3424     }
3425
3426     mov->mdat_size = 0;
3427
3428     avio_flush(s->pb);
3429     return 0;
3430 }
3431
3432 static int mov_auto_flush_fragment(AVFormatContext *s, int force)
3433 {
3434     MOVMuxContext *mov = s->priv_data;
3435     int had_moov = mov->moov_written;
3436     int ret = mov_flush_fragment(s, force);
3437     if (ret < 0)
3438         return ret;
3439     // If using delay_moov, the first flush only wrote the moov,
3440     // not the actual moof+mdat pair, thus flush once again.
3441     if (!had_moov && mov->flags & FF_MOV_FLAG_DELAY_MOOV)
3442         ret = mov_flush_fragment(s, force);
3443     return ret;
3444 }
3445
3446 int ff_mov_write_packet(AVFormatContext *s, AVPacket *pkt)
3447 {
3448     MOVMuxContext *mov = s->priv_data;
3449     AVIOContext *pb = s->pb;
3450     MOVTrack *trk = &mov->tracks[pkt->stream_index];
3451     AVCodecParameters *par = trk->par;
3452     unsigned int samples_in_chunk = 0;
3453     int size = pkt->size, ret = 0;
3454     uint8_t *reformatted_data = NULL;
3455
3456     if (mov->flags & FF_MOV_FLAG_FRAGMENT) {
3457         int ret;
3458         if (mov->moov_written || mov->flags & FF_MOV_FLAG_EMPTY_MOOV) {
3459             if (mov->frag_interleave && mov->fragments > 0) {
3460                 if (trk->entry - trk->entries_flushed >= mov->frag_interleave) {
3461                     if ((ret = mov_flush_fragment_interleaving(s, trk)) < 0)
3462                         return ret;
3463                 }
3464             }
3465
3466             if (!trk->mdat_buf) {
3467                 if ((ret = avio_open_dyn_buf(&trk->mdat_buf)) < 0)
3468                     return ret;
3469             }
3470             pb = trk->mdat_buf;
3471         } else {
3472             if (!mov->mdat_buf) {
3473                 if ((ret = avio_open_dyn_buf(&mov->mdat_buf)) < 0)
3474                     return ret;
3475             }
3476             pb = mov->mdat_buf;
3477         }
3478     }
3479
3480     if (par->codec_id == AV_CODEC_ID_AMR_NB) {
3481         /* We must find out how many AMR blocks there are in one packet */
3482         static const uint16_t packed_size[16] =
3483             {13, 14, 16, 18, 20, 21, 27, 32, 6, 0, 0, 0, 0, 0, 0, 1};
3484         int len = 0;
3485
3486         while (len < size && samples_in_chunk < 100) {
3487             len += packed_size[(pkt->data[len] >> 3) & 0x0F];
3488             samples_in_chunk++;
3489         }
3490         if (samples_in_chunk > 1) {
3491             av_log(s, AV_LOG_ERROR, "fatal error, input is not a single packet, implement a AVParser for it\n");
3492             return -1;
3493         }
3494     } else if (trk->sample_size)
3495         samples_in_chunk = size / trk->sample_size;
3496     else
3497         samples_in_chunk = 1;
3498
3499     /* copy extradata if it exists */
3500     if (trk->vos_len == 0 && par->extradata_size > 0) {
3501         trk->vos_len  = par->extradata_size;
3502         trk->vos_data = av_malloc(trk->vos_len);
3503         if (!trk->vos_data) {
3504             ret = AVERROR(ENOMEM);
3505             goto err;
3506         }
3507         memcpy(trk->vos_data, par->extradata, trk->vos_len);
3508     }
3509
3510     if (par->codec_id == AV_CODEC_ID_H264 && trk->vos_len > 0 && *(uint8_t *)trk->vos_data != 1) {
3511         /* from x264 or from bytestream H.264 */
3512         /* NAL reformatting needed */
3513         if (trk->hint_track >= 0 && trk->hint_track < mov->nb_streams) {
3514             ff_avc_parse_nal_units_buf(pkt->data, &reformatted_data,
3515                                        &size);
3516             avio_write(pb, reformatted_data, size);
3517         } else {
3518             size = ff_avc_parse_nal_units(pb, pkt->data, pkt->size);
3519         }
3520     } else if (par->codec_id == AV_CODEC_ID_HEVC && trk->vos_len > 6 &&
3521                (AV_RB24(trk->vos_data) == 1 || AV_RB32(trk->vos_data) == 1)) {
3522         /* extradata is Annex B, assume the bitstream is too and convert it */
3523         if (trk->hint_track >= 0 && trk->hint_track < mov->nb_streams) {
3524             ff_hevc_annexb2mp4_buf(pkt->data, &reformatted_data, &size, 0, NULL);
3525             avio_write(pb, reformatted_data, size);
3526         } else {
3527             size = ff_hevc_annexb2mp4(pb, pkt->data, pkt->size, 0, NULL);
3528         }
3529     } else {
3530         avio_write(pb, pkt->data, size);
3531     }
3532
3533     if ((par->codec_id == AV_CODEC_ID_DNXHD ||
3534          par->codec_id == AV_CODEC_ID_AC3) && !trk->vos_len) {
3535         /* copy frame to create needed atoms */
3536         trk->vos_len  = size;
3537         trk->vos_data = av_malloc(size);
3538         if (!trk->vos_data) {
3539             ret = AVERROR(ENOMEM);
3540             goto err;
3541         }
3542         memcpy(trk->vos_data, pkt->data, size);
3543     }
3544
3545     if (trk->entry >= trk->cluster_capacity) {
3546         unsigned new_capacity = 2 * (trk->entry + MOV_INDEX_CLUSTER_SIZE);
3547         if (av_reallocp_array(&trk->cluster, new_capacity,
3548                               sizeof(*trk->cluster))) {
3549             ret = AVERROR(ENOMEM);
3550             goto err;
3551         }
3552         trk->cluster_capacity = new_capacity;
3553     }
3554
3555     trk->cluster[trk->entry].pos              = avio_tell(pb) - size;
3556     trk->cluster[trk->entry].samples_in_chunk = samples_in_chunk;
3557     trk->cluster[trk->entry].size             = size;
3558     trk->cluster[trk->entry].entries          = samples_in_chunk;
3559     trk->cluster[trk->entry].dts              = pkt->dts;
3560     if (!trk->entry && trk->start_dts != AV_NOPTS_VALUE) {
3561         if (!trk->frag_discont) {
3562             /* First packet of a new fragment. We already wrote the duration
3563              * of the last packet of the previous fragment based on track_duration,
3564              * which might not exactly match our dts. Therefore adjust the dts
3565              * of this packet to be what the previous packets duration implies. */
3566             trk->cluster[trk->entry].dts = trk->start_dts + trk->track_duration;
3567             /* We also may have written the pts and the corresponding duration
3568              * in sidx/tfrf/tfxd tags; make sure the sidx pts and duration match up with
3569              * the next fragment. This means the cts of the first sample must
3570              * be the same in all fragments, unless end_pts was updated by
3571              * the packet causing the fragment to be written. */
3572             if ((mov->flags & FF_MOV_FLAG_DASH && !(mov->flags & FF_MOV_FLAG_GLOBAL_SIDX)) ||
3573                 mov->mode == MODE_ISM)
3574                 pkt->pts = pkt->dts + trk->end_pts - trk->cluster[trk->entry].dts;
3575         } else {
3576             /* New fragment, but discontinuous from previous fragments.
3577              * Pretend the duration sum of the earlier fragments is
3578              * pkt->dts - trk->start_dts. */
3579             trk->frag_start = pkt->dts - trk->start_dts;
3580             trk->end_pts = AV_NOPTS_VALUE;
3581             trk->frag_discont = 0;
3582         }
3583     }
3584     if (!trk->entry && trk->start_dts == AV_NOPTS_VALUE && !mov->use_editlist &&
3585         s->avoid_negative_ts == AVFMT_AVOID_NEG_TS_MAKE_ZERO) {
3586         /* Not using edit lists and shifting the first track to start from zero.
3587          * If the other streams start from a later timestamp, we won't be able
3588          * to signal the difference in starting time without an edit list.
3589          * Thus move the timestamp for this first sample to 0, increasing
3590          * its duration instead. */
3591         trk->cluster[trk->entry].dts = trk->start_dts = 0;
3592     }
3593     if (trk->start_dts == AV_NOPTS_VALUE) {
3594         trk->start_dts = pkt->dts;
3595         if (trk->frag_discont) {
3596             if (mov->use_editlist) {
3597                 /* Pretend the whole stream started at pts=0, with earlier fragments
3598                  * already written. If the stream started at pts=0, the duration sum
3599                  * of earlier fragments would have been pkt->pts. */
3600                 trk->frag_start = pkt->pts;
3601                 trk->start_dts  = pkt->dts - pkt->pts;
3602             } else {
3603                 /* Pretend the whole stream started at dts=0, with earlier fragments
3604                  * already written, with a duration summing up to pkt->dts. */
3605                 trk->frag_start = pkt->dts;
3606                 trk->start_dts  = 0;
3607             }
3608             trk->frag_discont = 0;
3609         } else if (pkt->dts && mov->moov_written)
3610             av_log(s, AV_LOG_WARNING,
3611                    "Track %d starts with a nonzero dts %"PRId64", while the moov "
3612                    "already has been written. Set the delay_moov flag to handle "
3613                    "this case.\n",
3614                    pkt->stream_index, pkt->dts);
3615     }
3616     trk->track_duration = pkt->dts - trk->start_dts + pkt->duration;
3617
3618     if (pkt->pts == AV_NOPTS_VALUE) {
3619         av_log(s, AV_LOG_WARNING, "pts has no value\n");
3620         pkt->pts = pkt->dts;
3621     }
3622     if (pkt->dts != pkt->pts)
3623         trk->flags |= MOV_TRACK_CTTS;
3624     trk->cluster[trk->entry].cts   = pkt->pts - pkt->dts;
3625     trk->cluster[trk->entry].flags = 0;
3626     if (trk->start_cts == AV_NOPTS_VALUE)
3627         trk->start_cts = pkt->pts - pkt->dts;
3628     if (trk->end_pts == AV_NOPTS_VALUE)
3629         trk->end_pts = trk->cluster[trk->entry].dts +
3630                        trk->cluster[trk->entry].cts + pkt->duration;
3631     else
3632         trk->end_pts = FFMAX(trk->end_pts, trk->cluster[trk->entry].dts +
3633                                            trk->cluster[trk->entry].cts +
3634                                            pkt->duration);
3635
3636     if (par->codec_id == AV_CODEC_ID_VC1) {
3637         mov_parse_vc1_frame(pkt, trk);
3638     } else if (pkt->flags & AV_PKT_FLAG_KEY) {
3639         if (mov->mode == MODE_MOV && par->codec_id == AV_CODEC_ID_MPEG2VIDEO &&
3640             trk->entry > 0) { // force sync sample for the first key frame
3641             mov_parse_mpeg2_frame(pkt, &trk->cluster[trk->entry].flags);
3642             if (trk->cluster[trk->entry].flags & MOV_PARTIAL_SYNC_SAMPLE)
3643                 trk->flags |= MOV_TRACK_STPS;
3644         } else {
3645             trk->cluster[trk->entry].flags = MOV_SYNC_SAMPLE;
3646         }
3647         if (trk->cluster[trk->entry].flags & MOV_SYNC_SAMPLE)
3648             trk->has_keyframes++;
3649     }
3650     trk->entry++;
3651     trk->sample_count += samples_in_chunk;
3652     mov->mdat_size    += size;
3653
3654     if (trk->hint_track >= 0 && trk->hint_track < mov->nb_streams)
3655         ff_mov_add_hinted_packet(s, pkt, trk->hint_track, trk->entry,
3656                                  reformatted_data, size);
3657
3658 err:
3659     av_free(reformatted_data);
3660     return ret;
3661 }
3662
3663 static int mov_write_packet(AVFormatContext *s, AVPacket *pkt)
3664 {
3665     if (!pkt) {
3666         mov_flush_fragment(s, 1);
3667         return 1;
3668     } else {
3669         MOVMuxContext *mov = s->priv_data;
3670         MOVTrack *trk = &mov->tracks[pkt->stream_index];
3671         AVCodecParameters *par = trk->par;
3672         int64_t frag_duration = 0;
3673         int size = pkt->size;
3674
3675         if (mov->flags & FF_MOV_FLAG_FRAG_DISCONT) {
3676             int i;
3677             for (i = 0; i < s->nb_streams; i++)
3678                 mov->tracks[i].frag_discont = 1;
3679             mov->flags &= ~FF_MOV_FLAG_FRAG_DISCONT;
3680         }
3681
3682         if (mov->flags & FF_MOV_FLAG_NEGATIVE_CTS_OFFSETS) {
3683             if (trk->dts_shift == AV_NOPTS_VALUE)
3684                 trk->dts_shift = pkt->pts - pkt->dts;
3685             pkt->dts += trk->dts_shift;
3686         }
3687
3688         if (!pkt->size) {
3689             if (trk->start_dts == AV_NOPTS_VALUE && trk->frag_discont) {
3690                 trk->start_dts = pkt->dts;
3691                 if (pkt->pts != AV_NOPTS_VALUE)
3692                     trk->start_cts = pkt->pts - pkt->dts;
3693                 else
3694                     trk->start_cts = 0;
3695             }
3696
3697             return 0;             /* Discard 0 sized packets */
3698         }
3699
3700         if (trk->entry)
3701             frag_duration = av_rescale_q(pkt->dts - trk->cluster[0].dts,
3702                                          s->streams[pkt->stream_index]->time_base,
3703                                          AV_TIME_BASE_Q);
3704         if ((mov->max_fragment_duration &&
3705              frag_duration >= mov->max_fragment_duration) ||
3706              (mov->max_fragment_size && mov->mdat_size + size >= mov->max_fragment_size) ||
3707              (mov->flags & FF_MOV_FLAG_FRAG_KEYFRAME &&
3708               par->codec_type == AVMEDIA_TYPE_VIDEO &&
3709               trk->entry && pkt->flags & AV_PKT_FLAG_KEY)) {
3710             if (frag_duration >= mov->min_fragment_duration) {
3711                 // Set the duration of this track to line up with the next
3712                 // sample in this track. This avoids relying on AVPacket
3713                 // duration, but only helps for this particular track, not
3714                 // for the other ones that are flushed at the same time.
3715                 trk->track_duration = pkt->dts - trk->start_dts;
3716                 if (pkt->pts != AV_NOPTS_VALUE)
3717                     trk->end_pts = pkt->pts;
3718                 else
3719                     trk->end_pts = pkt->dts;
3720                 trk->end_reliable = 1;
3721                 mov_auto_flush_fragment(s, 0);
3722             }
3723         }
3724
3725         return ff_mov_write_packet(s, pkt);
3726     }
3727 }
3728
3729 // QuickTime chapters involve an additional text track with the chapter names
3730 // as samples, and a tref pointing from the other tracks to the chapter one.
3731 static int mov_create_chapter_track(AVFormatContext *s, int tracknum)
3732 {
3733     MOVMuxContext *mov = s->priv_data;
3734     MOVTrack *track = &mov->tracks[tracknum];
3735     AVPacket pkt = { .stream_index = tracknum, .flags = AV_PKT_FLAG_KEY };
3736     int i, len;
3737     // These properties are required to make QT recognize the chapter track
3738     uint8_t chapter_properties[43] = { 0, 0, 0, 0, 0, 0, 0, 1, };
3739
3740     track->mode = mov->mode;
3741     track->tag = MKTAG('t','e','x','t');
3742     track->timescale = MOV_TIMESCALE;
3743     track->par = avcodec_parameters_alloc();
3744     if (!track->par)
3745         return AVERROR(ENOMEM);
3746     track->par->codec_type = AVMEDIA_TYPE_SUBTITLE;
3747     track->par->extradata = av_malloc(sizeof(chapter_properties));
3748     if (!track->par->extradata)
3749         return AVERROR(ENOMEM);
3750     track->par->extradata_size = sizeof(chapter_properties);
3751     memcpy(track->par->extradata, chapter_properties, sizeof(chapter_properties));
3752
3753     for (i = 0; i < s->nb_chapters; i++) {
3754         AVChapter *c = s->chapters[i];
3755         AVDictionaryEntry *t;
3756
3757         int64_t end = av_rescale_q(c->end, c->time_base, (AVRational){1,MOV_TIMESCALE});
3758         pkt.pts = pkt.dts = av_rescale_q(c->start, c->time_base, (AVRational){1,MOV_TIMESCALE});
3759         pkt.duration = end - pkt.dts;
3760
3761         if ((t = av_dict_get(c->metadata, "title", NULL, 0))) {
3762             static const char encd[12] = {
3763                 0x00, 0x00, 0x00, 0x0C,
3764                 'e',  'n',  'c',  'd',
3765                 0x00, 0x00, 0x01, 0x00 };
3766             len      = strlen(t->value);
3767             pkt.size = len + 2 + 12;
3768             pkt.data = av_malloc(pkt.size);
3769             if (!pkt.data)
3770                 return AVERROR(ENOMEM);
3771             AV_WB16(pkt.data, len);
3772             memcpy(pkt.data + 2, t->value, len);
3773             memcpy(pkt.data + len + 2, encd, sizeof(encd));
3774             ff_mov_write_packet(s, &pkt);
3775             av_freep(&pkt.data);
3776         }
3777     }
3778
3779     return 0;
3780 }
3781
3782 /*
3783  * st->disposition controls the "enabled" flag in the tkhd tag.
3784  * QuickTime will not play a track if it is not enabled.  So make sure
3785  * that one track of each type (audio, video, subtitle) is enabled.
3786  *
3787  * Subtitles are special.  For audio and video, setting "enabled" also
3788  * makes the track "default" (i.e. it is rendered when played). For
3789  * subtitles, an "enabled" subtitle is not rendered by default, but
3790  * if no subtitle is enabled, the subtitle menu in QuickTime will be
3791  * empty!
3792  */
3793 static void enable_tracks(AVFormatContext *s)
3794 {
3795     MOVMuxContext *mov = s->priv_data;
3796     int i;
3797     int enabled[AVMEDIA_TYPE_NB];
3798     int first[AVMEDIA_TYPE_NB];
3799
3800     for (i = 0; i < AVMEDIA_TYPE_NB; i++) {
3801         enabled[i] = 0;
3802         first[i] = -1;
3803     }
3804
3805     for (i = 0; i < s->nb_streams; i++) {
3806         AVStream *st = s->streams[i];
3807
3808         if (st->codecpar->codec_type <= AVMEDIA_TYPE_UNKNOWN ||
3809             st->codecpar->codec_type >= AVMEDIA_TYPE_NB)
3810             continue;
3811
3812         if (first[st->codecpar->codec_type] < 0)
3813             first[st->codecpar->codec_type] = i;
3814         if (st->disposition & AV_DISPOSITION_DEFAULT) {
3815             mov->tracks[i].flags |= MOV_TRACK_ENABLED;
3816             enabled[st->codecpar->codec_type]++;
3817         }
3818     }
3819
3820     for (i = 0; i < AVMEDIA_TYPE_NB; i++) {
3821         switch (i) {
3822         case AVMEDIA_TYPE_VIDEO:
3823         case AVMEDIA_TYPE_AUDIO:
3824         case AVMEDIA_TYPE_SUBTITLE:
3825             if (enabled[i] > 1)
3826                 mov->per_stream_grouping = 1;
3827             if (!enabled[i] && first[i] >= 0)
3828                 mov->tracks[first[i]].flags |= MOV_TRACK_ENABLED;
3829             break;
3830         }
3831     }
3832 }
3833
3834 static void mov_free(AVFormatContext *s)
3835 {
3836     MOVMuxContext *mov = s->priv_data;
3837     int i;
3838
3839     if (mov->chapter_track)
3840         avcodec_parameters_free(&mov->tracks[mov->chapter_track].par);
3841
3842     for (i = 0; i < mov->nb_streams; i++) {
3843         if (mov->tracks[i].tag == MKTAG('r','t','p',' '))
3844             ff_mov_close_hinting(&mov->tracks[i]);
3845         av_freep(&mov->tracks[i].cluster);
3846         av_freep(&mov->tracks[i].frag_info);
3847
3848         if (mov->tracks[i].vos_len)
3849             av_free(mov->tracks[i].vos_data);
3850     }
3851
3852     av_freep(&mov->tracks);
3853 }
3854
3855 static uint32_t rgb_to_yuv(uint32_t rgb)
3856 {
3857     uint8_t r, g, b;
3858     int y, cb, cr;
3859
3860     r = (rgb >> 16) & 0xFF;
3861     g = (rgb >>  8) & 0xFF;
3862     b = (rgb      ) & 0xFF;
3863
3864     y  = av_clip_uint8( 16. +  0.257 * r + 0.504 * g + 0.098 * b);
3865     cb = av_clip_uint8(128. -  0.148 * r - 0.291 * g + 0.439 * b);
3866     cr = av_clip_uint8(128. +  0.439 * r - 0.368 * g - 0.071 * b);
3867
3868     return (y << 16) | (cr << 8) | cb;
3869 }
3870
3871 static int mov_create_dvd_sub_decoder_specific_info(MOVTrack *track,
3872                                                     AVStream *st)
3873 {
3874     int i, width = 720, height = 480;
3875     int have_palette = 0, have_size = 0;
3876     uint32_t palette[16];
3877     char *cur = st->codecpar->extradata;
3878
3879     while (cur && *cur) {
3880         if (strncmp("palette:", cur, 8) == 0) {
3881             int i, count;
3882             count = sscanf(cur + 8,
3883                 "%06"PRIx32", %06"PRIx32", %06"PRIx32", %06"PRIx32", "
3884                 "%06"PRIx32", %06"PRIx32", %06"PRIx32", %06"PRIx32", "
3885                 "%06"PRIx32", %06"PRIx32", %06"PRIx32", %06"PRIx32", "
3886                 "%06"PRIx32", %06"PRIx32", %06"PRIx32", %06"PRIx32"",
3887                 &palette[ 0], &palette[ 1], &palette[ 2], &palette[ 3],
3888                 &palette[ 4], &palette[ 5], &palette[ 6], &palette[ 7],
3889                 &palette[ 8], &palette[ 9], &palette[10], &palette[11],
3890                 &palette[12], &palette[13], &palette[14], &palette[15]);
3891
3892             for (i = 0; i < count; i++) {
3893                 palette[i] = rgb_to_yuv(palette[i]);
3894             }
3895             have_palette = 1;
3896         } else if (!strncmp("size:", cur, 5)) {
3897             sscanf(cur + 5, "%dx%d", &width, &height);
3898             have_size = 1;
3899         }
3900         if (have_palette && have_size)
3901             break;
3902         cur += strcspn(cur, "\n\r");
3903         cur += strspn(cur, "\n\r");
3904     }
3905     if (have_palette) {
3906         track->vos_data = av_malloc(16*4);
3907         if (!track->vos_data)
3908             return AVERROR(ENOMEM);
3909         for (i = 0; i < 16; i++) {
3910             AV_WB32(track->vos_data + i * 4, palette[i]);
3911         }
3912         track->vos_len = 16 * 4;
3913     }
3914     st->codecpar->width = width;
3915     st->codecpar->height = track->height = height;
3916
3917     return 0;
3918 }
3919
3920 static int mov_write_header(AVFormatContext *s)
3921 {
3922     AVIOContext *pb = s->pb;
3923     MOVMuxContext *mov = s->priv_data;
3924     AVDictionaryEntry *t;
3925     int i, ret, hint_track = 0;
3926
3927     mov->fc = s;
3928
3929     /* Default mode == MP4 */
3930     mov->mode = MODE_MP4;
3931
3932     if (s->oformat) {
3933         if (!strcmp("3gp", s->oformat->name)) mov->mode = MODE_3GP;
3934         else if (!strcmp("3g2", s->oformat->name)) mov->mode = MODE_3GP|MODE_3G2;
3935         else if (!strcmp("mov", s->oformat->name)) mov->mode = MODE_MOV;
3936         else if (!strcmp("psp", s->oformat->name)) mov->mode = MODE_PSP;
3937         else if (!strcmp("ipod",s->oformat->name)) mov->mode = MODE_IPOD;
3938         else if (!strcmp("ismv",s->oformat->name)) mov->mode = MODE_ISM;
3939         else if (!strcmp("f4v", s->oformat->name)) mov->mode = MODE_F4V;
3940     }
3941
3942     if (mov->flags & FF_MOV_FLAG_DELAY_MOOV)
3943         mov->flags |= FF_MOV_FLAG_EMPTY_MOOV;
3944
3945     /* Set the FRAGMENT flag if any of the fragmentation methods are
3946      * enabled. */
3947     if (mov->max_fragment_duration || mov->max_fragment_size ||
3948         mov->flags & (FF_MOV_FLAG_EMPTY_MOOV |
3949                       FF_MOV_FLAG_FRAG_KEYFRAME |
3950                       FF_MOV_FLAG_FRAG_CUSTOM))
3951         mov->flags |= FF_MOV_FLAG_FRAGMENT;
3952
3953     /* Set other implicit flags immediately */
3954     if (mov->mode == MODE_ISM)
3955         mov->flags |= FF_MOV_FLAG_EMPTY_MOOV | FF_MOV_FLAG_SEPARATE_MOOF |
3956                       FF_MOV_FLAG_FRAGMENT;
3957     if (mov->flags & FF_MOV_FLAG_DASH)
3958         mov->flags |= FF_MOV_FLAG_FRAGMENT | FF_MOV_FLAG_EMPTY_MOOV |
3959                       FF_MOV_FLAG_DEFAULT_BASE_MOOF;
3960
3961     if (mov->use_editlist < 0) {
3962         mov->use_editlist = 1;
3963         if (mov->flags & FF_MOV_FLAG_FRAGMENT &&
3964             !(mov->flags & FF_MOV_FLAG_DELAY_MOOV)) {
3965             // If we can avoid needing an edit list by shifting the
3966             // tracks, prefer that over (trying to) write edit lists
3967             // in fragmented output.
3968             if (s->avoid_negative_ts == AVFMT_AVOID_NEG_TS_AUTO ||
3969                 s->avoid_negative_ts == AVFMT_AVOID_NEG_TS_MAKE_ZERO)
3970                 mov->use_editlist = 0;
3971         }
3972     }
3973     if (mov->flags & FF_MOV_FLAG_EMPTY_MOOV &&
3974         !(mov->flags & FF_MOV_FLAG_DELAY_MOOV) && mov->use_editlist)
3975         av_log(s, AV_LOG_WARNING, "No meaningful edit list will be written when using empty_moov without delay_moov\n");
3976
3977     if (!mov->use_editlist && s->avoid_negative_ts == AVFMT_AVOID_NEG_TS_AUTO)
3978         s->avoid_negative_ts = AVFMT_AVOID_NEG_TS_MAKE_ZERO;
3979
3980     /* Clear the omit_tfhd_offset flag if default_base_moof is set;
3981      * if the latter is set that's enough and omit_tfhd_offset doesn't
3982      * add anything extra on top of that. */
3983     if (mov->flags & FF_MOV_FLAG_OMIT_TFHD_OFFSET &&
3984         mov->flags & FF_MOV_FLAG_DEFAULT_BASE_MOOF)
3985         mov->flags &= ~FF_MOV_FLAG_OMIT_TFHD_OFFSET;
3986
3987     if (mov->frag_interleave &&
3988         mov->flags & (FF_MOV_FLAG_OMIT_TFHD_OFFSET | FF_MOV_FLAG_SEPARATE_MOOF)) {
3989         av_log(s, AV_LOG_ERROR,
3990                "Sample interleaving in fragments is mutually exclusive with "
3991                "omit_tfhd_offset and separate_moof\n");
3992         return AVERROR(EINVAL);
3993     }
3994
3995     /* Non-seekable output is ok if using fragmentation. If ism_lookahead
3996      * is enabled, we don't support non-seekable output at all. */
3997     if (!(s->pb->seekable & AVIO_SEEKABLE_NORMAL) &&
3998         (!(mov->flags & FF_MOV_FLAG_FRAGMENT) || mov->ism_lookahead)) {
3999         av_log(s, AV_LOG_ERROR, "muxer does not support non seekable output\n");
4000         return AVERROR(EINVAL);
4001     }
4002
4003
4004     if (!(mov->flags & FF_MOV_FLAG_DELAY_MOOV)) {
4005         if ((ret = mov_write_identification(pb, s)) < 0)
4006             return ret;
4007     }
4008
4009     mov->nb_streams = s->nb_streams;
4010     if (mov->mode & (MODE_MP4|MODE_MOV|MODE_IPOD) && s->nb_chapters)
4011         mov->chapter_track = mov->nb_streams++;
4012
4013     if (mov->flags & FF_MOV_FLAG_RTP_HINT) {
4014         /* Add hint tracks for each audio and video stream */
4015         hint_track = mov->nb_streams;
4016         for (i = 0; i < s->nb_streams; i++) {
4017             AVStream *st = s->streams[i];
4018             if (st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO ||
4019                 st->codecpar->codec_type == AVMEDIA_TYPE_AUDIO) {
4020                 mov->nb_streams++;
4021             }
4022         }
4023     }
4024
4025     // Reserve an extra stream for chapters for the case where chapters
4026     // are written in the trailer
4027     mov->tracks = av_mallocz((mov->nb_streams + 1) * sizeof(*mov->tracks));
4028     if (!mov->tracks)
4029         return AVERROR(ENOMEM);
4030
4031     for (i = 0; i < s->nb_streams; i++) {
4032         AVStream *st= s->streams[i];
4033         MOVTrack *track= &mov->tracks[i];
4034         AVDictionaryEntry *lang = av_dict_get(st->metadata, "language", NULL,0);
4035
4036         track->st  = st;
4037         track->par = st->codecpar;
4038         track->language = ff_mov_iso639_to_lang(lang?lang->value:"und", mov->mode!=MODE_MOV);
4039         if (track->language < 0)
4040             track->language = 0;
4041         track->mode = mov->mode;
4042         track->tag  = mov_find_codec_tag(s, track);
4043         if (!track->tag) {
4044             av_log(s, AV_LOG_ERROR, "track %d: could not find tag, "
4045                    "codec not currently supported in container\n", i);
4046             goto error;
4047         }
4048         /* If hinting of this track is enabled by a later hint track,
4049          * this is updated. */
4050         track->hint_track = -1;
4051         track->start_dts  = AV_NOPTS_VALUE;
4052         track->start_cts  = AV_NOPTS_VALUE;
4053         track->end_pts    = AV_NOPTS_VALUE;
4054         track->dts_shift  = AV_NOPTS_VALUE;
4055         if (st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO) {
4056             if (track->tag == MKTAG('m','x','3','p') || track->tag == MKTAG('m','x','3','n') ||
4057                 track->tag == MKTAG('m','x','4','p') || track->tag == MKTAG('m','x','4','n') ||
4058                 track->tag == MKTAG('m','x','5','p') || track->tag == MKTAG('m','x','5','n')) {
4059                 if (st->codecpar->width != 720 || (st->codecpar->height != 608 && st->codecpar->height != 512)) {
4060                     av_log(s, AV_LOG_ERROR, "D-10/IMX must use 720x608 or 720x512 video resolution\n");
4061                     goto error;
4062                 }
4063                 track->height = track->tag >> 24 == 'n' ? 486 : 576;
4064             }
4065             track->timescale = st->time_base.den;
4066             if (track->mode == MODE_MOV && track->timescale > 100000)
4067                 av_log(s, AV_LOG_WARNING,
4068                        "WARNING codec timebase is very high. If duration is too long,\n"
4069                        "file may not be playable by quicktime. Specify a shorter timebase\n"
4070                        "or choose different container.\n");
4071         } else if (st->codecpar->codec_type == AVMEDIA_TYPE_AUDIO) {
4072             track->timescale = st->codecpar->sample_rate;
4073             /* set sample_size for PCM and ADPCM */
4074             if (av_get_bits_per_sample(st->codecpar->codec_id) ||
4075                 st->codecpar->codec_id == AV_CODEC_ID_ILBC) {
4076                 if (!st->codecpar->block_align) {
4077                     av_log(s, AV_LOG_ERROR, "track %d: codec block align is not set\n", i);
4078                     goto error;
4079                 }
4080                 track->sample_size = st->codecpar->block_align;
4081             }
4082             /* set audio_vbr for compressed audio */
4083             if (av_get_bits_per_sample(st->codecpar->codec_id) < 8) {
4084                 track->audio_vbr = 1;
4085             }
4086             if (track->mode != MODE_MOV &&
4087                 track->par->codec_id == AV_CODEC_ID_MP3 && track->timescale < 16000) {
4088                 av_log(s, AV_LOG_ERROR, "track %d: muxing mp3 at %dhz is not supported\n",
4089                        i, track->par->sample_rate);
4090                 goto error;
4091             }
4092         } else if (st->codecpar->codec_type == AVMEDIA_TYPE_SUBTITLE) {
4093             track->timescale = st->time_base.den;
4094         } else if (st->codecpar->codec_type == AVMEDIA_TYPE_DATA) {
4095             track->timescale = st->time_base.den;
4096         }
4097         if (!track->height)
4098             track->height = st->codecpar->height;
4099         /* The ism specific timescale isn't mandatory, but is assumed by
4100          * some tools, such as mp4split. */
4101         if (mov->mode == MODE_ISM)
4102             track->timescale = 10000000;
4103
4104         avpriv_set_pts_info(st, 64, 1, track->timescale);
4105
4106         /* copy extradata if it exists */
4107         if (st->codecpar->extradata_size) {
4108             if (st->codecpar->codec_id == AV_CODEC_ID_DVD_SUBTITLE)
4109                 mov_create_dvd_sub_decoder_specific_info(track, st);
4110             else {
4111                 track->vos_len  = st->codecpar->extradata_size;
4112                 track->vos_data = av_malloc(track->vos_len);
4113                 if (!track->vos_data)
4114                     goto error;
4115                 memcpy(track->vos_data, st->codecpar->extradata, track->vos_len);
4116             }
4117         }
4118     }
4119
4120     enable_tracks(s);
4121
4122     if (mov->flags & FF_MOV_FLAG_FRAGMENT) {
4123         /* If no fragmentation options have been set, set a default. */
4124         if (!(mov->flags & (FF_MOV_FLAG_FRAG_KEYFRAME |
4125                             FF_MOV_FLAG_FRAG_CUSTOM)) &&
4126             !mov->max_fragment_duration && !mov->max_fragment_size)
4127             mov->flags |= FF_MOV_FLAG_FRAG_KEYFRAME;
4128     } else {
4129         if (mov->flags & FF_MOV_FLAG_FASTSTART)
4130             mov->reserved_header_pos = avio_tell(pb);
4131         mov_write_mdat_tag(pb, mov);
4132     }
4133
4134     if (t = av_dict_get(s->metadata, "creation_time", NULL, 0))
4135         mov->time = ff_iso8601_to_unix_time(t->value);
4136     if (mov->time)
4137         mov->time += 0x7C25B080; // 1970 based -> 1904 based
4138
4139     if (mov->chapter_track)
4140         if (mov_create_chapter_track(s, mov->chapter_track) < 0)
4141             goto error;
4142
4143     if (mov->flags & FF_MOV_FLAG_RTP_HINT) {
4144         /* Initialize the hint tracks for each audio and video stream */
4145         for (i = 0; i < s->nb_streams; i++) {
4146             AVStream *st = s->streams[i];
4147             if (st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO ||
4148                 st->codecpar->codec_type == AVMEDIA_TYPE_AUDIO) {
4149                 ff_mov_init_hinting(s, hint_track, i);
4150                 hint_track++;
4151             }
4152         }
4153     }
4154
4155     avio_flush(pb);
4156
4157     if (mov->flags & FF_MOV_FLAG_ISML)
4158         mov_write_isml_manifest(pb, mov);
4159
4160     if (mov->flags & FF_MOV_FLAG_EMPTY_MOOV &&
4161         !(mov->flags & FF_MOV_FLAG_DELAY_MOOV)) {
4162         mov_write_moov_tag(pb, mov, s);
4163         avio_flush(pb);
4164         mov->moov_written = 1;
4165         if (mov->flags & FF_MOV_FLAG_GLOBAL_SIDX)
4166             mov->reserved_header_pos = avio_tell(pb);
4167     }
4168
4169     return 0;
4170  error:
4171     mov_free(s);
4172     return -1;
4173 }
4174
4175 static int get_moov_size(AVFormatContext *s)
4176 {
4177     int ret;
4178     AVIOContext *moov_buf;
4179     MOVMuxContext *mov = s->priv_data;
4180
4181     if ((ret = ffio_open_null_buf(&moov_buf)) < 0)
4182         return ret;
4183     mov_write_moov_tag(moov_buf, mov, s);
4184     return ffio_close_null_buf(moov_buf);
4185 }
4186
4187 static int get_sidx_size(AVFormatContext *s)
4188 {
4189     int ret;
4190     AVIOContext *buf;
4191     MOVMuxContext *mov = s->priv_data;
4192
4193     if ((ret = ffio_open_null_buf(&buf)) < 0)
4194         return ret;
4195     mov_write_sidx_tags(buf, mov, -1, 0);
4196     return ffio_close_null_buf(buf);
4197 }
4198
4199 /*
4200  * This function gets the moov size if moved to the top of the file: the chunk
4201  * offset table can switch between stco (32-bit entries) to co64 (64-bit
4202  * entries) when the moov is moved to the beginning, so the size of the moov
4203  * would change. It also updates the chunk offset tables.
4204  */
4205 static int compute_moov_size(AVFormatContext *s)
4206 {
4207     int i, moov_size, moov_size2;
4208     MOVMuxContext *mov = s->priv_data;
4209
4210     moov_size = get_moov_size(s);
4211     if (moov_size < 0)
4212         return moov_size;
4213
4214     for (i = 0; i < mov->nb_streams; i++)
4215         mov->tracks[i].data_offset += moov_size;
4216
4217     moov_size2 = get_moov_size(s);
4218     if (moov_size2 < 0)
4219         return moov_size2;
4220
4221     /* if the size changed, we just switched from stco to co64 and need to
4222      * update the offsets */
4223     if (moov_size2 != moov_size)
4224         for (i = 0; i < mov->nb_streams; i++)
4225             mov->tracks[i].data_offset += moov_size2 - moov_size;
4226
4227     return moov_size2;
4228 }
4229
4230 static int compute_sidx_size(AVFormatContext *s)
4231 {
4232     int i, sidx_size;
4233     MOVMuxContext *mov = s->priv_data;
4234
4235     sidx_size = get_sidx_size(s);
4236     if (sidx_size < 0)
4237         return sidx_size;
4238
4239     for (i = 0; i < mov->nb_streams; i++)
4240         mov->tracks[i].data_offset += sidx_size;
4241
4242     return sidx_size;
4243 }
4244
4245 static int shift_data(AVFormatContext *s)
4246 {
4247     int ret = 0, moov_size;
4248     MOVMuxContext *mov = s->priv_data;
4249     int64_t pos, pos_end = avio_tell(s->pb);
4250     uint8_t *buf, *read_buf[2];
4251     int read_buf_id = 0;
4252     int read_size[2];
4253     AVIOContext *read_pb;
4254
4255     if (mov->flags & FF_MOV_FLAG_FRAGMENT)
4256         moov_size = compute_sidx_size(s);
4257     else
4258         moov_size = compute_moov_size(s);
4259     if (moov_size < 0)
4260         return moov_size;
4261
4262     buf = av_malloc(moov_size * 2);
4263     if (!buf)
4264         return AVERROR(ENOMEM);
4265     read_buf[0] = buf;
4266     read_buf[1] = buf + moov_size;
4267
4268     /* Shift the data: the AVIO context of the output can only be used for
4269      * writing, so we re-open the same output, but for reading. It also avoids
4270      * a read/seek/write/seek back and forth. */
4271     avio_flush(s->pb);
4272     ret = s->io_open(s, &read_pb, s->filename, AVIO_FLAG_READ, NULL);
4273     if (ret < 0) {
4274         av_log(s, AV_LOG_ERROR, "Unable to re-open %s output file for "
4275                "the second pass (faststart)\n", s->filename);
4276         goto end;
4277     }
4278
4279     /* mark the end of the shift to up to the last data we wrote, and get ready
4280      * for writing */
4281     pos_end = avio_tell(s->pb);
4282     avio_seek(s->pb, mov->reserved_header_pos + moov_size, SEEK_SET);
4283
4284     /* start reading at where the new moov will be placed */
4285     avio_seek(read_pb, mov->reserved_header_pos, SEEK_SET);
4286     pos = avio_tell(read_pb);
4287
4288 #define READ_BLOCK do {                                                             \
4289     read_size[read_buf_id] = avio_read(read_pb, read_buf[read_buf_id], moov_size);  \
4290     read_buf_id ^= 1;                                                               \
4291 } while (0)
4292
4293     /* shift data by chunk of at most moov_size */
4294     READ_BLOCK;
4295     do {
4296         int n;
4297         READ_BLOCK;
4298         n = read_size[read_buf_id];
4299         if (n <= 0)
4300             break;
4301         avio_write(s->pb, read_buf[read_buf_id], n);
4302         pos += n;
4303     } while (pos < pos_end);
4304     ff_format_io_close(s, &read_pb);
4305
4306 end:
4307     av_free(buf);
4308     return ret;
4309 }
4310
4311 static int mov_write_trailer(AVFormatContext *s)
4312 {
4313     MOVMuxContext *mov = s->priv_data;
4314     AVIOContext *pb = s->pb;
4315     int res = 0;
4316     int i;
4317     int64_t moov_pos;
4318
4319     // If there were no chapters when the header was written, but there
4320     // are chapters now, write them in the trailer.  This only works
4321     // when we are not doing fragments.
4322     if (!mov->chapter_track && !(mov->flags & FF_MOV_FLAG_FRAGMENT)) {
4323         if (mov->mode & (MODE_MP4|MODE_MOV|MODE_IPOD) && s->nb_chapters) {
4324             mov->chapter_track = mov->nb_streams++;
4325             if ((res = mov_create_chapter_track(s, mov->chapter_track)) < 0)
4326                 goto error;
4327         }
4328     }
4329
4330     if (!(mov->flags & FF_MOV_FLAG_FRAGMENT)) {
4331         moov_pos = avio_tell(pb);
4332
4333         /* Write size of mdat tag */
4334         if (mov->mdat_size + 8 <= UINT32_MAX) {
4335             avio_seek(pb, mov->mdat_pos, SEEK_SET);
4336             avio_wb32(pb, mov->mdat_size + 8);
4337         } else {
4338             /* overwrite 'wide' placeholder atom */
4339             avio_seek(pb, mov->mdat_pos - 8, SEEK_SET);
4340             /* special value: real atom size will be 64 bit value after
4341              * tag field */
4342             avio_wb32(pb, 1);
4343             ffio_wfourcc(pb, "mdat");
4344             avio_wb64(pb, mov->mdat_size + 16);
4345         }
4346         avio_seek(pb, moov_pos, SEEK_SET);
4347
4348         if (mov->flags & FF_MOV_FLAG_FASTSTART) {
4349             av_log(s, AV_LOG_INFO, "Starting second pass: moving the moov atom to the beginning of the file\n");
4350             res = shift_data(s);
4351             if (res == 0) {
4352                 avio_seek(pb, mov->reserved_header_pos, SEEK_SET);
4353                 mov_write_moov_tag(pb, mov, s);
4354             }
4355         } else {
4356             mov_write_moov_tag(pb, mov, s);
4357         }
4358     } else {
4359         mov_auto_flush_fragment(s, 1);
4360         for (i = 0; i < mov->nb_streams; i++)
4361            mov->tracks[i].data_offset = 0;
4362         if (mov->flags & FF_MOV_FLAG_GLOBAL_SIDX) {
4363             av_log(s, AV_LOG_INFO, "Starting second pass: inserting sidx atoms\n");
4364             res = shift_data(s);
4365             if (res == 0) {
4366                 int64_t end = avio_tell(pb);
4367                 avio_seek(pb, mov->reserved_header_pos, SEEK_SET);
4368                 mov_write_sidx_tags(pb, mov, -1, 0);
4369                 avio_seek(pb, end, SEEK_SET);
4370                 avio_write_marker(s->pb, AV_NOPTS_VALUE, AVIO_DATA_MARKER_TRAILER);
4371                 mov_write_mfra_tag(pb, mov);
4372             }
4373         } else if (!(mov->flags & FF_MOV_FLAG_SKIP_TRAILER)) {
4374             avio_write_marker(s->pb, AV_NOPTS_VALUE, AVIO_DATA_MARKER_TRAILER);
4375             mov_write_mfra_tag(pb, mov);
4376         }
4377     }
4378
4379 error:
4380     mov_free(s);
4381
4382     return res;
4383 }
4384
4385 static const AVCodecTag codec_3gp_tags[] = {
4386     { AV_CODEC_ID_H263,     MKTAG('s','2','6','3') },
4387     { AV_CODEC_ID_H264,     MKTAG('a','v','c','1') },
4388     { AV_CODEC_ID_MPEG4,    MKTAG('m','p','4','v') },
4389     { AV_CODEC_ID_AAC,      MKTAG('m','p','4','a') },
4390     { AV_CODEC_ID_AMR_NB,   MKTAG('s','a','m','r') },
4391     { AV_CODEC_ID_AMR_WB,   MKTAG('s','a','w','b') },
4392     { AV_CODEC_ID_MOV_TEXT, MKTAG('t','x','3','g') },
4393     { AV_CODEC_ID_NONE, 0 },
4394 };
4395
4396 const AVCodecTag codec_mp4_tags[] = {
4397     { AV_CODEC_ID_MPEG4       , MKTAG('m', 'p', '4', 'v') },
4398     { AV_CODEC_ID_H264        , MKTAG('a', 'v', 'c', '1') },
4399     { AV_CODEC_ID_HEVC        , MKTAG('h', 'e', 'v', '1') },
4400     { AV_CODEC_ID_MPEG2VIDEO  , MKTAG('m', 'p', '4', 'v') },
4401     { AV_CODEC_ID_MPEG1VIDEO  , MKTAG('m', 'p', '4', 'v') },
4402     { AV_CODEC_ID_MJPEG       , MKTAG('m', 'p', '4', 'v') },
4403     { AV_CODEC_ID_PNG         , MKTAG('m', 'p', '4', 'v') },
4404     { AV_CODEC_ID_JPEG2000    , MKTAG('m', 'p', '4', 'v') },
4405     { AV_CODEC_ID_VC1         , MKTAG('v', 'c', '-', '1') },
4406     { AV_CODEC_ID_DIRAC       , MKTAG('d', 'r', 'a', 'c') },
4407     { AV_CODEC_ID_TSCC2       , MKTAG('m', 'p', '4', 'v') },
4408     { AV_CODEC_ID_AAC         , MKTAG('m', 'p', '4', 'a') },
4409     { AV_CODEC_ID_MP4ALS      , MKTAG('m', 'p', '4', 'a') },
4410     { AV_CODEC_ID_MP3         , MKTAG('m', 'p', '4', 'a') },
4411     { AV_CODEC_ID_MP2         , MKTAG('m', 'p', '4', 'a') },
4412     { AV_CODEC_ID_AC3         , MKTAG('a', 'c', '-', '3') },
4413     { AV_CODEC_ID_DTS         , MKTAG('m', 'p', '4', 'a') },
4414     { AV_CODEC_ID_VORBIS      , MKTAG('m', 'p', '4', 'a') },
4415     { AV_CODEC_ID_QCELP       , MKTAG('m', 'p', '4', 'a') },
4416     { AV_CODEC_ID_DVD_SUBTITLE, MKTAG('m', 'p', '4', 's') },
4417     { AV_CODEC_ID_MOV_TEXT    , MKTAG('t', 'x', '3', 'g') },
4418     { AV_CODEC_ID_NONE        ,    0 },
4419 };
4420
4421 const AVCodecTag codec_ism_tags[] = {
4422     { AV_CODEC_ID_WMAPRO      , MKTAG('w', 'm', 'a', ' ') },
4423     { AV_CODEC_ID_NONE        ,    0 },
4424 };
4425
4426 static const AVCodecTag codec_ipod_tags[] = {
4427     { AV_CODEC_ID_H264,     MKTAG('a','v','c','1') },
4428     { AV_CODEC_ID_MPEG4,    MKTAG('m','p','4','v') },
4429     { AV_CODEC_ID_AAC,      MKTAG('m','p','4','a') },
4430     { AV_CODEC_ID_ALAC,     MKTAG('a','l','a','c') },
4431     { AV_CODEC_ID_AC3,      MKTAG('a','c','-','3') },
4432     { AV_CODEC_ID_MOV_TEXT, MKTAG('t','x','3','g') },
4433     { AV_CODEC_ID_MOV_TEXT, MKTAG('t','e','x','t') },
4434     { AV_CODEC_ID_NONE, 0 },
4435 };
4436
4437 static const AVCodecTag codec_f4v_tags[] = {
4438     { AV_CODEC_ID_MP3,    MKTAG('.','m','p','3') },
4439     { AV_CODEC_ID_AAC,    MKTAG('m','p','4','a') },
4440     { AV_CODEC_ID_H264,   MKTAG('a','v','c','1') },
4441     { AV_CODEC_ID_VP6A,   MKTAG('V','P','6','A') },
4442     { AV_CODEC_ID_VP6F,   MKTAG('V','P','6','F') },
4443     { AV_CODEC_ID_NONE, 0 },
4444 };
4445
4446 #if CONFIG_MOV_MUXER
4447 MOV_CLASS(mov)
4448 AVOutputFormat ff_mov_muxer = {
4449     .name              = "mov",
4450     .long_name         = NULL_IF_CONFIG_SMALL("QuickTime / MOV"),
4451     .extensions        = "mov",
4452     .priv_data_size    = sizeof(MOVMuxContext),
4453     .audio_codec       = AV_CODEC_ID_AAC,
4454     .video_codec       = CONFIG_LIBX264_ENCODER ?
4455                          AV_CODEC_ID_H264 : AV_CODEC_ID_MPEG4,
4456     .write_header      = mov_write_header,
4457     .write_packet      = mov_write_packet,
4458     .write_trailer     = mov_write_trailer,
4459     .flags             = AVFMT_GLOBALHEADER | AVFMT_ALLOW_FLUSH | AVFMT_TS_NEGATIVE,
4460     .codec_tag         = (const AVCodecTag* const []){
4461         ff_codec_movvideo_tags, ff_codec_movaudio_tags, 0
4462     },
4463     .priv_class        = &mov_muxer_class,
4464 };
4465 #endif
4466 #if CONFIG_TGP_MUXER
4467 MOV_CLASS(tgp)
4468 AVOutputFormat ff_tgp_muxer = {
4469     .name              = "3gp",
4470     .long_name         = NULL_IF_CONFIG_SMALL("3GP (3GPP file format)"),
4471     .extensions        = "3gp",
4472     .priv_data_size    = sizeof(MOVMuxContext),
4473     .audio_codec       = AV_CODEC_ID_AMR_NB,
4474     .video_codec       = AV_CODEC_ID_H263,
4475     .write_header      = mov_write_header,
4476     .write_packet      = mov_write_packet,
4477     .write_trailer     = mov_write_trailer,
4478     .flags             = AVFMT_GLOBALHEADER | AVFMT_ALLOW_FLUSH | AVFMT_TS_NEGATIVE,
4479     .codec_tag         = (const AVCodecTag* const []){ codec_3gp_tags, 0 },
4480     .priv_class        = &tgp_muxer_class,
4481 };
4482 #endif
4483 #if CONFIG_MP4_MUXER
4484 MOV_CLASS(mp4)
4485 AVOutputFormat ff_mp4_muxer = {
4486     .name              = "mp4",
4487     .long_name         = NULL_IF_CONFIG_SMALL("MP4 (MPEG-4 Part 14)"),
4488     .mime_type         = "application/mp4",
4489     .extensions        = "mp4",
4490     .priv_data_size    = sizeof(MOVMuxContext),
4491     .audio_codec       = AV_CODEC_ID_AAC,
4492     .video_codec       = CONFIG_LIBX264_ENCODER ?
4493                          AV_CODEC_ID_H264 : AV_CODEC_ID_MPEG4,
4494     .write_header      = mov_write_header,
4495     .write_packet      = mov_write_packet,
4496     .write_trailer     = mov_write_trailer,
4497     .flags             = AVFMT_GLOBALHEADER | AVFMT_ALLOW_FLUSH | AVFMT_TS_NEGATIVE,
4498     .codec_tag         = (const AVCodecTag* const []){ codec_mp4_tags, 0 },
4499     .priv_class        = &mp4_muxer_class,
4500 };
4501 #endif
4502 #if CONFIG_PSP_MUXER
4503 MOV_CLASS(psp)
4504 AVOutputFormat ff_psp_muxer = {
4505     .name              = "psp",
4506     .long_name         = NULL_IF_CONFIG_SMALL("PSP MP4 (MPEG-4 Part 14)"),
4507     .extensions        = "mp4,psp",
4508     .priv_data_size    = sizeof(MOVMuxContext),
4509     .audio_codec       = AV_CODEC_ID_AAC,
4510     .video_codec       = CONFIG_LIBX264_ENCODER ?
4511                          AV_CODEC_ID_H264 : AV_CODEC_ID_MPEG4,
4512     .write_header      = mov_write_header,
4513     .write_packet      = mov_write_packet,
4514     .write_trailer     = mov_write_trailer,
4515     .flags             = AVFMT_GLOBALHEADER | AVFMT_ALLOW_FLUSH | AVFMT_TS_NEGATIVE,
4516     .codec_tag         = (const AVCodecTag* const []){ codec_mp4_tags, 0 },
4517     .priv_class        = &psp_muxer_class,
4518 };
4519 #endif
4520 #if CONFIG_TG2_MUXER
4521 MOV_CLASS(tg2)
4522 AVOutputFormat ff_tg2_muxer = {
4523     .name              = "3g2",
4524     .long_name         = NULL_IF_CONFIG_SMALL("3GP2 (3GPP2 file format)"),
4525     .extensions        = "3g2",
4526     .priv_data_size    = sizeof(MOVMuxContext),
4527     .audio_codec       = AV_CODEC_ID_AMR_NB,
4528     .video_codec       = AV_CODEC_ID_H263,
4529     .write_header      = mov_write_header,
4530     .write_packet      = mov_write_packet,
4531     .write_trailer     = mov_write_trailer,
4532     .flags             = AVFMT_GLOBALHEADER | AVFMT_ALLOW_FLUSH | AVFMT_TS_NEGATIVE,
4533     .codec_tag         = (const AVCodecTag* const []){ codec_3gp_tags, 0 },
4534     .priv_class        = &tg2_muxer_class,
4535 };
4536 #endif
4537 #if CONFIG_IPOD_MUXER
4538 MOV_CLASS(ipod)
4539 AVOutputFormat ff_ipod_muxer = {
4540     .name              = "ipod",
4541     .long_name         = NULL_IF_CONFIG_SMALL("iPod H.264 MP4 (MPEG-4 Part 14)"),
4542     .mime_type         = "application/mp4",
4543     .extensions        = "m4v,m4a",
4544     .priv_data_size    = sizeof(MOVMuxContext),
4545     .audio_codec       = AV_CODEC_ID_AAC,
4546     .video_codec       = AV_CODEC_ID_H264,
4547     .write_header      = mov_write_header,
4548     .write_packet      = mov_write_packet,
4549     .write_trailer     = mov_write_trailer,
4550     .flags             = AVFMT_GLOBALHEADER | AVFMT_ALLOW_FLUSH | AVFMT_TS_NEGATIVE,
4551     .codec_tag         = (const AVCodecTag* const []){ codec_ipod_tags, 0 },
4552     .priv_class        = &ipod_muxer_class,
4553 };
4554 #endif
4555 #if CONFIG_ISMV_MUXER
4556 MOV_CLASS(ismv)
4557 AVOutputFormat ff_ismv_muxer = {
4558     .name              = "ismv",
4559     .long_name         = NULL_IF_CONFIG_SMALL("ISMV/ISMA (Smooth Streaming)"),
4560     .mime_type         = "application/mp4",
4561     .extensions        = "ismv,isma",
4562     .priv_data_size    = sizeof(MOVMuxContext),
4563     .audio_codec       = AV_CODEC_ID_AAC,
4564     .video_codec       = AV_CODEC_ID_H264,
4565     .write_header      = mov_write_header,
4566     .write_packet      = mov_write_packet,
4567     .write_trailer     = mov_write_trailer,
4568     .flags             = AVFMT_GLOBALHEADER | AVFMT_ALLOW_FLUSH | AVFMT_TS_NEGATIVE,
4569     .codec_tag         = (const AVCodecTag* const []){
4570         codec_mp4_tags, codec_ism_tags, 0 },
4571     .priv_class        = &ismv_muxer_class,
4572 };
4573 #endif
4574 #if CONFIG_F4V_MUXER
4575 MOV_CLASS(f4v)
4576 AVOutputFormat ff_f4v_muxer = {
4577     .name              = "f4v",
4578     .long_name         = NULL_IF_CONFIG_SMALL("F4V Adobe Flash Video"),
4579     .mime_type         = "application/f4v",
4580     .extensions        = "f4v",
4581     .priv_data_size    = sizeof(MOVMuxContext),
4582     .audio_codec       = AV_CODEC_ID_AAC,
4583     .video_codec       = AV_CODEC_ID_H264,
4584     .write_header      = mov_write_header,
4585     .write_packet      = mov_write_packet,
4586     .write_trailer     = mov_write_trailer,
4587     .flags             = AVFMT_GLOBALHEADER | AVFMT_ALLOW_FLUSH | AVFMT_TS_NEGATIVE,
4588     .codec_tag         = (const AVCodecTag* const []){ codec_f4v_tags, 0 },
4589     .priv_class        = &f4v_muxer_class,
4590 };
4591 #endif