]> git.sesse.net Git - ffmpeg/blob - libavformat/movenc.c
movenc: Write 'loci' geotag metadata for 3gp and mp4
[ffmpeg] / libavformat / movenc.c
1 /*
2  * MOV, 3GP, MP4 muxer
3  * Copyright (c) 2003 Thomas Raivio
4  * Copyright (c) 2004 Gildas Bazin <gbazin at videolan dot org>
5  * Copyright (c) 2009 Baptiste Coudurier <baptiste dot coudurier at gmail dot com>
6  *
7  * This file is part of Libav.
8  *
9  * Libav is free software; you can redistribute it and/or
10  * modify it under the terms of the GNU Lesser General Public
11  * License as published by the Free Software Foundation; either
12  * version 2.1 of the License, or (at your option) any later version.
13  *
14  * Libav is distributed in the hope that it will be useful,
15  * but WITHOUT ANY WARRANTY; without even the implied warranty of
16  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
17  * Lesser General Public License for more details.
18  *
19  * You should have received a copy of the GNU Lesser General Public
20  * License along with Libav; if not, write to the Free Software
21  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
22  */
23
24 #include <stdint.h>
25 #include <inttypes.h>
26
27 #include "movenc.h"
28 #include "avformat.h"
29 #include "avio_internal.h"
30 #include "riff.h"
31 #include "avio.h"
32 #include "isom.h"
33 #include "avc.h"
34 #include "libavcodec/get_bits.h"
35 #include "libavcodec/put_bits.h"
36 #include "libavcodec/vc1_common.h"
37 #include "internal.h"
38 #include "libavutil/avstring.h"
39 #include "libavutil/intfloat.h"
40 #include "libavutil/mathematics.h"
41 #include "libavutil/opt.h"
42 #include "libavutil/dict.h"
43 #include "hevc.h"
44 #include "rtpenc.h"
45 #include "mov_chan.h"
46
47 static const AVOption options[] = {
48     { "movflags", "MOV muxer flags", offsetof(MOVMuxContext, flags), AV_OPT_TYPE_FLAGS, {.i64 = 0}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
49     { "rtphint", "Add RTP hint tracks", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_RTP_HINT}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
50     { "empty_moov", "Make the initial moov atom empty", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_EMPTY_MOOV}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
51     { "frag_keyframe", "Fragment at video keyframes", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_FRAG_KEYFRAME}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
52     { "separate_moof", "Write separate moof/mdat atoms for each track", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_SEPARATE_MOOF}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
53     { "frag_custom", "Flush fragments on caller requests", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_FRAG_CUSTOM}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
54     { "isml", "Create a live smooth streaming feed (for pushing to a publishing point)", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_ISML}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
55     { "faststart", "Run a second pass to put the index (moov atom) at the beginning of the file", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_FASTSTART}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
56     { "omit_tfhd_offset", "Omit the base data offset in tfhd atoms", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_OMIT_TFHD_OFFSET}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
57     { "disable_chpl", "Disable Nero chapter atom", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_DISABLE_CHPL}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
58     { "default_base_moof", "Set the default-base-is-moof flag in tfhd atoms", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_DEFAULT_BASE_MOOF}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
59     { "dash", "Write DASH compatible fragmented MP4", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_DASH}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
60     { "frag_discont", "Signal that the next fragment is discontinuous from earlier ones", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_FRAG_DISCONT}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
61     { "delay_moov", "Delay writing the initial moov until the first fragment is cut, or until the first fragment flush", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_DELAY_MOOV}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
62     { "global_sidx", "Write a global sidx index at the start of the file", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_GLOBAL_SIDX}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
63     FF_RTP_FLAG_OPTS(MOVMuxContext, rtp_flags),
64     { "skip_iods", "Skip writing iods atom.", offsetof(MOVMuxContext, iods_skip), AV_OPT_TYPE_INT, {.i64 = 0}, 0, 1, AV_OPT_FLAG_ENCODING_PARAM},
65     { "iods_audio_profile", "iods audio profile atom.", offsetof(MOVMuxContext, iods_audio_profile), AV_OPT_TYPE_INT, {.i64 = -1}, -1, 255, AV_OPT_FLAG_ENCODING_PARAM},
66     { "iods_video_profile", "iods video profile atom.", offsetof(MOVMuxContext, iods_video_profile), AV_OPT_TYPE_INT, {.i64 = -1}, -1, 255, AV_OPT_FLAG_ENCODING_PARAM},
67     { "frag_duration", "Maximum fragment duration", offsetof(MOVMuxContext, max_fragment_duration), AV_OPT_TYPE_INT, {.i64 = 0}, 0, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM},
68     { "min_frag_duration", "Minimum fragment duration", offsetof(MOVMuxContext, min_fragment_duration), AV_OPT_TYPE_INT, {.i64 = 0}, 0, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM},
69     { "frag_size", "Maximum fragment size", offsetof(MOVMuxContext, max_fragment_size), AV_OPT_TYPE_INT, {.i64 = 0}, 0, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM},
70     { "ism_lookahead", "Number of lookahead entries for ISM files", offsetof(MOVMuxContext, ism_lookahead), AV_OPT_TYPE_INT, {.i64 = 0}, 0, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM},
71     { "brand",    "Override major brand", offsetof(MOVMuxContext, major_brand),   AV_OPT_TYPE_STRING, {.str = NULL}, .flags = AV_OPT_FLAG_ENCODING_PARAM },
72     { "use_editlist", "use edit list", offsetof(MOVMuxContext, use_editlist), AV_OPT_TYPE_INT, {.i64 = -1}, -1, 1, AV_OPT_FLAG_ENCODING_PARAM},
73     { "fragment_index", "Fragment number of the next fragment", offsetof(MOVMuxContext, fragments), AV_OPT_TYPE_INT, {.i64 = 1}, 1, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM},
74     { "frag_interleave", "Interleave samples within fragments (max number of consecutive samples, lower is tighter interleaving, but with more overhead)", offsetof(MOVMuxContext, frag_interleave), AV_OPT_TYPE_INT, {.i64 = 0}, 0, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM },
75     { NULL },
76 };
77
78 #define MOV_CLASS(flavor)\
79 static const AVClass flavor ## _muxer_class = {\
80     .class_name = #flavor " muxer",\
81     .item_name  = av_default_item_name,\
82     .option     = options,\
83     .version    = LIBAVUTIL_VERSION_INT,\
84 };
85
86 static int utf8len(const uint8_t *b)
87 {
88     int len = 0;
89     int val;
90     while (*b) {
91         GET_UTF8(val, *b++, return -1;)
92         len++;
93     }
94     return len;
95 }
96
97 //FIXME support 64 bit variant with wide placeholders
98 static int64_t update_size(AVIOContext *pb, int64_t pos)
99 {
100     int64_t curpos = avio_tell(pb);
101     avio_seek(pb, pos, SEEK_SET);
102     avio_wb32(pb, curpos - pos); /* rewrite size */
103     avio_seek(pb, curpos, SEEK_SET);
104
105     return curpos - pos;
106 }
107
108 static int co64_required(const MOVTrack *track)
109 {
110     if (track->entry > 0 && track->cluster[track->entry - 1].pos + track->data_offset > UINT32_MAX)
111         return 1;
112     return 0;
113 }
114
115 /* Chunk offset atom */
116 static int mov_write_stco_tag(AVIOContext *pb, MOVTrack *track)
117 {
118     int i;
119     int mode64 = co64_required(track); // use 32 bit size variant if possible
120     int64_t pos = avio_tell(pb);
121     avio_wb32(pb, 0); /* size */
122     if (mode64) {
123         ffio_wfourcc(pb, "co64");
124     } else
125         ffio_wfourcc(pb, "stco");
126     avio_wb32(pb, 0); /* version & flags */
127     avio_wb32(pb, track->entry); /* entry count */
128     for (i = 0; i < track->entry; i++) {
129         if (mode64 == 1)
130             avio_wb64(pb, track->cluster[i].pos + track->data_offset);
131         else
132             avio_wb32(pb, track->cluster[i].pos + track->data_offset);
133     }
134     return update_size(pb, pos);
135 }
136
137 /* Sample size atom */
138 static int mov_write_stsz_tag(AVIOContext *pb, MOVTrack *track)
139 {
140     int equalChunks = 1;
141     int i, j, entries = 0, tst = -1, oldtst = -1;
142
143     int64_t pos = avio_tell(pb);
144     avio_wb32(pb, 0); /* size */
145     ffio_wfourcc(pb, "stsz");
146     avio_wb32(pb, 0); /* version & flags */
147
148     for (i = 0; i < track->entry; i++) {
149         tst = track->cluster[i].size / track->cluster[i].entries;
150         if (oldtst != -1 && tst != oldtst)
151             equalChunks = 0;
152         oldtst = tst;
153         entries += track->cluster[i].entries;
154     }
155     if (equalChunks && track->entry) {
156         int sSize = track->entry ? track->cluster[0].size / track->cluster[0].entries : 0;
157         sSize = FFMAX(1, sSize); // adpcm mono case could make sSize == 0
158         avio_wb32(pb, sSize); // sample size
159         avio_wb32(pb, entries); // sample count
160     } else {
161         avio_wb32(pb, 0); // sample size
162         avio_wb32(pb, entries); // sample count
163         for (i = 0; i < track->entry; i++) {
164             for (j = 0; j < track->cluster[i].entries; j++) {
165                 avio_wb32(pb, track->cluster[i].size /
166                           track->cluster[i].entries);
167             }
168         }
169     }
170     return update_size(pb, pos);
171 }
172
173 /* Sample to chunk atom */
174 static int mov_write_stsc_tag(AVIOContext *pb, MOVTrack *track)
175 {
176     int index = 0, oldval = -1, i;
177     int64_t entryPos, curpos;
178
179     int64_t pos = avio_tell(pb);
180     avio_wb32(pb, 0); /* size */
181     ffio_wfourcc(pb, "stsc");
182     avio_wb32(pb, 0); // version & flags
183     entryPos = avio_tell(pb);
184     avio_wb32(pb, track->entry); // entry count
185     for (i = 0; i < track->entry; i++) {
186         if (oldval != track->cluster[i].samples_in_chunk) {
187             avio_wb32(pb, i + 1); // first chunk
188             avio_wb32(pb, track->cluster[i].samples_in_chunk); // samples per chunk
189             avio_wb32(pb, 0x1); // sample description index
190             oldval = track->cluster[i].samples_in_chunk;
191             index++;
192         }
193     }
194     curpos = avio_tell(pb);
195     avio_seek(pb, entryPos, SEEK_SET);
196     avio_wb32(pb, index); // rewrite size
197     avio_seek(pb, curpos, SEEK_SET);
198
199     return update_size(pb, pos);
200 }
201
202 /* Sync sample atom */
203 static int mov_write_stss_tag(AVIOContext *pb, MOVTrack *track, uint32_t flag)
204 {
205     int64_t curpos, entryPos;
206     int i, index = 0;
207     int64_t pos = avio_tell(pb);
208     avio_wb32(pb, 0); // size
209     ffio_wfourcc(pb, flag == MOV_SYNC_SAMPLE ? "stss" : "stps");
210     avio_wb32(pb, 0); // version & flags
211     entryPos = avio_tell(pb);
212     avio_wb32(pb, track->entry); // entry count
213     for (i = 0; i < track->entry; i++) {
214         if (track->cluster[i].flags & flag) {
215             avio_wb32(pb, i + 1);
216             index++;
217         }
218     }
219     curpos = avio_tell(pb);
220     avio_seek(pb, entryPos, SEEK_SET);
221     avio_wb32(pb, index); // rewrite size
222     avio_seek(pb, curpos, SEEK_SET);
223     return update_size(pb, pos);
224 }
225
226 static int mov_write_amr_tag(AVIOContext *pb, MOVTrack *track)
227 {
228     avio_wb32(pb, 0x11); /* size */
229     if (track->mode == MODE_MOV) ffio_wfourcc(pb, "samr");
230     else                         ffio_wfourcc(pb, "damr");
231     ffio_wfourcc(pb, "FFMP");
232     avio_w8(pb, 0); /* decoder version */
233
234     avio_wb16(pb, 0x81FF); /* Mode set (all modes for AMR_NB) */
235     avio_w8(pb, 0x00); /* Mode change period (no restriction) */
236     avio_w8(pb, 0x01); /* Frames per sample */
237     return 0x11;
238 }
239
240 static int mov_write_ac3_tag(AVIOContext *pb, MOVTrack *track)
241 {
242     GetBitContext gbc;
243     PutBitContext pbc;
244     uint8_t buf[3];
245     int fscod, bsid, bsmod, acmod, lfeon, frmsizecod;
246
247     if (track->vos_len < 7)
248         return -1;
249
250     avio_wb32(pb, 11);
251     ffio_wfourcc(pb, "dac3");
252
253     init_get_bits(&gbc, track->vos_data + 4, (track->vos_len - 4) * 8);
254     fscod      = get_bits(&gbc, 2);
255     frmsizecod = get_bits(&gbc, 6);
256     bsid       = get_bits(&gbc, 5);
257     bsmod      = get_bits(&gbc, 3);
258     acmod      = get_bits(&gbc, 3);
259     if (acmod == 2) {
260         skip_bits(&gbc, 2); // dsurmod
261     } else {
262         if ((acmod & 1) && acmod != 1)
263             skip_bits(&gbc, 2); // cmixlev
264         if (acmod & 4)
265             skip_bits(&gbc, 2); // surmixlev
266     }
267     lfeon = get_bits1(&gbc);
268
269     init_put_bits(&pbc, buf, sizeof(buf));
270     put_bits(&pbc, 2, fscod);
271     put_bits(&pbc, 5, bsid);
272     put_bits(&pbc, 3, bsmod);
273     put_bits(&pbc, 3, acmod);
274     put_bits(&pbc, 1, lfeon);
275     put_bits(&pbc, 5, frmsizecod >> 1); // bit_rate_code
276     put_bits(&pbc, 5, 0); // reserved
277
278     flush_put_bits(&pbc);
279     avio_write(pb, buf, sizeof(buf));
280
281     return 11;
282 }
283
284 /**
285  * This function writes extradata "as is".
286  * Extradata must be formatted like a valid atom (with size and tag).
287  */
288 static int mov_write_extradata_tag(AVIOContext *pb, MOVTrack *track)
289 {
290     avio_write(pb, track->par->extradata, track->par->extradata_size);
291     return track->par->extradata_size;
292 }
293
294 static void put_descr(AVIOContext *pb, int tag, unsigned int size)
295 {
296     int i = 3;
297     avio_w8(pb, tag);
298     for (; i > 0; i--)
299         avio_w8(pb, (size >> (7 * i)) | 0x80);
300     avio_w8(pb, size & 0x7F);
301 }
302
303 static int mov_write_esds_tag(AVIOContext *pb, MOVTrack *track) // Basic
304 {
305     AVCPBProperties *props;
306     int64_t pos = avio_tell(pb);
307     int decoder_specific_info_len = track->vos_len ? 5 + track->vos_len : 0;
308
309     avio_wb32(pb, 0); // size
310     ffio_wfourcc(pb, "esds");
311     avio_wb32(pb, 0); // Version
312
313     // ES descriptor
314     put_descr(pb, 0x03, 3 + 5+13 + decoder_specific_info_len + 5+1);
315     avio_wb16(pb, track->track_id);
316     avio_w8(pb, 0x00); // flags (= no flags)
317
318     // DecoderConfig descriptor
319     put_descr(pb, 0x04, 13 + decoder_specific_info_len);
320
321     // Object type indication
322     if ((track->par->codec_id == AV_CODEC_ID_MP2 ||
323          track->par->codec_id == AV_CODEC_ID_MP3) &&
324         track->par->sample_rate > 24000)
325         avio_w8(pb, 0x6B); // 11172-3
326     else
327         avio_w8(pb, ff_codec_get_tag(ff_mp4_obj_type, track->par->codec_id));
328
329     // the following fields is made of 6 bits to identify the streamtype (4 for video, 5 for audio)
330     // plus 1 bit to indicate upstream and 1 bit set to 1 (reserved)
331     if (track->par->codec_id == AV_CODEC_ID_DVD_SUBTITLE)
332         avio_w8(pb, (0x38 << 2) | 1); // flags (= NeroSubpicStream)
333     else if (track->par->codec_type == AVMEDIA_TYPE_AUDIO)
334         avio_w8(pb, 0x15); // flags (= Audiostream)
335     else
336         avio_w8(pb, 0x11); // flags (= Visualstream)
337
338     props = (AVCPBProperties*)av_stream_get_side_data(track->st, AV_PKT_DATA_CPB_PROPERTIES,
339                                                       NULL);
340
341     avio_wb24(pb, props ? props->buffer_size / 8 : 0); // Buffersize DB
342
343     avio_wb32(pb, props ? FFMAX(props->max_bitrate, props->avg_bitrate) : track->par->bit_rate); // maxbitrate (FIXME should be max rate in any 1 sec window)
344     if (!props || !props->min_bitrate || props->max_bitrate != props->min_bitrate)
345         avio_wb32(pb, 0); // vbr
346     else
347         avio_wb32(pb, props->max_bitrate); // avg bitrate
348
349     if (track->vos_len) {
350         // DecoderSpecific info descriptor
351         put_descr(pb, 0x05, track->vos_len);
352         avio_write(pb, track->vos_data, track->vos_len);
353     }
354
355     // SL descriptor
356     put_descr(pb, 0x06, 1);
357     avio_w8(pb, 0x02);
358     return update_size(pb, pos);
359 }
360
361 static int mov_write_ms_tag(AVFormatContext *s, AVIOContext *pb, MOVTrack *track)
362 {
363     int64_t pos = avio_tell(pb);
364     avio_wb32(pb, 0);
365     avio_wl32(pb, track->tag); // store it byteswapped
366     track->par->codec_tag = av_bswap16(track->tag >> 16);
367     ff_put_wav_header(s, pb, track->st->codecpar);
368     return update_size(pb, pos);
369 }
370
371 static int mov_write_wfex_tag(AVFormatContext *s, AVIOContext *pb, MOVTrack *track)
372 {
373     int64_t pos = avio_tell(pb);
374     avio_wb32(pb, 0);
375     ffio_wfourcc(pb, "wfex");
376     ff_put_wav_header(s, pb, track->st->codecpar);
377     return update_size(pb, pos);
378 }
379
380 static int mov_write_chan_tag(AVFormatContext *s, AVIOContext *pb, MOVTrack *track)
381 {
382     uint32_t layout_tag, bitmap;
383     int64_t pos = avio_tell(pb);
384
385     layout_tag = ff_mov_get_channel_layout_tag(track->par->codec_id,
386                                                track->par->channel_layout,
387                                                &bitmap);
388     if (!layout_tag) {
389         av_log(s, AV_LOG_WARNING, "not writing 'chan' tag due to "
390                "lack of channel information\n");
391         return 0;
392     }
393
394     avio_wb32(pb, 0);           // Size
395     ffio_wfourcc(pb, "chan");   // Type
396     avio_w8(pb, 0);             // Version
397     avio_wb24(pb, 0);           // Flags
398     avio_wb32(pb, layout_tag);  // mChannelLayoutTag
399     avio_wb32(pb, bitmap);      // mChannelBitmap
400     avio_wb32(pb, 0);           // mNumberChannelDescriptions
401
402     return update_size(pb, pos);
403 }
404
405 static int mov_write_wave_tag(AVFormatContext *s, AVIOContext *pb, MOVTrack *track)
406 {
407     int64_t pos = avio_tell(pb);
408
409     avio_wb32(pb, 0);     /* size */
410     ffio_wfourcc(pb, "wave");
411
412     avio_wb32(pb, 12);    /* size */
413     ffio_wfourcc(pb, "frma");
414     avio_wl32(pb, track->tag);
415
416     if (track->par->codec_id == AV_CODEC_ID_AAC) {
417         /* useless atom needed by mplayer, ipod, not needed by quicktime */
418         avio_wb32(pb, 12); /* size */
419         ffio_wfourcc(pb, "mp4a");
420         avio_wb32(pb, 0);
421         mov_write_esds_tag(pb, track);
422     } else if (track->par->codec_id == AV_CODEC_ID_AMR_NB) {
423         mov_write_amr_tag(pb, track);
424     } else if (track->par->codec_id == AV_CODEC_ID_AC3) {
425         mov_write_ac3_tag(pb, track);
426     } else if (track->par->codec_id == AV_CODEC_ID_ALAC) {
427         mov_write_extradata_tag(pb, track);
428     } else if (track->par->codec_id == AV_CODEC_ID_ADPCM_MS ||
429                track->par->codec_id == AV_CODEC_ID_ADPCM_IMA_WAV) {
430         mov_write_ms_tag(s, pb, track);
431     }
432
433     avio_wb32(pb, 8);     /* size */
434     avio_wb32(pb, 0);     /* null tag */
435
436     return update_size(pb, pos);
437 }
438
439 static int mov_write_dvc1_structs(MOVTrack *track, uint8_t *buf)
440 {
441     uint8_t *unescaped;
442     const uint8_t *start, *next, *end = track->vos_data + track->vos_len;
443     int unescaped_size, seq_found = 0;
444     int level = 0, interlace = 0;
445     int packet_seq   = track->vc1_info.packet_seq;
446     int packet_entry = track->vc1_info.packet_entry;
447     int slices       = track->vc1_info.slices;
448     PutBitContext pbc;
449
450     if (track->start_dts == AV_NOPTS_VALUE) {
451         /* No packets written yet, vc1_info isn't authoritative yet. */
452         /* Assume inline sequence and entry headers. */
453         packet_seq = packet_entry = 1;
454         av_log(NULL, AV_LOG_WARNING,
455                "moov atom written before any packets, unable to write correct "
456                "dvc1 atom. Set the delay_moov flag to fix this.\n");
457     }
458
459     unescaped = av_mallocz(track->vos_len + AV_INPUT_BUFFER_PADDING_SIZE);
460     if (!unescaped)
461         return AVERROR(ENOMEM);
462     start = find_next_marker(track->vos_data, end);
463     for (next = start; next < end; start = next) {
464         GetBitContext gb;
465         int size;
466         next = find_next_marker(start + 4, end);
467         size = next - start - 4;
468         if (size <= 0)
469             continue;
470         unescaped_size = vc1_unescape_buffer(start + 4, size, unescaped);
471         init_get_bits(&gb, unescaped, 8 * unescaped_size);
472         if (AV_RB32(start) == VC1_CODE_SEQHDR) {
473             int profile = get_bits(&gb, 2);
474             if (profile != PROFILE_ADVANCED) {
475                 av_free(unescaped);
476                 return AVERROR(ENOSYS);
477             }
478             seq_found = 1;
479             level = get_bits(&gb, 3);
480             /* chromaformat, frmrtq_postproc, bitrtq_postproc, postprocflag,
481              * width, height */
482             skip_bits_long(&gb, 2 + 3 + 5 + 1 + 2*12);
483             skip_bits(&gb, 1); /* broadcast */
484             interlace = get_bits1(&gb);
485             skip_bits(&gb, 4); /* tfcntrflag, finterpflag, reserved, psf */
486         }
487     }
488     if (!seq_found) {
489         av_free(unescaped);
490         return AVERROR(ENOSYS);
491     }
492
493     init_put_bits(&pbc, buf, 7);
494     /* VC1DecSpecStruc */
495     put_bits(&pbc, 4, 12); /* profile - advanced */
496     put_bits(&pbc, 3, level);
497     put_bits(&pbc, 1, 0); /* reserved */
498     /* VC1AdvDecSpecStruc */
499     put_bits(&pbc, 3, level);
500     put_bits(&pbc, 1, 0); /* cbr */
501     put_bits(&pbc, 6, 0); /* reserved */
502     put_bits(&pbc, 1, !interlace); /* no interlace */
503     put_bits(&pbc, 1, !packet_seq); /* no multiple seq */
504     put_bits(&pbc, 1, !packet_entry); /* no multiple entry */
505     put_bits(&pbc, 1, !slices); /* no slice code */
506     put_bits(&pbc, 1, 0); /* no bframe */
507     put_bits(&pbc, 1, 0); /* reserved */
508
509     /* framerate */
510     if (track->st->avg_frame_rate.num > 0 && track->st->avg_frame_rate.den > 0)
511         put_bits32(&pbc, track->st->avg_frame_rate.num / track->st->avg_frame_rate.den);
512     else
513         put_bits32(&pbc, 0xffffffff);
514
515     flush_put_bits(&pbc);
516
517     av_free(unescaped);
518
519     return 0;
520 }
521
522 static int mov_write_dvc1_tag(AVIOContext *pb, MOVTrack *track)
523 {
524     uint8_t buf[7] = { 0 };
525     int ret;
526
527     if ((ret = mov_write_dvc1_structs(track, buf)) < 0)
528         return ret;
529
530     avio_wb32(pb, track->vos_len + 8 + sizeof(buf));
531     ffio_wfourcc(pb, "dvc1");
532     avio_write(pb, buf, sizeof(buf));
533     avio_write(pb, track->vos_data, track->vos_len);
534
535     return 0;
536 }
537
538 static int mov_write_glbl_tag(AVIOContext *pb, MOVTrack *track)
539 {
540     avio_wb32(pb, track->vos_len + 8);
541     ffio_wfourcc(pb, "glbl");
542     avio_write(pb, track->vos_data, track->vos_len);
543     return 8 + track->vos_len;
544 }
545
546 /**
547  * Compute flags for 'lpcm' tag.
548  * See CoreAudioTypes and AudioStreamBasicDescription at Apple.
549  */
550 static int mov_get_lpcm_flags(enum AVCodecID codec_id)
551 {
552     switch (codec_id) {
553     case AV_CODEC_ID_PCM_F32BE:
554     case AV_CODEC_ID_PCM_F64BE:
555         return 11;
556     case AV_CODEC_ID_PCM_F32LE:
557     case AV_CODEC_ID_PCM_F64LE:
558         return 9;
559     case AV_CODEC_ID_PCM_U8:
560         return 10;
561     case AV_CODEC_ID_PCM_S16BE:
562     case AV_CODEC_ID_PCM_S24BE:
563     case AV_CODEC_ID_PCM_S32BE:
564         return 14;
565     case AV_CODEC_ID_PCM_S8:
566     case AV_CODEC_ID_PCM_S16LE:
567     case AV_CODEC_ID_PCM_S24LE:
568     case AV_CODEC_ID_PCM_S32LE:
569         return 12;
570     default:
571         return 0;
572     }
573 }
574
575 static int get_cluster_duration(MOVTrack *track, int cluster_idx)
576 {
577     int64_t next_dts;
578
579     if (cluster_idx >= track->entry)
580         return 0;
581
582     if (cluster_idx + 1 == track->entry)
583         next_dts = track->track_duration + track->start_dts;
584     else
585         next_dts = track->cluster[cluster_idx + 1].dts;
586
587     return next_dts - track->cluster[cluster_idx].dts;
588 }
589
590 static int get_samples_per_packet(MOVTrack *track)
591 {
592     int i, first_duration;
593
594     /* use 1 for raw PCM */
595     if (!track->audio_vbr)
596         return 1;
597
598     /* check to see if duration is constant for all clusters */
599     if (!track->entry)
600         return 0;
601     first_duration = get_cluster_duration(track, 0);
602     for (i = 1; i < track->entry; i++) {
603         if (get_cluster_duration(track, i) != first_duration)
604             return 0;
605     }
606     return first_duration;
607 }
608
609 static int mov_write_audio_tag(AVFormatContext *s, AVIOContext *pb, MOVTrack *track)
610 {
611     int64_t pos = avio_tell(pb);
612     int version = 0;
613     uint32_t tag = track->tag;
614
615     if (track->mode == MODE_MOV) {
616         if (mov_get_lpcm_flags(track->par->codec_id))
617             tag = AV_RL32("lpcm");
618         version = 2;
619     }
620
621     avio_wb32(pb, 0); /* size */
622     avio_wl32(pb, tag); // store it byteswapped
623     avio_wb32(pb, 0); /* Reserved */
624     avio_wb16(pb, 0); /* Reserved */
625     avio_wb16(pb, 1); /* Data-reference index, XXX  == 1 */
626
627     /* SoundDescription */
628     avio_wb16(pb, version); /* Version */
629     avio_wb16(pb, 0); /* Revision level */
630     avio_wb32(pb, 0); /* Reserved */
631
632     if (version == 2) {
633         avio_wb16(pb, 3);
634         avio_wb16(pb, 16);
635         avio_wb16(pb, 0xfffe);
636         avio_wb16(pb, 0);
637         avio_wb32(pb, 0x00010000);
638         avio_wb32(pb, 72);
639         avio_wb64(pb, av_double2int(track->par->sample_rate));
640         avio_wb32(pb, track->par->channels);
641         avio_wb32(pb, 0x7F000000);
642         avio_wb32(pb, av_get_bits_per_sample(track->par->codec_id));
643         avio_wb32(pb, mov_get_lpcm_flags(track->par->codec_id));
644         avio_wb32(pb, track->sample_size);
645         avio_wb32(pb, get_samples_per_packet(track));
646     } else {
647         /* reserved for mp4/3gp */
648         avio_wb16(pb, 2);
649         avio_wb16(pb, 16);
650         avio_wb16(pb, 0);
651
652         avio_wb16(pb, 0); /* packet size (= 0) */
653         avio_wb16(pb, track->par->sample_rate <= UINT16_MAX ?
654                       track->par->sample_rate : 0);
655         avio_wb16(pb, 0); /* Reserved */
656     }
657
658     if (track->mode == MODE_MOV &&
659         (track->par->codec_id == AV_CODEC_ID_AAC           ||
660          track->par->codec_id == AV_CODEC_ID_AC3           ||
661          track->par->codec_id == AV_CODEC_ID_AMR_NB        ||
662          track->par->codec_id == AV_CODEC_ID_ALAC          ||
663          track->par->codec_id == AV_CODEC_ID_ADPCM_MS      ||
664          track->par->codec_id == AV_CODEC_ID_ADPCM_IMA_WAV))
665         mov_write_wave_tag(s, pb, track);
666     else if (track->tag == MKTAG('m','p','4','a'))
667         mov_write_esds_tag(pb, track);
668     else if (track->par->codec_id == AV_CODEC_ID_AMR_NB)
669         mov_write_amr_tag(pb, track);
670     else if (track->par->codec_id == AV_CODEC_ID_AC3)
671         mov_write_ac3_tag(pb, track);
672     else if (track->par->codec_id == AV_CODEC_ID_ALAC)
673         mov_write_extradata_tag(pb, track);
674     else if (track->par->codec_id == AV_CODEC_ID_WMAPRO)
675         mov_write_wfex_tag(s, pb, track);
676     else if (track->vos_len > 0)
677         mov_write_glbl_tag(pb, track);
678
679     if (track->mode == MODE_MOV && track->par->codec_type == AVMEDIA_TYPE_AUDIO)
680         mov_write_chan_tag(s, pb, track);
681
682     return update_size(pb, pos);
683 }
684
685 static int mov_write_d263_tag(AVIOContext *pb)
686 {
687     avio_wb32(pb, 0xf); /* size */
688     ffio_wfourcc(pb, "d263");
689     ffio_wfourcc(pb, "FFMP");
690     avio_w8(pb, 0); /* decoder version */
691     /* FIXME use AVCodecContext level/profile, when encoder will set values */
692     avio_w8(pb, 0xa); /* level */
693     avio_w8(pb, 0); /* profile */
694     return 0xf;
695 }
696
697 /* TODO: No idea about these values */
698 static int mov_write_svq3_tag(AVIOContext *pb)
699 {
700     avio_wb32(pb, 0x15);
701     ffio_wfourcc(pb, "SMI ");
702     ffio_wfourcc(pb, "SEQH");
703     avio_wb32(pb, 0x5);
704     avio_wb32(pb, 0xe2c0211d);
705     avio_wb32(pb, 0xc0000000);
706     avio_w8(pb, 0);
707     return 0x15;
708 }
709
710 static int mov_write_avcc_tag(AVIOContext *pb, MOVTrack *track)
711 {
712     int64_t pos = avio_tell(pb);
713
714     avio_wb32(pb, 0);
715     ffio_wfourcc(pb, "avcC");
716     ff_isom_write_avcc(pb, track->vos_data, track->vos_len);
717     return update_size(pb, pos);
718 }
719
720 static int mov_write_hvcc_tag(AVIOContext *pb, MOVTrack *track)
721 {
722     int64_t pos = avio_tell(pb);
723
724     avio_wb32(pb, 0);
725     ffio_wfourcc(pb, "hvcC");
726     ff_isom_write_hvcc(pb, track->vos_data, track->vos_len, 0);
727     return update_size(pb, pos);
728 }
729
730 /* also used by all avid codecs (dv, imx, meridien) and their variants */
731 static int mov_write_avid_tag(AVIOContext *pb, MOVTrack *track)
732 {
733     int i;
734     avio_wb32(pb, 24); /* size */
735     ffio_wfourcc(pb, "ACLR");
736     ffio_wfourcc(pb, "ACLR");
737     ffio_wfourcc(pb, "0001");
738     avio_wb32(pb, 2); /* yuv range: full 1 / normal 2 */
739     avio_wb32(pb, 0); /* unknown */
740
741     avio_wb32(pb, 24); /* size */
742     ffio_wfourcc(pb, "APRG");
743     ffio_wfourcc(pb, "APRG");
744     ffio_wfourcc(pb, "0001");
745     avio_wb32(pb, 1); /* unknown */
746     avio_wb32(pb, 0); /* unknown */
747
748     avio_wb32(pb, 120); /* size */
749     ffio_wfourcc(pb, "ARES");
750     ffio_wfourcc(pb, "ARES");
751     ffio_wfourcc(pb, "0001");
752     avio_wb32(pb, AV_RB32(track->vos_data + 0x28)); /* dnxhd cid, some id ? */
753     avio_wb32(pb, track->par->width);
754     /* values below are based on samples created with quicktime and avid codecs */
755     if (track->vos_data[5] & 2) { // interlaced
756         avio_wb32(pb, track->par->height / 2);
757         avio_wb32(pb, 2); /* unknown */
758         avio_wb32(pb, 0); /* unknown */
759         avio_wb32(pb, 4); /* unknown */
760     } else {
761         avio_wb32(pb, track->par->height);
762         avio_wb32(pb, 1); /* unknown */
763         avio_wb32(pb, 0); /* unknown */
764         if (track->par->height == 1080)
765             avio_wb32(pb, 5); /* unknown */
766         else
767             avio_wb32(pb, 6); /* unknown */
768     }
769     /* padding */
770     for (i = 0; i < 10; i++)
771         avio_wb64(pb, 0);
772
773     /* extra padding for stsd needed */
774     avio_wb32(pb, 0);
775     return 0;
776 }
777
778 static int mp4_get_codec_tag(AVFormatContext *s, MOVTrack *track)
779 {
780     int tag = track->par->codec_tag;
781
782     if (!ff_codec_get_tag(ff_mp4_obj_type, track->par->codec_id))
783         return 0;
784
785     if      (track->par->codec_id == AV_CODEC_ID_H264)      tag = MKTAG('a','v','c','1');
786     else if (track->par->codec_id == AV_CODEC_ID_HEVC)      tag = MKTAG('h','e','v','1');
787     else if (track->par->codec_id == AV_CODEC_ID_AC3)       tag = MKTAG('a','c','-','3');
788     else if (track->par->codec_id == AV_CODEC_ID_DIRAC)     tag = MKTAG('d','r','a','c');
789     else if (track->par->codec_id == AV_CODEC_ID_MOV_TEXT)  tag = MKTAG('t','x','3','g');
790     else if (track->par->codec_id == AV_CODEC_ID_VC1)       tag = MKTAG('v','c','-','1');
791     else if (track->par->codec_type == AVMEDIA_TYPE_VIDEO)  tag = MKTAG('m','p','4','v');
792     else if (track->par->codec_type == AVMEDIA_TYPE_AUDIO)  tag = MKTAG('m','p','4','a');
793     else if (track->par->codec_id == AV_CODEC_ID_DVD_SUBTITLE)  tag = MKTAG('m','p','4','s');
794
795     return tag;
796 }
797
798 static const AVCodecTag codec_ipod_tags[] = {
799     { AV_CODEC_ID_H264,     MKTAG('a','v','c','1') },
800     { AV_CODEC_ID_MPEG4,    MKTAG('m','p','4','v') },
801     { AV_CODEC_ID_AAC,      MKTAG('m','p','4','a') },
802     { AV_CODEC_ID_ALAC,     MKTAG('a','l','a','c') },
803     { AV_CODEC_ID_AC3,      MKTAG('a','c','-','3') },
804     { AV_CODEC_ID_MOV_TEXT, MKTAG('t','x','3','g') },
805     { AV_CODEC_ID_MOV_TEXT, MKTAG('t','e','x','t') },
806     { AV_CODEC_ID_NONE, 0 },
807 };
808
809 static int ipod_get_codec_tag(AVFormatContext *s, MOVTrack *track)
810 {
811     int tag = track->par->codec_tag;
812
813     // keep original tag for subs, ipod supports both formats
814     if (!(track->par->codec_type == AVMEDIA_TYPE_SUBTITLE &&
815           (tag == MKTAG('t', 'x', '3', 'g') ||
816            tag == MKTAG('t', 'e', 'x', 't'))))
817         tag = ff_codec_get_tag(codec_ipod_tags, track->par->codec_id);
818
819     if (!av_match_ext(s->filename, "m4a") && !av_match_ext(s->filename, "m4v"))
820         av_log(s, AV_LOG_WARNING, "Warning, extension is not .m4a nor .m4v "
821                "Quicktime/Ipod might not play the file\n");
822
823     return tag;
824 }
825
826 static int mov_get_dv_codec_tag(AVFormatContext *s, MOVTrack *track)
827 {
828     int tag;
829
830     if (track->par->width == 720) /* SD */
831         if (track->par->height == 480) /* NTSC */
832             if  (track->par->format  == AV_PIX_FMT_YUV422P) tag = MKTAG('d','v','5','n');
833             else                                            tag = MKTAG('d','v','c',' ');
834         else if (track->par->format  == AV_PIX_FMT_YUV422P) tag = MKTAG('d','v','5','p');
835         else if (track->par->format  == AV_PIX_FMT_YUV420P) tag = MKTAG('d','v','c','p');
836         else                                                tag = MKTAG('d','v','p','p');
837     else if (track->par->height == 720) /* HD 720 line */
838         if  (track->st->time_base.den == 50)                tag = MKTAG('d','v','h','q');
839         else                                                tag = MKTAG('d','v','h','p');
840     else if (track->par->height == 1080) /* HD 1080 line */
841         if  (track->st->time_base.den == 25)                tag = MKTAG('d','v','h','5');
842         else                                                tag = MKTAG('d','v','h','6');
843     else {
844         av_log(s, AV_LOG_ERROR, "unsupported height for dv codec\n");
845         return 0;
846     }
847
848     return tag;
849 }
850
851 static const struct {
852     enum AVPixelFormat pix_fmt;
853     uint32_t tag;
854     unsigned bps;
855 } mov_pix_fmt_tags[] = {
856     { AV_PIX_FMT_YUYV422, MKTAG('y','u','v','s'),  0 },
857     { AV_PIX_FMT_UYVY422, MKTAG('2','v','u','y'),  0 },
858     { AV_PIX_FMT_RGB555BE,MKTAG('r','a','w',' '), 16 },
859     { AV_PIX_FMT_RGB555LE,MKTAG('L','5','5','5'), 16 },
860     { AV_PIX_FMT_RGB565LE,MKTAG('L','5','6','5'), 16 },
861     { AV_PIX_FMT_RGB565BE,MKTAG('B','5','6','5'), 16 },
862     { AV_PIX_FMT_GRAY16BE,MKTAG('b','1','6','g'), 16 },
863     { AV_PIX_FMT_RGB24,   MKTAG('r','a','w',' '), 24 },
864     { AV_PIX_FMT_BGR24,   MKTAG('2','4','B','G'), 24 },
865     { AV_PIX_FMT_ARGB,    MKTAG('r','a','w',' '), 32 },
866     { AV_PIX_FMT_BGRA,    MKTAG('B','G','R','A'), 32 },
867     { AV_PIX_FMT_RGBA,    MKTAG('R','G','B','A'), 32 },
868     { AV_PIX_FMT_ABGR,    MKTAG('A','B','G','R'), 32 },
869     { AV_PIX_FMT_RGB48BE, MKTAG('b','4','8','r'), 48 },
870 };
871
872 static int mov_get_rawvideo_codec_tag(AVFormatContext *s, MOVTrack *track)
873 {
874     int tag = track->par->codec_tag;
875     int i;
876
877     for (i = 0; i < FF_ARRAY_ELEMS(mov_pix_fmt_tags); i++) {
878         if (track->par->format == mov_pix_fmt_tags[i].pix_fmt) {
879             tag = mov_pix_fmt_tags[i].tag;
880             track->par->bits_per_coded_sample = mov_pix_fmt_tags[i].bps;
881             break;
882         }
883     }
884
885     return tag;
886 }
887
888 static int mov_get_codec_tag(AVFormatContext *s, MOVTrack *track)
889 {
890     int tag = track->par->codec_tag;
891
892     if (!tag || (s->strict_std_compliance >= FF_COMPLIANCE_NORMAL &&
893                  (track->par->codec_id == AV_CODEC_ID_DVVIDEO ||
894                   track->par->codec_id == AV_CODEC_ID_RAWVIDEO ||
895                   track->par->codec_id == AV_CODEC_ID_H263 ||
896                   av_get_bits_per_sample(track->par->codec_id)))) { // pcm audio
897         if (track->par->codec_id == AV_CODEC_ID_DVVIDEO)
898             tag = mov_get_dv_codec_tag(s, track);
899         else if (track->par->codec_id == AV_CODEC_ID_RAWVIDEO)
900             tag = mov_get_rawvideo_codec_tag(s, track);
901         else if (track->par->codec_type == AVMEDIA_TYPE_VIDEO) {
902             tag = ff_codec_get_tag(ff_codec_movvideo_tags, track->par->codec_id);
903             if (!tag) { // if no mac fcc found, try with Microsoft tags
904                 tag = ff_codec_get_tag(ff_codec_bmp_tags, track->par->codec_id);
905                 if (tag)
906                     av_log(s, AV_LOG_WARNING, "Using MS style video codec tag, "
907                            "the file may be unplayable!\n");
908             }
909         } else if (track->par->codec_type == AVMEDIA_TYPE_AUDIO) {
910             tag = ff_codec_get_tag(ff_codec_movaudio_tags, track->par->codec_id);
911             if (!tag) { // if no mac fcc found, try with Microsoft tags
912                 int ms_tag = ff_codec_get_tag(ff_codec_wav_tags, track->par->codec_id);
913                 if (ms_tag) {
914                     tag = MKTAG('m', 's', ((ms_tag >> 8) & 0xff), (ms_tag & 0xff));
915                     av_log(s, AV_LOG_WARNING, "Using MS style audio codec tag, "
916                            "the file may be unplayable!\n");
917                 }
918             }
919         } else if (track->par->codec_type == AVMEDIA_TYPE_SUBTITLE)
920             tag = ff_codec_get_tag(ff_codec_movsubtitle_tags, track->par->codec_id);
921     }
922
923     return tag;
924 }
925
926 static const AVCodecTag codec_3gp_tags[] = {
927     { AV_CODEC_ID_H263,     MKTAG('s','2','6','3') },
928     { AV_CODEC_ID_H264,     MKTAG('a','v','c','1') },
929     { AV_CODEC_ID_MPEG4,    MKTAG('m','p','4','v') },
930     { AV_CODEC_ID_AAC,      MKTAG('m','p','4','a') },
931     { AV_CODEC_ID_AMR_NB,   MKTAG('s','a','m','r') },
932     { AV_CODEC_ID_AMR_WB,   MKTAG('s','a','w','b') },
933     { AV_CODEC_ID_MOV_TEXT, MKTAG('t','x','3','g') },
934     { AV_CODEC_ID_NONE, 0 },
935 };
936
937 static const AVCodecTag codec_f4v_tags[] = {
938     { AV_CODEC_ID_MP3,    MKTAG('.','m','p','3') },
939     { AV_CODEC_ID_AAC,    MKTAG('m','p','4','a') },
940     { AV_CODEC_ID_H264,   MKTAG('a','v','c','1') },
941     { AV_CODEC_ID_VP6A,   MKTAG('V','P','6','A') },
942     { AV_CODEC_ID_VP6F,   MKTAG('V','P','6','F') },
943     { AV_CODEC_ID_NONE, 0 },
944 };
945
946 static int mov_find_codec_tag(AVFormatContext *s, MOVTrack *track)
947 {
948     int tag;
949
950     if (track->mode == MODE_MP4 || track->mode == MODE_PSP)
951         tag = mp4_get_codec_tag(s, track);
952     else if (track->mode == MODE_ISM) {
953         tag = mp4_get_codec_tag(s, track);
954         if (!tag && track->par->codec_id == AV_CODEC_ID_WMAPRO)
955             tag = MKTAG('w', 'm', 'a', ' ');
956     } else if (track->mode == MODE_IPOD)
957         tag = ipod_get_codec_tag(s, track);
958     else if (track->mode & MODE_3GP)
959         tag = ff_codec_get_tag(codec_3gp_tags, track->par->codec_id);
960     else if (track->mode == MODE_F4V)
961         tag = ff_codec_get_tag(codec_f4v_tags, track->par->codec_id);
962     else
963         tag = mov_get_codec_tag(s, track);
964
965     return tag;
966 }
967
968 /** Write uuid atom.
969  * Needed to make file play in iPods running newest firmware
970  * goes after avcC atom in moov.trak.mdia.minf.stbl.stsd.avc1
971  */
972 static int mov_write_uuid_tag_ipod(AVIOContext *pb)
973 {
974     avio_wb32(pb, 28);
975     ffio_wfourcc(pb, "uuid");
976     avio_wb32(pb, 0x6b6840f2);
977     avio_wb32(pb, 0x5f244fc5);
978     avio_wb32(pb, 0xba39a51b);
979     avio_wb32(pb, 0xcf0323f3);
980     avio_wb32(pb, 0x0);
981     return 28;
982 }
983
984 static const uint16_t fiel_data[] = {
985     0x0000, 0x0100, 0x0201, 0x0206, 0x0209, 0x020e
986 };
987
988 static int mov_write_fiel_tag(AVIOContext *pb, MOVTrack *track)
989 {
990     unsigned mov_field_order = 0;
991     if (track->par->field_order < FF_ARRAY_ELEMS(fiel_data))
992         mov_field_order = fiel_data[track->par->field_order];
993     else
994         return 0;
995     avio_wb32(pb, 10);
996     ffio_wfourcc(pb, "fiel");
997     avio_wb16(pb, mov_field_order);
998     return 10;
999 }
1000
1001 static int mov_write_subtitle_tag(AVIOContext *pb, MOVTrack *track)
1002 {
1003     int64_t pos = avio_tell(pb);
1004     avio_wb32(pb, 0);    /* size */
1005     avio_wl32(pb, track->tag); // store it byteswapped
1006     avio_wb32(pb, 0);    /* Reserved */
1007     avio_wb16(pb, 0);    /* Reserved */
1008     avio_wb16(pb, 1);    /* Data-reference index */
1009
1010     if (track->par->codec_id == AV_CODEC_ID_DVD_SUBTITLE)
1011         mov_write_esds_tag(pb, track);
1012     else if (track->par->extradata_size)
1013         avio_write(pb, track->par->extradata, track->par->extradata_size);
1014
1015     return update_size(pb, pos);
1016 }
1017
1018 static int mov_write_pasp_tag(AVIOContext *pb, MOVTrack *track)
1019 {
1020     AVRational sar;
1021     av_reduce(&sar.num, &sar.den, track->par->sample_aspect_ratio.num,
1022               track->par->sample_aspect_ratio.den, INT_MAX);
1023
1024     avio_wb32(pb, 16);
1025     ffio_wfourcc(pb, "pasp");
1026     avio_wb32(pb, sar.num);
1027     avio_wb32(pb, sar.den);
1028     return 16;
1029 }
1030
1031 static int mov_write_video_tag(AVIOContext *pb, MOVTrack *track)
1032 {
1033     AVDictionaryEntry *encoder;
1034     int64_t pos = avio_tell(pb);
1035     char compressor_name[32] = { 0 };
1036
1037     avio_wb32(pb, 0); /* size */
1038     avio_wl32(pb, track->tag); // store it byteswapped
1039     avio_wb32(pb, 0); /* Reserved */
1040     avio_wb16(pb, 0); /* Reserved */
1041     avio_wb16(pb, 1); /* Data-reference index */
1042
1043     avio_wb16(pb, 0); /* Codec stream version */
1044     avio_wb16(pb, 0); /* Codec stream revision (=0) */
1045     if (track->mode == MODE_MOV) {
1046         ffio_wfourcc(pb, "FFMP"); /* Vendor */
1047         if (track->par->codec_id == AV_CODEC_ID_RAWVIDEO) {
1048             avio_wb32(pb, 0); /* Temporal Quality */
1049             avio_wb32(pb, 0x400); /* Spatial Quality = lossless*/
1050         } else {
1051             avio_wb32(pb, 0x200); /* Temporal Quality = normal */
1052             avio_wb32(pb, 0x200); /* Spatial Quality = normal */
1053         }
1054     } else {
1055         avio_wb32(pb, 0); /* Reserved */
1056         avio_wb32(pb, 0); /* Reserved */
1057         avio_wb32(pb, 0); /* Reserved */
1058     }
1059     avio_wb16(pb, track->par->width); /* Video width */
1060     avio_wb16(pb, track->height); /* Video height */
1061     avio_wb32(pb, 0x00480000); /* Horizontal resolution 72dpi */
1062     avio_wb32(pb, 0x00480000); /* Vertical resolution 72dpi */
1063     avio_wb32(pb, 0); /* Data size (= 0) */
1064     avio_wb16(pb, 1); /* Frame count (= 1) */
1065
1066     /* FIXME not sure, ISO 14496-1 draft where it shall be set to 0 */
1067     if (track->mode == MODE_MOV &&
1068         (encoder = av_dict_get(track->st->metadata, "encoder", NULL, 0)))
1069         av_strlcpy(compressor_name, encoder->value, 32);
1070     avio_w8(pb, strlen(compressor_name));
1071     avio_write(pb, compressor_name, 31);
1072
1073     if (track->mode == MODE_MOV && track->par->bits_per_coded_sample)
1074         avio_wb16(pb, track->par->bits_per_coded_sample);
1075     else
1076         avio_wb16(pb, 0x18); /* Reserved */
1077     avio_wb16(pb, 0xffff); /* Reserved */
1078     if (track->tag == MKTAG('m','p','4','v'))
1079         mov_write_esds_tag(pb, track);
1080     else if (track->par->codec_id == AV_CODEC_ID_H263)
1081         mov_write_d263_tag(pb);
1082     else if (track->par->codec_id == AV_CODEC_ID_SVQ3)
1083         mov_write_svq3_tag(pb);
1084     else if (track->par->codec_id == AV_CODEC_ID_DNXHD)
1085         mov_write_avid_tag(pb, track);
1086     else if (track->par->codec_id == AV_CODEC_ID_HEVC)
1087         mov_write_hvcc_tag(pb, track);
1088     else if (track->par->codec_id == AV_CODEC_ID_H264) {
1089         mov_write_avcc_tag(pb, track);
1090         if (track->mode == MODE_IPOD)
1091             mov_write_uuid_tag_ipod(pb);
1092     } else if (track->par->field_order != AV_FIELD_UNKNOWN)
1093         mov_write_fiel_tag(pb, track);
1094     else if (track->par->codec_id == AV_CODEC_ID_VC1 && track->vos_len > 0)
1095         mov_write_dvc1_tag(pb, track);
1096     else if (track->par->codec_id == AV_CODEC_ID_VP6F ||
1097              track->par->codec_id == AV_CODEC_ID_VP6A) {
1098         /* Don't write any potential extradata here - the cropping
1099          * is signalled via the normal width/height fields. */
1100     } else if (track->vos_len > 0)
1101         mov_write_glbl_tag(pb, track);
1102
1103     if (track->par->sample_aspect_ratio.den && track->par->sample_aspect_ratio.num &&
1104         track->par->sample_aspect_ratio.den != track->par->sample_aspect_ratio.num) {
1105         mov_write_pasp_tag(pb, track);
1106     }
1107
1108     return update_size(pb, pos);
1109 }
1110
1111 static int mov_write_rtp_tag(AVIOContext *pb, MOVTrack *track)
1112 {
1113     int64_t pos = avio_tell(pb);
1114     avio_wb32(pb, 0); /* size */
1115     ffio_wfourcc(pb, "rtp ");
1116     avio_wb32(pb, 0); /* Reserved */
1117     avio_wb16(pb, 0); /* Reserved */
1118     avio_wb16(pb, 1); /* Data-reference index */
1119
1120     avio_wb16(pb, 1); /* Hint track version */
1121     avio_wb16(pb, 1); /* Highest compatible version */
1122     avio_wb32(pb, track->max_packet_size); /* Max packet size */
1123
1124     avio_wb32(pb, 12); /* size */
1125     ffio_wfourcc(pb, "tims");
1126     avio_wb32(pb, track->timescale);
1127
1128     return update_size(pb, pos);
1129 }
1130
1131 static int mov_write_tmcd_tag(AVIOContext *pb, MOVTrack *track)
1132 {
1133     int64_t pos = avio_tell(pb);
1134
1135     avio_wb32(pb, 0); /* size */
1136     ffio_wfourcc(pb, "tmcd");               /* Data format */
1137     avio_wb32(pb, 0);                       /* Reserved */
1138     avio_wb32(pb, 1);                       /* Data reference index */
1139     if (track->par->extradata_size)
1140         avio_write(pb, track->par->extradata, track->par->extradata_size);
1141     return update_size(pb, pos);
1142 }
1143
1144 static int mov_write_stsd_tag(AVFormatContext *s, AVIOContext *pb, MOVTrack *track)
1145 {
1146     int64_t pos = avio_tell(pb);
1147     avio_wb32(pb, 0); /* size */
1148     ffio_wfourcc(pb, "stsd");
1149     avio_wb32(pb, 0); /* version & flags */
1150     avio_wb32(pb, 1); /* entry count */
1151     if (track->par->codec_type == AVMEDIA_TYPE_VIDEO)
1152         mov_write_video_tag(pb, track);
1153     else if (track->par->codec_type == AVMEDIA_TYPE_AUDIO)
1154         mov_write_audio_tag(s, pb, track);
1155     else if (track->par->codec_type == AVMEDIA_TYPE_SUBTITLE)
1156         mov_write_subtitle_tag(pb, track);
1157     else if (track->par->codec_tag == MKTAG('r','t','p',' '))
1158         mov_write_rtp_tag(pb, track);
1159     else if (track->par->codec_tag == MKTAG('t','m','c','d'))
1160         mov_write_tmcd_tag(pb, track);
1161     return update_size(pb, pos);
1162 }
1163
1164 static int mov_write_ctts_tag(AVIOContext *pb, MOVTrack *track)
1165 {
1166     MOVStts *ctts_entries;
1167     uint32_t entries = 0;
1168     uint32_t atom_size;
1169     int i;
1170
1171     ctts_entries = av_malloc((track->entry + 1) * sizeof(*ctts_entries)); /* worst case */
1172     if (!ctts_entries)
1173         return AVERROR(ENOMEM);
1174     ctts_entries[0].count = 1;
1175     ctts_entries[0].duration = track->cluster[0].cts;
1176     for (i = 1; i < track->entry; i++) {
1177         if (track->cluster[i].cts == ctts_entries[entries].duration) {
1178             ctts_entries[entries].count++; /* compress */
1179         } else {
1180             entries++;
1181             ctts_entries[entries].duration = track->cluster[i].cts;
1182             ctts_entries[entries].count = 1;
1183         }
1184     }
1185     entries++; /* last one */
1186     atom_size = 16 + (entries * 8);
1187     avio_wb32(pb, atom_size); /* size */
1188     ffio_wfourcc(pb, "ctts");
1189     avio_wb32(pb, 0); /* version & flags */
1190     avio_wb32(pb, entries); /* entry count */
1191     for (i = 0; i < entries; i++) {
1192         avio_wb32(pb, ctts_entries[i].count);
1193         avio_wb32(pb, ctts_entries[i].duration);
1194     }
1195     av_free(ctts_entries);
1196     return atom_size;
1197 }
1198
1199 /* Time to sample atom */
1200 static int mov_write_stts_tag(AVIOContext *pb, MOVTrack *track)
1201 {
1202     MOVStts *stts_entries = NULL;
1203     uint32_t entries = -1;
1204     uint32_t atom_size;
1205     int i;
1206
1207     if (track->par->codec_type == AVMEDIA_TYPE_AUDIO && !track->audio_vbr) {
1208         stts_entries = av_malloc(sizeof(*stts_entries)); /* one entry */
1209         if (!stts_entries)
1210             return AVERROR(ENOMEM);
1211         stts_entries[0].count = track->sample_count;
1212         stts_entries[0].duration = 1;
1213         entries = 1;
1214     } else {
1215         if (track->entry) {
1216             stts_entries = av_malloc(track->entry * sizeof(*stts_entries)); /* worst case */
1217             if (!stts_entries)
1218                 return AVERROR(ENOMEM);
1219         }
1220         for (i = 0; i < track->entry; i++) {
1221             int duration = get_cluster_duration(track, i);
1222             if (i && duration == stts_entries[entries].duration) {
1223                 stts_entries[entries].count++; /* compress */
1224             } else {
1225                 entries++;
1226                 stts_entries[entries].duration = duration;
1227                 stts_entries[entries].count = 1;
1228             }
1229         }
1230         entries++; /* last one */
1231     }
1232     atom_size = 16 + (entries * 8);
1233     avio_wb32(pb, atom_size); /* size */
1234     ffio_wfourcc(pb, "stts");
1235     avio_wb32(pb, 0); /* version & flags */
1236     avio_wb32(pb, entries); /* entry count */
1237     for (i = 0; i < entries; i++) {
1238         avio_wb32(pb, stts_entries[i].count);
1239         avio_wb32(pb, stts_entries[i].duration);
1240     }
1241     av_free(stts_entries);
1242     return atom_size;
1243 }
1244
1245 static int mov_write_dref_tag(AVIOContext *pb)
1246 {
1247     avio_wb32(pb, 28); /* size */
1248     ffio_wfourcc(pb, "dref");
1249     avio_wb32(pb, 0); /* version & flags */
1250     avio_wb32(pb, 1); /* entry count */
1251
1252     avio_wb32(pb, 0xc); /* size */
1253     ffio_wfourcc(pb, "url ");
1254     avio_wb32(pb, 1); /* version & flags */
1255
1256     return 28;
1257 }
1258
1259 static int mov_write_stbl_tag(AVFormatContext *s, AVIOContext *pb, MOVTrack *track)
1260 {
1261     int64_t pos = avio_tell(pb);
1262     avio_wb32(pb, 0); /* size */
1263     ffio_wfourcc(pb, "stbl");
1264     mov_write_stsd_tag(s, pb, track);
1265     mov_write_stts_tag(pb, track);
1266     if ((track->par->codec_type == AVMEDIA_TYPE_VIDEO ||
1267          track->par->codec_tag == MKTAG('r','t','p',' ')) &&
1268         track->has_keyframes && track->has_keyframes < track->entry)
1269         mov_write_stss_tag(pb, track, MOV_SYNC_SAMPLE);
1270     if (track->mode == MODE_MOV && track->flags & MOV_TRACK_STPS)
1271         mov_write_stss_tag(pb, track, MOV_PARTIAL_SYNC_SAMPLE);
1272     if (track->par->codec_type == AVMEDIA_TYPE_VIDEO &&
1273         track->flags & MOV_TRACK_CTTS && track->entry)
1274         mov_write_ctts_tag(pb, track);
1275     mov_write_stsc_tag(pb, track);
1276     mov_write_stsz_tag(pb, track);
1277     mov_write_stco_tag(pb, track);
1278     return update_size(pb, pos);
1279 }
1280
1281 static int mov_write_dinf_tag(AVIOContext *pb)
1282 {
1283     int64_t pos = avio_tell(pb);
1284     avio_wb32(pb, 0); /* size */
1285     ffio_wfourcc(pb, "dinf");
1286     mov_write_dref_tag(pb);
1287     return update_size(pb, pos);
1288 }
1289
1290 static int mov_write_nmhd_tag(AVIOContext *pb)
1291 {
1292     avio_wb32(pb, 12);
1293     ffio_wfourcc(pb, "nmhd");
1294     avio_wb32(pb, 0);
1295     return 12;
1296 }
1297
1298 static int mov_write_gmhd_tag(AVIOContext *pb)
1299 {
1300     avio_wb32(pb, 0x20);   /* size */
1301     ffio_wfourcc(pb, "gmhd");
1302     avio_wb32(pb, 0x18);   /* gmin size */
1303     ffio_wfourcc(pb, "gmin");/* generic media info */
1304     avio_wb32(pb, 0);      /* version & flags */
1305     avio_wb16(pb, 0x40);   /* graphics mode = */
1306     avio_wb16(pb, 0x8000); /* opColor (r?) */
1307     avio_wb16(pb, 0x8000); /* opColor (g?) */
1308     avio_wb16(pb, 0x8000); /* opColor (b?) */
1309     avio_wb16(pb, 0);      /* balance */
1310     avio_wb16(pb, 0);      /* reserved */
1311     return 0x20;
1312 }
1313
1314 static int mov_write_smhd_tag(AVIOContext *pb)
1315 {
1316     avio_wb32(pb, 16); /* size */
1317     ffio_wfourcc(pb, "smhd");
1318     avio_wb32(pb, 0); /* version & flags */
1319     avio_wb16(pb, 0); /* reserved (balance, normally = 0) */
1320     avio_wb16(pb, 0); /* reserved */
1321     return 16;
1322 }
1323
1324 static int mov_write_vmhd_tag(AVIOContext *pb)
1325 {
1326     avio_wb32(pb, 0x14); /* size (always 0x14) */
1327     ffio_wfourcc(pb, "vmhd");
1328     avio_wb32(pb, 0x01); /* version & flags */
1329     avio_wb64(pb, 0); /* reserved (graphics mode = copy) */
1330     return 0x14;
1331 }
1332
1333 static int is_clcp_track(MOVTrack *track)
1334 {
1335     return track->tag == MKTAG('c','7','0','8') ||
1336            track->tag == MKTAG('c','6','0','8');
1337 }
1338
1339 static int mov_write_hdlr_tag(AVFormatContext *s, AVIOContext *pb, MOVTrack *track)
1340 {
1341     const char *hdlr, *descr = NULL, *hdlr_type = NULL;
1342     int64_t pos = avio_tell(pb);
1343
1344     hdlr      = "dhlr";
1345     hdlr_type = "url ";
1346     descr     = "DataHandler";
1347
1348     if (track) {
1349         hdlr = (track->mode == MODE_MOV) ? "mhlr" : "\0\0\0\0";
1350         if (track->par->codec_type == AVMEDIA_TYPE_VIDEO) {
1351             hdlr_type = "vide";
1352             descr     = "VideoHandler";
1353         } else if (track->par->codec_type == AVMEDIA_TYPE_AUDIO) {
1354             hdlr_type = "soun";
1355             descr     = "SoundHandler";
1356         } else if (track->par->codec_type == AVMEDIA_TYPE_SUBTITLE) {
1357             if (track->tag == MKTAG('t','x','3','g')) {
1358                 hdlr_type = "sbtl";
1359             } else if (track->tag == MKTAG('m','p','4','s')) {
1360                 hdlr_type = "subp";
1361             } else if (is_clcp_track(track)) {
1362                 hdlr_type = "clcp";
1363             } else {
1364                 hdlr_type = "text";
1365             }
1366             descr = "SubtitleHandler";
1367         } else if (track->par->codec_tag == MKTAG('r','t','p',' ')) {
1368             hdlr_type = "hint";
1369             descr     = "HintHandler";
1370         } else if (track->par->codec_tag == MKTAG('t','m','c','d')) {
1371             hdlr_type = "tmcd";
1372             descr = "TimeCodeHandler";
1373         } else {
1374             char tag_buf[32];
1375             av_get_codec_tag_string(tag_buf, sizeof(tag_buf),
1376                                     track->par->codec_tag);
1377
1378             av_log(s, AV_LOG_WARNING,
1379                    "Unknown hldr_type for %s / 0x%04X, writing dummy values\n",
1380                    tag_buf, track->par->codec_tag);
1381         }
1382         if (track->st) {
1383             // hdlr.name is used by some players to identify the content title
1384             // of the track. So if an alternate handler description is
1385             // specified, use it.
1386             AVDictionaryEntry *t;
1387             t = av_dict_get(track->st->metadata, "handler", NULL, 0);
1388             if (t && utf8len(t->value))
1389                 descr = t->value;
1390         }
1391     }
1392
1393     avio_wb32(pb, 0); /* size */
1394     ffio_wfourcc(pb, "hdlr");
1395     avio_wb32(pb, 0); /* Version & flags */
1396     avio_write(pb, hdlr, 4); /* handler */
1397     ffio_wfourcc(pb, hdlr_type); /* handler type */
1398     avio_wb32(pb, 0); /* reserved */
1399     avio_wb32(pb, 0); /* reserved */
1400     avio_wb32(pb, 0); /* reserved */
1401     if (!track || track->mode == MODE_MOV)
1402         avio_w8(pb, strlen(descr)); /* pascal string */
1403     avio_write(pb, descr, strlen(descr)); /* handler description */
1404     if (track && track->mode != MODE_MOV)
1405         avio_w8(pb, 0); /* c string */
1406     return update_size(pb, pos);
1407 }
1408
1409 static int mov_write_hmhd_tag(AVIOContext *pb)
1410 {
1411     /* This atom must be present, but leaving the values at zero
1412      * seems harmless. */
1413     avio_wb32(pb, 28); /* size */
1414     ffio_wfourcc(pb, "hmhd");
1415     avio_wb32(pb, 0); /* version, flags */
1416     avio_wb16(pb, 0); /* maxPDUsize */
1417     avio_wb16(pb, 0); /* avgPDUsize */
1418     avio_wb32(pb, 0); /* maxbitrate */
1419     avio_wb32(pb, 0); /* avgbitrate */
1420     avio_wb32(pb, 0); /* reserved */
1421     return 28;
1422 }
1423
1424 static int mov_write_minf_tag(AVFormatContext *s, AVIOContext *pb, MOVTrack *track)
1425 {
1426     int64_t pos = avio_tell(pb);
1427     avio_wb32(pb, 0); /* size */
1428     ffio_wfourcc(pb, "minf");
1429     if (track->par->codec_type == AVMEDIA_TYPE_VIDEO)
1430         mov_write_vmhd_tag(pb);
1431     else if (track->par->codec_type == AVMEDIA_TYPE_AUDIO)
1432         mov_write_smhd_tag(pb);
1433     else if (track->par->codec_type == AVMEDIA_TYPE_SUBTITLE) {
1434         if (track->tag == MKTAG('t','e','x','t') || is_clcp_track(track)) {
1435             mov_write_gmhd_tag(pb);
1436         } else {
1437             mov_write_nmhd_tag(pb);
1438         }
1439     } else if (track->tag == MKTAG('r','t','p',' ')) {
1440         mov_write_hmhd_tag(pb);
1441     } else if (track->tag == MKTAG('t','m','c','d')) {
1442         mov_write_gmhd_tag(pb);
1443     }
1444     if (track->mode == MODE_MOV) /* FIXME: Why do it for MODE_MOV only ? */
1445         mov_write_hdlr_tag(s, pb, NULL);
1446     mov_write_dinf_tag(pb);
1447     mov_write_stbl_tag(s, pb, track);
1448     return update_size(pb, pos);
1449 }
1450
1451 static int mov_write_mdhd_tag(AVIOContext *pb, MOVMuxContext *mov,
1452                               MOVTrack *track)
1453 {
1454     int version = track->track_duration < INT32_MAX ? 0 : 1;
1455
1456     if (track->mode == MODE_ISM)
1457         version = 1;
1458
1459     (version == 1) ? avio_wb32(pb, 44) : avio_wb32(pb, 32); /* size */
1460     ffio_wfourcc(pb, "mdhd");
1461     avio_w8(pb, version);
1462     avio_wb24(pb, 0); /* flags */
1463     if (version == 1) {
1464         avio_wb64(pb, track->time);
1465         avio_wb64(pb, track->time);
1466     } else {
1467         avio_wb32(pb, track->time); /* creation time */
1468         avio_wb32(pb, track->time); /* modification time */
1469     }
1470     avio_wb32(pb, track->timescale); /* time scale (sample rate for audio) */
1471     if (!track->entry && mov->mode == MODE_ISM)
1472         (version == 1) ? avio_wb64(pb, UINT64_C(0xffffffffffffffff)) : avio_wb32(pb, 0xffffffff);
1473     else if (!track->entry)
1474         (version == 1) ? avio_wb64(pb, 0) : avio_wb32(pb, 0);
1475     else
1476         (version == 1) ? avio_wb64(pb, track->track_duration) : avio_wb32(pb, track->track_duration); /* duration */
1477     avio_wb16(pb, track->language); /* language */
1478     avio_wb16(pb, 0); /* reserved (quality) */
1479
1480     if (version != 0 && track->mode == MODE_MOV) {
1481         av_log(NULL, AV_LOG_ERROR,
1482                "FATAL error, file duration too long for timebase, this file will not be\n"
1483                "playable with quicktime. Choose a different timebase or a different\n"
1484                "container format\n");
1485     }
1486
1487     return 32;
1488 }
1489
1490 static int mov_write_mdia_tag(AVFormatContext *s, AVIOContext *pb,
1491                               MOVMuxContext *mov, MOVTrack *track)
1492 {
1493     int64_t pos = avio_tell(pb);
1494     avio_wb32(pb, 0); /* size */
1495     ffio_wfourcc(pb, "mdia");
1496     mov_write_mdhd_tag(pb, mov, track);
1497     mov_write_hdlr_tag(s, pb, track);
1498     mov_write_minf_tag(s, pb, track);
1499     return update_size(pb, pos);
1500 }
1501
1502 static int mov_write_tkhd_tag(AVIOContext *pb, MOVMuxContext *mov,
1503                               MOVTrack *track, AVStream *st)
1504 {
1505     int64_t duration = av_rescale_rnd(track->track_duration, MOV_TIMESCALE,
1506                                       track->timescale, AV_ROUND_UP);
1507     int version = duration < INT32_MAX ? 0 : 1;
1508     int flags   = MOV_TKHD_FLAG_IN_MOVIE;
1509     int group   = 0;
1510
1511     uint32_t *display_matrix = NULL;
1512     int      display_matrix_size, i;
1513
1514     if (st) {
1515         if (mov->per_stream_grouping)
1516             group = st->index;
1517         else
1518             group = st->codecpar->codec_type;
1519
1520         display_matrix = (uint32_t*)av_stream_get_side_data(st, AV_PKT_DATA_DISPLAYMATRIX,
1521                                                             &display_matrix_size);
1522         if (display_matrix && display_matrix_size < 9 * sizeof(*display_matrix))
1523             display_matrix = NULL;
1524     }
1525
1526     if (track->flags & MOV_TRACK_ENABLED)
1527         flags |= MOV_TKHD_FLAG_ENABLED;
1528
1529     if (track->mode == MODE_ISM)
1530         version = 1;
1531
1532     (version == 1) ? avio_wb32(pb, 104) : avio_wb32(pb, 92); /* size */
1533     ffio_wfourcc(pb, "tkhd");
1534     avio_w8(pb, version);
1535     avio_wb24(pb, flags);
1536     if (version == 1) {
1537         avio_wb64(pb, track->time);
1538         avio_wb64(pb, track->time);
1539     } else {
1540         avio_wb32(pb, track->time); /* creation time */
1541         avio_wb32(pb, track->time); /* modification time */
1542     }
1543     avio_wb32(pb, track->track_id); /* track-id */
1544     avio_wb32(pb, 0); /* reserved */
1545     if (!track->entry && mov->mode == MODE_ISM)
1546         (version == 1) ? avio_wb64(pb, UINT64_C(0xffffffffffffffff)) : avio_wb32(pb, 0xffffffff);
1547     else if (!track->entry)
1548         (version == 1) ? avio_wb64(pb, 0) : avio_wb32(pb, 0);
1549     else
1550         (version == 1) ? avio_wb64(pb, duration) : avio_wb32(pb, duration);
1551
1552     avio_wb32(pb, 0); /* reserved */
1553     avio_wb32(pb, 0); /* reserved */
1554     avio_wb16(pb, 0); /* layer */
1555     avio_wb16(pb, group); /* alternate group) */
1556     /* Volume, only for audio */
1557     if (track->par->codec_type == AVMEDIA_TYPE_AUDIO)
1558         avio_wb16(pb, 0x0100);
1559     else
1560         avio_wb16(pb, 0);
1561     avio_wb16(pb, 0); /* reserved */
1562
1563     /* Matrix structure */
1564     if (display_matrix) {
1565         for (i = 0; i < 9; i++)
1566             avio_wb32(pb, display_matrix[i]);
1567     } else {
1568         avio_wb32(pb, 0x00010000); /* reserved */
1569         avio_wb32(pb, 0x0); /* reserved */
1570         avio_wb32(pb, 0x0); /* reserved */
1571         avio_wb32(pb, 0x0); /* reserved */
1572         avio_wb32(pb, 0x00010000); /* reserved */
1573         avio_wb32(pb, 0x0); /* reserved */
1574         avio_wb32(pb, 0x0); /* reserved */
1575         avio_wb32(pb, 0x0); /* reserved */
1576         avio_wb32(pb, 0x40000000); /* reserved */
1577     }
1578
1579     /* Track width and height, for visual only */
1580     if (st && (track->par->codec_type == AVMEDIA_TYPE_VIDEO ||
1581                track->par->codec_type == AVMEDIA_TYPE_SUBTITLE)) {
1582         if (track->mode == MODE_MOV) {
1583             avio_wb32(pb, track->par->width << 16);
1584             avio_wb32(pb, track->height << 16);
1585         } else {
1586             double sample_aspect_ratio = av_q2d(st->sample_aspect_ratio);
1587             if (!sample_aspect_ratio || track->height != track->par->height)
1588                 sample_aspect_ratio = 1;
1589             avio_wb32(pb, sample_aspect_ratio * track->par->width * 0x10000);
1590             avio_wb32(pb, track->height * 0x10000);
1591         }
1592     } else {
1593         avio_wb32(pb, 0);
1594         avio_wb32(pb, 0);
1595     }
1596     return 0x5c;
1597 }
1598
1599 static int mov_write_tapt_tag(AVIOContext *pb, MOVTrack *track)
1600 {
1601     int32_t width = av_rescale(track->par->sample_aspect_ratio.num, track->par->width,
1602                                track->par->sample_aspect_ratio.den);
1603
1604     int64_t pos = avio_tell(pb);
1605
1606     avio_wb32(pb, 0); /* size */
1607     ffio_wfourcc(pb, "tapt");
1608
1609     avio_wb32(pb, 20);
1610     ffio_wfourcc(pb, "clef");
1611     avio_wb32(pb, 0);
1612     avio_wb32(pb, width << 16);
1613     avio_wb32(pb, track->par->height << 16);
1614
1615     avio_wb32(pb, 20);
1616     ffio_wfourcc(pb, "prof");
1617     avio_wb32(pb, 0);
1618     avio_wb32(pb, width << 16);
1619     avio_wb32(pb, track->par->height << 16);
1620
1621     avio_wb32(pb, 20);
1622     ffio_wfourcc(pb, "enof");
1623     avio_wb32(pb, 0);
1624     avio_wb32(pb, track->par->width << 16);
1625     avio_wb32(pb, track->par->height << 16);
1626
1627     return update_size(pb, pos);
1628 }
1629
1630 // This box seems important for the psp playback ... without it the movie seems to hang
1631 static int mov_write_edts_tag(AVIOContext *pb, MOVMuxContext *mov,
1632                               MOVTrack *track)
1633 {
1634     int64_t duration = av_rescale_rnd(track->track_duration, MOV_TIMESCALE,
1635                                       track->timescale, AV_ROUND_UP);
1636     int version = duration < INT32_MAX ? 0 : 1;
1637     int entry_size, entry_count, size;
1638     int64_t delay, start_ct = track->start_cts;
1639     delay = av_rescale_rnd(track->start_dts + start_ct, MOV_TIMESCALE,
1640                            track->timescale, AV_ROUND_DOWN);
1641     version |= delay < INT32_MAX ? 0 : 1;
1642
1643     entry_size = (version == 1) ? 20 : 12;
1644     entry_count = 1 + (delay > 0);
1645     size = 24 + entry_count * entry_size;
1646
1647     /* write the atom data */
1648     avio_wb32(pb, size);
1649     ffio_wfourcc(pb, "edts");
1650     avio_wb32(pb, size - 8);
1651     ffio_wfourcc(pb, "elst");
1652     avio_w8(pb, version);
1653     avio_wb24(pb, 0); /* flags */
1654
1655     avio_wb32(pb, entry_count);
1656     if (delay > 0) { /* add an empty edit to delay presentation */
1657         /* In the positive delay case, the delay includes the cts
1658          * offset, and the second edit list entry below trims out
1659          * the same amount from the actual content. This makes sure
1660          * that the offset last sample is included in the edit
1661          * list duration as well. */
1662         if (version == 1) {
1663             avio_wb64(pb, delay);
1664             avio_wb64(pb, -1);
1665         } else {
1666             avio_wb32(pb, delay);
1667             avio_wb32(pb, -1);
1668         }
1669         avio_wb32(pb, 0x00010000);
1670     } else {
1671         /* Avoid accidentally ending up with start_ct = -1 which has got a
1672          * special meaning. Normally start_ct should end up positive or zero
1673          * here, but use FFMIN in case dts is a a small positive integer
1674          * rounded to 0 when represented in MOV_TIMESCALE units. */
1675         start_ct  = -FFMIN(track->start_dts, 0);
1676         /* Note, this delay is calculated from the pts of the first sample,
1677          * ensuring that we don't reduce the duration for cases with
1678          * dts<0 pts=0. */
1679         duration += delay;
1680     }
1681
1682     /* For fragmented files, we don't know the full length yet. Setting
1683      * duration to 0 allows us to only specify the offset, including
1684      * the rest of the content (from all future fragments) without specifying
1685      * an explicit duration. */
1686     if (mov->flags & FF_MOV_FLAG_FRAGMENT)
1687         duration = 0;
1688
1689     /* duration */
1690     if (version == 1) {
1691         avio_wb64(pb, duration);
1692         avio_wb64(pb, start_ct);
1693     } else {
1694         avio_wb32(pb, duration);
1695         avio_wb32(pb, start_ct);
1696     }
1697     avio_wb32(pb, 0x00010000);
1698     return size;
1699 }
1700
1701 static int mov_write_tref_tag(AVIOContext *pb, MOVTrack *track)
1702 {
1703     avio_wb32(pb, 20);   // size
1704     ffio_wfourcc(pb, "tref");
1705     avio_wb32(pb, 12);   // size (subatom)
1706     avio_wl32(pb, track->tref_tag);
1707     avio_wb32(pb, track->tref_id);
1708     return 20;
1709 }
1710
1711 // goes at the end of each track!  ... Critical for PSP playback ("Incompatible data" without it)
1712 static int mov_write_uuid_tag_psp(AVIOContext *pb, MOVTrack *mov)
1713 {
1714     avio_wb32(pb, 0x34); /* size ... reports as 28 in mp4box! */
1715     ffio_wfourcc(pb, "uuid");
1716     ffio_wfourcc(pb, "USMT");
1717     avio_wb32(pb, 0x21d24fce);
1718     avio_wb32(pb, 0xbb88695c);
1719     avio_wb32(pb, 0xfac9c740);
1720     avio_wb32(pb, 0x1c);     // another size here!
1721     ffio_wfourcc(pb, "MTDT");
1722     avio_wb32(pb, 0x00010012);
1723     avio_wb32(pb, 0x0a);
1724     avio_wb32(pb, 0x55c40000);
1725     avio_wb32(pb, 0x1);
1726     avio_wb32(pb, 0x0);
1727     return 0x34;
1728 }
1729
1730 static int mov_write_udta_sdp(AVIOContext *pb, MOVTrack *track)
1731 {
1732     AVFormatContext *ctx = track->rtp_ctx;
1733     char buf[1000] = "";
1734     int len;
1735
1736     ff_sdp_write_media(buf, sizeof(buf), ctx->streams[0], track->src_track,
1737                        NULL, NULL, 0, 0, ctx);
1738     av_strlcatf(buf, sizeof(buf), "a=control:streamid=%d\r\n", track->track_id);
1739     len = strlen(buf);
1740
1741     avio_wb32(pb, len + 24);
1742     ffio_wfourcc(pb, "udta");
1743     avio_wb32(pb, len + 16);
1744     ffio_wfourcc(pb, "hnti");
1745     avio_wb32(pb, len + 8);
1746     ffio_wfourcc(pb, "sdp ");
1747     avio_write(pb, buf, len);
1748     return len + 24;
1749 }
1750
1751 static int mov_write_track_metadata(AVIOContext *pb, AVStream *st,
1752                                     const char *tag, const char *str)
1753 {
1754     int64_t pos = avio_tell(pb);
1755     AVDictionaryEntry *t = av_dict_get(st->metadata, str, NULL, 0);
1756     if (!t || !utf8len(t->value))
1757         return 0;
1758
1759     avio_wb32(pb, 0);   /* size */
1760     ffio_wfourcc(pb, tag); /* type */
1761     avio_write(pb, t->value, strlen(t->value)); /* UTF8 string value */
1762     return update_size(pb, pos);
1763 }
1764
1765 static int mov_write_track_udta_tag(AVIOContext *pb, MOVMuxContext *mov,
1766                                     AVStream *st)
1767 {
1768     AVIOContext *pb_buf;
1769     int ret, size;
1770     uint8_t *buf;
1771
1772     if (!st)
1773         return 0;
1774
1775     ret = avio_open_dyn_buf(&pb_buf);
1776     if (ret < 0)
1777         return ret;
1778
1779     if (mov->mode & MODE_MP4)
1780         mov_write_track_metadata(pb_buf, st, "name", "title");
1781
1782     if ((size = avio_close_dyn_buf(pb_buf, &buf)) > 0) {
1783         avio_wb32(pb, size + 8);
1784         ffio_wfourcc(pb, "udta");
1785         avio_write(pb, buf, size);
1786     }
1787     av_free(buf);
1788
1789     return 0;
1790 }
1791
1792 static int mov_write_trak_tag(AVIOContext *pb, MOVMuxContext *mov,
1793                               MOVTrack *track, AVStream *st)
1794 {
1795     int64_t pos = avio_tell(pb);
1796     int entry_backup = track->entry;
1797     /* If we want to have an empty moov, but some samples already have been
1798      * buffered (delay_moov), pretend that no samples have been written yet. */
1799     if (mov->flags & FF_MOV_FLAG_EMPTY_MOOV)
1800         track->entry = 0;
1801
1802     avio_wb32(pb, 0); /* size */
1803     ffio_wfourcc(pb, "trak");
1804     mov_write_tkhd_tag(pb, mov, track, st);
1805     if (track->start_dts != AV_NOPTS_VALUE &&
1806         (track->mode == MODE_PSP || track->flags & MOV_TRACK_CTTS ||
1807         track->start_dts || is_clcp_track(track))) {
1808         if (mov->use_editlist)
1809             mov_write_edts_tag(pb, mov, track);  // PSP Movies require edts box
1810         else if ((track->entry && track->cluster[0].dts) || track->mode == MODE_PSP || is_clcp_track(track))
1811             av_log(mov->fc, AV_LOG_WARNING,
1812                    "Not writing any edit list even though one would have been required\n");
1813     }
1814     if (track->tref_tag)
1815         mov_write_tref_tag(pb, track);
1816     mov_write_mdia_tag(mov->fc, pb, mov, track);
1817     if (track->mode == MODE_PSP)
1818         mov_write_uuid_tag_psp(pb, track); // PSP Movies require this uuid box
1819     if (track->tag == MKTAG('r','t','p',' '))
1820         mov_write_udta_sdp(pb, track);
1821     if (track->mode == MODE_MOV) {
1822         if (track->par->codec_type == AVMEDIA_TYPE_VIDEO) {
1823             double sample_aspect_ratio = av_q2d(st->sample_aspect_ratio);
1824             if ((0.0 != sample_aspect_ratio && 1.0 != sample_aspect_ratio)) {
1825                 mov_write_tapt_tag(pb, track);
1826             }
1827         }
1828         if (is_clcp_track(track)) {
1829             mov_write_tapt_tag(pb, track);
1830         }
1831     }
1832     mov_write_track_udta_tag(pb, mov, st);
1833     track->entry = entry_backup;
1834     return update_size(pb, pos);
1835 }
1836
1837 static int mov_write_iods_tag(AVIOContext *pb, MOVMuxContext *mov)
1838 {
1839     int i, has_audio = 0, has_video = 0;
1840     int64_t pos = avio_tell(pb);
1841     int audio_profile = mov->iods_audio_profile;
1842     int video_profile = mov->iods_video_profile;
1843     for (i = 0; i < mov->nb_streams; i++) {
1844         if (mov->tracks[i].entry > 0 || mov->flags & FF_MOV_FLAG_EMPTY_MOOV) {
1845             has_audio |= mov->tracks[i].par->codec_type == AVMEDIA_TYPE_AUDIO;
1846             has_video |= mov->tracks[i].par->codec_type == AVMEDIA_TYPE_VIDEO;
1847         }
1848     }
1849     if (audio_profile < 0)
1850         audio_profile = 0xFF - has_audio;
1851     if (video_profile < 0)
1852         video_profile = 0xFF - has_video;
1853     avio_wb32(pb, 0x0); /* size */
1854     ffio_wfourcc(pb, "iods");
1855     avio_wb32(pb, 0);    /* version & flags */
1856     put_descr(pb, 0x10, 7);
1857     avio_wb16(pb, 0x004f);
1858     avio_w8(pb, 0xff);
1859     avio_w8(pb, 0xff);
1860     avio_w8(pb, audio_profile);
1861     avio_w8(pb, video_profile);
1862     avio_w8(pb, 0xff);
1863     return update_size(pb, pos);
1864 }
1865
1866 static int mov_write_trex_tag(AVIOContext *pb, MOVTrack *track)
1867 {
1868     avio_wb32(pb, 0x20); /* size */
1869     ffio_wfourcc(pb, "trex");
1870     avio_wb32(pb, 0);   /* version & flags */
1871     avio_wb32(pb, track->track_id); /* track ID */
1872     avio_wb32(pb, 1);   /* default sample description index */
1873     avio_wb32(pb, 0);   /* default sample duration */
1874     avio_wb32(pb, 0);   /* default sample size */
1875     avio_wb32(pb, 0);   /* default sample flags */
1876     return 0;
1877 }
1878
1879 static int mov_write_mvex_tag(AVIOContext *pb, MOVMuxContext *mov)
1880 {
1881     int64_t pos = avio_tell(pb);
1882     int i;
1883     avio_wb32(pb, 0x0); /* size */
1884     ffio_wfourcc(pb, "mvex");
1885     for (i = 0; i < mov->nb_streams; i++)
1886         mov_write_trex_tag(pb, &mov->tracks[i]);
1887     return update_size(pb, pos);
1888 }
1889
1890 static int mov_write_mvhd_tag(AVIOContext *pb, MOVMuxContext *mov)
1891 {
1892     int max_track_id = 1, i;
1893     int64_t max_track_len_temp, max_track_len = 0;
1894     int version;
1895
1896     for (i = 0; i < mov->nb_streams; i++) {
1897         if (mov->tracks[i].entry > 0 && mov->tracks[i].timescale) {
1898             max_track_len_temp = av_rescale_rnd(mov->tracks[i].track_duration,
1899                                                 MOV_TIMESCALE,
1900                                                 mov->tracks[i].timescale,
1901                                                 AV_ROUND_UP);
1902             if (max_track_len < max_track_len_temp)
1903                 max_track_len = max_track_len_temp;
1904             if (max_track_id < mov->tracks[i].track_id)
1905                 max_track_id = mov->tracks[i].track_id;
1906         }
1907     }
1908     /* If using delay_moov, make sure the output is the same as if no
1909      * samples had been written yet. */
1910     if (mov->flags & FF_MOV_FLAG_EMPTY_MOOV) {
1911         max_track_len = 0;
1912         max_track_id  = 1;
1913     }
1914
1915     version = max_track_len < UINT32_MAX ? 0 : 1;
1916     (version == 1) ? avio_wb32(pb, 120) : avio_wb32(pb, 108); /* size */
1917     ffio_wfourcc(pb, "mvhd");
1918     avio_w8(pb, version);
1919     avio_wb24(pb, 0); /* flags */
1920     if (version == 1) {
1921         avio_wb64(pb, mov->time);
1922         avio_wb64(pb, mov->time);
1923     } else {
1924         avio_wb32(pb, mov->time); /* creation time */
1925         avio_wb32(pb, mov->time); /* modification time */
1926     }
1927     avio_wb32(pb, MOV_TIMESCALE);
1928     (version == 1) ? avio_wb64(pb, max_track_len) : avio_wb32(pb, max_track_len); /* duration of longest track */
1929
1930     avio_wb32(pb, 0x00010000); /* reserved (preferred rate) 1.0 = normal */
1931     avio_wb16(pb, 0x0100); /* reserved (preferred volume) 1.0 = normal */
1932     avio_wb16(pb, 0); /* reserved */
1933     avio_wb32(pb, 0); /* reserved */
1934     avio_wb32(pb, 0); /* reserved */
1935
1936     /* Matrix structure */
1937     avio_wb32(pb, 0x00010000); /* reserved */
1938     avio_wb32(pb, 0x0); /* reserved */
1939     avio_wb32(pb, 0x0); /* reserved */
1940     avio_wb32(pb, 0x0); /* reserved */
1941     avio_wb32(pb, 0x00010000); /* reserved */
1942     avio_wb32(pb, 0x0); /* reserved */
1943     avio_wb32(pb, 0x0); /* reserved */
1944     avio_wb32(pb, 0x0); /* reserved */
1945     avio_wb32(pb, 0x40000000); /* reserved */
1946
1947     avio_wb32(pb, 0); /* reserved (preview time) */
1948     avio_wb32(pb, 0); /* reserved (preview duration) */
1949     avio_wb32(pb, 0); /* reserved (poster time) */
1950     avio_wb32(pb, 0); /* reserved (selection time) */
1951     avio_wb32(pb, 0); /* reserved (selection duration) */
1952     avio_wb32(pb, 0); /* reserved (current time) */
1953     avio_wb32(pb, max_track_id + 1); /* Next track id */
1954     return 0x6c;
1955 }
1956
1957 static int mov_write_itunes_hdlr_tag(AVIOContext *pb, MOVMuxContext *mov,
1958                                      AVFormatContext *s)
1959 {
1960     avio_wb32(pb, 33); /* size */
1961     ffio_wfourcc(pb, "hdlr");
1962     avio_wb32(pb, 0);
1963     avio_wb32(pb, 0);
1964     ffio_wfourcc(pb, "mdir");
1965     ffio_wfourcc(pb, "appl");
1966     avio_wb32(pb, 0);
1967     avio_wb32(pb, 0);
1968     avio_w8(pb, 0);
1969     return 33;
1970 }
1971
1972 /* helper function to write a data tag with the specified string as data */
1973 static int mov_write_string_data_tag(AVIOContext *pb, const char *data, int lang, int long_style)
1974 {
1975     if (long_style) {
1976         int size = 16 + strlen(data);
1977         avio_wb32(pb, size); /* size */
1978         ffio_wfourcc(pb, "data");
1979         avio_wb32(pb, 1);
1980         avio_wb32(pb, 0);
1981         avio_write(pb, data, strlen(data));
1982         return size;
1983     } else {
1984         if (!lang)
1985             lang = ff_mov_iso639_to_lang("und", 1);
1986         avio_wb16(pb, strlen(data)); /* string length */
1987         avio_wb16(pb, lang);
1988         avio_write(pb, data, strlen(data));
1989         return strlen(data) + 4;
1990     }
1991 }
1992
1993 static int mov_write_string_tag(AVIOContext *pb, const char *name,
1994                                 const char *value, int lang, int long_style)
1995 {
1996     int size = 0;
1997     if (value && value[0]) {
1998         int64_t pos = avio_tell(pb);
1999         avio_wb32(pb, 0); /* size */
2000         ffio_wfourcc(pb, name);
2001         mov_write_string_data_tag(pb, value, lang, long_style);
2002         size = update_size(pb, pos);
2003     }
2004     return size;
2005 }
2006
2007 static AVDictionaryEntry *get_metadata_lang(AVFormatContext *s,
2008                                             const char *tag, int *lang)
2009 {
2010     int l, len, len2;
2011     AVDictionaryEntry *t, *t2 = NULL;
2012     char tag2[16];
2013
2014     *lang = 0;
2015
2016     if (!(t = av_dict_get(s->metadata, tag, NULL, 0)))
2017         return NULL;
2018
2019     len = strlen(t->key);
2020     snprintf(tag2, sizeof(tag2), "%s-", tag);
2021     while ((t2 = av_dict_get(s->metadata, tag2, t2, AV_DICT_IGNORE_SUFFIX))) {
2022         len2 = strlen(t2->key);
2023         if (len2 == len + 4 && !strcmp(t->value, t2->value)
2024             && (l = ff_mov_iso639_to_lang(&t2->key[len2 - 3], 1)) >= 0) {
2025             *lang = l;
2026             return t;
2027         }
2028     }
2029     return t;
2030 }
2031
2032 static int mov_write_string_metadata(AVFormatContext *s, AVIOContext *pb,
2033                                      const char *name, const char *tag,
2034                                      int long_style)
2035 {
2036     int lang;
2037     AVDictionaryEntry *t = get_metadata_lang(s, tag, &lang);
2038     if (!t)
2039         return 0;
2040     return mov_write_string_tag(pb, name, t->value, lang, long_style);
2041 }
2042
2043 /* 3GPP TS 26.244 */
2044 static int mov_write_loci_tag(AVFormatContext *s, AVIOContext *pb)
2045 {
2046     int lang;
2047     int64_t pos = avio_tell(pb);
2048     double latitude, longitude, altitude;
2049     int32_t latitude_fix, longitude_fix, altitude_fix;
2050     AVDictionaryEntry *t = get_metadata_lang(s, "location", &lang);
2051     const char *ptr, *place = "";
2052     char *end;
2053     const char *astronomical_body = "earth";
2054     if (!t)
2055         return 0;
2056
2057     ptr = t->value;
2058     longitude = strtod(ptr, &end);
2059     if (end == ptr) {
2060         av_log(s, AV_LOG_WARNING, "malformed location metadata\n");
2061         return 0;
2062     }
2063     ptr = end;
2064     latitude = strtod(ptr, &end);
2065     if (end == ptr) {
2066         av_log(s, AV_LOG_WARNING, "malformed location metadata\n");
2067         return 0;
2068     }
2069     ptr = end;
2070     altitude = strtod(ptr, &end);
2071     /* If no altitude was present, the default 0 should be fine */
2072     if (*end == '/')
2073         place = end + 1;
2074
2075     latitude_fix  = (int32_t) ((1 << 16) * latitude);
2076     longitude_fix = (int32_t) ((1 << 16) * longitude);
2077     altitude_fix  = (int32_t) ((1 << 16) * altitude);
2078
2079     avio_wb32(pb, 0);         /* size */
2080     ffio_wfourcc(pb, "loci"); /* type */
2081     avio_wb32(pb, 0);         /* version + flags */
2082     avio_wb16(pb, lang);
2083     avio_write(pb, place, strlen(place) + 1);
2084     avio_w8(pb, 0);           /* role of place (0 == shooting location, 1 == real location, 2 == fictional location) */
2085     avio_wb32(pb, latitude_fix);
2086     avio_wb32(pb, longitude_fix);
2087     avio_wb32(pb, altitude_fix);
2088     avio_write(pb, astronomical_body, strlen(astronomical_body) + 1);
2089     avio_w8(pb, 0);           /* additional notes, null terminated string */
2090
2091     return update_size(pb, pos);
2092 }
2093
2094 /* iTunes track number */
2095 static int mov_write_trkn_tag(AVIOContext *pb, MOVMuxContext *mov,
2096                               AVFormatContext *s)
2097 {
2098     AVDictionaryEntry *t = av_dict_get(s->metadata, "track", NULL, 0);
2099     int size = 0, track = t ? atoi(t->value) : 0;
2100     if (track) {
2101         avio_wb32(pb, 32); /* size */
2102         ffio_wfourcc(pb, "trkn");
2103         avio_wb32(pb, 24); /* size */
2104         ffio_wfourcc(pb, "data");
2105         avio_wb32(pb, 0);        // 8 bytes empty
2106         avio_wb32(pb, 0);
2107         avio_wb16(pb, 0);        // empty
2108         avio_wb16(pb, track);    // track number
2109         avio_wb16(pb, 0);        // total track number
2110         avio_wb16(pb, 0);        // empty
2111         size = 32;
2112     }
2113     return size;
2114 }
2115
2116 /* iTunes meta data list */
2117 static int mov_write_ilst_tag(AVIOContext *pb, MOVMuxContext *mov,
2118                               AVFormatContext *s)
2119 {
2120     int64_t pos = avio_tell(pb);
2121     avio_wb32(pb, 0); /* size */
2122     ffio_wfourcc(pb, "ilst");
2123     mov_write_string_metadata(s, pb, "\251nam", "title"    , 1);
2124     mov_write_string_metadata(s, pb, "\251ART", "artist"   , 1);
2125     mov_write_string_metadata(s, pb, "aART", "album_artist", 1);
2126     mov_write_string_metadata(s, pb, "\251wrt", "composer" , 1);
2127     mov_write_string_metadata(s, pb, "\251alb", "album"    , 1);
2128     mov_write_string_metadata(s, pb, "\251day", "date"     , 1);
2129     if (!mov_write_string_metadata(s, pb, "\251too", "encoding_tool", 1)) {
2130         if (!(s->flags & AVFMT_FLAG_BITEXACT))
2131             mov_write_string_tag(pb, "\251too", LIBAVFORMAT_IDENT, 0, 1);
2132     }
2133     mov_write_string_metadata(s, pb, "\251cmt", "comment"  , 1);
2134     mov_write_string_metadata(s, pb, "\251gen", "genre"    , 1);
2135     mov_write_string_metadata(s, pb, "\251cpy", "copyright", 1);
2136     mov_write_string_metadata(s, pb, "\251grp", "grouping" , 1);
2137     mov_write_string_metadata(s, pb, "\251lyr", "lyrics"   , 1);
2138     mov_write_string_metadata(s, pb, "desc",    "description",1);
2139     mov_write_string_metadata(s, pb, "ldes",    "synopsis" , 1);
2140     mov_write_string_metadata(s, pb, "tvsh",    "show"     , 1);
2141     mov_write_string_metadata(s, pb, "tven",    "episode_id",1);
2142     mov_write_string_metadata(s, pb, "tvnn",    "network"  , 1);
2143     mov_write_trkn_tag(pb, mov, s);
2144     return update_size(pb, pos);
2145 }
2146
2147 /* iTunes meta data tag */
2148 static int mov_write_meta_tag(AVIOContext *pb, MOVMuxContext *mov,
2149                               AVFormatContext *s)
2150 {
2151     int size = 0;
2152     int64_t pos = avio_tell(pb);
2153     avio_wb32(pb, 0); /* size */
2154     ffio_wfourcc(pb, "meta");
2155     avio_wb32(pb, 0);
2156     mov_write_itunes_hdlr_tag(pb, mov, s);
2157     mov_write_ilst_tag(pb, mov, s);
2158     size = update_size(pb, pos);
2159     return size;
2160 }
2161
2162 static int ascii_to_wc(AVIOContext *pb, const uint8_t *b)
2163 {
2164     int val;
2165     while (*b) {
2166         GET_UTF8(val, *b++, return -1;)
2167         avio_wb16(pb, val);
2168     }
2169     avio_wb16(pb, 0x00);
2170     return 0;
2171 }
2172
2173 static uint16_t language_code(const char *str)
2174 {
2175     return (((str[0] - 0x60) & 0x1F) << 10) +
2176            (((str[1] - 0x60) & 0x1F) <<  5) +
2177            (( str[2] - 0x60) & 0x1F);
2178 }
2179
2180 static int mov_write_3gp_udta_tag(AVIOContext *pb, AVFormatContext *s,
2181                                   const char *tag, const char *str)
2182 {
2183     int64_t pos = avio_tell(pb);
2184     AVDictionaryEntry *t = av_dict_get(s->metadata, str, NULL, 0);
2185     if (!t || !utf8len(t->value))
2186         return 0;
2187     avio_wb32(pb, 0);   /* size */
2188     ffio_wfourcc(pb, tag); /* type */
2189     avio_wb32(pb, 0);   /* version + flags */
2190     if (!strcmp(tag, "yrrc"))
2191         avio_wb16(pb, atoi(t->value));
2192     else {
2193         avio_wb16(pb, language_code("eng")); /* language */
2194         avio_write(pb, t->value, strlen(t->value) + 1); /* UTF8 string value */
2195         if (!strcmp(tag, "albm") &&
2196             (t = av_dict_get(s->metadata, "track", NULL, 0)))
2197             avio_w8(pb, atoi(t->value));
2198     }
2199     return update_size(pb, pos);
2200 }
2201
2202 static int mov_write_chpl_tag(AVIOContext *pb, AVFormatContext *s)
2203 {
2204     int64_t pos = avio_tell(pb);
2205     int i, nb_chapters = FFMIN(s->nb_chapters, 255);
2206
2207     avio_wb32(pb, 0);            // size
2208     ffio_wfourcc(pb, "chpl");
2209     avio_wb32(pb, 0x01000000);   // version + flags
2210     avio_wb32(pb, 0);            // unknown
2211     avio_w8(pb, nb_chapters);
2212
2213     for (i = 0; i < nb_chapters; i++) {
2214         AVChapter *c = s->chapters[i];
2215         AVDictionaryEntry *t;
2216         avio_wb64(pb, av_rescale_q(c->start, c->time_base, (AVRational){1,10000000}));
2217
2218         if ((t = av_dict_get(c->metadata, "title", NULL, 0))) {
2219             int len = FFMIN(strlen(t->value), 255);
2220             avio_w8(pb, len);
2221             avio_write(pb, t->value, len);
2222         } else
2223             avio_w8(pb, 0);
2224     }
2225     return update_size(pb, pos);
2226 }
2227
2228 static int mov_write_udta_tag(AVIOContext *pb, MOVMuxContext *mov,
2229                               AVFormatContext *s)
2230 {
2231     AVIOContext *pb_buf;
2232     int ret, size;
2233     uint8_t *buf;
2234
2235     ret = avio_open_dyn_buf(&pb_buf);
2236     if (ret < 0)
2237         return ret;
2238
2239     if (mov->mode & MODE_3GP) {
2240         mov_write_3gp_udta_tag(pb_buf, s, "perf", "artist");
2241         mov_write_3gp_udta_tag(pb_buf, s, "titl", "title");
2242         mov_write_3gp_udta_tag(pb_buf, s, "auth", "author");
2243         mov_write_3gp_udta_tag(pb_buf, s, "gnre", "genre");
2244         mov_write_3gp_udta_tag(pb_buf, s, "dscp", "comment");
2245         mov_write_3gp_udta_tag(pb_buf, s, "albm", "album");
2246         mov_write_3gp_udta_tag(pb_buf, s, "cprt", "copyright");
2247         mov_write_3gp_udta_tag(pb_buf, s, "yrrc", "date");
2248         mov_write_loci_tag(s, pb_buf);
2249     } else if (mov->mode == MODE_MOV) { // the title field breaks gtkpod with mp4 and my suspicion is that stuff is not valid in mp4
2250         mov_write_string_metadata(s, pb_buf, "\251ART", "artist",      0);
2251         mov_write_string_metadata(s, pb_buf, "\251nam", "title",       0);
2252         mov_write_string_metadata(s, pb_buf, "\251aut", "author",      0);
2253         mov_write_string_metadata(s, pb_buf, "\251alb", "album",       0);
2254         mov_write_string_metadata(s, pb_buf, "\251day", "date",        0);
2255         if (!(s->flags & AVFMT_FLAG_BITEXACT))
2256             mov_write_string_metadata(s, pb_buf, "\251swr", "encoder", 0);
2257         mov_write_string_metadata(s, pb_buf, "\251des", "comment",     0);
2258         mov_write_string_metadata(s, pb_buf, "\251gen", "genre",       0);
2259         mov_write_string_metadata(s, pb_buf, "\251cpy", "copyright",   0);
2260         mov_write_string_metadata(s, pb_buf, "\251mak", "make",        0);
2261         mov_write_string_metadata(s, pb_buf, "\251mod", "model",       0);
2262         mov_write_string_metadata(s, pb_buf, "\251xyz", "location",    0);
2263     } else {
2264         /* iTunes meta data */
2265         mov_write_meta_tag(pb_buf, mov, s);
2266         mov_write_loci_tag(s, pb_buf);
2267     }
2268
2269     if (s->nb_chapters && !(mov->flags & FF_MOV_FLAG_DISABLE_CHPL))
2270         mov_write_chpl_tag(pb_buf, s);
2271
2272     if ((size = avio_close_dyn_buf(pb_buf, &buf)) > 0) {
2273         avio_wb32(pb, size + 8);
2274         ffio_wfourcc(pb, "udta");
2275         avio_write(pb, buf, size);
2276     }
2277     av_free(buf);
2278
2279     return 0;
2280 }
2281
2282 static void mov_write_psp_udta_tag(AVIOContext *pb,
2283                                    const char *str, const char *lang, int type)
2284 {
2285     int len = utf8len(str) + 1;
2286     if (len <= 0)
2287         return;
2288     avio_wb16(pb, len * 2 + 10);        /* size */
2289     avio_wb32(pb, type);                /* type */
2290     avio_wb16(pb, language_code(lang)); /* language */
2291     avio_wb16(pb, 0x01);                /* ? */
2292     ascii_to_wc(pb, str);
2293 }
2294
2295 static int mov_write_uuidusmt_tag(AVIOContext *pb, AVFormatContext *s)
2296 {
2297     AVDictionaryEntry *title = av_dict_get(s->metadata, "title", NULL, 0);
2298     int64_t pos, pos2;
2299
2300     if (title) {
2301         pos = avio_tell(pb);
2302         avio_wb32(pb, 0); /* size placeholder*/
2303         ffio_wfourcc(pb, "uuid");
2304         ffio_wfourcc(pb, "USMT");
2305         avio_wb32(pb, 0x21d24fce); /* 96 bit UUID */
2306         avio_wb32(pb, 0xbb88695c);
2307         avio_wb32(pb, 0xfac9c740);
2308
2309         pos2 = avio_tell(pb);
2310         avio_wb32(pb, 0); /* size placeholder*/
2311         ffio_wfourcc(pb, "MTDT");
2312         avio_wb16(pb, 4);
2313
2314         // ?
2315         avio_wb16(pb, 0x0C);                 /* size */
2316         avio_wb32(pb, 0x0B);                 /* type */
2317         avio_wb16(pb, language_code("und")); /* language */
2318         avio_wb16(pb, 0x0);                  /* ? */
2319         avio_wb16(pb, 0x021C);               /* data */
2320
2321         mov_write_psp_udta_tag(pb, LIBAVCODEC_IDENT,      "eng", 0x04);
2322         mov_write_psp_udta_tag(pb, title->value,          "eng", 0x01);
2323         mov_write_psp_udta_tag(pb, "2006/04/01 11:11:11", "und", 0x03);
2324
2325         update_size(pb, pos2);
2326         return update_size(pb, pos);
2327     }
2328
2329     return 0;
2330 }
2331
2332 static int mov_write_moov_tag(AVIOContext *pb, MOVMuxContext *mov,
2333                               AVFormatContext *s)
2334 {
2335     int i;
2336     int64_t pos = avio_tell(pb);
2337     avio_wb32(pb, 0); /* size placeholder*/
2338     ffio_wfourcc(pb, "moov");
2339
2340     for (i = 0; i < mov->nb_streams; i++) {
2341         if (mov->tracks[i].entry <= 0 && !(mov->flags & FF_MOV_FLAG_FRAGMENT))
2342             continue;
2343
2344         mov->tracks[i].time     = mov->time;
2345         mov->tracks[i].track_id = i + 1;
2346     }
2347
2348     if (mov->chapter_track)
2349         for (i = 0; i < s->nb_streams; i++) {
2350             mov->tracks[i].tref_tag = MKTAG('c','h','a','p');
2351             mov->tracks[i].tref_id  = mov->tracks[mov->chapter_track].track_id;
2352         }
2353     for (i = 0; i < mov->nb_streams; i++) {
2354         MOVTrack *track = &mov->tracks[i];
2355         if (track->tag == MKTAG('r','t','p',' ')) {
2356             track->tref_tag = MKTAG('h','i','n','t');
2357             track->tref_id = mov->tracks[track->src_track].track_id;
2358         } else if (track->par->codec_type == AVMEDIA_TYPE_AUDIO) {
2359             int * fallback, size;
2360             fallback = (int*)av_stream_get_side_data(track->st,
2361                                                      AV_PKT_DATA_FALLBACK_TRACK,
2362                                                      &size);
2363             if (fallback != NULL && size == sizeof(int)) {
2364                 if (*fallback >= 0 && *fallback < mov->nb_streams) {
2365                     track->tref_tag = MKTAG('f','a','l','l');
2366                     track->tref_id = mov->tracks[*fallback].track_id;
2367                 }
2368             }
2369         }
2370     }
2371
2372     mov_write_mvhd_tag(pb, mov);
2373     if (mov->mode != MODE_MOV && !mov->iods_skip)
2374         mov_write_iods_tag(pb, mov);
2375     for (i = 0; i < mov->nb_streams; i++) {
2376         if (mov->tracks[i].entry > 0 || mov->flags & FF_MOV_FLAG_FRAGMENT) {
2377             mov_write_trak_tag(pb, mov, &(mov->tracks[i]), i < s->nb_streams ? s->streams[i] : NULL);
2378         }
2379     }
2380     if (mov->flags & FF_MOV_FLAG_FRAGMENT)
2381         mov_write_mvex_tag(pb, mov); /* QuickTime requires trak to precede this */
2382
2383     if (mov->mode == MODE_PSP)
2384         mov_write_uuidusmt_tag(pb, s);
2385     else
2386         mov_write_udta_tag(pb, mov, s);
2387
2388     return update_size(pb, pos);
2389 }
2390
2391 static void param_write_int(AVIOContext *pb, const char *name, int value)
2392 {
2393     avio_printf(pb, "<param name=\"%s\" value=\"%d\" valuetype=\"data\"/>\n", name, value);
2394 }
2395
2396 static void param_write_string(AVIOContext *pb, const char *name, const char *value)
2397 {
2398     avio_printf(pb, "<param name=\"%s\" value=\"%s\" valuetype=\"data\"/>\n", name, value);
2399 }
2400
2401 static void param_write_hex(AVIOContext *pb, const char *name, const uint8_t *value, int len)
2402 {
2403     char buf[150];
2404     len = FFMIN(sizeof(buf) / 2 - 1, len);
2405     ff_data_to_hex(buf, value, len, 0);
2406     buf[2 * len] = '\0';
2407     avio_printf(pb, "<param name=\"%s\" value=\"%s\" valuetype=\"data\"/>\n", name, buf);
2408 }
2409
2410 static int mov_write_isml_manifest(AVIOContext *pb, MOVMuxContext *mov)
2411 {
2412     int64_t pos = avio_tell(pb);
2413     int i;
2414     static const uint8_t uuid[] = {
2415         0xa5, 0xd4, 0x0b, 0x30, 0xe8, 0x14, 0x11, 0xdd,
2416         0xba, 0x2f, 0x08, 0x00, 0x20, 0x0c, 0x9a, 0x66
2417     };
2418
2419     avio_wb32(pb, 0);
2420     ffio_wfourcc(pb, "uuid");
2421     avio_write(pb, uuid, sizeof(uuid));
2422     avio_wb32(pb, 0);
2423
2424     avio_printf(pb, "<?xml version=\"1.0\" encoding=\"utf-8\"?>\n");
2425     avio_printf(pb, "<smil xmlns=\"http://www.w3.org/2001/SMIL20/Language\">\n");
2426     avio_printf(pb, "<head>\n");
2427     avio_printf(pb, "<meta name=\"creator\" content=\"%s\" />\n",
2428                     LIBAVFORMAT_IDENT);
2429     avio_printf(pb, "</head>\n");
2430     avio_printf(pb, "<body>\n");
2431     avio_printf(pb, "<switch>\n");
2432     for (i = 0; i < mov->nb_streams; i++) {
2433         MOVTrack *track = &mov->tracks[i];
2434         const char *type;
2435         /* track->track_id is initialized in write_moov, and thus isn't known
2436          * here yet */
2437         int track_id = i + 1;
2438
2439         if (track->par->codec_type == AVMEDIA_TYPE_VIDEO) {
2440             type = "video";
2441         } else if (track->par->codec_type == AVMEDIA_TYPE_AUDIO) {
2442             type = "audio";
2443         } else {
2444             continue;
2445         }
2446         avio_printf(pb, "<%s systemBitrate=\"%d\">\n", type,
2447                                                        track->par->bit_rate);
2448         param_write_int(pb, "systemBitrate", track->par->bit_rate);
2449         param_write_int(pb, "trackID", track_id);
2450         if (track->par->codec_type == AVMEDIA_TYPE_VIDEO) {
2451             if (track->par->codec_id == AV_CODEC_ID_H264) {
2452                 uint8_t *ptr;
2453                 int size = track->par->extradata_size;
2454                 if (!ff_avc_write_annexb_extradata(track->par->extradata, &ptr,
2455                                                    &size)) {
2456                     param_write_hex(pb, "CodecPrivateData",
2457                                     ptr ? ptr : track->par->extradata,
2458                                     size);
2459                     av_free(ptr);
2460                 }
2461                 param_write_string(pb, "FourCC", "H264");
2462             } else if (track->par->codec_id == AV_CODEC_ID_VC1) {
2463                 param_write_string(pb, "FourCC", "WVC1");
2464                 param_write_hex(pb, "CodecPrivateData", track->par->extradata,
2465                                 track->par->extradata_size);
2466             }
2467             param_write_int(pb, "MaxWidth", track->par->width);
2468             param_write_int(pb, "MaxHeight", track->par->height);
2469             param_write_int(pb, "DisplayWidth", track->par->width);
2470             param_write_int(pb, "DisplayHeight", track->par->height);
2471         } else {
2472             if (track->par->codec_id == AV_CODEC_ID_AAC) {
2473                 param_write_string(pb, "FourCC", "AACL");
2474             } else if (track->par->codec_id == AV_CODEC_ID_WMAPRO) {
2475                 param_write_string(pb, "FourCC", "WMAP");
2476             }
2477             param_write_hex(pb, "CodecPrivateData", track->par->extradata,
2478                             track->par->extradata_size);
2479             param_write_int(pb, "AudioTag", ff_codec_get_tag(ff_codec_wav_tags,
2480                                                              track->par->codec_id));
2481             param_write_int(pb, "Channels", track->par->channels);
2482             param_write_int(pb, "SamplingRate", track->par->sample_rate);
2483             param_write_int(pb, "BitsPerSample", 16);
2484             param_write_int(pb, "PacketSize", track->par->block_align ?
2485                                               track->par->block_align : 4);
2486         }
2487         avio_printf(pb, "</%s>\n", type);
2488     }
2489     avio_printf(pb, "</switch>\n");
2490     avio_printf(pb, "</body>\n");
2491     avio_printf(pb, "</smil>\n");
2492
2493     return update_size(pb, pos);
2494 }
2495
2496 static int mov_write_mfhd_tag(AVIOContext *pb, MOVMuxContext *mov)
2497 {
2498     avio_wb32(pb, 16);
2499     ffio_wfourcc(pb, "mfhd");
2500     avio_wb32(pb, 0);
2501     avio_wb32(pb, mov->fragments);
2502     return 0;
2503 }
2504
2505 static uint32_t get_sample_flags(MOVTrack *track, MOVIentry *entry)
2506 {
2507     return entry->flags & MOV_SYNC_SAMPLE ? MOV_FRAG_SAMPLE_FLAG_DEPENDS_NO :
2508            (MOV_FRAG_SAMPLE_FLAG_DEPENDS_YES | MOV_FRAG_SAMPLE_FLAG_IS_NON_SYNC);
2509 }
2510
2511 static int mov_write_tfhd_tag(AVIOContext *pb, MOVMuxContext *mov,
2512                               MOVTrack *track, int64_t moof_offset)
2513 {
2514     int64_t pos = avio_tell(pb);
2515     uint32_t flags = MOV_TFHD_DEFAULT_SIZE | MOV_TFHD_DEFAULT_DURATION |
2516                      MOV_TFHD_BASE_DATA_OFFSET;
2517     if (!track->entry) {
2518         flags |= MOV_TFHD_DURATION_IS_EMPTY;
2519     } else {
2520         flags |= MOV_TFHD_DEFAULT_FLAGS;
2521     }
2522     if (mov->flags & FF_MOV_FLAG_OMIT_TFHD_OFFSET)
2523         flags &= ~MOV_TFHD_BASE_DATA_OFFSET;
2524     if (mov->flags & FF_MOV_FLAG_DEFAULT_BASE_MOOF) {
2525         flags &= ~MOV_TFHD_BASE_DATA_OFFSET;
2526         flags |= MOV_TFHD_DEFAULT_BASE_IS_MOOF;
2527     }
2528
2529     /* Don't set a default sample size, the silverlight player refuses
2530      * to play files with that set. Don't set a default sample duration,
2531      * WMP freaks out if it is set. Don't set a base data offset, PIFF
2532      * file format says it MUST NOT be set. */
2533     if (track->mode == MODE_ISM)
2534         flags &= ~(MOV_TFHD_DEFAULT_SIZE | MOV_TFHD_DEFAULT_DURATION |
2535                    MOV_TFHD_BASE_DATA_OFFSET);
2536
2537     avio_wb32(pb, 0); /* size placeholder */
2538     ffio_wfourcc(pb, "tfhd");
2539     avio_w8(pb, 0); /* version */
2540     avio_wb24(pb, flags);
2541
2542     avio_wb32(pb, track->track_id); /* track-id */
2543     if (flags & MOV_TFHD_BASE_DATA_OFFSET)
2544         avio_wb64(pb, moof_offset);
2545     if (flags & MOV_TFHD_DEFAULT_DURATION) {
2546         track->default_duration = get_cluster_duration(track, 0);
2547         avio_wb32(pb, track->default_duration);
2548     }
2549     if (flags & MOV_TFHD_DEFAULT_SIZE) {
2550         track->default_size = track->entry ? track->cluster[0].size : 1;
2551         avio_wb32(pb, track->default_size);
2552     } else
2553         track->default_size = -1;
2554
2555     if (flags & MOV_TFHD_DEFAULT_FLAGS) {
2556         /* Set the default flags based on the second sample, if available.
2557          * If the first sample is different, that can be signaled via a separate field. */
2558         if (track->entry > 1)
2559             track->default_sample_flags = get_sample_flags(track, &track->cluster[1]);
2560         else
2561             track->default_sample_flags =
2562                 track->par->codec_type == AVMEDIA_TYPE_VIDEO ?
2563                 (MOV_FRAG_SAMPLE_FLAG_DEPENDS_YES | MOV_FRAG_SAMPLE_FLAG_IS_NON_SYNC) :
2564                 MOV_FRAG_SAMPLE_FLAG_DEPENDS_NO;
2565         avio_wb32(pb, track->default_sample_flags);
2566     }
2567
2568     return update_size(pb, pos);
2569 }
2570
2571 static int mov_write_trun_tag(AVIOContext *pb, MOVMuxContext *mov,
2572                               MOVTrack *track, int moof_size,
2573                               int first, int end)
2574 {
2575     int64_t pos = avio_tell(pb);
2576     uint32_t flags = MOV_TRUN_DATA_OFFSET;
2577     int i;
2578
2579     for (i = first; i < end; i++) {
2580         if (get_cluster_duration(track, i) != track->default_duration)
2581             flags |= MOV_TRUN_SAMPLE_DURATION;
2582         if (track->cluster[i].size != track->default_size)
2583             flags |= MOV_TRUN_SAMPLE_SIZE;
2584         if (i > first && get_sample_flags(track, &track->cluster[i]) != track->default_sample_flags)
2585             flags |= MOV_TRUN_SAMPLE_FLAGS;
2586     }
2587     if (!(flags & MOV_TRUN_SAMPLE_FLAGS) && track->entry > 0 &&
2588          get_sample_flags(track, &track->cluster[0]) != track->default_sample_flags)
2589         flags |= MOV_TRUN_FIRST_SAMPLE_FLAGS;
2590     if (track->flags & MOV_TRACK_CTTS)
2591         flags |= MOV_TRUN_SAMPLE_CTS;
2592
2593     avio_wb32(pb, 0); /* size placeholder */
2594     ffio_wfourcc(pb, "trun");
2595     avio_w8(pb, 0); /* version */
2596     avio_wb24(pb, flags);
2597
2598     avio_wb32(pb, end - first); /* sample count */
2599     if (mov->flags & FF_MOV_FLAG_OMIT_TFHD_OFFSET &&
2600         !(mov->flags & FF_MOV_FLAG_DEFAULT_BASE_MOOF) &&
2601         !mov->first_trun)
2602         avio_wb32(pb, 0); /* Later tracks follow immediately after the previous one */
2603     else
2604         avio_wb32(pb, moof_size + 8 + track->data_offset +
2605                       track->cluster[first].pos); /* data offset */
2606     if (flags & MOV_TRUN_FIRST_SAMPLE_FLAGS)
2607         avio_wb32(pb, get_sample_flags(track, &track->cluster[first]));
2608
2609     for (i = first; i < end; i++) {
2610         if (flags & MOV_TRUN_SAMPLE_DURATION)
2611             avio_wb32(pb, get_cluster_duration(track, i));
2612         if (flags & MOV_TRUN_SAMPLE_SIZE)
2613             avio_wb32(pb, track->cluster[i].size);
2614         if (flags & MOV_TRUN_SAMPLE_FLAGS)
2615             avio_wb32(pb, get_sample_flags(track, &track->cluster[i]));
2616         if (flags & MOV_TRUN_SAMPLE_CTS)
2617             avio_wb32(pb, track->cluster[i].cts);
2618     }
2619
2620     mov->first_trun = 0;
2621     return update_size(pb, pos);
2622 }
2623
2624 static int mov_write_tfxd_tag(AVIOContext *pb, MOVTrack *track)
2625 {
2626     int64_t pos = avio_tell(pb);
2627     static const uint8_t uuid[] = {
2628         0x6d, 0x1d, 0x9b, 0x05, 0x42, 0xd5, 0x44, 0xe6,
2629         0x80, 0xe2, 0x14, 0x1d, 0xaf, 0xf7, 0x57, 0xb2
2630     };
2631
2632     avio_wb32(pb, 0); /* size placeholder */
2633     ffio_wfourcc(pb, "uuid");
2634     avio_write(pb, uuid, sizeof(uuid));
2635     avio_w8(pb, 1);
2636     avio_wb24(pb, 0);
2637     avio_wb64(pb, track->start_dts + track->frag_start +
2638                   track->cluster[0].cts);
2639     avio_wb64(pb, track->end_pts -
2640                   (track->cluster[0].dts + track->cluster[0].cts));
2641
2642     return update_size(pb, pos);
2643 }
2644
2645 static int mov_write_tfrf_tag(AVIOContext *pb, MOVMuxContext *mov,
2646                               MOVTrack *track, int entry)
2647 {
2648     int n = track->nb_frag_info - 1 - entry, i;
2649     int size = 8 + 16 + 4 + 1 + 16*n;
2650     static const uint8_t uuid[] = {
2651         0xd4, 0x80, 0x7e, 0xf2, 0xca, 0x39, 0x46, 0x95,
2652         0x8e, 0x54, 0x26, 0xcb, 0x9e, 0x46, 0xa7, 0x9f
2653     };
2654
2655     if (entry < 0)
2656         return 0;
2657
2658     avio_seek(pb, track->frag_info[entry].tfrf_offset, SEEK_SET);
2659     avio_wb32(pb, size);
2660     ffio_wfourcc(pb, "uuid");
2661     avio_write(pb, uuid, sizeof(uuid));
2662     avio_w8(pb, 1);
2663     avio_wb24(pb, 0);
2664     avio_w8(pb, n);
2665     for (i = 0; i < n; i++) {
2666         int index = entry + 1 + i;
2667         avio_wb64(pb, track->frag_info[index].time);
2668         avio_wb64(pb, track->frag_info[index].duration);
2669     }
2670     if (n < mov->ism_lookahead) {
2671         int free_size = 16 * (mov->ism_lookahead - n);
2672         avio_wb32(pb, free_size);
2673         ffio_wfourcc(pb, "free");
2674         for (i = 0; i < free_size - 8; i++)
2675             avio_w8(pb, 0);
2676     }
2677
2678     return 0;
2679 }
2680
2681 static int mov_write_tfrf_tags(AVIOContext *pb, MOVMuxContext *mov,
2682                                MOVTrack *track)
2683 {
2684     int64_t pos = avio_tell(pb);
2685     int i;
2686     for (i = 0; i < mov->ism_lookahead; i++) {
2687         /* Update the tfrf tag for the last ism_lookahead fragments,
2688          * nb_frag_info - 1 is the next fragment to be written. */
2689         mov_write_tfrf_tag(pb, mov, track, track->nb_frag_info - 2 - i);
2690     }
2691     avio_seek(pb, pos, SEEK_SET);
2692     return 0;
2693 }
2694
2695 static int mov_add_tfra_entries(AVIOContext *pb, MOVMuxContext *mov, int tracks,
2696                                 int size)
2697 {
2698     int i;
2699     for (i = 0; i < mov->nb_streams; i++) {
2700         MOVTrack *track = &mov->tracks[i];
2701         MOVFragmentInfo *info;
2702         if ((tracks >= 0 && i != tracks) || !track->entry)
2703             continue;
2704         track->nb_frag_info++;
2705         if (track->nb_frag_info >= track->frag_info_capacity) {
2706             unsigned new_capacity = track->nb_frag_info + MOV_FRAG_INFO_ALLOC_INCREMENT;
2707             if (av_reallocp_array(&track->frag_info,
2708                                   new_capacity,
2709                                   sizeof(*track->frag_info)))
2710                 return AVERROR(ENOMEM);
2711             track->frag_info_capacity = new_capacity;
2712         }
2713         info = &track->frag_info[track->nb_frag_info - 1];
2714         info->offset   = avio_tell(pb);
2715         info->size     = size;
2716         // Try to recreate the original pts for the first packet
2717         // from the fields we have stored
2718         info->time     = track->start_dts + track->frag_start +
2719                          track->cluster[0].cts;
2720         info->duration = track->end_pts -
2721                          (track->cluster[0].dts + track->cluster[0].cts);
2722         // If the pts is less than zero, we will have trimmed
2723         // away parts of the media track using an edit list,
2724         // and the corresponding start presentation time is zero.
2725         if (info->time < 0) {
2726             info->duration += info->time;
2727             info->time = 0;
2728         }
2729         info->tfrf_offset = 0;
2730         mov_write_tfrf_tags(pb, mov, track);
2731     }
2732     return 0;
2733 }
2734
2735 static int mov_write_tfdt_tag(AVIOContext *pb, MOVTrack *track)
2736 {
2737     int64_t pos = avio_tell(pb);
2738
2739     avio_wb32(pb, 0); /* size */
2740     ffio_wfourcc(pb, "tfdt");
2741     avio_w8(pb, 1); /* version */
2742     avio_wb24(pb, 0);
2743     avio_wb64(pb, track->frag_start);
2744     return update_size(pb, pos);
2745 }
2746
2747 static int mov_write_traf_tag(AVIOContext *pb, MOVMuxContext *mov,
2748                               MOVTrack *track, int64_t moof_offset,
2749                               int moof_size)
2750 {
2751     int64_t pos = avio_tell(pb);
2752     int i, start = 0;
2753     avio_wb32(pb, 0); /* size placeholder */
2754     ffio_wfourcc(pb, "traf");
2755
2756     mov_write_tfhd_tag(pb, mov, track, moof_offset);
2757     if (mov->mode != MODE_ISM)
2758         mov_write_tfdt_tag(pb, track);
2759     for (i = 1; i < track->entry; i++) {
2760         if (track->cluster[i].pos != track->cluster[i - 1].pos + track->cluster[i - 1].size) {
2761             mov_write_trun_tag(pb, mov, track, moof_size, start, i);
2762             start = i;
2763         }
2764     }
2765     mov_write_trun_tag(pb, mov, track, moof_size, start, track->entry);
2766     if (mov->mode == MODE_ISM) {
2767         mov_write_tfxd_tag(pb, track);
2768
2769         if (mov->ism_lookahead) {
2770             int i, size = 16 + 4 + 1 + 16 * mov->ism_lookahead;
2771
2772             if (track->nb_frag_info > 0) {
2773                 MOVFragmentInfo *info = &track->frag_info[track->nb_frag_info - 1];
2774                 if (!info->tfrf_offset)
2775                     info->tfrf_offset = avio_tell(pb);
2776             }
2777             avio_wb32(pb, 8 + size);
2778             ffio_wfourcc(pb, "free");
2779             for (i = 0; i < size; i++)
2780                 avio_w8(pb, 0);
2781         }
2782     }
2783
2784     return update_size(pb, pos);
2785 }
2786
2787 static int mov_write_moof_tag_internal(AVIOContext *pb, MOVMuxContext *mov,
2788                                        int tracks, int moof_size)
2789 {
2790     int64_t pos = avio_tell(pb);
2791     int i;
2792
2793     avio_wb32(pb, 0); /* size placeholder */
2794     ffio_wfourcc(pb, "moof");
2795     mov->first_trun = 1;
2796
2797     mov_write_mfhd_tag(pb, mov);
2798     for (i = 0; i < mov->nb_streams; i++) {
2799         MOVTrack *track = &mov->tracks[i];
2800         if (tracks >= 0 && i != tracks)
2801             continue;
2802         if (!track->entry)
2803             continue;
2804         mov_write_traf_tag(pb, mov, track, pos, moof_size);
2805     }
2806
2807     return update_size(pb, pos);
2808 }
2809
2810 static int mov_write_sidx_tag(AVIOContext *pb,
2811                               MOVTrack *track, int ref_size, int total_sidx_size)
2812 {
2813     int64_t pos = avio_tell(pb), offset_pos, end_pos;
2814     int64_t presentation_time, duration, offset;
2815     int starts_with_SAP, i, entries;
2816
2817     if (track->entry) {
2818         entries = 1;
2819         presentation_time = track->start_dts + track->frag_start +
2820                             track->cluster[0].cts;
2821         duration = track->end_pts -
2822                    (track->cluster[0].dts + track->cluster[0].cts);
2823         starts_with_SAP = track->cluster[0].flags & MOV_SYNC_SAMPLE;
2824
2825         // pts<0 should be cut away using edts
2826         if (presentation_time < 0) {
2827             duration += presentation_time;
2828             presentation_time = 0;
2829         }
2830     } else {
2831         entries = track->nb_frag_info;
2832         if (entries <= 0)
2833             return 0;
2834         presentation_time = track->frag_info[0].time;
2835     }
2836
2837     avio_wb32(pb, 0); /* size */
2838     ffio_wfourcc(pb, "sidx");
2839     avio_w8(pb, 1); /* version */
2840     avio_wb24(pb, 0);
2841     avio_wb32(pb, track->track_id); /* reference_ID */
2842     avio_wb32(pb, track->timescale); /* timescale */
2843     avio_wb64(pb, presentation_time); /* earliest_presentation_time */
2844     offset_pos = avio_tell(pb);
2845     avio_wb64(pb, 0); /* first_offset (offset to referenced moof) */
2846     avio_wb16(pb, 0); /* reserved */
2847
2848     avio_wb16(pb, entries); /* reference_count */
2849     for (i = 0; i < entries; i++) {
2850         if (!track->entry) {
2851             if (i > 1 && track->frag_info[i].offset != track->frag_info[i - 1].offset + track->frag_info[i - 1].size) {
2852                av_log(NULL, AV_LOG_ERROR, "Non-consecutive fragments, writing incorrect sidx\n");
2853             }
2854             duration = track->frag_info[i].duration;
2855             ref_size = track->frag_info[i].size;
2856             starts_with_SAP = 1;
2857         }
2858         avio_wb32(pb, (0 << 31) | (ref_size & 0x7fffffff)); /* reference_type (0 = media) | referenced_size */
2859         avio_wb32(pb, duration); /* subsegment_duration */
2860         avio_wb32(pb, (starts_with_SAP << 31) | (0 << 28) | 0); /* starts_with_SAP | SAP_type | SAP_delta_time */
2861     }
2862
2863     end_pos = avio_tell(pb);
2864     offset = pos + total_sidx_size - end_pos;
2865     avio_seek(pb, offset_pos, SEEK_SET);
2866     avio_wb64(pb, offset);
2867     avio_seek(pb, end_pos, SEEK_SET);
2868     return update_size(pb, pos);
2869 }
2870
2871 static int mov_write_sidx_tags(AVIOContext *pb, MOVMuxContext *mov,
2872                                int tracks, int ref_size)
2873 {
2874     int i, round, ret;
2875     AVIOContext *avio_buf;
2876     int total_size = 0;
2877     for (round = 0; round < 2; round++) {
2878         // First run one round to calculate the total size of all
2879         // sidx atoms.
2880         // This would be much simpler if we'd only write one sidx
2881         // atom, for the first track in the moof.
2882         if (round == 0) {
2883             if ((ret = ffio_open_null_buf(&avio_buf)) < 0)
2884                 return ret;
2885         } else {
2886             avio_buf = pb;
2887         }
2888         for (i = 0; i < mov->nb_streams; i++) {
2889             MOVTrack *track = &mov->tracks[i];
2890             if (tracks >= 0 && i != tracks)
2891                 continue;
2892             // When writing a sidx for the full file, entry is 0, but
2893             // we want to include all tracks. ref_size is 0 in this case,
2894             // since we read it from frag_info instead.
2895             if (!track->entry && ref_size > 0)
2896                 continue;
2897             total_size -= mov_write_sidx_tag(avio_buf, track, ref_size,
2898                                              total_size);
2899         }
2900         if (round == 0)
2901             total_size = ffio_close_null_buf(avio_buf);
2902     }
2903     return 0;
2904 }
2905
2906 static int mov_write_moof_tag(AVIOContext *pb, MOVMuxContext *mov, int tracks,
2907                               int64_t mdat_size)
2908 {
2909     AVIOContext *avio_buf;
2910     int ret, moof_size;
2911
2912     if ((ret = ffio_open_null_buf(&avio_buf)) < 0)
2913         return ret;
2914     mov_write_moof_tag_internal(avio_buf, mov, tracks, 0);
2915     moof_size = ffio_close_null_buf(avio_buf);
2916
2917     if (mov->flags & FF_MOV_FLAG_DASH && !(mov->flags & FF_MOV_FLAG_GLOBAL_SIDX))
2918         mov_write_sidx_tags(pb, mov, tracks, moof_size + 8 + mdat_size);
2919
2920     if ((ret = mov_add_tfra_entries(pb, mov, tracks, moof_size + 8 + mdat_size)) < 0)
2921         return ret;
2922
2923     return mov_write_moof_tag_internal(pb, mov, tracks, moof_size);
2924 }
2925
2926 static int mov_write_tfra_tag(AVIOContext *pb, MOVTrack *track)
2927 {
2928     int64_t pos = avio_tell(pb);
2929     int i;
2930
2931     avio_wb32(pb, 0); /* size placeholder */
2932     ffio_wfourcc(pb, "tfra");
2933     avio_w8(pb, 1); /* version */
2934     avio_wb24(pb, 0);
2935
2936     avio_wb32(pb, track->track_id);
2937     avio_wb32(pb, 0); /* length of traf/trun/sample num */
2938     avio_wb32(pb, track->nb_frag_info);
2939     for (i = 0; i < track->nb_frag_info; i++) {
2940         avio_wb64(pb, track->frag_info[i].time);
2941         avio_wb64(pb, track->frag_info[i].offset + track->data_offset);
2942         avio_w8(pb, 1); /* traf number */
2943         avio_w8(pb, 1); /* trun number */
2944         avio_w8(pb, 1); /* sample number */
2945     }
2946
2947     return update_size(pb, pos);
2948 }
2949
2950 static int mov_write_mfra_tag(AVIOContext *pb, MOVMuxContext *mov)
2951 {
2952     int64_t pos = avio_tell(pb);
2953     int i;
2954
2955     avio_wb32(pb, 0); /* size placeholder */
2956     ffio_wfourcc(pb, "mfra");
2957     /* An empty mfra atom is enough to indicate to the publishing point that
2958      * the stream has ended. */
2959     if (mov->flags & FF_MOV_FLAG_ISML)
2960         return update_size(pb, pos);
2961
2962     for (i = 0; i < mov->nb_streams; i++) {
2963         MOVTrack *track = &mov->tracks[i];
2964         if (track->nb_frag_info)
2965             mov_write_tfra_tag(pb, track);
2966     }
2967
2968     avio_wb32(pb, 16);
2969     ffio_wfourcc(pb, "mfro");
2970     avio_wb32(pb, 0); /* version + flags */
2971     avio_wb32(pb, avio_tell(pb) + 4 - pos);
2972
2973     return update_size(pb, pos);
2974 }
2975
2976 static int mov_write_mdat_tag(AVIOContext *pb, MOVMuxContext *mov)
2977 {
2978     avio_wb32(pb, 8);    // placeholder for extended size field (64 bit)
2979     ffio_wfourcc(pb, mov->mode == MODE_MOV ? "wide" : "free");
2980
2981     mov->mdat_pos = avio_tell(pb);
2982     avio_wb32(pb, 0); /* size placeholder*/
2983     ffio_wfourcc(pb, "mdat");
2984     return 0;
2985 }
2986
2987 /* TODO: This needs to be more general */
2988 static int mov_write_ftyp_tag(AVIOContext *pb, AVFormatContext *s)
2989 {
2990     MOVMuxContext *mov = s->priv_data;
2991     int64_t pos = avio_tell(pb);
2992     int has_h264 = 0, has_video = 0;
2993     int minor = 0x200;
2994     int i;
2995
2996     for (i = 0; i < s->nb_streams; i++) {
2997         AVStream *st = s->streams[i];
2998         if (st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO)
2999             has_video = 1;
3000         if (st->codecpar->codec_id == AV_CODEC_ID_H264)
3001             has_h264 = 1;
3002     }
3003
3004     avio_wb32(pb, 0); /* size */
3005     ffio_wfourcc(pb, "ftyp");
3006
3007     if (mov->major_brand && strlen(mov->major_brand) >= 4)
3008         ffio_wfourcc(pb, mov->major_brand);
3009     else if (mov->mode == MODE_3GP) {
3010         ffio_wfourcc(pb, has_h264 ? "3gp6"  : "3gp4");
3011         minor =     has_h264 ?   0x100 :   0x200;
3012     } else if (mov->mode & MODE_3G2) {
3013         ffio_wfourcc(pb, has_h264 ? "3g2b"  : "3g2a");
3014         minor =     has_h264 ? 0x20000 : 0x10000;
3015     } else if (mov->mode == MODE_PSP)
3016         ffio_wfourcc(pb, "MSNV");
3017     else if (mov->mode == MODE_MP4 && mov->flags & FF_MOV_FLAG_DEFAULT_BASE_MOOF)
3018         ffio_wfourcc(pb, "iso5"); // Required when using default-base-is-moof
3019     else if (mov->mode == MODE_MP4)
3020         ffio_wfourcc(pb, "isom");
3021     else if (mov->mode == MODE_IPOD)
3022         ffio_wfourcc(pb, has_video ? "M4V ":"M4A ");
3023     else if (mov->mode == MODE_ISM)
3024         ffio_wfourcc(pb, "isml");
3025     else if (mov->mode == MODE_F4V)
3026         ffio_wfourcc(pb, "f4v ");
3027     else
3028         ffio_wfourcc(pb, "qt  ");
3029
3030     avio_wb32(pb, minor);
3031
3032     if (mov->mode == MODE_MOV)
3033         ffio_wfourcc(pb, "qt  ");
3034     else if (mov->mode == MODE_ISM) {
3035         ffio_wfourcc(pb, "piff");
3036     } else if (!(mov->flags & FF_MOV_FLAG_DEFAULT_BASE_MOOF)) {
3037         ffio_wfourcc(pb, "isom");
3038         ffio_wfourcc(pb, "iso2");
3039         if (has_h264)
3040             ffio_wfourcc(pb, "avc1");
3041     }
3042
3043     // We add tfdt atoms when fragmenting, signal this with the iso6 compatible
3044     // brand. This is compatible with users that don't understand tfdt.
3045     if (mov->flags & FF_MOV_FLAG_FRAGMENT && mov->mode != MODE_ISM)
3046         ffio_wfourcc(pb, "iso6");
3047
3048     if (mov->mode == MODE_3GP)
3049         ffio_wfourcc(pb, has_h264 ? "3gp6":"3gp4");
3050     else if (mov->mode & MODE_3G2)
3051         ffio_wfourcc(pb, has_h264 ? "3g2b":"3g2a");
3052     else if (mov->mode == MODE_PSP)
3053         ffio_wfourcc(pb, "MSNV");
3054     else if (mov->mode == MODE_MP4)
3055         ffio_wfourcc(pb, "mp41");
3056
3057     if (mov->flags & FF_MOV_FLAG_DASH && mov->flags & FF_MOV_FLAG_GLOBAL_SIDX)
3058         ffio_wfourcc(pb, "dash");
3059
3060     return update_size(pb, pos);
3061 }
3062
3063 static void mov_write_uuidprof_tag(AVIOContext *pb, AVFormatContext *s)
3064 {
3065     AVStream       *video_st    = s->streams[0];
3066     AVCodecParameters *video_par = s->streams[0]->codecpar;
3067     AVCodecParameters *audio_par = s->streams[1]->codecpar;
3068     int audio_rate = audio_par->sample_rate;
3069     // TODO: should be avg_frame_rate
3070     int frame_rate = ((video_st->time_base.den) * (0x10000)) / (video_st->time_base.num);
3071     int audio_kbitrate = audio_par->bit_rate / 1000;
3072     int video_kbitrate = FFMIN(video_par->bit_rate / 1000, 800 - audio_kbitrate);
3073
3074     avio_wb32(pb, 0x94); /* size */
3075     ffio_wfourcc(pb, "uuid");
3076     ffio_wfourcc(pb, "PROF");
3077
3078     avio_wb32(pb, 0x21d24fce); /* 96 bit UUID */
3079     avio_wb32(pb, 0xbb88695c);
3080     avio_wb32(pb, 0xfac9c740);
3081
3082     avio_wb32(pb, 0x0);  /* ? */
3083     avio_wb32(pb, 0x3);  /* 3 sections ? */
3084
3085     avio_wb32(pb, 0x14); /* size */
3086     ffio_wfourcc(pb, "FPRF");
3087     avio_wb32(pb, 0x0);  /* ? */
3088     avio_wb32(pb, 0x0);  /* ? */
3089     avio_wb32(pb, 0x0);  /* ? */
3090
3091     avio_wb32(pb, 0x2c);  /* size */
3092     ffio_wfourcc(pb, "APRF"); /* audio */
3093     avio_wb32(pb, 0x0);
3094     avio_wb32(pb, 0x2);   /* TrackID */
3095     ffio_wfourcc(pb, "mp4a");
3096     avio_wb32(pb, 0x20f);
3097     avio_wb32(pb, 0x0);
3098     avio_wb32(pb, audio_kbitrate);
3099     avio_wb32(pb, audio_kbitrate);
3100     avio_wb32(pb, audio_rate);
3101     avio_wb32(pb, audio_par->channels);
3102
3103     avio_wb32(pb, 0x34);  /* size */
3104     ffio_wfourcc(pb, "VPRF");   /* video */
3105     avio_wb32(pb, 0x0);
3106     avio_wb32(pb, 0x1);    /* TrackID */
3107     if (video_par->codec_id == AV_CODEC_ID_H264) {
3108         ffio_wfourcc(pb, "avc1");
3109         avio_wb16(pb, 0x014D);
3110         avio_wb16(pb, 0x0015);
3111     } else {
3112         ffio_wfourcc(pb, "mp4v");
3113         avio_wb16(pb, 0x0000);
3114         avio_wb16(pb, 0x0103);
3115     }
3116     avio_wb32(pb, 0x0);
3117     avio_wb32(pb, video_kbitrate);
3118     avio_wb32(pb, video_kbitrate);
3119     avio_wb32(pb, frame_rate);
3120     avio_wb32(pb, frame_rate);
3121     avio_wb16(pb, video_par->width);
3122     avio_wb16(pb, video_par->height);
3123     avio_wb32(pb, 0x010001); /* ? */
3124 }
3125
3126 static int mov_write_identification(AVIOContext *pb, AVFormatContext *s)
3127 {
3128     MOVMuxContext *mov = s->priv_data;
3129     mov_write_ftyp_tag(pb,s);
3130     if (mov->mode == MODE_PSP) {
3131         if (s->nb_streams != 2) {
3132             av_log(s, AV_LOG_ERROR, "PSP mode need one video and one audio stream\n");
3133             return AVERROR(EINVAL);
3134         }
3135         mov_write_uuidprof_tag(pb, s);
3136     }
3137     return 0;
3138 }
3139
3140 static int mov_parse_mpeg2_frame(AVPacket *pkt, uint32_t *flags)
3141 {
3142     uint32_t c = -1;
3143     int i, closed_gop = 0;
3144
3145     for (i = 0; i < pkt->size - 4; i++) {
3146         c = (c << 8) + pkt->data[i];
3147         if (c == 0x1b8) { // gop
3148             closed_gop = pkt->data[i + 4] >> 6 & 0x01;
3149         } else if (c == 0x100) { // pic
3150             int temp_ref = (pkt->data[i + 1] << 2) | (pkt->data[i + 2] >> 6);
3151             if (!temp_ref || closed_gop) // I picture is not reordered
3152                 *flags = MOV_SYNC_SAMPLE;
3153             else
3154                 *flags = MOV_PARTIAL_SYNC_SAMPLE;
3155             break;
3156         }
3157     }
3158     return 0;
3159 }
3160
3161 static void mov_parse_vc1_frame(AVPacket *pkt, MOVTrack *trk)
3162 {
3163     const uint8_t *start, *next, *end = pkt->data + pkt->size;
3164     int seq = 0, entry = 0;
3165     int key = pkt->flags & AV_PKT_FLAG_KEY;
3166     start = find_next_marker(pkt->data, end);
3167     for (next = start; next < end; start = next) {
3168         next = find_next_marker(start + 4, end);
3169         switch (AV_RB32(start)) {
3170         case VC1_CODE_SEQHDR:
3171             seq = 1;
3172             break;
3173         case VC1_CODE_ENTRYPOINT:
3174             entry = 1;
3175             break;
3176         case VC1_CODE_SLICE:
3177             trk->vc1_info.slices = 1;
3178             break;
3179         }
3180     }
3181     if (!trk->entry && trk->vc1_info.first_packet_seen)
3182         trk->vc1_info.first_frag_written = 1;
3183     if (!trk->entry && !trk->vc1_info.first_frag_written) {
3184         /* First packet in first fragment */
3185         trk->vc1_info.first_packet_seq   = seq;
3186         trk->vc1_info.first_packet_entry = entry;
3187         trk->vc1_info.first_packet_seen  = 1;
3188     } else if ((seq && !trk->vc1_info.packet_seq) ||
3189                (entry && !trk->vc1_info.packet_entry)) {
3190         int i;
3191         for (i = 0; i < trk->entry; i++)
3192             trk->cluster[i].flags &= ~MOV_SYNC_SAMPLE;
3193         trk->has_keyframes = 0;
3194         if (seq)
3195             trk->vc1_info.packet_seq = 1;
3196         if (entry)
3197             trk->vc1_info.packet_entry = 1;
3198         if (!trk->vc1_info.first_frag_written) {
3199             /* First fragment */
3200             if ((!seq   || trk->vc1_info.first_packet_seq) &&
3201                 (!entry || trk->vc1_info.first_packet_entry)) {
3202                 /* First packet had the same headers as this one, readd the
3203                  * sync sample flag. */
3204                 trk->cluster[0].flags |= MOV_SYNC_SAMPLE;
3205                 trk->has_keyframes = 1;
3206             }
3207         }
3208     }
3209     if (trk->vc1_info.packet_seq && trk->vc1_info.packet_entry)
3210         key = seq && entry;
3211     else if (trk->vc1_info.packet_seq)
3212         key = seq;
3213     else if (trk->vc1_info.packet_entry)
3214         key = entry;
3215     if (key) {
3216         trk->cluster[trk->entry].flags |= MOV_SYNC_SAMPLE;
3217         trk->has_keyframes++;
3218     }
3219 }
3220
3221 static int mov_flush_fragment_interleaving(AVFormatContext *s, MOVTrack *track)
3222 {
3223     MOVMuxContext *mov = s->priv_data;
3224     int ret, buf_size;
3225     uint8_t *buf;
3226     int i, offset;
3227
3228     if (!track->mdat_buf)
3229         return 0;
3230     if (!mov->mdat_buf) {
3231         if ((ret = avio_open_dyn_buf(&mov->mdat_buf)) < 0)
3232             return ret;
3233     }
3234     buf_size = avio_close_dyn_buf(track->mdat_buf, &buf);
3235     track->mdat_buf = NULL;
3236
3237     offset = avio_tell(mov->mdat_buf);
3238     avio_write(mov->mdat_buf, buf, buf_size);
3239     av_free(buf);
3240
3241     for (i = track->entries_flushed; i < track->entry; i++)
3242         track->cluster[i].pos += offset;
3243     track->entries_flushed = track->entry;
3244     return 0;
3245 }
3246
3247 static int mov_flush_fragment(AVFormatContext *s, int force)
3248 {
3249     MOVMuxContext *mov = s->priv_data;
3250     int i, first_track = -1;
3251     int64_t mdat_size = 0;
3252     int has_video = 0, starts_with_key = 0, first_video_track = 1;
3253
3254     if (!(mov->flags & FF_MOV_FLAG_FRAGMENT))
3255         return 0;
3256
3257     // Try to fill in the duration of the last packet in each stream
3258     // from queued packets in the interleave queues. If the flushing
3259     // of fragments was triggered automatically by an AVPacket, we
3260     // already have reliable info for the end of that track, but other
3261     // tracks may need to be filled in.
3262     for (i = 0; i < s->nb_streams; i++) {
3263         MOVTrack *track = &mov->tracks[i];
3264         if (!track->end_reliable) {
3265             const AVPacket *next = ff_interleaved_peek(s, i);
3266             if (next) {
3267                 track->track_duration = next->dts - track->start_dts;
3268                 if (next->pts != AV_NOPTS_VALUE)
3269                     track->end_pts = next->pts;
3270                 else
3271                     track->end_pts = next->dts;
3272             }
3273         }
3274     }
3275
3276     for (i = 0; i < mov->nb_streams; i++) {
3277         MOVTrack *track = &mov->tracks[i];
3278         if (track->entry <= 1)
3279             continue;
3280         // Sample durations are calculated as the diff of dts values,
3281         // but for the last sample in a fragment, we don't know the dts
3282         // of the first sample in the next fragment, so we have to rely
3283         // on what was set as duration in the AVPacket. Not all callers
3284         // set this though, so we might want to replace it with an
3285         // estimate if it currently is zero.
3286         if (get_cluster_duration(track, track->entry - 1) != 0)
3287             continue;
3288         // Use the duration (i.e. dts diff) of the second last sample for
3289         // the last one. This is a wild guess (and fatal if it turns out
3290         // to be too long), but probably the best we can do - having a zero
3291         // duration is bad as well.
3292         track->track_duration += get_cluster_duration(track, track->entry - 2);
3293         track->end_pts        += get_cluster_duration(track, track->entry - 2);
3294         if (!mov->missing_duration_warned) {
3295             av_log(s, AV_LOG_WARNING,
3296                    "Estimating the duration of the last packet in a "
3297                    "fragment, consider setting the duration field in "
3298                    "AVPacket instead.\n");
3299             mov->missing_duration_warned = 1;
3300         }
3301     }
3302
3303     if (!mov->moov_written) {
3304         int64_t pos = avio_tell(s->pb);
3305         int ret;
3306         AVIOContext *moov_buf;
3307         uint8_t *buf;
3308         int buf_size;
3309
3310         for (i = 0; i < mov->nb_streams; i++)
3311             if (!mov->tracks[i].entry)
3312                 break;
3313         /* Don't write the initial moov unless all tracks have data */
3314         if (i < mov->nb_streams && !force)
3315             return 0;
3316
3317         if ((ret = ffio_open_null_buf(&moov_buf)) < 0)
3318             return ret;
3319         mov_write_moov_tag(moov_buf, mov, s);
3320         buf_size = ffio_close_null_buf(moov_buf);
3321         for (i = 0; i < mov->nb_streams; i++)
3322             mov->tracks[i].data_offset = pos + buf_size + 8;
3323
3324         avio_write_marker(s->pb, AV_NOPTS_VALUE, AVIO_DATA_MARKER_HEADER);
3325         if (mov->flags & FF_MOV_FLAG_DELAY_MOOV)
3326             mov_write_identification(s->pb, s);
3327         mov_write_moov_tag(s->pb, mov, s);
3328
3329         if (mov->flags & FF_MOV_FLAG_DELAY_MOOV) {
3330             if (mov->flags & FF_MOV_FLAG_GLOBAL_SIDX)
3331                 mov->reserved_header_pos = avio_tell(s->pb);
3332             avio_flush(s->pb);
3333             mov->moov_written = 1;
3334             return 0;
3335         }
3336
3337         buf_size = avio_close_dyn_buf(mov->mdat_buf, &buf);
3338         mov->mdat_buf = NULL;
3339         avio_wb32(s->pb, buf_size + 8);
3340         ffio_wfourcc(s->pb, "mdat");
3341         avio_write(s->pb, buf, buf_size);
3342         av_free(buf);
3343
3344         if (mov->flags & FF_MOV_FLAG_GLOBAL_SIDX)
3345             mov->reserved_header_pos = avio_tell(s->pb);
3346
3347         mov->moov_written = 1;
3348         mov->mdat_size = 0;
3349         for (i = 0; i < mov->nb_streams; i++) {
3350             if (mov->tracks[i].entry)
3351                 mov->tracks[i].frag_start += mov->tracks[i].start_dts +
3352                                              mov->tracks[i].track_duration -
3353                                              mov->tracks[i].cluster[0].dts;
3354             mov->tracks[i].entry = 0;
3355             mov->tracks[i].end_reliable = 0;
3356         }
3357         avio_flush(s->pb);
3358         return 0;
3359     }
3360
3361     if (mov->frag_interleave) {
3362         for (i = 0; i < mov->nb_streams; i++) {
3363             MOVTrack *track = &mov->tracks[i];
3364             int ret;
3365             if ((ret = mov_flush_fragment_interleaving(s, track)) < 0)
3366                 return ret;
3367         }
3368
3369         if (!mov->mdat_buf)
3370             return 0;
3371         mdat_size = avio_tell(mov->mdat_buf);
3372     }
3373
3374     for (i = 0; i < mov->nb_streams; i++) {
3375         MOVTrack *track = &mov->tracks[i];
3376         if (mov->flags & FF_MOV_FLAG_SEPARATE_MOOF || mov->frag_interleave)
3377             track->data_offset = 0;
3378         else
3379             track->data_offset = mdat_size;
3380         if (track->par->codec_type == AVMEDIA_TYPE_VIDEO) {
3381             has_video = 1;
3382             if (first_video_track) {
3383                 if (track->entry)
3384                     starts_with_key = track->cluster[0].flags & MOV_SYNC_SAMPLE;
3385                 first_video_track = 0;
3386             }
3387         }
3388         if (!track->entry)
3389             continue;
3390         if (track->mdat_buf)
3391             mdat_size += avio_tell(track->mdat_buf);
3392         if (first_track < 0)
3393             first_track = i;
3394     }
3395
3396     if (!mdat_size)
3397         return 0;
3398
3399     avio_write_marker(s->pb,
3400                       av_rescale(mov->tracks[first_track].cluster[0].dts, AV_TIME_BASE, mov->tracks[first_track].timescale),
3401                       (has_video ? starts_with_key : mov->tracks[first_track].cluster[0].flags & MOV_SYNC_SAMPLE) ? AVIO_DATA_MARKER_SYNC_POINT : AVIO_DATA_MARKER_BOUNDARY_POINT);
3402
3403     for (i = 0; i < mov->nb_streams; i++) {
3404         MOVTrack *track = &mov->tracks[i];
3405         int buf_size, write_moof = 1, moof_tracks = -1;
3406         uint8_t *buf;
3407         int64_t duration = 0;
3408
3409         if (track->entry)
3410             duration = track->start_dts + track->track_duration -
3411                        track->cluster[0].dts;
3412         if (mov->flags & FF_MOV_FLAG_SEPARATE_MOOF) {
3413             if (!track->mdat_buf)
3414                 continue;
3415             mdat_size = avio_tell(track->mdat_buf);
3416             moof_tracks = i;
3417         } else {
3418             write_moof = i == first_track;
3419         }
3420
3421         if (write_moof) {
3422             avio_flush(s->pb);
3423
3424             mov_write_moof_tag(s->pb, mov, moof_tracks, mdat_size);
3425             mov->fragments++;
3426
3427             avio_wb32(s->pb, mdat_size + 8);
3428             ffio_wfourcc(s->pb, "mdat");
3429         }
3430
3431         if (track->entry)
3432             track->frag_start += duration;
3433         track->entry = 0;
3434         track->entries_flushed = 0;
3435         track->end_reliable = 0;
3436         if (!mov->frag_interleave) {
3437             if (!track->mdat_buf)
3438                 continue;
3439             buf_size = avio_close_dyn_buf(track->mdat_buf, &buf);
3440             track->mdat_buf = NULL;
3441         } else {
3442             if (!mov->mdat_buf)
3443                 continue;
3444             buf_size = avio_close_dyn_buf(mov->mdat_buf, &buf);
3445             mov->mdat_buf = NULL;
3446         }
3447
3448         avio_write(s->pb, buf, buf_size);
3449         av_free(buf);
3450     }
3451
3452     mov->mdat_size = 0;
3453
3454     avio_flush(s->pb);
3455     return 0;
3456 }
3457
3458 static int mov_auto_flush_fragment(AVFormatContext *s, int force)
3459 {
3460     MOVMuxContext *mov = s->priv_data;
3461     int had_moov = mov->moov_written;
3462     int ret = mov_flush_fragment(s, force);
3463     if (ret < 0)
3464         return ret;
3465     // If using delay_moov, the first flush only wrote the moov,
3466     // not the actual moof+mdat pair, thus flush once again.
3467     if (!had_moov && mov->flags & FF_MOV_FLAG_DELAY_MOOV)
3468         ret = mov_flush_fragment(s, force);
3469     return ret;
3470 }
3471
3472 int ff_mov_write_packet(AVFormatContext *s, AVPacket *pkt)
3473 {
3474     MOVMuxContext *mov = s->priv_data;
3475     AVIOContext *pb = s->pb;
3476     MOVTrack *trk = &mov->tracks[pkt->stream_index];
3477     AVCodecParameters *par = trk->par;
3478     unsigned int samples_in_chunk = 0;
3479     int size = pkt->size, ret = 0;
3480     uint8_t *reformatted_data = NULL;
3481
3482     if (mov->flags & FF_MOV_FLAG_FRAGMENT) {
3483         int ret;
3484         if (mov->moov_written || mov->flags & FF_MOV_FLAG_EMPTY_MOOV) {
3485             if (mov->frag_interleave && mov->fragments > 0) {
3486                 if (trk->entry - trk->entries_flushed >= mov->frag_interleave) {
3487                     if ((ret = mov_flush_fragment_interleaving(s, trk)) < 0)
3488                         return ret;
3489                 }
3490             }
3491
3492             if (!trk->mdat_buf) {
3493                 if ((ret = avio_open_dyn_buf(&trk->mdat_buf)) < 0)
3494                     return ret;
3495             }
3496             pb = trk->mdat_buf;
3497         } else {
3498             if (!mov->mdat_buf) {
3499                 if ((ret = avio_open_dyn_buf(&mov->mdat_buf)) < 0)
3500                     return ret;
3501             }
3502             pb = mov->mdat_buf;
3503         }
3504     }
3505
3506     if (par->codec_id == AV_CODEC_ID_AMR_NB) {
3507         /* We must find out how many AMR blocks there are in one packet */
3508         static uint16_t packed_size[16] =
3509             {13, 14, 16, 18, 20, 21, 27, 32, 6, 0, 0, 0, 0, 0, 0, 1};
3510         int len = 0;
3511
3512         while (len < size && samples_in_chunk < 100) {
3513             len += packed_size[(pkt->data[len] >> 3) & 0x0F];
3514             samples_in_chunk++;
3515         }
3516         if (samples_in_chunk > 1) {
3517             av_log(s, AV_LOG_ERROR, "fatal error, input is not a single packet, implement a AVParser for it\n");
3518             return -1;
3519         }
3520     } else if (trk->sample_size)
3521         samples_in_chunk = size / trk->sample_size;
3522     else
3523         samples_in_chunk = 1;
3524
3525     /* copy extradata if it exists */
3526     if (trk->vos_len == 0 && par->extradata_size > 0) {
3527         trk->vos_len  = par->extradata_size;
3528         trk->vos_data = av_malloc(trk->vos_len);
3529         if (!trk->vos_data) {
3530             ret = AVERROR(ENOMEM);
3531             goto err;
3532         }
3533         memcpy(trk->vos_data, par->extradata, trk->vos_len);
3534     }
3535
3536     if (par->codec_id == AV_CODEC_ID_H264 && trk->vos_len > 0 && *(uint8_t *)trk->vos_data != 1) {
3537         /* from x264 or from bytestream H.264 */
3538         /* NAL reformatting needed */
3539         if (trk->hint_track >= 0 && trk->hint_track < mov->nb_streams) {
3540             ff_avc_parse_nal_units_buf(pkt->data, &reformatted_data,
3541                                        &size);
3542             avio_write(pb, reformatted_data, size);
3543         } else {
3544             size = ff_avc_parse_nal_units(pb, pkt->data, pkt->size);
3545         }
3546     } else if (par->codec_id == AV_CODEC_ID_HEVC && trk->vos_len > 6 &&
3547                (AV_RB24(trk->vos_data) == 1 || AV_RB32(trk->vos_data) == 1)) {
3548         /* extradata is Annex B, assume the bitstream is too and convert it */
3549         if (trk->hint_track >= 0 && trk->hint_track < mov->nb_streams) {
3550             ff_hevc_annexb2mp4_buf(pkt->data, &reformatted_data, &size, 0, NULL);
3551             avio_write(pb, reformatted_data, size);
3552         } else {
3553             size = ff_hevc_annexb2mp4(pb, pkt->data, pkt->size, 0, NULL);
3554         }
3555     } else {
3556         avio_write(pb, pkt->data, size);
3557     }
3558
3559     if ((par->codec_id == AV_CODEC_ID_DNXHD ||
3560          par->codec_id == AV_CODEC_ID_AC3) && !trk->vos_len) {
3561         /* copy frame to create needed atoms */
3562         trk->vos_len  = size;
3563         trk->vos_data = av_malloc(size);
3564         if (!trk->vos_data) {
3565             ret = AVERROR(ENOMEM);
3566             goto err;
3567         }
3568         memcpy(trk->vos_data, pkt->data, size);
3569     }
3570
3571     if (trk->entry >= trk->cluster_capacity) {
3572         unsigned new_capacity = 2 * (trk->entry + MOV_INDEX_CLUSTER_SIZE);
3573         if (av_reallocp_array(&trk->cluster, new_capacity,
3574                               sizeof(*trk->cluster))) {
3575             ret = AVERROR(ENOMEM);
3576             goto err;
3577         }
3578         trk->cluster_capacity = new_capacity;
3579     }
3580
3581     trk->cluster[trk->entry].pos              = avio_tell(pb) - size;
3582     trk->cluster[trk->entry].samples_in_chunk = samples_in_chunk;
3583     trk->cluster[trk->entry].size             = size;
3584     trk->cluster[trk->entry].entries          = samples_in_chunk;
3585     trk->cluster[trk->entry].dts              = pkt->dts;
3586     if (!trk->entry && trk->start_dts != AV_NOPTS_VALUE) {
3587         if (!trk->frag_discont) {
3588             /* First packet of a new fragment. We already wrote the duration
3589              * of the last packet of the previous fragment based on track_duration,
3590              * which might not exactly match our dts. Therefore adjust the dts
3591              * of this packet to be what the previous packets duration implies. */
3592             trk->cluster[trk->entry].dts = trk->start_dts + trk->track_duration;
3593             /* We also may have written the pts and the corresponding duration
3594              * in sidx/tfrf/tfxd tags; make sure the sidx pts and duration match up with
3595              * the next fragment. This means the cts of the first sample must
3596              * be the same in all fragments, unless end_pts was updated by
3597              * the packet causing the fragment to be written. */
3598             if ((mov->flags & FF_MOV_FLAG_DASH && !(mov->flags & FF_MOV_FLAG_GLOBAL_SIDX)) ||
3599                 mov->mode == MODE_ISM)
3600                 pkt->pts = pkt->dts + trk->end_pts - trk->cluster[trk->entry].dts;
3601         } else {
3602             /* New fragment, but discontinuous from previous fragments.
3603              * Pretend the duration sum of the earlier fragments is
3604              * pkt->dts - trk->start_dts. */
3605             trk->frag_start = pkt->dts - trk->start_dts;
3606             trk->end_pts = AV_NOPTS_VALUE;
3607             trk->frag_discont = 0;
3608         }
3609     }
3610     if (!trk->entry && trk->start_dts == AV_NOPTS_VALUE && !mov->use_editlist &&
3611         s->avoid_negative_ts == AVFMT_AVOID_NEG_TS_MAKE_ZERO) {
3612         /* Not using edit lists and shifting the first track to start from zero.
3613          * If the other streams start from a later timestamp, we won't be able
3614          * to signal the difference in starting time without an edit list.
3615          * Thus move the timestamp for this first sample to 0, increasing
3616          * its duration instead. */
3617         trk->cluster[trk->entry].dts = trk->start_dts = 0;
3618     }
3619     if (trk->start_dts == AV_NOPTS_VALUE) {
3620         trk->start_dts = pkt->dts;
3621         if (trk->frag_discont) {
3622             if (mov->use_editlist) {
3623                 /* Pretend the whole stream started at pts=0, with earlier fragments
3624                  * already written. If the stream started at pts=0, the duration sum
3625                  * of earlier fragments would have been pkt->pts. */
3626                 trk->frag_start = pkt->pts;
3627                 trk->start_dts  = pkt->dts - pkt->pts;
3628             } else {
3629                 /* Pretend the whole stream started at dts=0, with earlier fragments
3630                  * already written, with a duration summing up to pkt->dts. */
3631                 trk->frag_start = pkt->dts;
3632                 trk->start_dts  = 0;
3633             }
3634             trk->frag_discont = 0;
3635         } else if (pkt->dts && mov->moov_written)
3636             av_log(s, AV_LOG_WARNING,
3637                    "Track %d starts with a nonzero dts %"PRId64", while the moov "
3638                    "already has been written. Set the delay_moov flag to handle "
3639                    "this case.\n",
3640                    pkt->stream_index, pkt->dts);
3641     }
3642     trk->track_duration = pkt->dts - trk->start_dts + pkt->duration;
3643
3644     if (pkt->pts == AV_NOPTS_VALUE) {
3645         av_log(s, AV_LOG_WARNING, "pts has no value\n");
3646         pkt->pts = pkt->dts;
3647     }
3648     if (pkt->dts != pkt->pts)
3649         trk->flags |= MOV_TRACK_CTTS;
3650     trk->cluster[trk->entry].cts   = pkt->pts - pkt->dts;
3651     trk->cluster[trk->entry].flags = 0;
3652     if (trk->start_cts == AV_NOPTS_VALUE)
3653         trk->start_cts = pkt->pts - pkt->dts;
3654     if (trk->end_pts == AV_NOPTS_VALUE)
3655         trk->end_pts = trk->cluster[trk->entry].dts +
3656                        trk->cluster[trk->entry].cts + pkt->duration;
3657     else
3658         trk->end_pts = FFMAX(trk->end_pts, trk->cluster[trk->entry].dts +
3659                                            trk->cluster[trk->entry].cts +
3660                                            pkt->duration);
3661
3662     if (par->codec_id == AV_CODEC_ID_VC1) {
3663         mov_parse_vc1_frame(pkt, trk);
3664     } else if (pkt->flags & AV_PKT_FLAG_KEY) {
3665         if (mov->mode == MODE_MOV && par->codec_id == AV_CODEC_ID_MPEG2VIDEO &&
3666             trk->entry > 0) { // force sync sample for the first key frame
3667             mov_parse_mpeg2_frame(pkt, &trk->cluster[trk->entry].flags);
3668             if (trk->cluster[trk->entry].flags & MOV_PARTIAL_SYNC_SAMPLE)
3669                 trk->flags |= MOV_TRACK_STPS;
3670         } else {
3671             trk->cluster[trk->entry].flags = MOV_SYNC_SAMPLE;
3672         }
3673         if (trk->cluster[trk->entry].flags & MOV_SYNC_SAMPLE)
3674             trk->has_keyframes++;
3675     }
3676     trk->entry++;
3677     trk->sample_count += samples_in_chunk;
3678     mov->mdat_size    += size;
3679
3680     if (trk->hint_track >= 0 && trk->hint_track < mov->nb_streams)
3681         ff_mov_add_hinted_packet(s, pkt, trk->hint_track, trk->entry,
3682                                  reformatted_data, size);
3683
3684 err:
3685     av_free(reformatted_data);
3686     return ret;
3687 }
3688
3689 static int mov_write_packet(AVFormatContext *s, AVPacket *pkt)
3690 {
3691     if (!pkt) {
3692         mov_flush_fragment(s, 1);
3693         return 1;
3694     } else {
3695         MOVMuxContext *mov = s->priv_data;
3696         MOVTrack *trk = &mov->tracks[pkt->stream_index];
3697         AVCodecParameters *par = trk->par;
3698         int64_t frag_duration = 0;
3699         int size = pkt->size;
3700
3701         if (mov->flags & FF_MOV_FLAG_FRAG_DISCONT) {
3702             int i;
3703             for (i = 0; i < s->nb_streams; i++)
3704                 mov->tracks[i].frag_discont = 1;
3705             mov->flags &= ~FF_MOV_FLAG_FRAG_DISCONT;
3706         }
3707
3708         if (!pkt->size) {
3709             if (trk->start_dts == AV_NOPTS_VALUE && trk->frag_discont) {
3710                 trk->start_dts = pkt->dts;
3711                 if (pkt->pts != AV_NOPTS_VALUE)
3712                     trk->start_cts = pkt->pts - pkt->dts;
3713                 else
3714                     trk->start_cts = 0;
3715             }
3716
3717             return 0;             /* Discard 0 sized packets */
3718         }
3719
3720         if (trk->entry)
3721             frag_duration = av_rescale_q(pkt->dts - trk->cluster[0].dts,
3722                                          s->streams[pkt->stream_index]->time_base,
3723                                          AV_TIME_BASE_Q);
3724         if ((mov->max_fragment_duration &&
3725              frag_duration >= mov->max_fragment_duration) ||
3726              (mov->max_fragment_size && mov->mdat_size + size >= mov->max_fragment_size) ||
3727              (mov->flags & FF_MOV_FLAG_FRAG_KEYFRAME &&
3728               par->codec_type == AVMEDIA_TYPE_VIDEO &&
3729               trk->entry && pkt->flags & AV_PKT_FLAG_KEY)) {
3730             if (frag_duration >= mov->min_fragment_duration) {
3731                 // Set the duration of this track to line up with the next
3732                 // sample in this track. This avoids relying on AVPacket
3733                 // duration, but only helps for this particular track, not
3734                 // for the other ones that are flushed at the same time.
3735                 trk->track_duration = pkt->dts - trk->start_dts;
3736                 if (pkt->pts != AV_NOPTS_VALUE)
3737                     trk->end_pts = pkt->pts;
3738                 else
3739                     trk->end_pts = pkt->dts;
3740                 trk->end_reliable = 1;
3741                 mov_auto_flush_fragment(s, 0);
3742             }
3743         }
3744
3745         return ff_mov_write_packet(s, pkt);
3746     }
3747 }
3748
3749 // QuickTime chapters involve an additional text track with the chapter names
3750 // as samples, and a tref pointing from the other tracks to the chapter one.
3751 static int mov_create_chapter_track(AVFormatContext *s, int tracknum)
3752 {
3753     MOVMuxContext *mov = s->priv_data;
3754     MOVTrack *track = &mov->tracks[tracknum];
3755     AVPacket pkt = { .stream_index = tracknum, .flags = AV_PKT_FLAG_KEY };
3756     int i, len;
3757     // These properties are required to make QT recognize the chapter track
3758     uint8_t chapter_properties[43] = { 0, 0, 0, 0, 0, 0, 0, 1, };
3759
3760     track->mode = mov->mode;
3761     track->tag = MKTAG('t','e','x','t');
3762     track->timescale = MOV_TIMESCALE;
3763     track->par = avcodec_parameters_alloc();
3764     if (!track->par)
3765         return AVERROR(ENOMEM);
3766     track->par->codec_type = AVMEDIA_TYPE_SUBTITLE;
3767     track->par->extradata = av_malloc(sizeof(chapter_properties));
3768     if (!track->par->extradata)
3769         return AVERROR(ENOMEM);
3770     track->par->extradata_size = sizeof(chapter_properties);
3771     memcpy(track->par->extradata, chapter_properties, sizeof(chapter_properties));
3772
3773     for (i = 0; i < s->nb_chapters; i++) {
3774         AVChapter *c = s->chapters[i];
3775         AVDictionaryEntry *t;
3776
3777         int64_t end = av_rescale_q(c->end, c->time_base, (AVRational){1,MOV_TIMESCALE});
3778         pkt.pts = pkt.dts = av_rescale_q(c->start, c->time_base, (AVRational){1,MOV_TIMESCALE});
3779         pkt.duration = end - pkt.dts;
3780
3781         if ((t = av_dict_get(c->metadata, "title", NULL, 0))) {
3782             static const char encd[12] = {
3783                 0x00, 0x00, 0x00, 0x0C,
3784                 'e',  'n',  'c',  'd',
3785                 0x00, 0x00, 0x01, 0x00 };
3786             len      = strlen(t->value);
3787             pkt.size = len + 2 + 12;
3788             pkt.data = av_malloc(pkt.size);
3789             if (!pkt.data)
3790                 return AVERROR(ENOMEM);
3791             AV_WB16(pkt.data, len);
3792             memcpy(pkt.data + 2, t->value, len);
3793             memcpy(pkt.data + len + 2, encd, sizeof(encd));
3794             ff_mov_write_packet(s, &pkt);
3795             av_freep(&pkt.data);
3796         }
3797     }
3798
3799     return 0;
3800 }
3801
3802 /*
3803  * st->disposition controls the "enabled" flag in the tkhd tag.
3804  * QuickTime will not play a track if it is not enabled.  So make sure
3805  * that one track of each type (audio, video, subtitle) is enabled.
3806  *
3807  * Subtitles are special.  For audio and video, setting "enabled" also
3808  * makes the track "default" (i.e. it is rendered when played). For
3809  * subtitles, an "enabled" subtitle is not rendered by default, but
3810  * if no subtitle is enabled, the subtitle menu in QuickTime will be
3811  * empty!
3812  */
3813 static void enable_tracks(AVFormatContext *s)
3814 {
3815     MOVMuxContext *mov = s->priv_data;
3816     int i;
3817     int enabled[AVMEDIA_TYPE_NB];
3818     int first[AVMEDIA_TYPE_NB];
3819
3820     for (i = 0; i < AVMEDIA_TYPE_NB; i++) {
3821         enabled[i] = 0;
3822         first[i] = -1;
3823     }
3824
3825     for (i = 0; i < s->nb_streams; i++) {
3826         AVStream *st = s->streams[i];
3827
3828         if (st->codecpar->codec_type <= AVMEDIA_TYPE_UNKNOWN ||
3829             st->codecpar->codec_type >= AVMEDIA_TYPE_NB)
3830             continue;
3831
3832         if (first[st->codecpar->codec_type] < 0)
3833             first[st->codecpar->codec_type] = i;
3834         if (st->disposition & AV_DISPOSITION_DEFAULT) {
3835             mov->tracks[i].flags |= MOV_TRACK_ENABLED;
3836             enabled[st->codecpar->codec_type]++;
3837         }
3838     }
3839
3840     for (i = 0; i < AVMEDIA_TYPE_NB; i++) {
3841         switch (i) {
3842         case AVMEDIA_TYPE_VIDEO:
3843         case AVMEDIA_TYPE_AUDIO:
3844         case AVMEDIA_TYPE_SUBTITLE:
3845             if (enabled[i] > 1)
3846                 mov->per_stream_grouping = 1;
3847             if (!enabled[i] && first[i] >= 0)
3848                 mov->tracks[first[i]].flags |= MOV_TRACK_ENABLED;
3849             break;
3850         }
3851     }
3852 }
3853
3854 static void mov_free(AVFormatContext *s)
3855 {
3856     MOVMuxContext *mov = s->priv_data;
3857     int i;
3858
3859     if (mov->chapter_track)
3860         avcodec_parameters_free(&mov->tracks[mov->chapter_track].par);
3861
3862     for (i = 0; i < mov->nb_streams; i++) {
3863         if (mov->tracks[i].tag == MKTAG('r','t','p',' '))
3864             ff_mov_close_hinting(&mov->tracks[i]);
3865         av_freep(&mov->tracks[i].cluster);
3866         av_freep(&mov->tracks[i].frag_info);
3867
3868         if (mov->tracks[i].vos_len)
3869             av_free(mov->tracks[i].vos_data);
3870     }
3871
3872     av_freep(&mov->tracks);
3873 }
3874
3875 static uint32_t rgb_to_yuv(uint32_t rgb)
3876 {
3877     uint8_t r, g, b;
3878     int y, cb, cr;
3879
3880     r = (rgb >> 16) & 0xFF;
3881     g = (rgb >>  8) & 0xFF;
3882     b = (rgb      ) & 0xFF;
3883
3884     y  = av_clip_uint8( 16. +  0.257 * r + 0.504 * g + 0.098 * b);
3885     cb = av_clip_uint8(128. -  0.148 * r - 0.291 * g + 0.439 * b);
3886     cr = av_clip_uint8(128. +  0.439 * r - 0.368 * g - 0.071 * b);
3887
3888     return (y << 16) | (cr << 8) | cb;
3889 }
3890
3891 static int mov_create_dvd_sub_decoder_specific_info(MOVTrack *track,
3892                                                     AVStream *st)
3893 {
3894     int i, width = 720, height = 480;
3895     int have_palette = 0, have_size = 0;
3896     uint32_t palette[16];
3897     char *cur = st->codecpar->extradata;
3898
3899     while (cur && *cur) {
3900         if (strncmp("palette:", cur, 8) == 0) {
3901             int i, count;
3902             count = sscanf(cur + 8,
3903                 "%06"PRIx32", %06"PRIx32", %06"PRIx32", %06"PRIx32", "
3904                 "%06"PRIx32", %06"PRIx32", %06"PRIx32", %06"PRIx32", "
3905                 "%06"PRIx32", %06"PRIx32", %06"PRIx32", %06"PRIx32", "
3906                 "%06"PRIx32", %06"PRIx32", %06"PRIx32", %06"PRIx32"",
3907                 &palette[ 0], &palette[ 1], &palette[ 2], &palette[ 3],
3908                 &palette[ 4], &palette[ 5], &palette[ 6], &palette[ 7],
3909                 &palette[ 8], &palette[ 9], &palette[10], &palette[11],
3910                 &palette[12], &palette[13], &palette[14], &palette[15]);
3911
3912             for (i = 0; i < count; i++) {
3913                 palette[i] = rgb_to_yuv(palette[i]);
3914             }
3915             have_palette = 1;
3916         } else if (!strncmp("size:", cur, 5)) {
3917             sscanf(cur + 5, "%dx%d", &width, &height);
3918             have_size = 1;
3919         }
3920         if (have_palette && have_size)
3921             break;
3922         cur += strcspn(cur, "\n\r");
3923         cur += strspn(cur, "\n\r");
3924     }
3925     if (have_palette) {
3926         track->vos_data = av_malloc(16*4);
3927         if (!track->vos_data)
3928             return AVERROR(ENOMEM);
3929         for (i = 0; i < 16; i++) {
3930             AV_WB32(track->vos_data + i * 4, palette[i]);
3931         }
3932         track->vos_len = 16 * 4;
3933     }
3934     st->codecpar->width = width;
3935     st->codecpar->height = track->height = height;
3936
3937     return 0;
3938 }
3939
3940 static int mov_write_header(AVFormatContext *s)
3941 {
3942     AVIOContext *pb = s->pb;
3943     MOVMuxContext *mov = s->priv_data;
3944     AVDictionaryEntry *t;
3945     int i, ret, hint_track = 0;
3946
3947     mov->fc = s;
3948
3949     /* Default mode == MP4 */
3950     mov->mode = MODE_MP4;
3951
3952     if (s->oformat) {
3953         if (!strcmp("3gp", s->oformat->name)) mov->mode = MODE_3GP;
3954         else if (!strcmp("3g2", s->oformat->name)) mov->mode = MODE_3GP|MODE_3G2;
3955         else if (!strcmp("mov", s->oformat->name)) mov->mode = MODE_MOV;
3956         else if (!strcmp("psp", s->oformat->name)) mov->mode = MODE_PSP;
3957         else if (!strcmp("ipod",s->oformat->name)) mov->mode = MODE_IPOD;
3958         else if (!strcmp("ismv",s->oformat->name)) mov->mode = MODE_ISM;
3959         else if (!strcmp("f4v", s->oformat->name)) mov->mode = MODE_F4V;
3960     }
3961
3962     if (mov->flags & FF_MOV_FLAG_DELAY_MOOV)
3963         mov->flags |= FF_MOV_FLAG_EMPTY_MOOV;
3964
3965     /* Set the FRAGMENT flag if any of the fragmentation methods are
3966      * enabled. */
3967     if (mov->max_fragment_duration || mov->max_fragment_size ||
3968         mov->flags & (FF_MOV_FLAG_EMPTY_MOOV |
3969                       FF_MOV_FLAG_FRAG_KEYFRAME |
3970                       FF_MOV_FLAG_FRAG_CUSTOM))
3971         mov->flags |= FF_MOV_FLAG_FRAGMENT;
3972
3973     /* Set other implicit flags immediately */
3974     if (mov->mode == MODE_ISM)
3975         mov->flags |= FF_MOV_FLAG_EMPTY_MOOV | FF_MOV_FLAG_SEPARATE_MOOF |
3976                       FF_MOV_FLAG_FRAGMENT;
3977     if (mov->flags & FF_MOV_FLAG_DASH)
3978         mov->flags |= FF_MOV_FLAG_FRAGMENT | FF_MOV_FLAG_EMPTY_MOOV |
3979                       FF_MOV_FLAG_DEFAULT_BASE_MOOF;
3980
3981     if (mov->use_editlist < 0) {
3982         mov->use_editlist = 1;
3983         if (mov->flags & FF_MOV_FLAG_FRAGMENT &&
3984             !(mov->flags & FF_MOV_FLAG_DELAY_MOOV)) {
3985             // If we can avoid needing an edit list by shifting the
3986             // tracks, prefer that over (trying to) write edit lists
3987             // in fragmented output.
3988             if (s->avoid_negative_ts == AVFMT_AVOID_NEG_TS_AUTO ||
3989                 s->avoid_negative_ts == AVFMT_AVOID_NEG_TS_MAKE_ZERO)
3990                 mov->use_editlist = 0;
3991         }
3992     }
3993     if (mov->flags & FF_MOV_FLAG_EMPTY_MOOV &&
3994         !(mov->flags & FF_MOV_FLAG_DELAY_MOOV) && mov->use_editlist)
3995         av_log(s, AV_LOG_WARNING, "No meaningful edit list will be written when using empty_moov without delay_moov\n");
3996
3997     if (!mov->use_editlist && s->avoid_negative_ts == AVFMT_AVOID_NEG_TS_AUTO)
3998         s->avoid_negative_ts = AVFMT_AVOID_NEG_TS_MAKE_ZERO;
3999
4000     /* Clear the omit_tfhd_offset flag if default_base_moof is set;
4001      * if the latter is set that's enough and omit_tfhd_offset doesn't
4002      * add anything extra on top of that. */
4003     if (mov->flags & FF_MOV_FLAG_OMIT_TFHD_OFFSET &&
4004         mov->flags & FF_MOV_FLAG_DEFAULT_BASE_MOOF)
4005         mov->flags &= ~FF_MOV_FLAG_OMIT_TFHD_OFFSET;
4006
4007     if (mov->frag_interleave &&
4008         mov->flags & (FF_MOV_FLAG_OMIT_TFHD_OFFSET | FF_MOV_FLAG_SEPARATE_MOOF)) {
4009         av_log(s, AV_LOG_ERROR,
4010                "Sample interleaving in fragments is mutually exclusive with "
4011                "omit_tfhd_offset and separate_moof\n");
4012         return AVERROR(EINVAL);
4013     }
4014
4015     /* Non-seekable output is ok if using fragmentation. If ism_lookahead
4016      * is enabled, we don't support non-seekable output at all. */
4017     if (!s->pb->seekable &&
4018         (!(mov->flags & FF_MOV_FLAG_FRAGMENT) || mov->ism_lookahead)) {
4019         av_log(s, AV_LOG_ERROR, "muxer does not support non seekable output\n");
4020         return AVERROR(EINVAL);
4021     }
4022
4023
4024     if (!(mov->flags & FF_MOV_FLAG_DELAY_MOOV)) {
4025         if ((ret = mov_write_identification(pb, s)) < 0)
4026             return ret;
4027     }
4028
4029     mov->nb_streams = s->nb_streams;
4030     if (mov->mode & (MODE_MP4|MODE_MOV|MODE_IPOD) && s->nb_chapters)
4031         mov->chapter_track = mov->nb_streams++;
4032
4033     if (mov->flags & FF_MOV_FLAG_RTP_HINT) {
4034         /* Add hint tracks for each audio and video stream */
4035         hint_track = mov->nb_streams;
4036         for (i = 0; i < s->nb_streams; i++) {
4037             AVStream *st = s->streams[i];
4038             if (st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO ||
4039                 st->codecpar->codec_type == AVMEDIA_TYPE_AUDIO) {
4040                 mov->nb_streams++;
4041             }
4042         }
4043     }
4044
4045     // Reserve an extra stream for chapters for the case where chapters
4046     // are written in the trailer
4047     mov->tracks = av_mallocz((mov->nb_streams + 1) * sizeof(*mov->tracks));
4048     if (!mov->tracks)
4049         return AVERROR(ENOMEM);
4050
4051     for (i = 0; i < s->nb_streams; i++) {
4052         AVStream *st= s->streams[i];
4053         MOVTrack *track= &mov->tracks[i];
4054         AVDictionaryEntry *lang = av_dict_get(st->metadata, "language", NULL,0);
4055
4056         track->st  = st;
4057         track->par = st->codecpar;
4058         track->language = ff_mov_iso639_to_lang(lang?lang->value:"und", mov->mode!=MODE_MOV);
4059         if (track->language < 0)
4060             track->language = 0;
4061         track->mode = mov->mode;
4062         track->tag  = mov_find_codec_tag(s, track);
4063         if (!track->tag) {
4064             av_log(s, AV_LOG_ERROR, "track %d: could not find tag, "
4065                    "codec not currently supported in container\n", i);
4066             goto error;
4067         }
4068         /* If hinting of this track is enabled by a later hint track,
4069          * this is updated. */
4070         track->hint_track = -1;
4071         track->start_dts  = AV_NOPTS_VALUE;
4072         track->start_cts  = AV_NOPTS_VALUE;
4073         track->end_pts    = AV_NOPTS_VALUE;
4074         if (st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO) {
4075             if (track->tag == MKTAG('m','x','3','p') || track->tag == MKTAG('m','x','3','n') ||
4076                 track->tag == MKTAG('m','x','4','p') || track->tag == MKTAG('m','x','4','n') ||
4077                 track->tag == MKTAG('m','x','5','p') || track->tag == MKTAG('m','x','5','n')) {
4078                 if (st->codecpar->width != 720 || (st->codecpar->height != 608 && st->codecpar->height != 512)) {
4079                     av_log(s, AV_LOG_ERROR, "D-10/IMX must use 720x608 or 720x512 video resolution\n");
4080                     goto error;
4081                 }
4082                 track->height = track->tag >> 24 == 'n' ? 486 : 576;
4083             }
4084             track->timescale = st->time_base.den;
4085             if (track->mode == MODE_MOV && track->timescale > 100000)
4086                 av_log(s, AV_LOG_WARNING,
4087                        "WARNING codec timebase is very high. If duration is too long,\n"
4088                        "file may not be playable by quicktime. Specify a shorter timebase\n"
4089                        "or choose different container.\n");
4090         } else if (st->codecpar->codec_type == AVMEDIA_TYPE_AUDIO) {
4091             track->timescale = st->codecpar->sample_rate;
4092             /* set sample_size for PCM and ADPCM */
4093             if (av_get_bits_per_sample(st->codecpar->codec_id) ||
4094                 st->codecpar->codec_id == AV_CODEC_ID_ILBC) {
4095                 if (!st->codecpar->block_align) {
4096                     av_log(s, AV_LOG_ERROR, "track %d: codec block align is not set\n", i);
4097                     goto error;
4098                 }
4099                 track->sample_size = st->codecpar->block_align;
4100             }
4101             /* set audio_vbr for compressed audio */
4102             if (av_get_bits_per_sample(st->codecpar->codec_id) < 8) {
4103                 track->audio_vbr = 1;
4104             }
4105             if (track->mode != MODE_MOV &&
4106                 track->par->codec_id == AV_CODEC_ID_MP3 && track->timescale < 16000) {
4107                 av_log(s, AV_LOG_ERROR, "track %d: muxing mp3 at %dhz is not supported\n",
4108                        i, track->par->sample_rate);
4109                 goto error;
4110             }
4111         } else if (st->codecpar->codec_type == AVMEDIA_TYPE_SUBTITLE) {
4112             track->timescale = st->time_base.den;
4113         } else if (st->codecpar->codec_type == AVMEDIA_TYPE_DATA) {
4114             track->timescale = st->time_base.den;
4115         }
4116         if (!track->height)
4117             track->height = st->codecpar->height;
4118         /* The ism specific timescale isn't mandatory, but is assumed by
4119          * some tools, such as mp4split. */
4120         if (mov->mode == MODE_ISM)
4121             track->timescale = 10000000;
4122
4123         avpriv_set_pts_info(st, 64, 1, track->timescale);
4124
4125         /* copy extradata if it exists */
4126         if (st->codecpar->extradata_size) {
4127             if (st->codecpar->codec_id == AV_CODEC_ID_DVD_SUBTITLE)
4128                 mov_create_dvd_sub_decoder_specific_info(track, st);
4129             else {
4130                 track->vos_len  = st->codecpar->extradata_size;
4131                 track->vos_data = av_malloc(track->vos_len);
4132                 if (!track->vos_data)
4133                     goto error;
4134                 memcpy(track->vos_data, st->codecpar->extradata, track->vos_len);
4135             }
4136         }
4137     }
4138
4139     enable_tracks(s);
4140
4141     if (mov->flags & FF_MOV_FLAG_FRAGMENT) {
4142         /* If no fragmentation options have been set, set a default. */
4143         if (!(mov->flags & (FF_MOV_FLAG_FRAG_KEYFRAME |
4144                             FF_MOV_FLAG_FRAG_CUSTOM)) &&
4145             !mov->max_fragment_duration && !mov->max_fragment_size)
4146             mov->flags |= FF_MOV_FLAG_FRAG_KEYFRAME;
4147     } else {
4148         if (mov->flags & FF_MOV_FLAG_FASTSTART)
4149             mov->reserved_header_pos = avio_tell(pb);
4150         mov_write_mdat_tag(pb, mov);
4151     }
4152
4153     if (t = av_dict_get(s->metadata, "creation_time", NULL, 0))
4154         mov->time = ff_iso8601_to_unix_time(t->value);
4155     if (mov->time)
4156         mov->time += 0x7C25B080; // 1970 based -> 1904 based
4157
4158     if (mov->chapter_track)
4159         if (mov_create_chapter_track(s, mov->chapter_track) < 0)
4160             goto error;
4161
4162     if (mov->flags & FF_MOV_FLAG_RTP_HINT) {
4163         /* Initialize the hint tracks for each audio and video stream */
4164         for (i = 0; i < s->nb_streams; i++) {
4165             AVStream *st = s->streams[i];
4166             if (st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO ||
4167                 st->codecpar->codec_type == AVMEDIA_TYPE_AUDIO) {
4168                 ff_mov_init_hinting(s, hint_track, i);
4169                 hint_track++;
4170             }
4171         }
4172     }
4173
4174     avio_flush(pb);
4175
4176     if (mov->flags & FF_MOV_FLAG_ISML)
4177         mov_write_isml_manifest(pb, mov);
4178
4179     if (mov->flags & FF_MOV_FLAG_EMPTY_MOOV &&
4180         !(mov->flags & FF_MOV_FLAG_DELAY_MOOV)) {
4181         mov_write_moov_tag(pb, mov, s);
4182         avio_flush(pb);
4183         mov->moov_written = 1;
4184         if (mov->flags & FF_MOV_FLAG_GLOBAL_SIDX)
4185             mov->reserved_header_pos = avio_tell(pb);
4186     }
4187
4188     return 0;
4189  error:
4190     mov_free(s);
4191     return -1;
4192 }
4193
4194 static int get_moov_size(AVFormatContext *s)
4195 {
4196     int ret;
4197     AVIOContext *moov_buf;
4198     MOVMuxContext *mov = s->priv_data;
4199
4200     if ((ret = ffio_open_null_buf(&moov_buf)) < 0)
4201         return ret;
4202     mov_write_moov_tag(moov_buf, mov, s);
4203     return ffio_close_null_buf(moov_buf);
4204 }
4205
4206 static int get_sidx_size(AVFormatContext *s)
4207 {
4208     int ret;
4209     AVIOContext *buf;
4210     MOVMuxContext *mov = s->priv_data;
4211
4212     if ((ret = ffio_open_null_buf(&buf)) < 0)
4213         return ret;
4214     mov_write_sidx_tags(buf, mov, -1, 0);
4215     return ffio_close_null_buf(buf);
4216 }
4217
4218 /*
4219  * This function gets the moov size if moved to the top of the file: the chunk
4220  * offset table can switch between stco (32-bit entries) to co64 (64-bit
4221  * entries) when the moov is moved to the beginning, so the size of the moov
4222  * would change. It also updates the chunk offset tables.
4223  */
4224 static int compute_moov_size(AVFormatContext *s)
4225 {
4226     int i, moov_size, moov_size2;
4227     MOVMuxContext *mov = s->priv_data;
4228
4229     moov_size = get_moov_size(s);
4230     if (moov_size < 0)
4231         return moov_size;
4232
4233     for (i = 0; i < mov->nb_streams; i++)
4234         mov->tracks[i].data_offset += moov_size;
4235
4236     moov_size2 = get_moov_size(s);
4237     if (moov_size2 < 0)
4238         return moov_size2;
4239
4240     /* if the size changed, we just switched from stco to co64 and need to
4241      * update the offsets */
4242     if (moov_size2 != moov_size)
4243         for (i = 0; i < mov->nb_streams; i++)
4244             mov->tracks[i].data_offset += moov_size2 - moov_size;
4245
4246     return moov_size2;
4247 }
4248
4249 static int compute_sidx_size(AVFormatContext *s)
4250 {
4251     int i, sidx_size;
4252     MOVMuxContext *mov = s->priv_data;
4253
4254     sidx_size = get_sidx_size(s);
4255     if (sidx_size < 0)
4256         return sidx_size;
4257
4258     for (i = 0; i < mov->nb_streams; i++)
4259         mov->tracks[i].data_offset += sidx_size;
4260
4261     return sidx_size;
4262 }
4263
4264 static int shift_data(AVFormatContext *s)
4265 {
4266     int ret = 0, moov_size;
4267     MOVMuxContext *mov = s->priv_data;
4268     int64_t pos, pos_end = avio_tell(s->pb);
4269     uint8_t *buf, *read_buf[2];
4270     int read_buf_id = 0;
4271     int read_size[2];
4272     AVIOContext *read_pb;
4273
4274     if (mov->flags & FF_MOV_FLAG_FRAGMENT)
4275         moov_size = compute_sidx_size(s);
4276     else
4277         moov_size = compute_moov_size(s);
4278     if (moov_size < 0)
4279         return moov_size;
4280
4281     buf = av_malloc(moov_size * 2);
4282     if (!buf)
4283         return AVERROR(ENOMEM);
4284     read_buf[0] = buf;
4285     read_buf[1] = buf + moov_size;
4286
4287     /* Shift the data: the AVIO context of the output can only be used for
4288      * writing, so we re-open the same output, but for reading. It also avoids
4289      * a read/seek/write/seek back and forth. */
4290     avio_flush(s->pb);
4291     ret = s->io_open(s, &read_pb, s->filename, AVIO_FLAG_READ, NULL);
4292     if (ret < 0) {
4293         av_log(s, AV_LOG_ERROR, "Unable to re-open %s output file for "
4294                "the second pass (faststart)\n", s->filename);
4295         goto end;
4296     }
4297
4298     /* mark the end of the shift to up to the last data we wrote, and get ready
4299      * for writing */
4300     pos_end = avio_tell(s->pb);
4301     avio_seek(s->pb, mov->reserved_header_pos + moov_size, SEEK_SET);
4302
4303     /* start reading at where the new moov will be placed */
4304     avio_seek(read_pb, mov->reserved_header_pos, SEEK_SET);
4305     pos = avio_tell(read_pb);
4306
4307 #define READ_BLOCK do {                                                             \
4308     read_size[read_buf_id] = avio_read(read_pb, read_buf[read_buf_id], moov_size);  \
4309     read_buf_id ^= 1;                                                               \
4310 } while (0)
4311
4312     /* shift data by chunk of at most moov_size */
4313     READ_BLOCK;
4314     do {
4315         int n;
4316         READ_BLOCK;
4317         n = read_size[read_buf_id];
4318         if (n <= 0)
4319             break;
4320         avio_write(s->pb, read_buf[read_buf_id], n);
4321         pos += n;
4322     } while (pos < pos_end);
4323     ff_format_io_close(s, &read_pb);
4324
4325 end:
4326     av_free(buf);
4327     return ret;
4328 }
4329
4330 static int mov_write_trailer(AVFormatContext *s)
4331 {
4332     MOVMuxContext *mov = s->priv_data;
4333     AVIOContext *pb = s->pb;
4334     int res = 0;
4335     int i;
4336     int64_t moov_pos;
4337
4338     // If there were no chapters when the header was written, but there
4339     // are chapters now, write them in the trailer.  This only works
4340     // when we are not doing fragments.
4341     if (!mov->chapter_track && !(mov->flags & FF_MOV_FLAG_FRAGMENT)) {
4342         if (mov->mode & (MODE_MP4|MODE_MOV|MODE_IPOD) && s->nb_chapters) {
4343             mov->chapter_track = mov->nb_streams++;
4344             if ((res = mov_create_chapter_track(s, mov->chapter_track)) < 0)
4345                 goto error;
4346         }
4347     }
4348
4349     if (!(mov->flags & FF_MOV_FLAG_FRAGMENT)) {
4350         moov_pos = avio_tell(pb);
4351
4352         /* Write size of mdat tag */
4353         if (mov->mdat_size + 8 <= UINT32_MAX) {
4354             avio_seek(pb, mov->mdat_pos, SEEK_SET);
4355             avio_wb32(pb, mov->mdat_size + 8);
4356         } else {
4357             /* overwrite 'wide' placeholder atom */
4358             avio_seek(pb, mov->mdat_pos - 8, SEEK_SET);
4359             /* special value: real atom size will be 64 bit value after
4360              * tag field */
4361             avio_wb32(pb, 1);
4362             ffio_wfourcc(pb, "mdat");
4363             avio_wb64(pb, mov->mdat_size + 16);
4364         }
4365         avio_seek(pb, moov_pos, SEEK_SET);
4366
4367         if (mov->flags & FF_MOV_FLAG_FASTSTART) {
4368             av_log(s, AV_LOG_INFO, "Starting second pass: moving the moov atom to the beginning of the file\n");
4369             res = shift_data(s);
4370             if (res == 0) {
4371                 avio_seek(pb, mov->reserved_header_pos, SEEK_SET);
4372                 mov_write_moov_tag(pb, mov, s);
4373             }
4374         } else {
4375             mov_write_moov_tag(pb, mov, s);
4376         }
4377     } else {
4378         mov_auto_flush_fragment(s, 1);
4379         for (i = 0; i < mov->nb_streams; i++)
4380            mov->tracks[i].data_offset = 0;
4381         if (mov->flags & FF_MOV_FLAG_GLOBAL_SIDX) {
4382             av_log(s, AV_LOG_INFO, "Starting second pass: inserting sidx atoms\n");
4383             res = shift_data(s);
4384             if (res == 0) {
4385                 int64_t end = avio_tell(pb);
4386                 avio_seek(pb, mov->reserved_header_pos, SEEK_SET);
4387                 mov_write_sidx_tags(pb, mov, -1, 0);
4388                 avio_seek(pb, end, SEEK_SET);
4389                 avio_write_marker(s->pb, AV_NOPTS_VALUE, AVIO_DATA_MARKER_TRAILER);
4390                 mov_write_mfra_tag(pb, mov);
4391             }
4392         } else {
4393             avio_write_marker(s->pb, AV_NOPTS_VALUE, AVIO_DATA_MARKER_TRAILER);
4394             mov_write_mfra_tag(pb, mov);
4395         }
4396     }
4397
4398 error:
4399     mov_free(s);
4400
4401     return res;
4402 }
4403
4404 #if CONFIG_MOV_MUXER
4405 MOV_CLASS(mov)
4406 AVOutputFormat ff_mov_muxer = {
4407     .name              = "mov",
4408     .long_name         = NULL_IF_CONFIG_SMALL("QuickTime / MOV"),
4409     .extensions        = "mov",
4410     .priv_data_size    = sizeof(MOVMuxContext),
4411     .audio_codec       = AV_CODEC_ID_AAC,
4412     .video_codec       = CONFIG_LIBX264_ENCODER ?
4413                          AV_CODEC_ID_H264 : AV_CODEC_ID_MPEG4,
4414     .write_header      = mov_write_header,
4415     .write_packet      = mov_write_packet,
4416     .write_trailer     = mov_write_trailer,
4417     .flags             = AVFMT_GLOBALHEADER | AVFMT_ALLOW_FLUSH | AVFMT_TS_NEGATIVE,
4418     .codec_tag         = (const AVCodecTag* const []){
4419         ff_codec_movvideo_tags, ff_codec_movaudio_tags, 0
4420     },
4421     .priv_class        = &mov_muxer_class,
4422 };
4423 #endif
4424 #if CONFIG_TGP_MUXER
4425 MOV_CLASS(tgp)
4426 AVOutputFormat ff_tgp_muxer = {
4427     .name              = "3gp",
4428     .long_name         = NULL_IF_CONFIG_SMALL("3GP (3GPP file format)"),
4429     .extensions        = "3gp",
4430     .priv_data_size    = sizeof(MOVMuxContext),
4431     .audio_codec       = AV_CODEC_ID_AMR_NB,
4432     .video_codec       = AV_CODEC_ID_H263,
4433     .write_header      = mov_write_header,
4434     .write_packet      = mov_write_packet,
4435     .write_trailer     = mov_write_trailer,
4436     .flags             = AVFMT_GLOBALHEADER | AVFMT_ALLOW_FLUSH | AVFMT_TS_NEGATIVE,
4437     .codec_tag         = (const AVCodecTag* const []){ codec_3gp_tags, 0 },
4438     .priv_class        = &tgp_muxer_class,
4439 };
4440 #endif
4441 #if CONFIG_MP4_MUXER
4442 MOV_CLASS(mp4)
4443 AVOutputFormat ff_mp4_muxer = {
4444     .name              = "mp4",
4445     .long_name         = NULL_IF_CONFIG_SMALL("MP4 (MPEG-4 Part 14)"),
4446     .mime_type         = "application/mp4",
4447     .extensions        = "mp4",
4448     .priv_data_size    = sizeof(MOVMuxContext),
4449     .audio_codec       = AV_CODEC_ID_AAC,
4450     .video_codec       = CONFIG_LIBX264_ENCODER ?
4451                          AV_CODEC_ID_H264 : AV_CODEC_ID_MPEG4,
4452     .write_header      = mov_write_header,
4453     .write_packet      = mov_write_packet,
4454     .write_trailer     = mov_write_trailer,
4455     .flags             = AVFMT_GLOBALHEADER | AVFMT_ALLOW_FLUSH | AVFMT_TS_NEGATIVE,
4456     .codec_tag         = (const AVCodecTag* const []){ ff_mp4_obj_type, 0 },
4457     .priv_class        = &mp4_muxer_class,
4458 };
4459 #endif
4460 #if CONFIG_PSP_MUXER
4461 MOV_CLASS(psp)
4462 AVOutputFormat ff_psp_muxer = {
4463     .name              = "psp",
4464     .long_name         = NULL_IF_CONFIG_SMALL("PSP MP4 (MPEG-4 Part 14)"),
4465     .extensions        = "mp4,psp",
4466     .priv_data_size    = sizeof(MOVMuxContext),
4467     .audio_codec       = AV_CODEC_ID_AAC,
4468     .video_codec       = CONFIG_LIBX264_ENCODER ?
4469                          AV_CODEC_ID_H264 : AV_CODEC_ID_MPEG4,
4470     .write_header      = mov_write_header,
4471     .write_packet      = mov_write_packet,
4472     .write_trailer     = mov_write_trailer,
4473     .flags             = AVFMT_GLOBALHEADER | AVFMT_ALLOW_FLUSH | AVFMT_TS_NEGATIVE,
4474     .codec_tag         = (const AVCodecTag* const []){ ff_mp4_obj_type, 0 },
4475     .priv_class        = &psp_muxer_class,
4476 };
4477 #endif
4478 #if CONFIG_TG2_MUXER
4479 MOV_CLASS(tg2)
4480 AVOutputFormat ff_tg2_muxer = {
4481     .name              = "3g2",
4482     .long_name         = NULL_IF_CONFIG_SMALL("3GP2 (3GPP2 file format)"),
4483     .extensions        = "3g2",
4484     .priv_data_size    = sizeof(MOVMuxContext),
4485     .audio_codec       = AV_CODEC_ID_AMR_NB,
4486     .video_codec       = AV_CODEC_ID_H263,
4487     .write_header      = mov_write_header,
4488     .write_packet      = mov_write_packet,
4489     .write_trailer     = mov_write_trailer,
4490     .flags             = AVFMT_GLOBALHEADER | AVFMT_ALLOW_FLUSH | AVFMT_TS_NEGATIVE,
4491     .codec_tag         = (const AVCodecTag* const []){ codec_3gp_tags, 0 },
4492     .priv_class        = &tg2_muxer_class,
4493 };
4494 #endif
4495 #if CONFIG_IPOD_MUXER
4496 MOV_CLASS(ipod)
4497 AVOutputFormat ff_ipod_muxer = {
4498     .name              = "ipod",
4499     .long_name         = NULL_IF_CONFIG_SMALL("iPod H.264 MP4 (MPEG-4 Part 14)"),
4500     .mime_type         = "application/mp4",
4501     .extensions        = "m4v,m4a",
4502     .priv_data_size    = sizeof(MOVMuxContext),
4503     .audio_codec       = AV_CODEC_ID_AAC,
4504     .video_codec       = AV_CODEC_ID_H264,
4505     .write_header      = mov_write_header,
4506     .write_packet      = mov_write_packet,
4507     .write_trailer     = mov_write_trailer,
4508     .flags             = AVFMT_GLOBALHEADER | AVFMT_ALLOW_FLUSH | AVFMT_TS_NEGATIVE,
4509     .codec_tag         = (const AVCodecTag* const []){ codec_ipod_tags, 0 },
4510     .priv_class        = &ipod_muxer_class,
4511 };
4512 #endif
4513 #if CONFIG_ISMV_MUXER
4514 MOV_CLASS(ismv)
4515 AVOutputFormat ff_ismv_muxer = {
4516     .name              = "ismv",
4517     .long_name         = NULL_IF_CONFIG_SMALL("ISMV/ISMA (Smooth Streaming)"),
4518     .mime_type         = "application/mp4",
4519     .extensions        = "ismv,isma",
4520     .priv_data_size    = sizeof(MOVMuxContext),
4521     .audio_codec       = AV_CODEC_ID_AAC,
4522     .video_codec       = AV_CODEC_ID_H264,
4523     .write_header      = mov_write_header,
4524     .write_packet      = mov_write_packet,
4525     .write_trailer     = mov_write_trailer,
4526     .flags             = AVFMT_GLOBALHEADER | AVFMT_ALLOW_FLUSH | AVFMT_TS_NEGATIVE,
4527     .codec_tag         = (const AVCodecTag* const []){ ff_mp4_obj_type, 0 },
4528     .priv_class        = &ismv_muxer_class,
4529 };
4530 #endif
4531 #if CONFIG_F4V_MUXER
4532 MOV_CLASS(f4v)
4533 AVOutputFormat ff_f4v_muxer = {
4534     .name              = "f4v",
4535     .long_name         = NULL_IF_CONFIG_SMALL("F4V Adobe Flash Video"),
4536     .mime_type         = "application/f4v",
4537     .extensions        = "f4v",
4538     .priv_data_size    = sizeof(MOVMuxContext),
4539     .audio_codec       = AV_CODEC_ID_AAC,
4540     .video_codec       = AV_CODEC_ID_H264,
4541     .write_header      = mov_write_header,
4542     .write_packet      = mov_write_packet,
4543     .write_trailer     = mov_write_trailer,
4544     .flags             = AVFMT_GLOBALHEADER | AVFMT_ALLOW_FLUSH | AVFMT_TS_NEGATIVE,
4545     .codec_tag         = (const AVCodecTag* const []){ codec_f4v_tags, 0 },
4546     .priv_class        = &f4v_muxer_class,
4547 };
4548 #endif