]> git.sesse.net Git - ffmpeg/blob - libavformat/movenc.c
Merge commit 'c93e92f2b25f4174350ded3f59ad117ec8eb1fe4'
[ffmpeg] / libavformat / movenc.c
1 /*
2  * MOV, 3GP, MP4 muxer
3  * Copyright (c) 2003 Thomas Raivio
4  * Copyright (c) 2004 Gildas Bazin <gbazin at videolan dot org>
5  * Copyright (c) 2009 Baptiste Coudurier <baptiste dot coudurier at gmail dot com>
6  *
7  * This file is part of FFmpeg.
8  *
9  * FFmpeg is free software; you can redistribute it and/or
10  * modify it under the terms of the GNU Lesser General Public
11  * License as published by the Free Software Foundation; either
12  * version 2.1 of the License, or (at your option) any later version.
13  *
14  * FFmpeg is distributed in the hope that it will be useful,
15  * but WITHOUT ANY WARRANTY; without even the implied warranty of
16  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
17  * Lesser General Public License for more details.
18  *
19  * You should have received a copy of the GNU Lesser General Public
20  * License along with FFmpeg; if not, write to the Free Software
21  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
22  */
23
24 #include <stdint.h>
25 #include <inttypes.h>
26
27 #include "movenc.h"
28 #include "avformat.h"
29 #include "avio_internal.h"
30 #include "riff.h"
31 #include "avio.h"
32 #include "isom.h"
33 #include "av1.h"
34 #include "avc.h"
35 #include "libavcodec/ac3_parser_internal.h"
36 #include "libavcodec/dnxhddata.h"
37 #include "libavcodec/flac.h"
38 #include "libavcodec/get_bits.h"
39
40 #include "libavcodec/internal.h"
41 #include "libavcodec/put_bits.h"
42 #include "libavcodec/vc1_common.h"
43 #include "libavcodec/raw.h"
44 #include "internal.h"
45 #include "libavutil/avstring.h"
46 #include "libavutil/intfloat.h"
47 #include "libavutil/mathematics.h"
48 #include "libavutil/libm.h"
49 #include "libavutil/opt.h"
50 #include "libavutil/dict.h"
51 #include "libavutil/pixdesc.h"
52 #include "libavutil/stereo3d.h"
53 #include "libavutil/timecode.h"
54 #include "libavutil/color_utils.h"
55 #include "hevc.h"
56 #include "rtpenc.h"
57 #include "mov_chan.h"
58 #include "vpcc.h"
59
60 static const AVOption options[] = {
61     { "movflags", "MOV muxer flags", offsetof(MOVMuxContext, flags), AV_OPT_TYPE_FLAGS, {.i64 = 0}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
62     { "rtphint", "Add RTP hint tracks", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_RTP_HINT}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
63     { "moov_size", "maximum moov size so it can be placed at the begin", offsetof(MOVMuxContext, reserved_moov_size), AV_OPT_TYPE_INT, {.i64 = 0}, 0, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, 0 },
64     { "empty_moov", "Make the initial moov atom empty", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_EMPTY_MOOV}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
65     { "frag_keyframe", "Fragment at video keyframes", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_FRAG_KEYFRAME}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
66     { "frag_every_frame", "Fragment at every frame", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_FRAG_EVERY_FRAME}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
67     { "separate_moof", "Write separate moof/mdat atoms for each track", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_SEPARATE_MOOF}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
68     { "frag_custom", "Flush fragments on caller requests", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_FRAG_CUSTOM}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
69     { "isml", "Create a live smooth streaming feed (for pushing to a publishing point)", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_ISML}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
70     { "faststart", "Run a second pass to put the index (moov atom) at the beginning of the file", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_FASTSTART}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
71     { "omit_tfhd_offset", "Omit the base data offset in tfhd atoms", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_OMIT_TFHD_OFFSET}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
72     { "disable_chpl", "Disable Nero chapter atom", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_DISABLE_CHPL}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
73     { "default_base_moof", "Set the default-base-is-moof flag in tfhd atoms", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_DEFAULT_BASE_MOOF}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
74     { "dash", "Write DASH compatible fragmented MP4", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_DASH}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
75     { "frag_discont", "Signal that the next fragment is discontinuous from earlier ones", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_FRAG_DISCONT}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
76     { "delay_moov", "Delay writing the initial moov until the first fragment is cut, or until the first fragment flush", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_DELAY_MOOV}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
77     { "global_sidx", "Write a global sidx index at the start of the file", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_GLOBAL_SIDX}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
78     { "skip_sidx", "Skip writing of sidx atom", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_SKIP_SIDX}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
79     { "write_colr", "Write colr atom (Experimental, may be renamed or changed, do not use from scripts)", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_WRITE_COLR}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
80     { "write_gama", "Write deprecated gama atom", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_WRITE_GAMA}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
81     { "use_metadata_tags", "Use mdta atom for metadata.", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_USE_MDTA}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
82     { "skip_trailer", "Skip writing the mfra/tfra/mfro trailer for fragmented files", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_SKIP_TRAILER}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
83     { "negative_cts_offsets", "Use negative CTS offsets (reducing the need for edit lists)", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_NEGATIVE_CTS_OFFSETS}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
84     FF_RTP_FLAG_OPTS(MOVMuxContext, rtp_flags),
85     { "skip_iods", "Skip writing iods atom.", offsetof(MOVMuxContext, iods_skip), AV_OPT_TYPE_BOOL, {.i64 = 1}, 0, 1, AV_OPT_FLAG_ENCODING_PARAM},
86     { "iods_audio_profile", "iods audio profile atom.", offsetof(MOVMuxContext, iods_audio_profile), AV_OPT_TYPE_INT, {.i64 = -1}, -1, 255, AV_OPT_FLAG_ENCODING_PARAM},
87     { "iods_video_profile", "iods video profile atom.", offsetof(MOVMuxContext, iods_video_profile), AV_OPT_TYPE_INT, {.i64 = -1}, -1, 255, AV_OPT_FLAG_ENCODING_PARAM},
88     { "frag_duration", "Maximum fragment duration", offsetof(MOVMuxContext, max_fragment_duration), AV_OPT_TYPE_INT, {.i64 = 0}, 0, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM},
89     { "min_frag_duration", "Minimum fragment duration", offsetof(MOVMuxContext, min_fragment_duration), AV_OPT_TYPE_INT, {.i64 = 0}, 0, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM},
90     { "frag_size", "Maximum fragment size", offsetof(MOVMuxContext, max_fragment_size), AV_OPT_TYPE_INT, {.i64 = 0}, 0, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM},
91     { "ism_lookahead", "Number of lookahead entries for ISM files", offsetof(MOVMuxContext, ism_lookahead), AV_OPT_TYPE_INT, {.i64 = 0}, 0, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM},
92     { "video_track_timescale", "set timescale of all video tracks", offsetof(MOVMuxContext, video_track_timescale), AV_OPT_TYPE_INT, {.i64 = 0}, 0, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM},
93     { "brand",    "Override major brand", offsetof(MOVMuxContext, major_brand),   AV_OPT_TYPE_STRING, {.str = NULL}, .flags = AV_OPT_FLAG_ENCODING_PARAM },
94     { "use_editlist", "use edit list", offsetof(MOVMuxContext, use_editlist), AV_OPT_TYPE_BOOL, {.i64 = -1}, -1, 1, AV_OPT_FLAG_ENCODING_PARAM},
95     { "fragment_index", "Fragment number of the next fragment", offsetof(MOVMuxContext, fragments), AV_OPT_TYPE_INT, {.i64 = 1}, 1, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM},
96     { "mov_gamma", "gamma value for gama atom", offsetof(MOVMuxContext, gamma), AV_OPT_TYPE_FLOAT, {.dbl = 0.0 }, 0.0, 10, AV_OPT_FLAG_ENCODING_PARAM},
97     { "frag_interleave", "Interleave samples within fragments (max number of consecutive samples, lower is tighter interleaving, but with more overhead)", offsetof(MOVMuxContext, frag_interleave), AV_OPT_TYPE_INT, {.i64 = 0}, 0, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM },
98     { "encryption_scheme",    "Configures the encryption scheme, allowed values are none, cenc-aes-ctr", offsetof(MOVMuxContext, encryption_scheme_str),   AV_OPT_TYPE_STRING, {.str = NULL}, .flags = AV_OPT_FLAG_ENCODING_PARAM },
99     { "encryption_key", "The media encryption key (hex)", offsetof(MOVMuxContext, encryption_key), AV_OPT_TYPE_BINARY, .flags = AV_OPT_FLAG_ENCODING_PARAM },
100     { "encryption_kid", "The media encryption key identifier (hex)", offsetof(MOVMuxContext, encryption_kid), AV_OPT_TYPE_BINARY, .flags = AV_OPT_FLAG_ENCODING_PARAM },
101     { "use_stream_ids_as_track_ids", "use stream ids as track ids", offsetof(MOVMuxContext, use_stream_ids_as_track_ids), AV_OPT_TYPE_BOOL, {.i64 = 0}, 0, 1, AV_OPT_FLAG_ENCODING_PARAM},
102     { "write_tmcd", "force or disable writing tmcd", offsetof(MOVMuxContext, write_tmcd), AV_OPT_TYPE_BOOL, {.i64 = -1}, -1, 1, AV_OPT_FLAG_ENCODING_PARAM},
103     { "write_prft", "Write producer reference time box with specified time source", offsetof(MOVMuxContext, write_prft), AV_OPT_TYPE_INT, {.i64 = MOV_PRFT_NONE}, 0, MOV_PRFT_NB-1, AV_OPT_FLAG_ENCODING_PARAM, "prft"},
104     { "wallclock", NULL, 0, AV_OPT_TYPE_CONST, {.i64 = MOV_PRFT_SRC_WALLCLOCK}, 0, 0, AV_OPT_FLAG_ENCODING_PARAM, "prft"},
105     { "pts", NULL, 0, AV_OPT_TYPE_CONST, {.i64 = MOV_PRFT_SRC_PTS}, 0, 0, AV_OPT_FLAG_ENCODING_PARAM, "prft"},
106     { "empty_hdlr_name", "write zero-length name string in hdlr atoms within mdia and minf atoms", offsetof(MOVMuxContext, empty_hdlr_name), AV_OPT_TYPE_BOOL, {.i64 = 0}, 0, 1, AV_OPT_FLAG_ENCODING_PARAM},
107     { NULL },
108 };
109
110 #define MOV_CLASS(flavor)\
111 static const AVClass flavor ## _muxer_class = {\
112     .class_name = #flavor " muxer",\
113     .item_name  = av_default_item_name,\
114     .option     = options,\
115     .version    = LIBAVUTIL_VERSION_INT,\
116 };
117
118 static int get_moov_size(AVFormatContext *s);
119
120 static int utf8len(const uint8_t *b)
121 {
122     int len = 0;
123     int val;
124     while (*b) {
125         GET_UTF8(val, *b++, return -1;)
126         len++;
127     }
128     return len;
129 }
130
131 //FIXME support 64 bit variant with wide placeholders
132 static int64_t update_size(AVIOContext *pb, int64_t pos)
133 {
134     int64_t curpos = avio_tell(pb);
135     avio_seek(pb, pos, SEEK_SET);
136     avio_wb32(pb, curpos - pos); /* rewrite size */
137     avio_seek(pb, curpos, SEEK_SET);
138
139     return curpos - pos;
140 }
141
142 static int co64_required(const MOVTrack *track)
143 {
144     if (track->entry > 0 && track->cluster[track->entry - 1].pos + track->data_offset > UINT32_MAX)
145         return 1;
146     return 0;
147 }
148
149 static int is_cover_image(const AVStream *st)
150 {
151     /* Eg. AV_DISPOSITION_ATTACHED_PIC | AV_DISPOSITION_TIMED_THUMBNAILS
152      * is encoded as sparse video track */
153     return st && st->disposition == AV_DISPOSITION_ATTACHED_PIC;
154 }
155
156 static int rtp_hinting_needed(const AVStream *st)
157 {
158     /* Add hint tracks for each real audio and video stream */
159     if (is_cover_image(st))
160         return 0;
161     return st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO ||
162            st->codecpar->codec_type == AVMEDIA_TYPE_AUDIO;
163 }
164
165 /* Chunk offset atom */
166 static int mov_write_stco_tag(AVIOContext *pb, MOVTrack *track)
167 {
168     int i;
169     int mode64 = co64_required(track); // use 32 bit size variant if possible
170     int64_t pos = avio_tell(pb);
171     avio_wb32(pb, 0); /* size */
172     if (mode64)
173         ffio_wfourcc(pb, "co64");
174     else
175         ffio_wfourcc(pb, "stco");
176     avio_wb32(pb, 0); /* version & flags */
177     avio_wb32(pb, track->chunkCount); /* entry count */
178     for (i = 0; i < track->entry; i++) {
179         if (!track->cluster[i].chunkNum)
180             continue;
181         if (mode64 == 1)
182             avio_wb64(pb, track->cluster[i].pos + track->data_offset);
183         else
184             avio_wb32(pb, track->cluster[i].pos + track->data_offset);
185     }
186     return update_size(pb, pos);
187 }
188
189 /* Sample size atom */
190 static int mov_write_stsz_tag(AVIOContext *pb, MOVTrack *track)
191 {
192     int equalChunks = 1;
193     int i, j, entries = 0, tst = -1, oldtst = -1;
194
195     int64_t pos = avio_tell(pb);
196     avio_wb32(pb, 0); /* size */
197     ffio_wfourcc(pb, "stsz");
198     avio_wb32(pb, 0); /* version & flags */
199
200     for (i = 0; i < track->entry; i++) {
201         tst = track->cluster[i].size / track->cluster[i].entries;
202         if (oldtst != -1 && tst != oldtst)
203             equalChunks = 0;
204         oldtst = tst;
205         entries += track->cluster[i].entries;
206     }
207     if (equalChunks && track->entry) {
208         int sSize = track->entry ? track->cluster[0].size / track->cluster[0].entries : 0;
209         sSize = FFMAX(1, sSize); // adpcm mono case could make sSize == 0
210         avio_wb32(pb, sSize); // sample size
211         avio_wb32(pb, entries); // sample count
212     } else {
213         avio_wb32(pb, 0); // sample size
214         avio_wb32(pb, entries); // sample count
215         for (i = 0; i < track->entry; i++) {
216             for (j = 0; j < track->cluster[i].entries; j++) {
217                 avio_wb32(pb, track->cluster[i].size /
218                           track->cluster[i].entries);
219             }
220         }
221     }
222     return update_size(pb, pos);
223 }
224
225 /* Sample to chunk atom */
226 static int mov_write_stsc_tag(AVIOContext *pb, MOVTrack *track)
227 {
228     int index = 0, oldval = -1, i;
229     int64_t entryPos, curpos;
230
231     int64_t pos = avio_tell(pb);
232     avio_wb32(pb, 0); /* size */
233     ffio_wfourcc(pb, "stsc");
234     avio_wb32(pb, 0); // version & flags
235     entryPos = avio_tell(pb);
236     avio_wb32(pb, track->chunkCount); // entry count
237     for (i = 0; i < track->entry; i++) {
238         if (oldval != track->cluster[i].samples_in_chunk && track->cluster[i].chunkNum) {
239             avio_wb32(pb, track->cluster[i].chunkNum); // first chunk
240             avio_wb32(pb, track->cluster[i].samples_in_chunk); // samples per chunk
241             avio_wb32(pb, 0x1); // sample description index
242             oldval = track->cluster[i].samples_in_chunk;
243             index++;
244         }
245     }
246     curpos = avio_tell(pb);
247     avio_seek(pb, entryPos, SEEK_SET);
248     avio_wb32(pb, index); // rewrite size
249     avio_seek(pb, curpos, SEEK_SET);
250
251     return update_size(pb, pos);
252 }
253
254 /* Sync sample atom */
255 static int mov_write_stss_tag(AVIOContext *pb, MOVTrack *track, uint32_t flag)
256 {
257     int64_t curpos, entryPos;
258     int i, index = 0;
259     int64_t pos = avio_tell(pb);
260     avio_wb32(pb, 0); // size
261     ffio_wfourcc(pb, flag == MOV_SYNC_SAMPLE ? "stss" : "stps");
262     avio_wb32(pb, 0); // version & flags
263     entryPos = avio_tell(pb);
264     avio_wb32(pb, track->entry); // entry count
265     for (i = 0; i < track->entry; i++) {
266         if (track->cluster[i].flags & flag) {
267             avio_wb32(pb, i + 1);
268             index++;
269         }
270     }
271     curpos = avio_tell(pb);
272     avio_seek(pb, entryPos, SEEK_SET);
273     avio_wb32(pb, index); // rewrite size
274     avio_seek(pb, curpos, SEEK_SET);
275     return update_size(pb, pos);
276 }
277
278 /* Sample dependency atom */
279 static int mov_write_sdtp_tag(AVIOContext *pb, MOVTrack *track)
280 {
281     int i;
282     uint8_t leading, dependent, reference, redundancy;
283     int64_t pos = avio_tell(pb);
284     avio_wb32(pb, 0); // size
285     ffio_wfourcc(pb, "sdtp");
286     avio_wb32(pb, 0); // version & flags
287     for (i = 0; i < track->entry; i++) {
288         dependent = MOV_SAMPLE_DEPENDENCY_YES;
289         leading = reference = redundancy = MOV_SAMPLE_DEPENDENCY_UNKNOWN;
290         if (track->cluster[i].flags & MOV_DISPOSABLE_SAMPLE) {
291             reference = MOV_SAMPLE_DEPENDENCY_NO;
292         }
293         if (track->cluster[i].flags & MOV_SYNC_SAMPLE) {
294             dependent = MOV_SAMPLE_DEPENDENCY_NO;
295         }
296         avio_w8(pb, (leading << 6)   | (dependent << 4) |
297                     (reference << 2) | redundancy);
298     }
299     return update_size(pb, pos);
300 }
301
302 static int mov_write_amr_tag(AVIOContext *pb, MOVTrack *track)
303 {
304     avio_wb32(pb, 0x11); /* size */
305     if (track->mode == MODE_MOV) ffio_wfourcc(pb, "samr");
306     else                         ffio_wfourcc(pb, "damr");
307     ffio_wfourcc(pb, "FFMP");
308     avio_w8(pb, 0); /* decoder version */
309
310     avio_wb16(pb, 0x81FF); /* Mode set (all modes for AMR_NB) */
311     avio_w8(pb, 0x00); /* Mode change period (no restriction) */
312     avio_w8(pb, 0x01); /* Frames per sample */
313     return 0x11;
314 }
315
316 static int mov_write_ac3_tag(AVFormatContext *s, AVIOContext *pb, MOVTrack *track)
317 {
318     GetBitContext gbc;
319     PutBitContext pbc;
320     uint8_t buf[3];
321     int fscod, bsid, bsmod, acmod, lfeon, frmsizecod;
322
323     if (track->vos_len < 7) {
324         av_log(s, AV_LOG_ERROR,
325                "Cannot write moov atom before AC3 packets."
326                " Set the delay_moov flag to fix this.\n");
327         return AVERROR(EINVAL);
328     }
329
330     avio_wb32(pb, 11);
331     ffio_wfourcc(pb, "dac3");
332
333     init_get_bits(&gbc, track->vos_data + 4, (track->vos_len - 4) * 8);
334     fscod      = get_bits(&gbc, 2);
335     frmsizecod = get_bits(&gbc, 6);
336     bsid       = get_bits(&gbc, 5);
337     bsmod      = get_bits(&gbc, 3);
338     acmod      = get_bits(&gbc, 3);
339     if (acmod == 2) {
340         skip_bits(&gbc, 2); // dsurmod
341     } else {
342         if ((acmod & 1) && acmod != 1)
343             skip_bits(&gbc, 2); // cmixlev
344         if (acmod & 4)
345             skip_bits(&gbc, 2); // surmixlev
346     }
347     lfeon = get_bits1(&gbc);
348
349     init_put_bits(&pbc, buf, sizeof(buf));
350     put_bits(&pbc, 2, fscod);
351     put_bits(&pbc, 5, bsid);
352     put_bits(&pbc, 3, bsmod);
353     put_bits(&pbc, 3, acmod);
354     put_bits(&pbc, 1, lfeon);
355     put_bits(&pbc, 5, frmsizecod >> 1); // bit_rate_code
356     put_bits(&pbc, 5, 0); // reserved
357
358     flush_put_bits(&pbc);
359     avio_write(pb, buf, sizeof(buf));
360
361     return 11;
362 }
363
364 struct eac3_info {
365     AVPacket pkt;
366     uint8_t ec3_done;
367     uint8_t num_blocks;
368
369     /* Layout of the EC3SpecificBox */
370     /* maximum bitrate */
371     uint16_t data_rate;
372     /* number of independent substreams */
373     uint8_t  num_ind_sub;
374     struct {
375         /* sample rate code (see ff_ac3_sample_rate_tab) 2 bits */
376         uint8_t fscod;
377         /* bit stream identification 5 bits */
378         uint8_t bsid;
379         /* one bit reserved */
380         /* audio service mixing (not supported yet) 1 bit */
381         /* bit stream mode 3 bits */
382         uint8_t bsmod;
383         /* audio coding mode 3 bits */
384         uint8_t acmod;
385         /* sub woofer on 1 bit */
386         uint8_t lfeon;
387         /* 3 bits reserved */
388         /* number of dependent substreams associated with this substream 4 bits */
389         uint8_t num_dep_sub;
390         /* channel locations of the dependent substream(s), if any, 9 bits */
391         uint16_t chan_loc;
392         /* if there is no dependent substream, then one bit reserved instead */
393     } substream[1]; /* TODO: support 8 independent substreams */
394 };
395
396 #if CONFIG_AC3_PARSER
397 static int handle_eac3(MOVMuxContext *mov, AVPacket *pkt, MOVTrack *track)
398 {
399     AC3HeaderInfo *hdr = NULL;
400     struct eac3_info *info;
401     int num_blocks, ret;
402
403     if (!track->eac3_priv && !(track->eac3_priv = av_mallocz(sizeof(*info))))
404         return AVERROR(ENOMEM);
405     info = track->eac3_priv;
406
407     if (avpriv_ac3_parse_header(&hdr, pkt->data, pkt->size) < 0) {
408         /* drop the packets until we see a good one */
409         if (!track->entry) {
410             av_log(mov->fc, AV_LOG_WARNING, "Dropping invalid packet from start of the stream\n");
411             ret = 0;
412         } else
413             ret = AVERROR_INVALIDDATA;
414         goto end;
415     }
416
417     info->data_rate = FFMAX(info->data_rate, hdr->bit_rate / 1000);
418     num_blocks = hdr->num_blocks;
419
420     if (!info->ec3_done) {
421         /* AC-3 substream must be the first one */
422         if (hdr->bitstream_id <= 10 && hdr->substreamid != 0) {
423             ret = AVERROR(EINVAL);
424             goto end;
425         }
426
427         /* this should always be the case, given that our AC-3 parser
428          * concatenates dependent frames to their independent parent */
429         if (hdr->frame_type == EAC3_FRAME_TYPE_INDEPENDENT) {
430             /* substream ids must be incremental */
431             if (hdr->substreamid > info->num_ind_sub + 1) {
432                 ret = AVERROR(EINVAL);
433                 goto end;
434             }
435
436             if (hdr->substreamid == info->num_ind_sub + 1) {
437                 //info->num_ind_sub++;
438                 avpriv_request_sample(mov->fc, "Multiple independent substreams");
439                 ret = AVERROR_PATCHWELCOME;
440                 goto end;
441             } else if (hdr->substreamid < info->num_ind_sub ||
442                        hdr->substreamid == 0 && info->substream[0].bsid) {
443                 info->ec3_done = 1;
444                 goto concatenate;
445             }
446         } else {
447             if (hdr->substreamid != 0) {
448                 avpriv_request_sample(mov->fc, "Multiple non EAC3 independent substreams");
449                 ret = AVERROR_PATCHWELCOME;
450                 goto end;
451             }
452         }
453
454         /* fill the info needed for the "dec3" atom */
455         info->substream[hdr->substreamid].fscod = hdr->sr_code;
456         info->substream[hdr->substreamid].bsid  = hdr->bitstream_id;
457         info->substream[hdr->substreamid].bsmod = hdr->bitstream_mode;
458         info->substream[hdr->substreamid].acmod = hdr->channel_mode;
459         info->substream[hdr->substreamid].lfeon = hdr->lfe_on;
460
461         /* Parse dependent substream(s), if any */
462         if (pkt->size != hdr->frame_size) {
463             int cumul_size = hdr->frame_size;
464             int parent = hdr->substreamid;
465
466             while (cumul_size != pkt->size) {
467                 GetBitContext gbc;
468                 int i;
469                 ret = avpriv_ac3_parse_header(&hdr, pkt->data + cumul_size, pkt->size - cumul_size);
470                 if (ret < 0)
471                     goto end;
472                 if (hdr->frame_type != EAC3_FRAME_TYPE_DEPENDENT) {
473                     ret = AVERROR(EINVAL);
474                     goto end;
475                 }
476                 info->substream[parent].num_dep_sub++;
477                 ret /= 8;
478
479                 /* header is parsed up to lfeon, but custom channel map may be needed */
480                 init_get_bits8(&gbc, pkt->data + cumul_size + ret, pkt->size - cumul_size - ret);
481                 /* skip bsid */
482                 skip_bits(&gbc, 5);
483                 /* skip volume control params */
484                 for (i = 0; i < (hdr->channel_mode ? 1 : 2); i++) {
485                     skip_bits(&gbc, 5); // skip dialog normalization
486                     if (get_bits1(&gbc)) {
487                         skip_bits(&gbc, 8); // skip compression gain word
488                     }
489                 }
490                 /* get the dependent stream channel map, if exists */
491                 if (get_bits1(&gbc))
492                     info->substream[parent].chan_loc |= (get_bits(&gbc, 16) >> 5) & 0x1f;
493                 else
494                     info->substream[parent].chan_loc |= hdr->channel_mode;
495                 cumul_size += hdr->frame_size;
496             }
497         }
498     }
499
500 concatenate:
501     if (!info->num_blocks && num_blocks == 6) {
502         ret = pkt->size;
503         goto end;
504     }
505     else if (info->num_blocks + num_blocks > 6) {
506         ret = AVERROR_INVALIDDATA;
507         goto end;
508     }
509
510     if (!info->num_blocks) {
511         ret = av_packet_ref(&info->pkt, pkt);
512         if (!ret)
513             info->num_blocks = num_blocks;
514         goto end;
515     } else {
516         if ((ret = av_grow_packet(&info->pkt, pkt->size)) < 0)
517             goto end;
518         memcpy(info->pkt.data + info->pkt.size - pkt->size, pkt->data, pkt->size);
519         info->num_blocks += num_blocks;
520         info->pkt.duration += pkt->duration;
521         if ((ret = av_copy_packet_side_data(&info->pkt, pkt)) < 0)
522             goto end;
523         if (info->num_blocks != 6)
524             goto end;
525         av_packet_unref(pkt);
526         av_packet_move_ref(pkt, &info->pkt);
527         info->num_blocks = 0;
528     }
529     ret = pkt->size;
530
531 end:
532     av_free(hdr);
533
534     return ret;
535 }
536 #endif
537
538 static int mov_write_eac3_tag(AVFormatContext *s, AVIOContext *pb, MOVTrack *track)
539 {
540     PutBitContext pbc;
541     uint8_t *buf;
542     struct eac3_info *info;
543     int size, i;
544
545     if (!track->eac3_priv) {
546         av_log(s, AV_LOG_ERROR,
547                "Cannot write moov atom before EAC3 packets parsed.\n");
548         return AVERROR(EINVAL);
549     }
550
551     info = track->eac3_priv;
552     size = 2 + ((34 * (info->num_ind_sub + 1) + 7) >> 3);
553     buf = av_malloc(size);
554     if (!buf) {
555         return AVERROR(ENOMEM);
556     }
557
558     init_put_bits(&pbc, buf, size);
559     put_bits(&pbc, 13, info->data_rate);
560     put_bits(&pbc,  3, info->num_ind_sub);
561     for (i = 0; i <= info->num_ind_sub; i++) {
562         put_bits(&pbc, 2, info->substream[i].fscod);
563         put_bits(&pbc, 5, info->substream[i].bsid);
564         put_bits(&pbc, 1, 0); /* reserved */
565         put_bits(&pbc, 1, 0); /* asvc */
566         put_bits(&pbc, 3, info->substream[i].bsmod);
567         put_bits(&pbc, 3, info->substream[i].acmod);
568         put_bits(&pbc, 1, info->substream[i].lfeon);
569         put_bits(&pbc, 5, 0); /* reserved */
570         put_bits(&pbc, 4, info->substream[i].num_dep_sub);
571         if (!info->substream[i].num_dep_sub) {
572             put_bits(&pbc, 1, 0); /* reserved */
573         } else {
574             put_bits(&pbc, 9, info->substream[i].chan_loc);
575         }
576     }
577     flush_put_bits(&pbc);
578     size = put_bits_count(&pbc) >> 3;
579
580     avio_wb32(pb, size + 8);
581     ffio_wfourcc(pb, "dec3");
582     avio_write(pb, buf, size);
583
584     av_free(buf);
585
586     return size;
587 }
588
589 /**
590  * This function writes extradata "as is".
591  * Extradata must be formatted like a valid atom (with size and tag).
592  */
593 static int mov_write_extradata_tag(AVIOContext *pb, MOVTrack *track)
594 {
595     avio_write(pb, track->par->extradata, track->par->extradata_size);
596     return track->par->extradata_size;
597 }
598
599 static int mov_write_enda_tag(AVIOContext *pb)
600 {
601     avio_wb32(pb, 10);
602     ffio_wfourcc(pb, "enda");
603     avio_wb16(pb, 1); /* little endian */
604     return 10;
605 }
606
607 static int mov_write_enda_tag_be(AVIOContext *pb)
608 {
609   avio_wb32(pb, 10);
610   ffio_wfourcc(pb, "enda");
611   avio_wb16(pb, 0); /* big endian */
612   return 10;
613 }
614
615 static void put_descr(AVIOContext *pb, int tag, unsigned int size)
616 {
617     int i = 3;
618     avio_w8(pb, tag);
619     for (; i > 0; i--)
620         avio_w8(pb, (size >> (7 * i)) | 0x80);
621     avio_w8(pb, size & 0x7F);
622 }
623
624 static unsigned compute_avg_bitrate(MOVTrack *track)
625 {
626     uint64_t size = 0;
627     int i;
628     if (!track->track_duration)
629         return 0;
630     for (i = 0; i < track->entry; i++)
631         size += track->cluster[i].size;
632     return size * 8 * track->timescale / track->track_duration;
633 }
634
635 static int mov_write_esds_tag(AVIOContext *pb, MOVTrack *track) // Basic
636 {
637     AVCPBProperties *props;
638     int64_t pos = avio_tell(pb);
639     int decoder_specific_info_len = track->vos_len ? 5 + track->vos_len : 0;
640     unsigned avg_bitrate;
641
642     avio_wb32(pb, 0); // size
643     ffio_wfourcc(pb, "esds");
644     avio_wb32(pb, 0); // Version
645
646     // ES descriptor
647     put_descr(pb, 0x03, 3 + 5+13 + decoder_specific_info_len + 5+1);
648     avio_wb16(pb, track->track_id);
649     avio_w8(pb, 0x00); // flags (= no flags)
650
651     // DecoderConfig descriptor
652     put_descr(pb, 0x04, 13 + decoder_specific_info_len);
653
654     // Object type indication
655     if ((track->par->codec_id == AV_CODEC_ID_MP2 ||
656          track->par->codec_id == AV_CODEC_ID_MP3) &&
657         track->par->sample_rate > 24000)
658         avio_w8(pb, 0x6B); // 11172-3
659     else
660         avio_w8(pb, ff_codec_get_tag(ff_mp4_obj_type, track->par->codec_id));
661
662     // the following fields is made of 6 bits to identify the streamtype (4 for video, 5 for audio)
663     // plus 1 bit to indicate upstream and 1 bit set to 1 (reserved)
664     if (track->par->codec_id == AV_CODEC_ID_DVD_SUBTITLE)
665         avio_w8(pb, (0x38 << 2) | 1); // flags (= NeroSubpicStream)
666     else if (track->par->codec_type == AVMEDIA_TYPE_AUDIO)
667         avio_w8(pb, 0x15); // flags (= Audiostream)
668     else
669         avio_w8(pb, 0x11); // flags (= Visualstream)
670
671     props = (AVCPBProperties*)av_stream_get_side_data(track->st, AV_PKT_DATA_CPB_PROPERTIES,
672                                                       NULL);
673
674     avio_wb24(pb, props ? props->buffer_size / 8 : 0); // Buffersize DB
675
676     avg_bitrate = compute_avg_bitrate(track);
677     avio_wb32(pb, props ? FFMAX3(props->max_bitrate, props->avg_bitrate, avg_bitrate) : FFMAX(track->par->bit_rate, avg_bitrate)); // maxbitrate (FIXME should be max rate in any 1 sec window)
678     avio_wb32(pb, avg_bitrate);
679
680     if (track->vos_len) {
681         // DecoderSpecific info descriptor
682         put_descr(pb, 0x05, track->vos_len);
683         avio_write(pb, track->vos_data, track->vos_len);
684     }
685
686     // SL descriptor
687     put_descr(pb, 0x06, 1);
688     avio_w8(pb, 0x02);
689     return update_size(pb, pos);
690 }
691
692 static int mov_pcm_le_gt16(enum AVCodecID codec_id)
693 {
694     return codec_id == AV_CODEC_ID_PCM_S24LE ||
695            codec_id == AV_CODEC_ID_PCM_S32LE ||
696            codec_id == AV_CODEC_ID_PCM_F32LE ||
697            codec_id == AV_CODEC_ID_PCM_F64LE;
698 }
699
700 static int mov_pcm_be_gt16(enum AVCodecID codec_id)
701 {
702     return codec_id == AV_CODEC_ID_PCM_S24BE ||
703            codec_id == AV_CODEC_ID_PCM_S32BE ||
704            codec_id == AV_CODEC_ID_PCM_F32BE ||
705            codec_id == AV_CODEC_ID_PCM_F64BE;
706 }
707
708 static int mov_write_ms_tag(AVFormatContext *s, AVIOContext *pb, MOVTrack *track)
709 {
710     int ret;
711     int64_t pos = avio_tell(pb);
712     avio_wb32(pb, 0);
713     avio_wl32(pb, track->tag); // store it byteswapped
714     track->par->codec_tag = av_bswap16(track->tag >> 16);
715     if ((ret = ff_put_wav_header(s, pb, track->par, 0)) < 0)
716         return ret;
717     return update_size(pb, pos);
718 }
719
720 static int mov_write_wfex_tag(AVFormatContext *s, AVIOContext *pb, MOVTrack *track)
721 {
722     int ret;
723     int64_t pos = avio_tell(pb);
724     avio_wb32(pb, 0);
725     ffio_wfourcc(pb, "wfex");
726     if ((ret = ff_put_wav_header(s, pb, track->st->codecpar, FF_PUT_WAV_HEADER_FORCE_WAVEFORMATEX)) < 0)
727         return ret;
728     return update_size(pb, pos);
729 }
730
731 static int mov_write_dfla_tag(AVIOContext *pb, MOVTrack *track)
732 {
733     int64_t pos = avio_tell(pb);
734     avio_wb32(pb, 0);
735     ffio_wfourcc(pb, "dfLa");
736     avio_w8(pb, 0); /* version */
737     avio_wb24(pb, 0); /* flags */
738
739     /* Expect the encoder to pass a METADATA_BLOCK_TYPE_STREAMINFO. */
740     if (track->par->extradata_size != FLAC_STREAMINFO_SIZE)
741         return AVERROR_INVALIDDATA;
742
743     /* TODO: Write other METADATA_BLOCK_TYPEs if the encoder makes them available. */
744     avio_w8(pb, 1 << 7 | FLAC_METADATA_TYPE_STREAMINFO); /* LastMetadataBlockFlag << 7 | BlockType */
745     avio_wb24(pb, track->par->extradata_size); /* Length */
746     avio_write(pb, track->par->extradata, track->par->extradata_size); /* BlockData[Length] */
747
748     return update_size(pb, pos);
749 }
750
751 static int mov_write_dops_tag(AVFormatContext *s, AVIOContext *pb, MOVTrack *track)
752 {
753     int64_t pos = avio_tell(pb);
754     avio_wb32(pb, 0);
755     ffio_wfourcc(pb, "dOps");
756     avio_w8(pb, 0); /* Version */
757     if (track->par->extradata_size < 19) {
758         av_log(s, AV_LOG_ERROR, "invalid extradata size\n");
759         return AVERROR_INVALIDDATA;
760     }
761     /* extradata contains an Ogg OpusHead, other than byte-ordering and
762        OpusHead's preceeding magic/version, OpusSpecificBox is currently
763        identical. */
764     avio_w8(pb, AV_RB8(track->par->extradata + 9)); /* OuputChannelCount */
765     avio_wb16(pb, AV_RL16(track->par->extradata + 10)); /* PreSkip */
766     avio_wb32(pb, AV_RL32(track->par->extradata + 12)); /* InputSampleRate */
767     avio_wb16(pb, AV_RL16(track->par->extradata + 16)); /* OutputGain */
768     /* Write the rest of the header out without byte-swapping. */
769     avio_write(pb, track->par->extradata + 18, track->par->extradata_size - 18);
770
771     return update_size(pb, pos);
772 }
773
774 static int mov_write_chan_tag(AVFormatContext *s, AVIOContext *pb, MOVTrack *track)
775 {
776     uint32_t layout_tag, bitmap;
777     int64_t pos = avio_tell(pb);
778
779     layout_tag = ff_mov_get_channel_layout_tag(track->par->codec_id,
780                                                track->par->channel_layout,
781                                                &bitmap);
782     if (!layout_tag) {
783         av_log(s, AV_LOG_WARNING, "not writing 'chan' tag due to "
784                "lack of channel information\n");
785         return 0;
786     }
787
788     if (track->multichannel_as_mono)
789         return 0;
790
791     avio_wb32(pb, 0);           // Size
792     ffio_wfourcc(pb, "chan");   // Type
793     avio_w8(pb, 0);             // Version
794     avio_wb24(pb, 0);           // Flags
795     avio_wb32(pb, layout_tag);  // mChannelLayoutTag
796     avio_wb32(pb, bitmap);      // mChannelBitmap
797     avio_wb32(pb, 0);           // mNumberChannelDescriptions
798
799     return update_size(pb, pos);
800 }
801
802 static int mov_write_wave_tag(AVFormatContext *s, AVIOContext *pb, MOVTrack *track)
803 {
804     int64_t pos = avio_tell(pb);
805
806     avio_wb32(pb, 0);     /* size */
807     ffio_wfourcc(pb, "wave");
808
809     if (track->par->codec_id != AV_CODEC_ID_QDM2) {
810     avio_wb32(pb, 12);    /* size */
811     ffio_wfourcc(pb, "frma");
812     avio_wl32(pb, track->tag);
813     }
814
815     if (track->par->codec_id == AV_CODEC_ID_AAC) {
816         /* useless atom needed by mplayer, ipod, not needed by quicktime */
817         avio_wb32(pb, 12); /* size */
818         ffio_wfourcc(pb, "mp4a");
819         avio_wb32(pb, 0);
820         mov_write_esds_tag(pb, track);
821     } else if (mov_pcm_le_gt16(track->par->codec_id))  {
822       mov_write_enda_tag(pb);
823     } else if (mov_pcm_be_gt16(track->par->codec_id))  {
824       mov_write_enda_tag_be(pb);
825     } else if (track->par->codec_id == AV_CODEC_ID_AMR_NB) {
826         mov_write_amr_tag(pb, track);
827     } else if (track->par->codec_id == AV_CODEC_ID_AC3) {
828         mov_write_ac3_tag(s, pb, track);
829     } else if (track->par->codec_id == AV_CODEC_ID_EAC3) {
830         mov_write_eac3_tag(s, pb, track);
831     } else if (track->par->codec_id == AV_CODEC_ID_ALAC ||
832                track->par->codec_id == AV_CODEC_ID_QDM2) {
833         mov_write_extradata_tag(pb, track);
834     } else if (track->par->codec_id == AV_CODEC_ID_ADPCM_MS ||
835                track->par->codec_id == AV_CODEC_ID_ADPCM_IMA_WAV) {
836         mov_write_ms_tag(s, pb, track);
837     }
838
839     avio_wb32(pb, 8);     /* size */
840     avio_wb32(pb, 0);     /* null tag */
841
842     return update_size(pb, pos);
843 }
844
845 static int mov_write_dvc1_structs(MOVTrack *track, uint8_t *buf)
846 {
847     uint8_t *unescaped;
848     const uint8_t *start, *next, *end = track->vos_data + track->vos_len;
849     int unescaped_size, seq_found = 0;
850     int level = 0, interlace = 0;
851     int packet_seq   = track->vc1_info.packet_seq;
852     int packet_entry = track->vc1_info.packet_entry;
853     int slices       = track->vc1_info.slices;
854     PutBitContext pbc;
855
856     if (track->start_dts == AV_NOPTS_VALUE) {
857         /* No packets written yet, vc1_info isn't authoritative yet. */
858         /* Assume inline sequence and entry headers. */
859         packet_seq = packet_entry = 1;
860         av_log(NULL, AV_LOG_WARNING,
861                "moov atom written before any packets, unable to write correct "
862                "dvc1 atom. Set the delay_moov flag to fix this.\n");
863     }
864
865     unescaped = av_mallocz(track->vos_len + AV_INPUT_BUFFER_PADDING_SIZE);
866     if (!unescaped)
867         return AVERROR(ENOMEM);
868     start = find_next_marker(track->vos_data, end);
869     for (next = start; next < end; start = next) {
870         GetBitContext gb;
871         int size;
872         next = find_next_marker(start + 4, end);
873         size = next - start - 4;
874         if (size <= 0)
875             continue;
876         unescaped_size = vc1_unescape_buffer(start + 4, size, unescaped);
877         init_get_bits(&gb, unescaped, 8 * unescaped_size);
878         if (AV_RB32(start) == VC1_CODE_SEQHDR) {
879             int profile = get_bits(&gb, 2);
880             if (profile != PROFILE_ADVANCED) {
881                 av_free(unescaped);
882                 return AVERROR(ENOSYS);
883             }
884             seq_found = 1;
885             level = get_bits(&gb, 3);
886             /* chromaformat, frmrtq_postproc, bitrtq_postproc, postprocflag,
887              * width, height */
888             skip_bits_long(&gb, 2 + 3 + 5 + 1 + 2*12);
889             skip_bits(&gb, 1); /* broadcast */
890             interlace = get_bits1(&gb);
891             skip_bits(&gb, 4); /* tfcntrflag, finterpflag, reserved, psf */
892         }
893     }
894     if (!seq_found) {
895         av_free(unescaped);
896         return AVERROR(ENOSYS);
897     }
898
899     init_put_bits(&pbc, buf, 7);
900     /* VC1DecSpecStruc */
901     put_bits(&pbc, 4, 12); /* profile - advanced */
902     put_bits(&pbc, 3, level);
903     put_bits(&pbc, 1, 0); /* reserved */
904     /* VC1AdvDecSpecStruc */
905     put_bits(&pbc, 3, level);
906     put_bits(&pbc, 1, 0); /* cbr */
907     put_bits(&pbc, 6, 0); /* reserved */
908     put_bits(&pbc, 1, !interlace); /* no interlace */
909     put_bits(&pbc, 1, !packet_seq); /* no multiple seq */
910     put_bits(&pbc, 1, !packet_entry); /* no multiple entry */
911     put_bits(&pbc, 1, !slices); /* no slice code */
912     put_bits(&pbc, 1, 0); /* no bframe */
913     put_bits(&pbc, 1, 0); /* reserved */
914
915     /* framerate */
916     if (track->st->avg_frame_rate.num > 0 && track->st->avg_frame_rate.den > 0)
917         put_bits32(&pbc, track->st->avg_frame_rate.num / track->st->avg_frame_rate.den);
918     else
919         put_bits32(&pbc, 0xffffffff);
920
921     flush_put_bits(&pbc);
922
923     av_free(unescaped);
924
925     return 0;
926 }
927
928 static int mov_write_dvc1_tag(AVIOContext *pb, MOVTrack *track)
929 {
930     uint8_t buf[7] = { 0 };
931     int ret;
932
933     if ((ret = mov_write_dvc1_structs(track, buf)) < 0)
934         return ret;
935
936     avio_wb32(pb, track->vos_len + 8 + sizeof(buf));
937     ffio_wfourcc(pb, "dvc1");
938     avio_write(pb, buf, sizeof(buf));
939     avio_write(pb, track->vos_data, track->vos_len);
940
941     return 0;
942 }
943
944 static int mov_write_glbl_tag(AVIOContext *pb, MOVTrack *track)
945 {
946     avio_wb32(pb, track->vos_len + 8);
947     ffio_wfourcc(pb, "glbl");
948     avio_write(pb, track->vos_data, track->vos_len);
949     return 8 + track->vos_len;
950 }
951
952 /**
953  * Compute flags for 'lpcm' tag.
954  * See CoreAudioTypes and AudioStreamBasicDescription at Apple.
955  */
956 static int mov_get_lpcm_flags(enum AVCodecID codec_id)
957 {
958     switch (codec_id) {
959     case AV_CODEC_ID_PCM_F32BE:
960     case AV_CODEC_ID_PCM_F64BE:
961         return 11;
962     case AV_CODEC_ID_PCM_F32LE:
963     case AV_CODEC_ID_PCM_F64LE:
964         return 9;
965     case AV_CODEC_ID_PCM_U8:
966         return 10;
967     case AV_CODEC_ID_PCM_S16BE:
968     case AV_CODEC_ID_PCM_S24BE:
969     case AV_CODEC_ID_PCM_S32BE:
970         return 14;
971     case AV_CODEC_ID_PCM_S8:
972     case AV_CODEC_ID_PCM_S16LE:
973     case AV_CODEC_ID_PCM_S24LE:
974     case AV_CODEC_ID_PCM_S32LE:
975         return 12;
976     default:
977         return 0;
978     }
979 }
980
981 static int get_cluster_duration(MOVTrack *track, int cluster_idx)
982 {
983     int64_t next_dts;
984
985     if (cluster_idx >= track->entry)
986         return 0;
987
988     if (cluster_idx + 1 == track->entry)
989         next_dts = track->track_duration + track->start_dts;
990     else
991         next_dts = track->cluster[cluster_idx + 1].dts;
992
993     next_dts -= track->cluster[cluster_idx].dts;
994
995     av_assert0(next_dts >= 0);
996     av_assert0(next_dts <= INT_MAX);
997
998     return next_dts;
999 }
1000
1001 static int get_samples_per_packet(MOVTrack *track)
1002 {
1003     int i, first_duration;
1004
1005 // return track->par->frame_size;
1006
1007     /* use 1 for raw PCM */
1008     if (!track->audio_vbr)
1009         return 1;
1010
1011     /* check to see if duration is constant for all clusters */
1012     if (!track->entry)
1013         return 0;
1014     first_duration = get_cluster_duration(track, 0);
1015     for (i = 1; i < track->entry; i++) {
1016         if (get_cluster_duration(track, i) != first_duration)
1017             return 0;
1018     }
1019     return first_duration;
1020 }
1021
1022 static int mov_write_audio_tag(AVFormatContext *s, AVIOContext *pb, MOVMuxContext *mov, MOVTrack *track)
1023 {
1024     int64_t pos = avio_tell(pb);
1025     int version = 0;
1026     uint32_t tag = track->tag;
1027     int ret = 0;
1028
1029     if (track->mode == MODE_MOV) {
1030         if (track->timescale > UINT16_MAX || !track->par->channels) {
1031             if (mov_get_lpcm_flags(track->par->codec_id))
1032                 tag = AV_RL32("lpcm");
1033             version = 2;
1034         } else if (track->audio_vbr || mov_pcm_le_gt16(track->par->codec_id) ||
1035                    mov_pcm_be_gt16(track->par->codec_id) ||
1036                    track->par->codec_id == AV_CODEC_ID_ADPCM_MS ||
1037                    track->par->codec_id == AV_CODEC_ID_ADPCM_IMA_WAV ||
1038                    track->par->codec_id == AV_CODEC_ID_QDM2) {
1039             version = 1;
1040         }
1041     }
1042
1043     avio_wb32(pb, 0); /* size */
1044     if (mov->encryption_scheme != MOV_ENC_NONE) {
1045         ffio_wfourcc(pb, "enca");
1046     } else {
1047         avio_wl32(pb, tag); // store it byteswapped
1048     }
1049     avio_wb32(pb, 0); /* Reserved */
1050     avio_wb16(pb, 0); /* Reserved */
1051     avio_wb16(pb, 1); /* Data-reference index, XXX  == 1 */
1052
1053     /* SoundDescription */
1054     avio_wb16(pb, version); /* Version */
1055     avio_wb16(pb, 0); /* Revision level */
1056     avio_wb32(pb, 0); /* Reserved */
1057
1058     if (version == 2) {
1059         avio_wb16(pb, 3);
1060         avio_wb16(pb, 16);
1061         avio_wb16(pb, 0xfffe);
1062         avio_wb16(pb, 0);
1063         avio_wb32(pb, 0x00010000);
1064         avio_wb32(pb, 72);
1065         avio_wb64(pb, av_double2int(track->par->sample_rate));
1066         avio_wb32(pb, track->par->channels);
1067         avio_wb32(pb, 0x7F000000);
1068         avio_wb32(pb, av_get_bits_per_sample(track->par->codec_id));
1069         avio_wb32(pb, mov_get_lpcm_flags(track->par->codec_id));
1070         avio_wb32(pb, track->sample_size);
1071         avio_wb32(pb, get_samples_per_packet(track));
1072     } else {
1073         if (track->mode == MODE_MOV) {
1074             avio_wb16(pb, track->par->channels);
1075             if (track->par->codec_id == AV_CODEC_ID_PCM_U8 ||
1076                 track->par->codec_id == AV_CODEC_ID_PCM_S8)
1077                 avio_wb16(pb, 8); /* bits per sample */
1078             else if (track->par->codec_id == AV_CODEC_ID_ADPCM_G726)
1079                 avio_wb16(pb, track->par->bits_per_coded_sample);
1080             else
1081                 avio_wb16(pb, 16);
1082             avio_wb16(pb, track->audio_vbr ? -2 : 0); /* compression ID */
1083         } else { /* reserved for mp4/3gp */
1084             if (track->par->codec_id == AV_CODEC_ID_FLAC ||
1085                 track->par->codec_id == AV_CODEC_ID_ALAC ||
1086                 track->par->codec_id == AV_CODEC_ID_OPUS) {
1087                 avio_wb16(pb, track->par->channels);
1088             } else {
1089                 avio_wb16(pb, 2);
1090             }
1091             if (track->par->codec_id == AV_CODEC_ID_FLAC ||
1092                 track->par->codec_id == AV_CODEC_ID_ALAC) {
1093                 avio_wb16(pb, track->par->bits_per_raw_sample);
1094             } else {
1095                 avio_wb16(pb, 16);
1096             }
1097             avio_wb16(pb, 0);
1098         }
1099
1100         avio_wb16(pb, 0); /* packet size (= 0) */
1101         if (track->par->codec_id == AV_CODEC_ID_OPUS)
1102             avio_wb16(pb, 48000);
1103         else
1104             avio_wb16(pb, track->par->sample_rate <= UINT16_MAX ?
1105                           track->par->sample_rate : 0);
1106         avio_wb16(pb, 0); /* Reserved */
1107     }
1108
1109     if (version == 1) { /* SoundDescription V1 extended info */
1110         if (mov_pcm_le_gt16(track->par->codec_id) ||
1111             mov_pcm_be_gt16(track->par->codec_id))
1112             avio_wb32(pb, 1); /*  must be 1 for  uncompressed formats */
1113         else
1114             avio_wb32(pb, track->par->frame_size); /* Samples per packet */
1115         avio_wb32(pb, track->sample_size / track->par->channels); /* Bytes per packet */
1116         avio_wb32(pb, track->sample_size); /* Bytes per frame */
1117         avio_wb32(pb, 2); /* Bytes per sample */
1118     }
1119
1120     if (track->mode == MODE_MOV &&
1121         (track->par->codec_id == AV_CODEC_ID_AAC           ||
1122          track->par->codec_id == AV_CODEC_ID_AC3           ||
1123          track->par->codec_id == AV_CODEC_ID_EAC3          ||
1124          track->par->codec_id == AV_CODEC_ID_AMR_NB        ||
1125          track->par->codec_id == AV_CODEC_ID_ALAC          ||
1126          track->par->codec_id == AV_CODEC_ID_ADPCM_MS      ||
1127          track->par->codec_id == AV_CODEC_ID_ADPCM_IMA_WAV ||
1128          track->par->codec_id == AV_CODEC_ID_QDM2          ||
1129          (mov_pcm_le_gt16(track->par->codec_id) && version==1) ||
1130          (mov_pcm_be_gt16(track->par->codec_id) && version==1)))
1131         ret = mov_write_wave_tag(s, pb, track);
1132     else if (track->tag == MKTAG('m','p','4','a'))
1133         ret = mov_write_esds_tag(pb, track);
1134     else if (track->par->codec_id == AV_CODEC_ID_AMR_NB)
1135         ret = mov_write_amr_tag(pb, track);
1136     else if (track->par->codec_id == AV_CODEC_ID_AC3)
1137         ret = mov_write_ac3_tag(s, pb, track);
1138     else if (track->par->codec_id == AV_CODEC_ID_EAC3)
1139         ret = mov_write_eac3_tag(s, pb, track);
1140     else if (track->par->codec_id == AV_CODEC_ID_ALAC)
1141         ret = mov_write_extradata_tag(pb, track);
1142     else if (track->par->codec_id == AV_CODEC_ID_WMAPRO)
1143         ret = mov_write_wfex_tag(s, pb, track);
1144     else if (track->par->codec_id == AV_CODEC_ID_FLAC)
1145         ret = mov_write_dfla_tag(pb, track);
1146     else if (track->par->codec_id == AV_CODEC_ID_OPUS)
1147         ret = mov_write_dops_tag(s, pb, track);
1148     else if (track->vos_len > 0)
1149         ret = mov_write_glbl_tag(pb, track);
1150
1151     if (ret < 0)
1152         return ret;
1153
1154     if (track->mode == MODE_MOV && track->par->codec_type == AVMEDIA_TYPE_AUDIO
1155             && ((ret = mov_write_chan_tag(s, pb, track)) < 0)) {
1156         return ret;
1157     }
1158
1159     if (mov->encryption_scheme != MOV_ENC_NONE
1160             && ((ret = ff_mov_cenc_write_sinf_tag(track, pb, mov->encryption_kid)) < 0)) {
1161         return ret;
1162     }
1163
1164     ret = update_size(pb, pos);
1165     return ret;
1166 }
1167
1168 static int mov_write_d263_tag(AVIOContext *pb)
1169 {
1170     avio_wb32(pb, 0xf); /* size */
1171     ffio_wfourcc(pb, "d263");
1172     ffio_wfourcc(pb, "FFMP");
1173     avio_w8(pb, 0); /* decoder version */
1174     /* FIXME use AVCodecContext level/profile, when encoder will set values */
1175     avio_w8(pb, 0xa); /* level */
1176     avio_w8(pb, 0); /* profile */
1177     return 0xf;
1178 }
1179
1180 static int mov_write_av1c_tag(AVIOContext *pb, MOVTrack *track)
1181 {
1182     int64_t pos = avio_tell(pb);
1183
1184     avio_wb32(pb, 0);
1185     ffio_wfourcc(pb, "av1C");
1186     ff_isom_write_av1c(pb, track->vos_data, track->vos_len);
1187     return update_size(pb, pos);
1188 }
1189
1190 static int mov_write_avcc_tag(AVIOContext *pb, MOVTrack *track)
1191 {
1192     int64_t pos = avio_tell(pb);
1193
1194     avio_wb32(pb, 0);
1195     ffio_wfourcc(pb, "avcC");
1196     ff_isom_write_avcc(pb, track->vos_data, track->vos_len);
1197     return update_size(pb, pos);
1198 }
1199
1200 static int mov_write_vpcc_tag(AVFormatContext *s, AVIOContext *pb, MOVTrack *track)
1201 {
1202     int64_t pos = avio_tell(pb);
1203
1204     avio_wb32(pb, 0);
1205     ffio_wfourcc(pb, "vpcC");
1206     avio_w8(pb, 1); /* version */
1207     avio_wb24(pb, 0); /* flags */
1208     ff_isom_write_vpcc(s, pb, track->par);
1209     return update_size(pb, pos);
1210 }
1211
1212 static int mov_write_hvcc_tag(AVIOContext *pb, MOVTrack *track)
1213 {
1214     int64_t pos = avio_tell(pb);
1215
1216     avio_wb32(pb, 0);
1217     ffio_wfourcc(pb, "hvcC");
1218     if (track->tag == MKTAG('h','v','c','1'))
1219         ff_isom_write_hvcc(pb, track->vos_data, track->vos_len, 1);
1220     else
1221         ff_isom_write_hvcc(pb, track->vos_data, track->vos_len, 0);
1222     return update_size(pb, pos);
1223 }
1224
1225 /* also used by all avid codecs (dv, imx, meridien) and their variants */
1226 static int mov_write_avid_tag(AVIOContext *pb, MOVTrack *track)
1227 {
1228     int i;
1229     int interlaced;
1230     int cid;
1231     int display_width = track->par->width;
1232
1233     if (track->vos_data && track->vos_len > 0x29) {
1234         if (ff_dnxhd_parse_header_prefix(track->vos_data) != 0) {
1235             /* looks like a DNxHD bit stream */
1236             interlaced = (track->vos_data[5] & 2);
1237             cid = AV_RB32(track->vos_data + 0x28);
1238         } else {
1239             av_log(NULL, AV_LOG_WARNING, "Could not locate DNxHD bit stream in vos_data\n");
1240             return 0;
1241         }
1242     } else {
1243         av_log(NULL, AV_LOG_WARNING, "Could not locate DNxHD bit stream, vos_data too small\n");
1244         return 0;
1245     }
1246
1247     avio_wb32(pb, 24); /* size */
1248     ffio_wfourcc(pb, "ACLR");
1249     ffio_wfourcc(pb, "ACLR");
1250     ffio_wfourcc(pb, "0001");
1251     if (track->par->color_range == AVCOL_RANGE_MPEG || /* Legal range (16-235) */
1252         track->par->color_range == AVCOL_RANGE_UNSPECIFIED) {
1253         avio_wb32(pb, 1); /* Corresponds to 709 in official encoder */
1254     } else { /* Full range (0-255) */
1255         avio_wb32(pb, 2); /* Corresponds to RGB in official encoder */
1256     }
1257     avio_wb32(pb, 0); /* unknown */
1258
1259     if (track->tag == MKTAG('A','V','d','h')) {
1260         avio_wb32(pb, 32);
1261         ffio_wfourcc(pb, "ADHR");
1262         ffio_wfourcc(pb, "0001");
1263         avio_wb32(pb, cid);
1264         avio_wb32(pb, 0); /* unknown */
1265         avio_wb32(pb, 1); /* unknown */
1266         avio_wb32(pb, 0); /* unknown */
1267         avio_wb32(pb, 0); /* unknown */
1268         return 0;
1269     }
1270
1271     avio_wb32(pb, 24); /* size */
1272     ffio_wfourcc(pb, "APRG");
1273     ffio_wfourcc(pb, "APRG");
1274     ffio_wfourcc(pb, "0001");
1275     avio_wb32(pb, 1); /* unknown */
1276     avio_wb32(pb, 0); /* unknown */
1277
1278     avio_wb32(pb, 120); /* size */
1279     ffio_wfourcc(pb, "ARES");
1280     ffio_wfourcc(pb, "ARES");
1281     ffio_wfourcc(pb, "0001");
1282     avio_wb32(pb, cid); /* dnxhd cid, some id ? */
1283     if (   track->par->sample_aspect_ratio.num > 0
1284         && track->par->sample_aspect_ratio.den > 0)
1285         display_width = display_width * track->par->sample_aspect_ratio.num / track->par->sample_aspect_ratio.den;
1286     avio_wb32(pb, display_width);
1287     /* values below are based on samples created with quicktime and avid codecs */
1288     if (interlaced) {
1289         avio_wb32(pb, track->par->height / 2);
1290         avio_wb32(pb, 2); /* unknown */
1291         avio_wb32(pb, 0); /* unknown */
1292         avio_wb32(pb, 4); /* unknown */
1293     } else {
1294         avio_wb32(pb, track->par->height);
1295         avio_wb32(pb, 1); /* unknown */
1296         avio_wb32(pb, 0); /* unknown */
1297         if (track->par->height == 1080)
1298             avio_wb32(pb, 5); /* unknown */
1299         else
1300             avio_wb32(pb, 6); /* unknown */
1301     }
1302     /* padding */
1303     for (i = 0; i < 10; i++)
1304         avio_wb64(pb, 0);
1305
1306     return 0;
1307 }
1308
1309 static int mov_write_dpxe_tag(AVIOContext *pb, MOVTrack *track)
1310 {
1311     avio_wb32(pb, 12);
1312     ffio_wfourcc(pb, "DpxE");
1313     if (track->par->extradata_size >= 12 &&
1314         !memcmp(&track->par->extradata[4], "DpxE", 4)) {
1315         avio_wb32(pb, track->par->extradata[11]);
1316     } else {
1317         avio_wb32(pb, 1);
1318     }
1319     return 0;
1320 }
1321
1322 static int mov_get_dv_codec_tag(AVFormatContext *s, MOVTrack *track)
1323 {
1324     int tag;
1325
1326     if (track->par->width == 720) { /* SD */
1327         if (track->par->height == 480) { /* NTSC */
1328             if  (track->par->format == AV_PIX_FMT_YUV422P) tag = MKTAG('d','v','5','n');
1329             else                                            tag = MKTAG('d','v','c',' ');
1330        }else if (track->par->format == AV_PIX_FMT_YUV422P) tag = MKTAG('d','v','5','p');
1331         else if (track->par->format == AV_PIX_FMT_YUV420P) tag = MKTAG('d','v','c','p');
1332         else                                                tag = MKTAG('d','v','p','p');
1333     } else if (track->par->height == 720) { /* HD 720 line */
1334         if  (track->st->time_base.den == 50)                tag = MKTAG('d','v','h','q');
1335         else                                                tag = MKTAG('d','v','h','p');
1336     } else if (track->par->height == 1080) { /* HD 1080 line */
1337         if  (track->st->time_base.den == 25)                tag = MKTAG('d','v','h','5');
1338         else                                                tag = MKTAG('d','v','h','6');
1339     } else {
1340         av_log(s, AV_LOG_ERROR, "unsupported height for dv codec\n");
1341         return 0;
1342     }
1343
1344     return tag;
1345 }
1346
1347 static AVRational find_fps(AVFormatContext *s, AVStream *st)
1348 {
1349     AVRational rate = st->avg_frame_rate;
1350
1351 #if FF_API_LAVF_AVCTX
1352     FF_DISABLE_DEPRECATION_WARNINGS
1353     rate = av_inv_q(st->codec->time_base);
1354     if (av_timecode_check_frame_rate(rate) < 0) {
1355         av_log(s, AV_LOG_DEBUG, "timecode: tbc=%d/%d invalid, fallback on %d/%d\n",
1356                rate.num, rate.den, st->avg_frame_rate.num, st->avg_frame_rate.den);
1357         rate = st->avg_frame_rate;
1358     }
1359     FF_ENABLE_DEPRECATION_WARNINGS
1360 #endif
1361
1362     return rate;
1363 }
1364
1365 static int defined_frame_rate(AVFormatContext *s, AVStream *st)
1366 {
1367     AVRational rational_framerate = find_fps(s, st);
1368     int rate = 0;
1369     if (rational_framerate.den != 0)
1370         rate = av_q2d(rational_framerate);
1371     return rate;
1372 }
1373
1374 static int mov_get_mpeg2_xdcam_codec_tag(AVFormatContext *s, MOVTrack *track)
1375 {
1376     int tag = track->par->codec_tag;
1377     int interlaced = track->par->field_order > AV_FIELD_PROGRESSIVE;
1378     AVStream *st = track->st;
1379     int rate = defined_frame_rate(s, st);
1380
1381     if (!tag)
1382         tag = MKTAG('m', '2', 'v', '1'); //fallback tag
1383
1384     if (track->par->format == AV_PIX_FMT_YUV420P) {
1385         if (track->par->width == 1280 && track->par->height == 720) {
1386             if (!interlaced) {
1387                 if      (rate == 24) tag = MKTAG('x','d','v','4');
1388                 else if (rate == 25) tag = MKTAG('x','d','v','5');
1389                 else if (rate == 30) tag = MKTAG('x','d','v','1');
1390                 else if (rate == 50) tag = MKTAG('x','d','v','a');
1391                 else if (rate == 60) tag = MKTAG('x','d','v','9');
1392             }
1393         } else if (track->par->width == 1440 && track->par->height == 1080) {
1394             if (!interlaced) {
1395                 if      (rate == 24) tag = MKTAG('x','d','v','6');
1396                 else if (rate == 25) tag = MKTAG('x','d','v','7');
1397                 else if (rate == 30) tag = MKTAG('x','d','v','8');
1398             } else {
1399                 if      (rate == 25) tag = MKTAG('x','d','v','3');
1400                 else if (rate == 30) tag = MKTAG('x','d','v','2');
1401             }
1402         } else if (track->par->width == 1920 && track->par->height == 1080) {
1403             if (!interlaced) {
1404                 if      (rate == 24) tag = MKTAG('x','d','v','d');
1405                 else if (rate == 25) tag = MKTAG('x','d','v','e');
1406                 else if (rate == 30) tag = MKTAG('x','d','v','f');
1407             } else {
1408                 if      (rate == 25) tag = MKTAG('x','d','v','c');
1409                 else if (rate == 30) tag = MKTAG('x','d','v','b');
1410             }
1411         }
1412     } else if (track->par->format == AV_PIX_FMT_YUV422P) {
1413         if (track->par->width == 1280 && track->par->height == 720) {
1414             if (!interlaced) {
1415                 if      (rate == 24) tag = MKTAG('x','d','5','4');
1416                 else if (rate == 25) tag = MKTAG('x','d','5','5');
1417                 else if (rate == 30) tag = MKTAG('x','d','5','1');
1418                 else if (rate == 50) tag = MKTAG('x','d','5','a');
1419                 else if (rate == 60) tag = MKTAG('x','d','5','9');
1420             }
1421         } else if (track->par->width == 1920 && track->par->height == 1080) {
1422             if (!interlaced) {
1423                 if      (rate == 24) tag = MKTAG('x','d','5','d');
1424                 else if (rate == 25) tag = MKTAG('x','d','5','e');
1425                 else if (rate == 30) tag = MKTAG('x','d','5','f');
1426             } else {
1427                 if      (rate == 25) tag = MKTAG('x','d','5','c');
1428                 else if (rate == 30) tag = MKTAG('x','d','5','b');
1429             }
1430         }
1431     }
1432
1433     return tag;
1434 }
1435
1436 static int mov_get_h264_codec_tag(AVFormatContext *s, MOVTrack *track)
1437 {
1438     int tag = track->par->codec_tag;
1439     int interlaced = track->par->field_order > AV_FIELD_PROGRESSIVE;
1440     AVStream *st = track->st;
1441     int rate = defined_frame_rate(s, st);
1442
1443     if (!tag)
1444         tag = MKTAG('a', 'v', 'c', 'i'); //fallback tag
1445
1446     if (track->par->format == AV_PIX_FMT_YUV420P10) {
1447         if (track->par->width == 960 && track->par->height == 720) {
1448             if (!interlaced) {
1449                 if      (rate == 24) tag = MKTAG('a','i','5','p');
1450                 else if (rate == 25) tag = MKTAG('a','i','5','q');
1451                 else if (rate == 30) tag = MKTAG('a','i','5','p');
1452                 else if (rate == 50) tag = MKTAG('a','i','5','q');
1453                 else if (rate == 60) tag = MKTAG('a','i','5','p');
1454             }
1455         } else if (track->par->width == 1440 && track->par->height == 1080) {
1456             if (!interlaced) {
1457                 if      (rate == 24) tag = MKTAG('a','i','5','3');
1458                 else if (rate == 25) tag = MKTAG('a','i','5','2');
1459                 else if (rate == 30) tag = MKTAG('a','i','5','3');
1460             } else {
1461                 if      (rate == 50) tag = MKTAG('a','i','5','5');
1462                 else if (rate == 60) tag = MKTAG('a','i','5','6');
1463             }
1464         }
1465     } else if (track->par->format == AV_PIX_FMT_YUV422P10) {
1466         if (track->par->width == 1280 && track->par->height == 720) {
1467             if (!interlaced) {
1468                 if      (rate == 24) tag = MKTAG('a','i','1','p');
1469                 else if (rate == 25) tag = MKTAG('a','i','1','q');
1470                 else if (rate == 30) tag = MKTAG('a','i','1','p');
1471                 else if (rate == 50) tag = MKTAG('a','i','1','q');
1472                 else if (rate == 60) tag = MKTAG('a','i','1','p');
1473             }
1474         } else if (track->par->width == 1920 && track->par->height == 1080) {
1475             if (!interlaced) {
1476                 if      (rate == 24) tag = MKTAG('a','i','1','3');
1477                 else if (rate == 25) tag = MKTAG('a','i','1','2');
1478                 else if (rate == 30) tag = MKTAG('a','i','1','3');
1479             } else {
1480                 if      (rate == 25) tag = MKTAG('a','i','1','5');
1481                 else if (rate == 50) tag = MKTAG('a','i','1','5');
1482                 else if (rate == 60) tag = MKTAG('a','i','1','6');
1483             }
1484         } else if (   track->par->width == 4096 && track->par->height == 2160
1485                    || track->par->width == 3840 && track->par->height == 2160
1486                    || track->par->width == 2048 && track->par->height == 1080) {
1487             tag = MKTAG('a','i','v','x');
1488         }
1489     }
1490
1491     return tag;
1492 }
1493
1494 static const struct {
1495     enum AVPixelFormat pix_fmt;
1496     uint32_t tag;
1497     unsigned bps;
1498 } mov_pix_fmt_tags[] = {
1499     { AV_PIX_FMT_YUYV422, MKTAG('y','u','v','2'),  0 },
1500     { AV_PIX_FMT_YUYV422, MKTAG('y','u','v','s'),  0 },
1501     { AV_PIX_FMT_UYVY422, MKTAG('2','v','u','y'),  0 },
1502     { AV_PIX_FMT_RGB555BE,MKTAG('r','a','w',' '), 16 },
1503     { AV_PIX_FMT_RGB555LE,MKTAG('L','5','5','5'), 16 },
1504     { AV_PIX_FMT_RGB565LE,MKTAG('L','5','6','5'), 16 },
1505     { AV_PIX_FMT_RGB565BE,MKTAG('B','5','6','5'), 16 },
1506     { AV_PIX_FMT_GRAY16BE,MKTAG('b','1','6','g'), 16 },
1507     { AV_PIX_FMT_RGB24,   MKTAG('r','a','w',' '), 24 },
1508     { AV_PIX_FMT_BGR24,   MKTAG('2','4','B','G'), 24 },
1509     { AV_PIX_FMT_ARGB,    MKTAG('r','a','w',' '), 32 },
1510     { AV_PIX_FMT_BGRA,    MKTAG('B','G','R','A'), 32 },
1511     { AV_PIX_FMT_RGBA,    MKTAG('R','G','B','A'), 32 },
1512     { AV_PIX_FMT_ABGR,    MKTAG('A','B','G','R'), 32 },
1513     { AV_PIX_FMT_RGB48BE, MKTAG('b','4','8','r'), 48 },
1514 };
1515
1516 static int mov_get_dnxhd_codec_tag(AVFormatContext *s, MOVTrack *track)
1517 {
1518   int tag = MKTAG('A','V','d','n');
1519   if (track->par->profile != FF_PROFILE_UNKNOWN &&
1520       track->par->profile != FF_PROFILE_DNXHD)
1521       tag = MKTAG('A','V','d','h');
1522   return tag;
1523 }
1524
1525 static int mov_get_rawvideo_codec_tag(AVFormatContext *s, MOVTrack *track)
1526 {
1527     int tag = track->par->codec_tag;
1528     int i;
1529     enum AVPixelFormat pix_fmt;
1530
1531     for (i = 0; i < FF_ARRAY_ELEMS(mov_pix_fmt_tags); i++) {
1532         if (track->par->format == mov_pix_fmt_tags[i].pix_fmt) {
1533             tag = mov_pix_fmt_tags[i].tag;
1534             track->par->bits_per_coded_sample = mov_pix_fmt_tags[i].bps;
1535             if (track->par->codec_tag == mov_pix_fmt_tags[i].tag)
1536                 break;
1537         }
1538     }
1539
1540     pix_fmt = avpriv_find_pix_fmt(avpriv_pix_fmt_bps_mov,
1541                                   track->par->bits_per_coded_sample);
1542     if (tag == MKTAG('r','a','w',' ') &&
1543         track->par->format != pix_fmt &&
1544         track->par->format != AV_PIX_FMT_GRAY8 &&
1545         track->par->format != AV_PIX_FMT_NONE)
1546         av_log(s, AV_LOG_ERROR, "%s rawvideo cannot be written to mov, output file will be unreadable\n",
1547                av_get_pix_fmt_name(track->par->format));
1548     return tag;
1549 }
1550
1551 static unsigned int mov_get_codec_tag(AVFormatContext *s, MOVTrack *track)
1552 {
1553     unsigned int tag = track->par->codec_tag;
1554
1555     if (!tag || (s->strict_std_compliance >= FF_COMPLIANCE_NORMAL &&
1556                  (track->par->codec_id == AV_CODEC_ID_DVVIDEO ||
1557                   track->par->codec_id == AV_CODEC_ID_RAWVIDEO ||
1558                   track->par->codec_id == AV_CODEC_ID_H263 ||
1559                   track->par->codec_id == AV_CODEC_ID_H264 ||
1560                   track->par->codec_id == AV_CODEC_ID_DNXHD ||
1561                   track->par->codec_id == AV_CODEC_ID_MPEG2VIDEO ||
1562                   av_get_bits_per_sample(track->par->codec_id)))) { // pcm audio
1563         if (track->par->codec_id == AV_CODEC_ID_DVVIDEO)
1564             tag = mov_get_dv_codec_tag(s, track);
1565         else if (track->par->codec_id == AV_CODEC_ID_RAWVIDEO)
1566             tag = mov_get_rawvideo_codec_tag(s, track);
1567         else if (track->par->codec_id == AV_CODEC_ID_MPEG2VIDEO)
1568             tag = mov_get_mpeg2_xdcam_codec_tag(s, track);
1569         else if (track->par->codec_id == AV_CODEC_ID_H264)
1570             tag = mov_get_h264_codec_tag(s, track);
1571         else if (track->par->codec_id == AV_CODEC_ID_DNXHD)
1572             tag = mov_get_dnxhd_codec_tag(s, track);
1573         else if (track->par->codec_type == AVMEDIA_TYPE_VIDEO) {
1574             tag = ff_codec_get_tag(ff_codec_movvideo_tags, track->par->codec_id);
1575             if (!tag) { // if no mac fcc found, try with Microsoft tags
1576                 tag = ff_codec_get_tag(ff_codec_bmp_tags, track->par->codec_id);
1577                 if (tag)
1578                     av_log(s, AV_LOG_WARNING, "Using MS style video codec tag, "
1579                            "the file may be unplayable!\n");
1580             }
1581         } else if (track->par->codec_type == AVMEDIA_TYPE_AUDIO) {
1582             tag = ff_codec_get_tag(ff_codec_movaudio_tags, track->par->codec_id);
1583             if (!tag) { // if no mac fcc found, try with Microsoft tags
1584                 int ms_tag = ff_codec_get_tag(ff_codec_wav_tags, track->par->codec_id);
1585                 if (ms_tag) {
1586                     tag = MKTAG('m', 's', ((ms_tag >> 8) & 0xff), (ms_tag & 0xff));
1587                     av_log(s, AV_LOG_WARNING, "Using MS style audio codec tag, "
1588                            "the file may be unplayable!\n");
1589                 }
1590             }
1591         } else if (track->par->codec_type == AVMEDIA_TYPE_SUBTITLE)
1592             tag = ff_codec_get_tag(ff_codec_movsubtitle_tags, track->par->codec_id);
1593     }
1594
1595     return tag;
1596 }
1597
1598 static const AVCodecTag codec_cover_image_tags[] = {
1599     { AV_CODEC_ID_MJPEG,  0xD },
1600     { AV_CODEC_ID_PNG,    0xE },
1601     { AV_CODEC_ID_BMP,    0x1B },
1602     { AV_CODEC_ID_NONE, 0 },
1603 };
1604
1605 static unsigned int validate_codec_tag(const AVCodecTag *const *tags,
1606                                        unsigned int tag, int codec_id)
1607 {
1608     int i;
1609
1610     /**
1611      * Check that tag + id is in the table
1612      */
1613     for (i = 0; tags && tags[i]; i++) {
1614         const AVCodecTag *codec_tags = tags[i];
1615         while (codec_tags->id != AV_CODEC_ID_NONE) {
1616             if (avpriv_toupper4(codec_tags->tag) == avpriv_toupper4(tag) &&
1617                 codec_tags->id == codec_id)
1618                 return codec_tags->tag;
1619             codec_tags++;
1620         }
1621     }
1622     return 0;
1623 }
1624
1625 static unsigned int mov_find_codec_tag(AVFormatContext *s, MOVTrack *track)
1626 {
1627     if (is_cover_image(track->st))
1628         return ff_codec_get_tag(codec_cover_image_tags, track->par->codec_id);
1629
1630     if (track->mode == MODE_IPOD)
1631         if (!av_match_ext(s->url, "m4a") &&
1632             !av_match_ext(s->url, "m4v") &&
1633             !av_match_ext(s->url, "m4b"))
1634             av_log(s, AV_LOG_WARNING, "Warning, extension is not .m4a nor .m4v "
1635                    "Quicktime/Ipod might not play the file\n");
1636
1637     if (track->mode == MODE_MOV) {
1638         return mov_get_codec_tag(s, track);
1639     } else
1640         return validate_codec_tag(s->oformat->codec_tag, track->par->codec_tag,
1641                                   track->par->codec_id);
1642 }
1643
1644 /** Write uuid atom.
1645  * Needed to make file play in iPods running newest firmware
1646  * goes after avcC atom in moov.trak.mdia.minf.stbl.stsd.avc1
1647  */
1648 static int mov_write_uuid_tag_ipod(AVIOContext *pb)
1649 {
1650     avio_wb32(pb, 28);
1651     ffio_wfourcc(pb, "uuid");
1652     avio_wb32(pb, 0x6b6840f2);
1653     avio_wb32(pb, 0x5f244fc5);
1654     avio_wb32(pb, 0xba39a51b);
1655     avio_wb32(pb, 0xcf0323f3);
1656     avio_wb32(pb, 0x0);
1657     return 28;
1658 }
1659
1660 static const uint16_t fiel_data[] = {
1661     0x0000, 0x0100, 0x0201, 0x0206, 0x0209, 0x020e
1662 };
1663
1664 static int mov_write_fiel_tag(AVIOContext *pb, MOVTrack *track, int field_order)
1665 {
1666     unsigned mov_field_order = 0;
1667     if (field_order < FF_ARRAY_ELEMS(fiel_data))
1668         mov_field_order = fiel_data[field_order];
1669     else
1670         return 0;
1671     avio_wb32(pb, 10);
1672     ffio_wfourcc(pb, "fiel");
1673     avio_wb16(pb, mov_field_order);
1674     return 10;
1675 }
1676
1677 static int mov_write_subtitle_tag(AVIOContext *pb, MOVTrack *track)
1678 {
1679     int64_t pos = avio_tell(pb);
1680     avio_wb32(pb, 0);    /* size */
1681     avio_wl32(pb, track->tag); // store it byteswapped
1682     avio_wb32(pb, 0);    /* Reserved */
1683     avio_wb16(pb, 0);    /* Reserved */
1684     avio_wb16(pb, 1);    /* Data-reference index */
1685
1686     if (track->par->codec_id == AV_CODEC_ID_DVD_SUBTITLE)
1687         mov_write_esds_tag(pb, track);
1688     else if (track->par->extradata_size)
1689         avio_write(pb, track->par->extradata, track->par->extradata_size);
1690
1691     return update_size(pb, pos);
1692 }
1693
1694 static int mov_write_st3d_tag(AVFormatContext *s, AVIOContext *pb, AVStereo3D *stereo_3d)
1695 {
1696     int8_t stereo_mode;
1697
1698     if (stereo_3d->flags != 0) {
1699         av_log(s, AV_LOG_WARNING, "Unsupported stereo_3d flags %x. st3d not written.\n", stereo_3d->flags);
1700         return 0;
1701     }
1702
1703     switch (stereo_3d->type) {
1704     case AV_STEREO3D_2D:
1705         stereo_mode = 0;
1706         break;
1707     case AV_STEREO3D_TOPBOTTOM:
1708         stereo_mode = 1;
1709         break;
1710     case AV_STEREO3D_SIDEBYSIDE:
1711         stereo_mode = 2;
1712         break;
1713     default:
1714         av_log(s, AV_LOG_WARNING, "Unsupported stereo_3d type %s. st3d not written.\n", av_stereo3d_type_name(stereo_3d->type));
1715         return 0;
1716     }
1717     avio_wb32(pb, 13); /* size */
1718     ffio_wfourcc(pb, "st3d");
1719     avio_wb32(pb, 0); /* version = 0 & flags = 0 */
1720     avio_w8(pb, stereo_mode);
1721     return 13;
1722 }
1723
1724 static int mov_write_sv3d_tag(AVFormatContext *s, AVIOContext *pb, AVSphericalMapping *spherical_mapping)
1725 {
1726     int64_t sv3d_pos, svhd_pos, proj_pos;
1727     const char* metadata_source = s->flags & AVFMT_FLAG_BITEXACT ? "Lavf" : LIBAVFORMAT_IDENT;
1728
1729     if (spherical_mapping->projection != AV_SPHERICAL_EQUIRECTANGULAR &&
1730         spherical_mapping->projection != AV_SPHERICAL_EQUIRECTANGULAR_TILE &&
1731         spherical_mapping->projection != AV_SPHERICAL_CUBEMAP) {
1732         av_log(s, AV_LOG_WARNING, "Unsupported projection %d. sv3d not written.\n", spherical_mapping->projection);
1733         return 0;
1734     }
1735
1736     sv3d_pos = avio_tell(pb);
1737     avio_wb32(pb, 0);  /* size */
1738     ffio_wfourcc(pb, "sv3d");
1739
1740     svhd_pos = avio_tell(pb);
1741     avio_wb32(pb, 0);  /* size */
1742     ffio_wfourcc(pb, "svhd");
1743     avio_wb32(pb, 0); /* version = 0 & flags = 0 */
1744     avio_put_str(pb, metadata_source);
1745     update_size(pb, svhd_pos);
1746
1747     proj_pos = avio_tell(pb);
1748     avio_wb32(pb, 0); /* size */
1749     ffio_wfourcc(pb, "proj");
1750
1751     avio_wb32(pb, 24); /* size */
1752     ffio_wfourcc(pb, "prhd");
1753     avio_wb32(pb, 0); /* version = 0 & flags = 0 */
1754     avio_wb32(pb, spherical_mapping->yaw);
1755     avio_wb32(pb, spherical_mapping->pitch);
1756     avio_wb32(pb, spherical_mapping->roll);
1757
1758     switch (spherical_mapping->projection) {
1759     case AV_SPHERICAL_EQUIRECTANGULAR:
1760     case AV_SPHERICAL_EQUIRECTANGULAR_TILE:
1761         avio_wb32(pb, 28);    /* size */
1762         ffio_wfourcc(pb, "equi");
1763         avio_wb32(pb, 0); /* version = 0 & flags = 0 */
1764         avio_wb32(pb, spherical_mapping->bound_top);
1765         avio_wb32(pb, spherical_mapping->bound_bottom);
1766         avio_wb32(pb, spherical_mapping->bound_left);
1767         avio_wb32(pb, spherical_mapping->bound_right);
1768         break;
1769     case AV_SPHERICAL_CUBEMAP:
1770         avio_wb32(pb, 20);    /* size */
1771         ffio_wfourcc(pb, "cbmp");
1772         avio_wb32(pb, 0); /* version = 0 & flags = 0 */
1773         avio_wb32(pb, 0); /* layout */
1774         avio_wb32(pb, spherical_mapping->padding); /* padding */
1775         break;
1776     }
1777     update_size(pb, proj_pos);
1778
1779     return update_size(pb, sv3d_pos);
1780 }
1781
1782 static int mov_write_clap_tag(AVIOContext *pb, MOVTrack *track)
1783 {
1784     avio_wb32(pb, 40);
1785     ffio_wfourcc(pb, "clap");
1786     avio_wb32(pb, track->par->width); /* apertureWidth_N */
1787     avio_wb32(pb, 1); /* apertureWidth_D (= 1) */
1788     avio_wb32(pb, track->height); /* apertureHeight_N */
1789     avio_wb32(pb, 1); /* apertureHeight_D (= 1) */
1790     avio_wb32(pb, 0); /* horizOff_N (= 0) */
1791     avio_wb32(pb, 1); /* horizOff_D (= 1) */
1792     avio_wb32(pb, 0); /* vertOff_N (= 0) */
1793     avio_wb32(pb, 1); /* vertOff_D (= 1) */
1794     return 40;
1795 }
1796
1797 static int mov_write_pasp_tag(AVIOContext *pb, MOVTrack *track)
1798 {
1799     AVRational sar;
1800     av_reduce(&sar.num, &sar.den, track->par->sample_aspect_ratio.num,
1801               track->par->sample_aspect_ratio.den, INT_MAX);
1802
1803     avio_wb32(pb, 16);
1804     ffio_wfourcc(pb, "pasp");
1805     avio_wb32(pb, sar.num);
1806     avio_wb32(pb, sar.den);
1807     return 16;
1808 }
1809
1810 static int mov_write_gama_tag(AVFormatContext *s, AVIOContext *pb, MOVTrack *track, double gamma)
1811 {
1812     uint32_t gama = 0;
1813     if (gamma <= 0.0) {
1814         gamma = avpriv_get_gamma_from_trc(track->par->color_trc);
1815     }
1816     av_log(s, AV_LOG_DEBUG, "gamma value %g\n", gamma);
1817
1818     if (gamma > 1e-6) {
1819         gama = (uint32_t)lrint((double)(1<<16) * gamma);
1820         av_log(s, AV_LOG_DEBUG, "writing gama value %"PRId32"\n", gama);
1821
1822         av_assert0(track->mode == MODE_MOV);
1823         avio_wb32(pb, 12);
1824         ffio_wfourcc(pb, "gama");
1825         avio_wb32(pb, gama);
1826         return 12;
1827     } else {
1828         av_log(s, AV_LOG_WARNING, "gamma value unknown, unable to write gama atom\n");
1829     }
1830     return 0;
1831 }
1832
1833 static int mov_write_colr_tag(AVIOContext *pb, MOVTrack *track)
1834 {
1835     // Ref (MOV): https://developer.apple.com/library/mac/technotes/tn2162/_index.html#//apple_ref/doc/uid/DTS40013070-CH1-TNTAG9
1836     // Ref (MP4): ISO/IEC 14496-12:2012
1837
1838     if (track->par->color_primaries == AVCOL_PRI_UNSPECIFIED &&
1839         track->par->color_trc == AVCOL_TRC_UNSPECIFIED &&
1840         track->par->color_space == AVCOL_SPC_UNSPECIFIED) {
1841         if ((track->par->width >= 1920 && track->par->height >= 1080)
1842           || (track->par->width == 1280 && track->par->height == 720)) {
1843             av_log(NULL, AV_LOG_WARNING, "color primaries unspecified, assuming bt709\n");
1844             track->par->color_primaries = AVCOL_PRI_BT709;
1845         } else if (track->par->width == 720 && track->height == 576) {
1846             av_log(NULL, AV_LOG_WARNING, "color primaries unspecified, assuming bt470bg\n");
1847             track->par->color_primaries = AVCOL_PRI_BT470BG;
1848         } else if (track->par->width == 720 &&
1849                    (track->height == 486 || track->height == 480)) {
1850             av_log(NULL, AV_LOG_WARNING, "color primaries unspecified, assuming smpte170\n");
1851             track->par->color_primaries = AVCOL_PRI_SMPTE170M;
1852         } else {
1853             av_log(NULL, AV_LOG_WARNING, "color primaries unspecified, unable to assume anything\n");
1854         }
1855         switch (track->par->color_primaries) {
1856         case AVCOL_PRI_BT709:
1857             track->par->color_trc = AVCOL_TRC_BT709;
1858             track->par->color_space = AVCOL_SPC_BT709;
1859             break;
1860         case AVCOL_PRI_SMPTE170M:
1861         case AVCOL_PRI_BT470BG:
1862             track->par->color_trc = AVCOL_TRC_BT709;
1863             track->par->color_space = AVCOL_SPC_SMPTE170M;
1864             break;
1865         }
1866     }
1867
1868     /* We should only ever be called by MOV or MP4. */
1869     av_assert0(track->mode == MODE_MOV || track->mode == MODE_MP4);
1870
1871     avio_wb32(pb, 18 + (track->mode == MODE_MP4));
1872     ffio_wfourcc(pb, "colr");
1873     if (track->mode == MODE_MP4)
1874         ffio_wfourcc(pb, "nclx");
1875     else
1876         ffio_wfourcc(pb, "nclc");
1877     switch (track->par->color_primaries) {
1878     case AVCOL_PRI_BT709:     avio_wb16(pb, 1); break;
1879     case AVCOL_PRI_BT470BG:   avio_wb16(pb, 5); break;
1880     case AVCOL_PRI_SMPTE170M:
1881     case AVCOL_PRI_SMPTE240M: avio_wb16(pb, 6); break;
1882     case AVCOL_PRI_BT2020:    avio_wb16(pb, 9); break;
1883     case AVCOL_PRI_SMPTE431:  avio_wb16(pb, 11); break;
1884     case AVCOL_PRI_SMPTE432:  avio_wb16(pb, 12); break;
1885     default:                  avio_wb16(pb, 2);
1886     }
1887     switch (track->par->color_trc) {
1888     case AVCOL_TRC_BT709:        avio_wb16(pb, 1); break;
1889     case AVCOL_TRC_SMPTE170M:    avio_wb16(pb, 1); break; // remapped
1890     case AVCOL_TRC_SMPTE240M:    avio_wb16(pb, 7); break;
1891     case AVCOL_TRC_SMPTEST2084:  avio_wb16(pb, 16); break;
1892     case AVCOL_TRC_SMPTE428:     avio_wb16(pb, 17); break;
1893     case AVCOL_TRC_ARIB_STD_B67: avio_wb16(pb, 18); break;
1894     default:                     avio_wb16(pb, 2);
1895     }
1896     switch (track->par->color_space) {
1897     case AVCOL_SPC_BT709:      avio_wb16(pb, 1); break;
1898     case AVCOL_SPC_BT470BG:
1899     case AVCOL_SPC_SMPTE170M:  avio_wb16(pb, 6); break;
1900     case AVCOL_SPC_SMPTE240M:  avio_wb16(pb, 7); break;
1901     case AVCOL_SPC_BT2020_NCL: avio_wb16(pb, 9); break;
1902     default:                   avio_wb16(pb, 2);
1903     }
1904
1905     if (track->mode == MODE_MP4) {
1906         int full_range = track->par->color_range == AVCOL_RANGE_JPEG;
1907         avio_w8(pb, full_range << 7);
1908         return 19;
1909     } else {
1910         return 18;
1911     }
1912 }
1913
1914 static void find_compressor(char * compressor_name, int len, MOVTrack *track)
1915 {
1916     AVDictionaryEntry *encoder;
1917     int xdcam_res =  (track->par->width == 1280 && track->par->height == 720)
1918                   || (track->par->width == 1440 && track->par->height == 1080)
1919                   || (track->par->width == 1920 && track->par->height == 1080);
1920
1921     if (track->mode == MODE_MOV &&
1922         (encoder = av_dict_get(track->st->metadata, "encoder", NULL, 0))) {
1923         av_strlcpy(compressor_name, encoder->value, 32);
1924     } else if (track->par->codec_id == AV_CODEC_ID_MPEG2VIDEO && xdcam_res) {
1925         int interlaced = track->par->field_order > AV_FIELD_PROGRESSIVE;
1926         AVStream *st = track->st;
1927         int rate = defined_frame_rate(NULL, st);
1928         av_strlcatf(compressor_name, len, "XDCAM");
1929         if (track->par->format == AV_PIX_FMT_YUV422P) {
1930             av_strlcatf(compressor_name, len, " HD422");
1931         } else if(track->par->width == 1440) {
1932             av_strlcatf(compressor_name, len, " HD");
1933         } else
1934             av_strlcatf(compressor_name, len, " EX");
1935
1936         av_strlcatf(compressor_name, len, " %d%c", track->par->height, interlaced ? 'i' : 'p');
1937
1938         av_strlcatf(compressor_name, len, "%d", rate * (interlaced + 1));
1939     }
1940 }
1941
1942 static int mov_write_video_tag(AVFormatContext *s, AVIOContext *pb, MOVMuxContext *mov, MOVTrack *track)
1943 {
1944     int64_t pos = avio_tell(pb);
1945     char compressor_name[32] = { 0 };
1946     int avid = 0;
1947
1948     int uncompressed_ycbcr = ((track->par->codec_id == AV_CODEC_ID_RAWVIDEO && track->par->format == AV_PIX_FMT_UYVY422)
1949                            || (track->par->codec_id == AV_CODEC_ID_RAWVIDEO && track->par->format == AV_PIX_FMT_YUYV422)
1950                            ||  track->par->codec_id == AV_CODEC_ID_V308
1951                            ||  track->par->codec_id == AV_CODEC_ID_V408
1952                            ||  track->par->codec_id == AV_CODEC_ID_V410
1953                            ||  track->par->codec_id == AV_CODEC_ID_V210);
1954
1955     avio_wb32(pb, 0); /* size */
1956     if (mov->encryption_scheme != MOV_ENC_NONE) {
1957         ffio_wfourcc(pb, "encv");
1958     } else {
1959         avio_wl32(pb, track->tag); // store it byteswapped
1960     }
1961     avio_wb32(pb, 0); /* Reserved */
1962     avio_wb16(pb, 0); /* Reserved */
1963     avio_wb16(pb, 1); /* Data-reference index */
1964
1965     if (uncompressed_ycbcr) {
1966         avio_wb16(pb, 2); /* Codec stream version */
1967     } else {
1968         avio_wb16(pb, 0); /* Codec stream version */
1969     }
1970     avio_wb16(pb, 0); /* Codec stream revision (=0) */
1971     if (track->mode == MODE_MOV) {
1972         ffio_wfourcc(pb, "FFMP"); /* Vendor */
1973         if (track->par->codec_id == AV_CODEC_ID_RAWVIDEO || uncompressed_ycbcr) {
1974             avio_wb32(pb, 0); /* Temporal Quality */
1975             avio_wb32(pb, 0x400); /* Spatial Quality = lossless*/
1976         } else {
1977             avio_wb32(pb, 0x200); /* Temporal Quality = normal */
1978             avio_wb32(pb, 0x200); /* Spatial Quality = normal */
1979         }
1980     } else {
1981         avio_wb32(pb, 0); /* Reserved */
1982         avio_wb32(pb, 0); /* Reserved */
1983         avio_wb32(pb, 0); /* Reserved */
1984     }
1985     avio_wb16(pb, track->par->width); /* Video width */
1986     avio_wb16(pb, track->height); /* Video height */
1987     avio_wb32(pb, 0x00480000); /* Horizontal resolution 72dpi */
1988     avio_wb32(pb, 0x00480000); /* Vertical resolution 72dpi */
1989     avio_wb32(pb, 0); /* Data size (= 0) */
1990     avio_wb16(pb, 1); /* Frame count (= 1) */
1991
1992     /* FIXME not sure, ISO 14496-1 draft where it shall be set to 0 */
1993     find_compressor(compressor_name, 32, track);
1994     avio_w8(pb, strlen(compressor_name));
1995     avio_write(pb, compressor_name, 31);
1996
1997     if (track->mode == MODE_MOV &&
1998        (track->par->codec_id == AV_CODEC_ID_V410 || track->par->codec_id == AV_CODEC_ID_V210))
1999         avio_wb16(pb, 0x18);
2000     else if (track->mode == MODE_MOV && track->par->bits_per_coded_sample)
2001         avio_wb16(pb, track->par->bits_per_coded_sample |
2002                   (track->par->format == AV_PIX_FMT_GRAY8 ? 0x20 : 0));
2003     else
2004         avio_wb16(pb, 0x18); /* Reserved */
2005
2006     if (track->mode == MODE_MOV && track->par->format == AV_PIX_FMT_PAL8) {
2007         int pal_size = 1 << track->par->bits_per_coded_sample;
2008         int i;
2009         avio_wb16(pb, 0);             /* Color table ID */
2010         avio_wb32(pb, 0);             /* Color table seed */
2011         avio_wb16(pb, 0x8000);        /* Color table flags */
2012         avio_wb16(pb, pal_size - 1);  /* Color table size (zero-relative) */
2013         for (i = 0; i < pal_size; i++) {
2014             uint32_t rgb = track->palette[i];
2015             uint16_t r = (rgb >> 16) & 0xff;
2016             uint16_t g = (rgb >> 8)  & 0xff;
2017             uint16_t b = rgb         & 0xff;
2018             avio_wb16(pb, 0);
2019             avio_wb16(pb, (r << 8) | r);
2020             avio_wb16(pb, (g << 8) | g);
2021             avio_wb16(pb, (b << 8) | b);
2022         }
2023     } else
2024         avio_wb16(pb, 0xffff); /* Reserved */
2025
2026     if (track->tag == MKTAG('m','p','4','v'))
2027         mov_write_esds_tag(pb, track);
2028     else if (track->par->codec_id == AV_CODEC_ID_H263)
2029         mov_write_d263_tag(pb);
2030     else if (track->par->codec_id == AV_CODEC_ID_AVUI ||
2031             track->par->codec_id == AV_CODEC_ID_SVQ3) {
2032         mov_write_extradata_tag(pb, track);
2033         avio_wb32(pb, 0);
2034     } else if (track->par->codec_id == AV_CODEC_ID_DNXHD) {
2035         mov_write_avid_tag(pb, track);
2036         avid = 1;
2037     } else if (track->par->codec_id == AV_CODEC_ID_HEVC)
2038         mov_write_hvcc_tag(pb, track);
2039     else if (track->par->codec_id == AV_CODEC_ID_H264 && !TAG_IS_AVCI(track->tag)) {
2040         mov_write_avcc_tag(pb, track);
2041         if (track->mode == MODE_IPOD)
2042             mov_write_uuid_tag_ipod(pb);
2043     } else if (track->par->codec_id == AV_CODEC_ID_VP9) {
2044         mov_write_vpcc_tag(mov->fc, pb, track);
2045     } else if (track->par->codec_id == AV_CODEC_ID_AV1) {
2046         mov_write_av1c_tag(pb, track);
2047     } else if (track->par->codec_id == AV_CODEC_ID_VC1 && track->vos_len > 0)
2048         mov_write_dvc1_tag(pb, track);
2049     else if (track->par->codec_id == AV_CODEC_ID_VP6F ||
2050              track->par->codec_id == AV_CODEC_ID_VP6A) {
2051         /* Don't write any potential extradata here - the cropping
2052          * is signalled via the normal width/height fields. */
2053     } else if (track->par->codec_id == AV_CODEC_ID_R10K) {
2054         if (track->par->codec_tag == MKTAG('R','1','0','k'))
2055             mov_write_dpxe_tag(pb, track);
2056     } else if (track->vos_len > 0)
2057         mov_write_glbl_tag(pb, track);
2058
2059     if (track->par->codec_id != AV_CODEC_ID_H264 &&
2060         track->par->codec_id != AV_CODEC_ID_MPEG4 &&
2061         track->par->codec_id != AV_CODEC_ID_DNXHD) {
2062         int field_order = track->par->field_order;
2063
2064 #if FF_API_LAVF_AVCTX
2065     FF_DISABLE_DEPRECATION_WARNINGS
2066     if (field_order != track->st->codec->field_order && track->st->codec->field_order != AV_FIELD_UNKNOWN)
2067         field_order = track->st->codec->field_order;
2068     FF_ENABLE_DEPRECATION_WARNINGS
2069 #endif
2070
2071         if (field_order != AV_FIELD_UNKNOWN)
2072             mov_write_fiel_tag(pb, track, field_order);
2073     }
2074
2075     if (mov->flags & FF_MOV_FLAG_WRITE_GAMA) {
2076         if (track->mode == MODE_MOV)
2077             mov_write_gama_tag(s, pb, track, mov->gamma);
2078         else
2079             av_log(mov->fc, AV_LOG_WARNING, "Not writing 'gama' atom. Format is not MOV.\n");
2080     }
2081     if (mov->flags & FF_MOV_FLAG_WRITE_COLR) {
2082         if (track->mode == MODE_MOV || track->mode == MODE_MP4)
2083             mov_write_colr_tag(pb, track);
2084         else
2085             av_log(mov->fc, AV_LOG_WARNING, "Not writing 'colr' atom. Format is not MOV or MP4.\n");
2086     }
2087
2088     if (track->mode == MODE_MP4 && mov->fc->strict_std_compliance <= FF_COMPLIANCE_UNOFFICIAL) {
2089         AVStereo3D* stereo_3d = (AVStereo3D*) av_stream_get_side_data(track->st, AV_PKT_DATA_STEREO3D, NULL);
2090         AVSphericalMapping* spherical_mapping = (AVSphericalMapping*)av_stream_get_side_data(track->st, AV_PKT_DATA_SPHERICAL, NULL);
2091
2092         if (stereo_3d)
2093             mov_write_st3d_tag(s, pb, stereo_3d);
2094         if (spherical_mapping)
2095             mov_write_sv3d_tag(mov->fc, pb, spherical_mapping);
2096     }
2097
2098     if (track->par->sample_aspect_ratio.den && track->par->sample_aspect_ratio.num) {
2099         mov_write_pasp_tag(pb, track);
2100     }
2101
2102     if (uncompressed_ycbcr){
2103         mov_write_clap_tag(pb, track);
2104     }
2105
2106     if (mov->encryption_scheme != MOV_ENC_NONE) {
2107         ff_mov_cenc_write_sinf_tag(track, pb, mov->encryption_kid);
2108     }
2109
2110     /* extra padding for avid stsd */
2111     /* https://developer.apple.com/library/mac/documentation/QuickTime/QTFF/QTFFChap2/qtff2.html#//apple_ref/doc/uid/TP40000939-CH204-61112 */
2112     if (avid)
2113         avio_wb32(pb, 0);
2114
2115     return update_size(pb, pos);
2116 }
2117
2118 static int mov_write_rtp_tag(AVIOContext *pb, MOVTrack *track)
2119 {
2120     int64_t pos = avio_tell(pb);
2121     avio_wb32(pb, 0); /* size */
2122     ffio_wfourcc(pb, "rtp ");
2123     avio_wb32(pb, 0); /* Reserved */
2124     avio_wb16(pb, 0); /* Reserved */
2125     avio_wb16(pb, 1); /* Data-reference index */
2126
2127     avio_wb16(pb, 1); /* Hint track version */
2128     avio_wb16(pb, 1); /* Highest compatible version */
2129     avio_wb32(pb, track->max_packet_size); /* Max packet size */
2130
2131     avio_wb32(pb, 12); /* size */
2132     ffio_wfourcc(pb, "tims");
2133     avio_wb32(pb, track->timescale);
2134
2135     return update_size(pb, pos);
2136 }
2137
2138 static int mov_write_source_reference_tag(AVIOContext *pb, MOVTrack *track, const char *reel_name)
2139 {
2140     uint64_t str_size =strlen(reel_name);
2141     int64_t pos = avio_tell(pb);
2142
2143     if (str_size >= UINT16_MAX){
2144         av_log(NULL, AV_LOG_ERROR, "reel_name length %"PRIu64" is too large\n", str_size);
2145         avio_wb16(pb, 0);
2146         return AVERROR(EINVAL);
2147     }
2148
2149     avio_wb32(pb, 0);                              /* size */
2150     ffio_wfourcc(pb, "name");                      /* Data format */
2151     avio_wb16(pb, str_size);                       /* string size */
2152     avio_wb16(pb, track->language);                /* langcode */
2153     avio_write(pb, reel_name, str_size);           /* reel name */
2154     return update_size(pb,pos);
2155 }
2156
2157 static int mov_write_tmcd_tag(AVIOContext *pb, MOVTrack *track)
2158 {
2159     int64_t pos = avio_tell(pb);
2160 #if 1
2161     int frame_duration;
2162     int nb_frames;
2163     AVDictionaryEntry *t = NULL;
2164
2165     if (!track->st->avg_frame_rate.num || !track->st->avg_frame_rate.den) {
2166 #if FF_API_LAVF_AVCTX
2167     FF_DISABLE_DEPRECATION_WARNINGS
2168         frame_duration = av_rescale(track->timescale, track->st->codec->time_base.num, track->st->codec->time_base.den);
2169         nb_frames      = ROUNDED_DIV(track->st->codec->time_base.den, track->st->codec->time_base.num);
2170     FF_ENABLE_DEPRECATION_WARNINGS
2171 #else
2172         av_log(NULL, AV_LOG_ERROR, "avg_frame_rate not set for tmcd track.\n");
2173         return AVERROR(EINVAL);
2174 #endif
2175     } else {
2176         frame_duration = av_rescale(track->timescale, track->st->avg_frame_rate.num, track->st->avg_frame_rate.den);
2177         nb_frames      = ROUNDED_DIV(track->st->avg_frame_rate.den, track->st->avg_frame_rate.num);
2178     }
2179
2180     if (nb_frames > 255) {
2181         av_log(NULL, AV_LOG_ERROR, "fps %d is too large\n", nb_frames);
2182         return AVERROR(EINVAL);
2183     }
2184
2185     avio_wb32(pb, 0); /* size */
2186     ffio_wfourcc(pb, "tmcd");               /* Data format */
2187     avio_wb32(pb, 0);                       /* Reserved */
2188     avio_wb32(pb, 1);                       /* Data reference index */
2189     avio_wb32(pb, 0);                       /* Flags */
2190     avio_wb32(pb, track->timecode_flags);   /* Flags (timecode) */
2191     avio_wb32(pb, track->timescale);        /* Timescale */
2192     avio_wb32(pb, frame_duration);          /* Frame duration */
2193     avio_w8(pb, nb_frames);                 /* Number of frames */
2194     avio_w8(pb, 0);                         /* Reserved */
2195
2196     t = av_dict_get(track->st->metadata, "reel_name", NULL, 0);
2197     if (t && utf8len(t->value) && track->mode != MODE_MP4)
2198         mov_write_source_reference_tag(pb, track, t->value);
2199     else
2200         avio_wb16(pb, 0); /* zero size */
2201 #else
2202
2203     avio_wb32(pb, 0); /* size */
2204     ffio_wfourcc(pb, "tmcd");               /* Data format */
2205     avio_wb32(pb, 0);                       /* Reserved */
2206     avio_wb32(pb, 1);                       /* Data reference index */
2207     if (track->par->extradata_size)
2208         avio_write(pb, track->par->extradata, track->par->extradata_size);
2209 #endif
2210     return update_size(pb, pos);
2211 }
2212
2213 static int mov_write_gpmd_tag(AVIOContext *pb, const MOVTrack *track)
2214 {
2215     int64_t pos = avio_tell(pb);
2216     avio_wb32(pb, 0); /* size */
2217     ffio_wfourcc(pb, "gpmd");
2218     avio_wb32(pb, 0); /* Reserved */
2219     avio_wb16(pb, 0); /* Reserved */
2220     avio_wb16(pb, 1); /* Data-reference index */
2221     avio_wb32(pb, 0); /* Reserved */
2222     return update_size(pb, pos);
2223 }
2224
2225 static int mov_write_stsd_tag(AVFormatContext *s, AVIOContext *pb, MOVMuxContext *mov, MOVTrack *track)
2226 {
2227     int64_t pos = avio_tell(pb);
2228     int ret = 0;
2229     avio_wb32(pb, 0); /* size */
2230     ffio_wfourcc(pb, "stsd");
2231     avio_wb32(pb, 0); /* version & flags */
2232     avio_wb32(pb, 1); /* entry count */
2233     if (track->par->codec_type == AVMEDIA_TYPE_VIDEO)
2234         ret = mov_write_video_tag(s, pb, mov, track);
2235     else if (track->par->codec_type == AVMEDIA_TYPE_AUDIO)
2236         ret = mov_write_audio_tag(s, pb, mov, track);
2237     else if (track->par->codec_type == AVMEDIA_TYPE_SUBTITLE)
2238         ret = mov_write_subtitle_tag(pb, track);
2239     else if (track->par->codec_tag == MKTAG('r','t','p',' '))
2240         ret = mov_write_rtp_tag(pb, track);
2241     else if (track->par->codec_tag == MKTAG('t','m','c','d'))
2242         ret = mov_write_tmcd_tag(pb, track);
2243     else if (track->par->codec_tag == MKTAG('g','p','m','d'))
2244         ret = mov_write_gpmd_tag(pb, track);
2245
2246     if (ret < 0)
2247         return ret;
2248
2249     return update_size(pb, pos);
2250 }
2251
2252 static int mov_write_ctts_tag(AVFormatContext *s, AVIOContext *pb, MOVTrack *track)
2253 {
2254     MOVMuxContext *mov = s->priv_data;
2255     MOVStts *ctts_entries;
2256     uint32_t entries = 0;
2257     uint32_t atom_size;
2258     int i;
2259
2260     ctts_entries = av_malloc_array((track->entry + 1), sizeof(*ctts_entries)); /* worst case */
2261     if (!ctts_entries)
2262         return AVERROR(ENOMEM);
2263     ctts_entries[0].count = 1;
2264     ctts_entries[0].duration = track->cluster[0].cts;
2265     for (i = 1; i < track->entry; i++) {
2266         if (track->cluster[i].cts == ctts_entries[entries].duration) {
2267             ctts_entries[entries].count++; /* compress */
2268         } else {
2269             entries++;
2270             ctts_entries[entries].duration = track->cluster[i].cts;
2271             ctts_entries[entries].count = 1;
2272         }
2273     }
2274     entries++; /* last one */
2275     atom_size = 16 + (entries * 8);
2276     avio_wb32(pb, atom_size); /* size */
2277     ffio_wfourcc(pb, "ctts");
2278     if (mov->flags & FF_MOV_FLAG_NEGATIVE_CTS_OFFSETS)
2279         avio_w8(pb, 1); /* version */
2280     else
2281         avio_w8(pb, 0); /* version */
2282     avio_wb24(pb, 0); /* flags */
2283     avio_wb32(pb, entries); /* entry count */
2284     for (i = 0; i < entries; i++) {
2285         avio_wb32(pb, ctts_entries[i].count);
2286         avio_wb32(pb, ctts_entries[i].duration);
2287     }
2288     av_free(ctts_entries);
2289     return atom_size;
2290 }
2291
2292 /* Time to sample atom */
2293 static int mov_write_stts_tag(AVIOContext *pb, MOVTrack *track)
2294 {
2295     MOVStts *stts_entries = NULL;
2296     uint32_t entries = -1;
2297     uint32_t atom_size;
2298     int i;
2299
2300     if (track->par->codec_type == AVMEDIA_TYPE_AUDIO && !track->audio_vbr) {
2301         stts_entries = av_malloc(sizeof(*stts_entries)); /* one entry */
2302         if (!stts_entries)
2303             return AVERROR(ENOMEM);
2304         stts_entries[0].count = track->sample_count;
2305         stts_entries[0].duration = 1;
2306         entries = 1;
2307     } else {
2308         if (track->entry) {
2309             stts_entries = av_malloc_array(track->entry, sizeof(*stts_entries)); /* worst case */
2310             if (!stts_entries)
2311                 return AVERROR(ENOMEM);
2312         }
2313         for (i = 0; i < track->entry; i++) {
2314             int duration = get_cluster_duration(track, i);
2315             if (i && duration == stts_entries[entries].duration) {
2316                 stts_entries[entries].count++; /* compress */
2317             } else {
2318                 entries++;
2319                 stts_entries[entries].duration = duration;
2320                 stts_entries[entries].count = 1;
2321             }
2322         }
2323         entries++; /* last one */
2324     }
2325     atom_size = 16 + (entries * 8);
2326     avio_wb32(pb, atom_size); /* size */
2327     ffio_wfourcc(pb, "stts");
2328     avio_wb32(pb, 0); /* version & flags */
2329     avio_wb32(pb, entries); /* entry count */
2330     for (i = 0; i < entries; i++) {
2331         avio_wb32(pb, stts_entries[i].count);
2332         avio_wb32(pb, stts_entries[i].duration);
2333     }
2334     av_free(stts_entries);
2335     return atom_size;
2336 }
2337
2338 static int mov_write_dref_tag(AVIOContext *pb)
2339 {
2340     avio_wb32(pb, 28); /* size */
2341     ffio_wfourcc(pb, "dref");
2342     avio_wb32(pb, 0); /* version & flags */
2343     avio_wb32(pb, 1); /* entry count */
2344
2345     avio_wb32(pb, 0xc); /* size */
2346     //FIXME add the alis and rsrc atom
2347     ffio_wfourcc(pb, "url ");
2348     avio_wb32(pb, 1); /* version & flags */
2349
2350     return 28;
2351 }
2352
2353 static int mov_preroll_write_stbl_atoms(AVIOContext *pb, MOVTrack *track)
2354 {
2355     struct sgpd_entry {
2356         int count;
2357         int16_t roll_distance;
2358         int group_description_index;
2359     };
2360
2361     struct sgpd_entry *sgpd_entries = NULL;
2362     int entries = -1;
2363     int group = 0;
2364     int i, j;
2365
2366     const int OPUS_SEEK_PREROLL_MS = 80;
2367     int roll_samples = av_rescale_q(OPUS_SEEK_PREROLL_MS,
2368                                     (AVRational){1, 1000},
2369                                     (AVRational){1, 48000});
2370
2371     if (!track->entry)
2372         return 0;
2373
2374     sgpd_entries = av_malloc_array(track->entry, sizeof(*sgpd_entries));
2375     if (!sgpd_entries)
2376         return AVERROR(ENOMEM);
2377
2378     av_assert0(track->par->codec_id == AV_CODEC_ID_OPUS || track->par->codec_id == AV_CODEC_ID_AAC);
2379
2380     if (track->par->codec_id == AV_CODEC_ID_OPUS) {
2381         for (i = 0; i < track->entry; i++) {
2382             int roll_samples_remaining = roll_samples;
2383             int distance = 0;
2384             for (j = i - 1; j >= 0; j--) {
2385                 roll_samples_remaining -= get_cluster_duration(track, j);
2386                 distance++;
2387                 if (roll_samples_remaining <= 0)
2388                     break;
2389             }
2390             /* We don't have enough preceeding samples to compute a valid
2391                roll_distance here, so this sample can't be independently
2392                decoded. */
2393             if (roll_samples_remaining > 0)
2394                 distance = 0;
2395             /* Verify distance is a maximum of 32 (2.5ms) packets. */
2396             if (distance > 32)
2397                 return AVERROR_INVALIDDATA;
2398             if (i && distance == sgpd_entries[entries].roll_distance) {
2399                 sgpd_entries[entries].count++;
2400             } else {
2401                 entries++;
2402                 sgpd_entries[entries].count = 1;
2403                 sgpd_entries[entries].roll_distance = distance;
2404                 sgpd_entries[entries].group_description_index = distance ? ++group : 0;
2405             }
2406         }
2407     } else {
2408         entries++;
2409         sgpd_entries[entries].count = track->sample_count;
2410         sgpd_entries[entries].roll_distance = 1;
2411         sgpd_entries[entries].group_description_index = ++group;
2412     }
2413     entries++;
2414
2415     if (!group) {
2416         av_free(sgpd_entries);
2417         return 0;
2418     }
2419
2420     /* Write sgpd tag */
2421     avio_wb32(pb, 24 + (group * 2)); /* size */
2422     ffio_wfourcc(pb, "sgpd");
2423     avio_wb32(pb, 1 << 24); /* fullbox */
2424     ffio_wfourcc(pb, "roll");
2425     avio_wb32(pb, 2); /* default_length */
2426     avio_wb32(pb, group); /* entry_count */
2427     for (i = 0; i < entries; i++) {
2428         if (sgpd_entries[i].group_description_index) {
2429             avio_wb16(pb, -sgpd_entries[i].roll_distance); /* roll_distance */
2430         }
2431     }
2432
2433     /* Write sbgp tag */
2434     avio_wb32(pb, 20 + (entries * 8)); /* size */
2435     ffio_wfourcc(pb, "sbgp");
2436     avio_wb32(pb, 0); /* fullbox */
2437     ffio_wfourcc(pb, "roll");
2438     avio_wb32(pb, entries); /* entry_count */
2439     for (i = 0; i < entries; i++) {
2440         avio_wb32(pb, sgpd_entries[i].count); /* sample_count */
2441         avio_wb32(pb, sgpd_entries[i].group_description_index); /* group_description_index */
2442     }
2443
2444     av_free(sgpd_entries);
2445     return 0;
2446 }
2447
2448 static int mov_write_stbl_tag(AVFormatContext *s, AVIOContext *pb, MOVMuxContext *mov, MOVTrack *track)
2449 {
2450     int64_t pos = avio_tell(pb);
2451     int ret = 0;
2452
2453     avio_wb32(pb, 0); /* size */
2454     ffio_wfourcc(pb, "stbl");
2455     if ((ret = mov_write_stsd_tag(s, pb, mov, track)) < 0)
2456         return ret;
2457     mov_write_stts_tag(pb, track);
2458     if ((track->par->codec_type == AVMEDIA_TYPE_VIDEO ||
2459          track->par->codec_tag == MKTAG('r','t','p',' ')) &&
2460         track->has_keyframes && track->has_keyframes < track->entry)
2461         mov_write_stss_tag(pb, track, MOV_SYNC_SAMPLE);
2462     if (track->par->codec_type == AVMEDIA_TYPE_VIDEO && track->has_disposable)
2463         mov_write_sdtp_tag(pb, track);
2464     if (track->mode == MODE_MOV && track->flags & MOV_TRACK_STPS)
2465         mov_write_stss_tag(pb, track, MOV_PARTIAL_SYNC_SAMPLE);
2466     if (track->par->codec_type == AVMEDIA_TYPE_VIDEO &&
2467         track->flags & MOV_TRACK_CTTS && track->entry) {
2468
2469         if ((ret = mov_write_ctts_tag(s, pb, track)) < 0)
2470             return ret;
2471     }
2472     mov_write_stsc_tag(pb, track);
2473     mov_write_stsz_tag(pb, track);
2474     mov_write_stco_tag(pb, track);
2475     if (track->cenc.aes_ctr) {
2476         ff_mov_cenc_write_stbl_atoms(&track->cenc, pb);
2477     }
2478     if (track->par->codec_id == AV_CODEC_ID_OPUS || track->par->codec_id == AV_CODEC_ID_AAC) {
2479         mov_preroll_write_stbl_atoms(pb, track);
2480     }
2481     return update_size(pb, pos);
2482 }
2483
2484 static int mov_write_dinf_tag(AVIOContext *pb)
2485 {
2486     int64_t pos = avio_tell(pb);
2487     avio_wb32(pb, 0); /* size */
2488     ffio_wfourcc(pb, "dinf");
2489     mov_write_dref_tag(pb);
2490     return update_size(pb, pos);
2491 }
2492
2493 static int mov_write_nmhd_tag(AVIOContext *pb)
2494 {
2495     avio_wb32(pb, 12);
2496     ffio_wfourcc(pb, "nmhd");
2497     avio_wb32(pb, 0);
2498     return 12;
2499 }
2500
2501 static int mov_write_tcmi_tag(AVIOContext *pb, MOVTrack *track)
2502 {
2503     int64_t pos = avio_tell(pb);
2504     const char *font = "Lucida Grande";
2505     avio_wb32(pb, 0);                   /* size */
2506     ffio_wfourcc(pb, "tcmi");           /* timecode media information atom */
2507     avio_wb32(pb, 0);                   /* version & flags */
2508     avio_wb16(pb, 0);                   /* text font */
2509     avio_wb16(pb, 0);                   /* text face */
2510     avio_wb16(pb, 12);                  /* text size */
2511     avio_wb16(pb, 0);                   /* (unknown, not in the QT specs...) */
2512     avio_wb16(pb, 0x0000);              /* text color (red) */
2513     avio_wb16(pb, 0x0000);              /* text color (green) */
2514     avio_wb16(pb, 0x0000);              /* text color (blue) */
2515     avio_wb16(pb, 0xffff);              /* background color (red) */
2516     avio_wb16(pb, 0xffff);              /* background color (green) */
2517     avio_wb16(pb, 0xffff);              /* background color (blue) */
2518     avio_w8(pb, strlen(font));          /* font len (part of the pascal string) */
2519     avio_write(pb, font, strlen(font)); /* font name */
2520     return update_size(pb, pos);
2521 }
2522
2523 static int mov_write_gmhd_tag(AVIOContext *pb, MOVTrack *track)
2524 {
2525     int64_t pos = avio_tell(pb);
2526     avio_wb32(pb, 0);      /* size */
2527     ffio_wfourcc(pb, "gmhd");
2528     avio_wb32(pb, 0x18);   /* gmin size */
2529     ffio_wfourcc(pb, "gmin");/* generic media info */
2530     avio_wb32(pb, 0);      /* version & flags */
2531     avio_wb16(pb, 0x40);   /* graphics mode = */
2532     avio_wb16(pb, 0x8000); /* opColor (r?) */
2533     avio_wb16(pb, 0x8000); /* opColor (g?) */
2534     avio_wb16(pb, 0x8000); /* opColor (b?) */
2535     avio_wb16(pb, 0);      /* balance */
2536     avio_wb16(pb, 0);      /* reserved */
2537
2538     /*
2539      * This special text atom is required for
2540      * Apple Quicktime chapters. The contents
2541      * don't appear to be documented, so the
2542      * bytes are copied verbatim.
2543      */
2544     if (track->tag != MKTAG('c','6','0','8')) {
2545     avio_wb32(pb, 0x2C);   /* size */
2546     ffio_wfourcc(pb, "text");
2547     avio_wb16(pb, 0x01);
2548     avio_wb32(pb, 0x00);
2549     avio_wb32(pb, 0x00);
2550     avio_wb32(pb, 0x00);
2551     avio_wb32(pb, 0x01);
2552     avio_wb32(pb, 0x00);
2553     avio_wb32(pb, 0x00);
2554     avio_wb32(pb, 0x00);
2555     avio_wb32(pb, 0x00004000);
2556     avio_wb16(pb, 0x0000);
2557     }
2558
2559     if (track->par->codec_tag == MKTAG('t','m','c','d')) {
2560         int64_t tmcd_pos = avio_tell(pb);
2561         avio_wb32(pb, 0); /* size */
2562         ffio_wfourcc(pb, "tmcd");
2563         mov_write_tcmi_tag(pb, track);
2564         update_size(pb, tmcd_pos);
2565     } else if (track->par->codec_tag == MKTAG('g','p','m','d')) {
2566         int64_t gpmd_pos = avio_tell(pb);
2567         avio_wb32(pb, 0); /* size */
2568         ffio_wfourcc(pb, "gpmd");
2569         avio_wb32(pb, 0); /* version */
2570         update_size(pb, gpmd_pos);
2571     }
2572     return update_size(pb, pos);
2573 }
2574
2575 static int mov_write_smhd_tag(AVIOContext *pb)
2576 {
2577     avio_wb32(pb, 16); /* size */
2578     ffio_wfourcc(pb, "smhd");
2579     avio_wb32(pb, 0); /* version & flags */
2580     avio_wb16(pb, 0); /* reserved (balance, normally = 0) */
2581     avio_wb16(pb, 0); /* reserved */
2582     return 16;
2583 }
2584
2585 static int mov_write_vmhd_tag(AVIOContext *pb)
2586 {
2587     avio_wb32(pb, 0x14); /* size (always 0x14) */
2588     ffio_wfourcc(pb, "vmhd");
2589     avio_wb32(pb, 0x01); /* version & flags */
2590     avio_wb64(pb, 0); /* reserved (graphics mode = copy) */
2591     return 0x14;
2592 }
2593
2594 static int is_clcp_track(MOVTrack *track)
2595 {
2596     return track->tag == MKTAG('c','7','0','8') ||
2597            track->tag == MKTAG('c','6','0','8');
2598 }
2599
2600 static int mov_write_hdlr_tag(AVFormatContext *s, AVIOContext *pb, MOVTrack *track)
2601 {
2602     MOVMuxContext *mov = s->priv_data;
2603     const char *hdlr, *descr = NULL, *hdlr_type = NULL;
2604     int64_t pos = avio_tell(pb);
2605
2606     hdlr      = "dhlr";
2607     hdlr_type = "url ";
2608     descr     = "DataHandler";
2609
2610     if (track) {
2611         hdlr = (track->mode == MODE_MOV) ? "mhlr" : "\0\0\0\0";
2612         if (track->par->codec_type == AVMEDIA_TYPE_VIDEO) {
2613             hdlr_type = "vide";
2614             descr     = "VideoHandler";
2615         } else if (track->par->codec_type == AVMEDIA_TYPE_AUDIO) {
2616             hdlr_type = "soun";
2617             descr     = "SoundHandler";
2618         } else if (track->par->codec_type == AVMEDIA_TYPE_SUBTITLE) {
2619             if (is_clcp_track(track)) {
2620                 hdlr_type = "clcp";
2621                 descr = "ClosedCaptionHandler";
2622             } else {
2623                 if (track->tag == MKTAG('t','x','3','g')) {
2624                     hdlr_type = "sbtl";
2625                 } else if (track->tag == MKTAG('m','p','4','s')) {
2626                     hdlr_type = "subp";
2627                 } else {
2628                     hdlr_type = "text";
2629                 }
2630             descr = "SubtitleHandler";
2631             }
2632         } else if (track->par->codec_tag == MKTAG('r','t','p',' ')) {
2633             hdlr_type = "hint";
2634             descr     = "HintHandler";
2635         } else if (track->par->codec_tag == MKTAG('t','m','c','d')) {
2636             hdlr_type = "tmcd";
2637             descr = "TimeCodeHandler";
2638         } else if (track->par->codec_tag == MKTAG('g','p','m','d')) {
2639             hdlr_type = "meta";
2640             descr = "GoPro MET"; // GoPro Metadata
2641         } else {
2642             av_log(s, AV_LOG_WARNING,
2643                    "Unknown hldr_type for %s, writing dummy values\n",
2644                    av_fourcc2str(track->par->codec_tag));
2645         }
2646         if (track->st) {
2647             // hdlr.name is used by some players to identify the content title
2648             // of the track. So if an alternate handler description is
2649             // specified, use it.
2650             AVDictionaryEntry *t;
2651             t = av_dict_get(track->st->metadata, "handler_name", NULL, 0);
2652             if (t && utf8len(t->value))
2653                 descr = t->value;
2654         }
2655     }
2656
2657     if (mov->empty_hdlr_name) /* expressly allowed by QTFF and not prohibited in ISO 14496-12 8.4.3.3 */
2658         descr = "";
2659
2660     avio_wb32(pb, 0); /* size */
2661     ffio_wfourcc(pb, "hdlr");
2662     avio_wb32(pb, 0); /* Version & flags */
2663     avio_write(pb, hdlr, 4); /* handler */
2664     ffio_wfourcc(pb, hdlr_type); /* handler type */
2665     avio_wb32(pb, 0); /* reserved */
2666     avio_wb32(pb, 0); /* reserved */
2667     avio_wb32(pb, 0); /* reserved */
2668     if (!track || track->mode == MODE_MOV)
2669         avio_w8(pb, strlen(descr)); /* pascal string */
2670     avio_write(pb, descr, strlen(descr)); /* handler description */
2671     if (track && track->mode != MODE_MOV)
2672         avio_w8(pb, 0); /* c string */
2673     return update_size(pb, pos);
2674 }
2675
2676 static int mov_write_hmhd_tag(AVIOContext *pb)
2677 {
2678     /* This atom must be present, but leaving the values at zero
2679      * seems harmless. */
2680     avio_wb32(pb, 28); /* size */
2681     ffio_wfourcc(pb, "hmhd");
2682     avio_wb32(pb, 0); /* version, flags */
2683     avio_wb16(pb, 0); /* maxPDUsize */
2684     avio_wb16(pb, 0); /* avgPDUsize */
2685     avio_wb32(pb, 0); /* maxbitrate */
2686     avio_wb32(pb, 0); /* avgbitrate */
2687     avio_wb32(pb, 0); /* reserved */
2688     return 28;
2689 }
2690
2691 static int mov_write_minf_tag(AVFormatContext *s, AVIOContext *pb, MOVMuxContext *mov, MOVTrack *track)
2692 {
2693     int64_t pos = avio_tell(pb);
2694     int ret;
2695
2696     avio_wb32(pb, 0); /* size */
2697     ffio_wfourcc(pb, "minf");
2698     if (track->par->codec_type == AVMEDIA_TYPE_VIDEO)
2699         mov_write_vmhd_tag(pb);
2700     else if (track->par->codec_type == AVMEDIA_TYPE_AUDIO)
2701         mov_write_smhd_tag(pb);
2702     else if (track->par->codec_type == AVMEDIA_TYPE_SUBTITLE) {
2703         if (track->tag == MKTAG('t','e','x','t') || is_clcp_track(track)) {
2704             mov_write_gmhd_tag(pb, track);
2705         } else {
2706             mov_write_nmhd_tag(pb);
2707         }
2708     } else if (track->tag == MKTAG('r','t','p',' ')) {
2709         mov_write_hmhd_tag(pb);
2710     } else if (track->tag == MKTAG('t','m','c','d')) {
2711         if (track->mode != MODE_MOV)
2712             mov_write_nmhd_tag(pb);
2713         else
2714             mov_write_gmhd_tag(pb, track);
2715     } else if (track->tag == MKTAG('g','p','m','d')) {
2716         mov_write_gmhd_tag(pb, track);
2717     }
2718     if (track->mode == MODE_MOV) /* ISO 14496-12 8.4.3.1 specifies hdlr only within mdia or meta boxes */
2719         mov_write_hdlr_tag(s, pb, NULL);
2720     mov_write_dinf_tag(pb);
2721     if ((ret = mov_write_stbl_tag(s, pb, mov, track)) < 0)
2722         return ret;
2723     return update_size(pb, pos);
2724 }
2725
2726 static int mov_write_mdhd_tag(AVIOContext *pb, MOVMuxContext *mov,
2727                               MOVTrack *track)
2728 {
2729     int version = track->track_duration < INT32_MAX ? 0 : 1;
2730
2731     if (track->mode == MODE_ISM)
2732         version = 1;
2733
2734     (version == 1) ? avio_wb32(pb, 44) : avio_wb32(pb, 32); /* size */
2735     ffio_wfourcc(pb, "mdhd");
2736     avio_w8(pb, version);
2737     avio_wb24(pb, 0); /* flags */
2738     if (version == 1) {
2739         avio_wb64(pb, track->time);
2740         avio_wb64(pb, track->time);
2741     } else {
2742         avio_wb32(pb, track->time); /* creation time */
2743         avio_wb32(pb, track->time); /* modification time */
2744     }
2745     avio_wb32(pb, track->timescale); /* time scale (sample rate for audio) */
2746     if (!track->entry && mov->mode == MODE_ISM)
2747         (version == 1) ? avio_wb64(pb, UINT64_C(0xffffffffffffffff)) : avio_wb32(pb, 0xffffffff);
2748     else if (!track->entry)
2749         (version == 1) ? avio_wb64(pb, 0) : avio_wb32(pb, 0);
2750     else
2751         (version == 1) ? avio_wb64(pb, track->track_duration) : avio_wb32(pb, track->track_duration); /* duration */
2752     avio_wb16(pb, track->language); /* language */
2753     avio_wb16(pb, 0); /* reserved (quality) */
2754
2755     if (version != 0 && track->mode == MODE_MOV) {
2756         av_log(NULL, AV_LOG_ERROR,
2757                "FATAL error, file duration too long for timebase, this file will not be\n"
2758                "playable with QuickTime. Choose a different timebase with "
2759                "-video_track_timescale or a different container format\n");
2760     }
2761
2762     return 32;
2763 }
2764
2765 static int mov_write_mdia_tag(AVFormatContext *s, AVIOContext *pb,
2766                               MOVMuxContext *mov, MOVTrack *track)
2767 {
2768     int64_t pos = avio_tell(pb);
2769     int ret;
2770
2771     avio_wb32(pb, 0); /* size */
2772     ffio_wfourcc(pb, "mdia");
2773     mov_write_mdhd_tag(pb, mov, track);
2774     mov_write_hdlr_tag(s, pb, track);
2775     if ((ret = mov_write_minf_tag(s, pb, mov, track)) < 0)
2776         return ret;
2777     return update_size(pb, pos);
2778 }
2779
2780 /* transformation matrix
2781      |a  b  u|
2782      |c  d  v|
2783      |tx ty w| */
2784 static void write_matrix(AVIOContext *pb, int16_t a, int16_t b, int16_t c,
2785                          int16_t d, int16_t tx, int16_t ty)
2786 {
2787     avio_wb32(pb, a << 16);  /* 16.16 format */
2788     avio_wb32(pb, b << 16);  /* 16.16 format */
2789     avio_wb32(pb, 0);        /* u in 2.30 format */
2790     avio_wb32(pb, c << 16);  /* 16.16 format */
2791     avio_wb32(pb, d << 16);  /* 16.16 format */
2792     avio_wb32(pb, 0);        /* v in 2.30 format */
2793     avio_wb32(pb, tx << 16); /* 16.16 format */
2794     avio_wb32(pb, ty << 16); /* 16.16 format */
2795     avio_wb32(pb, 1 << 30);  /* w in 2.30 format */
2796 }
2797
2798 static int mov_write_tkhd_tag(AVIOContext *pb, MOVMuxContext *mov,
2799                               MOVTrack *track, AVStream *st)
2800 {
2801     int64_t duration = av_rescale_rnd(track->track_duration, MOV_TIMESCALE,
2802                                       track->timescale, AV_ROUND_UP);
2803     int version = duration < INT32_MAX ? 0 : 1;
2804     int flags   = MOV_TKHD_FLAG_IN_MOVIE;
2805     int rotation = 0;
2806     int group   = 0;
2807
2808     uint32_t *display_matrix = NULL;
2809     int      display_matrix_size, i;
2810
2811     if (st) {
2812         if (mov->per_stream_grouping)
2813             group = st->index;
2814         else
2815             group = st->codecpar->codec_type;
2816
2817         display_matrix = (uint32_t*)av_stream_get_side_data(st, AV_PKT_DATA_DISPLAYMATRIX,
2818                                                             &display_matrix_size);
2819         if (display_matrix && display_matrix_size < 9 * sizeof(*display_matrix))
2820             display_matrix = NULL;
2821     }
2822
2823     if (track->flags & MOV_TRACK_ENABLED)
2824         flags |= MOV_TKHD_FLAG_ENABLED;
2825
2826     if (track->mode == MODE_ISM)
2827         version = 1;
2828
2829     (version == 1) ? avio_wb32(pb, 104) : avio_wb32(pb, 92); /* size */
2830     ffio_wfourcc(pb, "tkhd");
2831     avio_w8(pb, version);
2832     avio_wb24(pb, flags);
2833     if (version == 1) {
2834         avio_wb64(pb, track->time);
2835         avio_wb64(pb, track->time);
2836     } else {
2837         avio_wb32(pb, track->time); /* creation time */
2838         avio_wb32(pb, track->time); /* modification time */
2839     }
2840     avio_wb32(pb, track->track_id); /* track-id */
2841     avio_wb32(pb, 0); /* reserved */
2842     if (!track->entry && mov->mode == MODE_ISM)
2843         (version == 1) ? avio_wb64(pb, UINT64_C(0xffffffffffffffff)) : avio_wb32(pb, 0xffffffff);
2844     else if (!track->entry)
2845         (version == 1) ? avio_wb64(pb, 0) : avio_wb32(pb, 0);
2846     else
2847         (version == 1) ? avio_wb64(pb, duration) : avio_wb32(pb, duration);
2848
2849     avio_wb32(pb, 0); /* reserved */
2850     avio_wb32(pb, 0); /* reserved */
2851     avio_wb16(pb, 0); /* layer */
2852     avio_wb16(pb, group); /* alternate group) */
2853     /* Volume, only for audio */
2854     if (track->par->codec_type == AVMEDIA_TYPE_AUDIO)
2855         avio_wb16(pb, 0x0100);
2856     else
2857         avio_wb16(pb, 0);
2858     avio_wb16(pb, 0); /* reserved */
2859
2860     /* Matrix structure */
2861 #if FF_API_OLD_ROTATE_API
2862     if (st && st->metadata) {
2863         AVDictionaryEntry *rot = av_dict_get(st->metadata, "rotate", NULL, 0);
2864         rotation = (rot && rot->value) ? atoi(rot->value) : 0;
2865     }
2866 #endif
2867     if (display_matrix) {
2868         for (i = 0; i < 9; i++)
2869             avio_wb32(pb, display_matrix[i]);
2870 #if FF_API_OLD_ROTATE_API
2871     } else if (rotation == 90) {
2872         write_matrix(pb,  0,  1, -1,  0, track->par->height, 0);
2873     } else if (rotation == 180) {
2874         write_matrix(pb, -1,  0,  0, -1, track->par->width, track->par->height);
2875     } else if (rotation == 270) {
2876         write_matrix(pb,  0, -1,  1,  0, 0, track->par->width);
2877 #endif
2878     } else {
2879         write_matrix(pb,  1,  0,  0,  1, 0, 0);
2880     }
2881     /* Track width and height, for visual only */
2882     if (st && (track->par->codec_type == AVMEDIA_TYPE_VIDEO ||
2883                track->par->codec_type == AVMEDIA_TYPE_SUBTITLE)) {
2884         int64_t track_width_1616;
2885         if (track->mode == MODE_MOV) {
2886             track_width_1616 = track->par->width * 0x10000ULL;
2887         } else {
2888             track_width_1616 = av_rescale(st->sample_aspect_ratio.num,
2889                                                   track->par->width * 0x10000LL,
2890                                                   st->sample_aspect_ratio.den);
2891             if (!track_width_1616 ||
2892                 track->height != track->par->height ||
2893                 track_width_1616 > UINT32_MAX)
2894                 track_width_1616 = track->par->width * 0x10000ULL;
2895         }
2896         if (track_width_1616 > UINT32_MAX) {
2897             av_log(mov->fc, AV_LOG_WARNING, "track width is too large\n");
2898             track_width_1616 = 0;
2899         }
2900         avio_wb32(pb, track_width_1616);
2901         if (track->height > 0xFFFF) {
2902             av_log(mov->fc, AV_LOG_WARNING, "track height is too large\n");
2903             avio_wb32(pb, 0);
2904         } else
2905             avio_wb32(pb, track->height * 0x10000U);
2906     } else {
2907         avio_wb32(pb, 0);
2908         avio_wb32(pb, 0);
2909     }
2910     return 0x5c;
2911 }
2912
2913 static int mov_write_tapt_tag(AVIOContext *pb, MOVTrack *track)
2914 {
2915     int32_t width = av_rescale(track->par->sample_aspect_ratio.num, track->par->width,
2916                                track->par->sample_aspect_ratio.den);
2917
2918     int64_t pos = avio_tell(pb);
2919
2920     avio_wb32(pb, 0); /* size */
2921     ffio_wfourcc(pb, "tapt");
2922
2923     avio_wb32(pb, 20);
2924     ffio_wfourcc(pb, "clef");
2925     avio_wb32(pb, 0);
2926     avio_wb32(pb, width << 16);
2927     avio_wb32(pb, track->par->height << 16);
2928
2929     avio_wb32(pb, 20);
2930     ffio_wfourcc(pb, "prof");
2931     avio_wb32(pb, 0);
2932     avio_wb32(pb, width << 16);
2933     avio_wb32(pb, track->par->height << 16);
2934
2935     avio_wb32(pb, 20);
2936     ffio_wfourcc(pb, "enof");
2937     avio_wb32(pb, 0);
2938     avio_wb32(pb, track->par->width << 16);
2939     avio_wb32(pb, track->par->height << 16);
2940
2941     return update_size(pb, pos);
2942 }
2943
2944 // This box seems important for the psp playback ... without it the movie seems to hang
2945 static int mov_write_edts_tag(AVIOContext *pb, MOVMuxContext *mov,
2946                               MOVTrack *track)
2947 {
2948     int64_t duration = av_rescale_rnd(track->track_duration, MOV_TIMESCALE,
2949                                       track->timescale, AV_ROUND_UP);
2950     int version = duration < INT32_MAX ? 0 : 1;
2951     int entry_size, entry_count, size;
2952     int64_t delay, start_ct = track->start_cts;
2953     int64_t start_dts = track->start_dts;
2954
2955     if (track->entry) {
2956         if (start_dts != track->cluster[0].dts || start_ct != track->cluster[0].cts) {
2957
2958             av_log(mov->fc, AV_LOG_DEBUG,
2959                    "EDTS using dts:%"PRId64" cts:%d instead of dts:%"PRId64" cts:%"PRId64" tid:%d\n",
2960                    track->cluster[0].dts, track->cluster[0].cts,
2961                    start_dts, start_ct, track->track_id);
2962             start_dts = track->cluster[0].dts;
2963             start_ct  = track->cluster[0].cts;
2964         }
2965     }
2966
2967     delay = av_rescale_rnd(start_dts + start_ct, MOV_TIMESCALE,
2968                            track->timescale, AV_ROUND_DOWN);
2969     version |= delay < INT32_MAX ? 0 : 1;
2970
2971     entry_size = (version == 1) ? 20 : 12;
2972     entry_count = 1 + (delay > 0);
2973     size = 24 + entry_count * entry_size;
2974
2975     /* write the atom data */
2976     avio_wb32(pb, size);
2977     ffio_wfourcc(pb, "edts");
2978     avio_wb32(pb, size - 8);
2979     ffio_wfourcc(pb, "elst");
2980     avio_w8(pb, version);
2981     avio_wb24(pb, 0); /* flags */
2982
2983     avio_wb32(pb, entry_count);
2984     if (delay > 0) { /* add an empty edit to delay presentation */
2985         /* In the positive delay case, the delay includes the cts
2986          * offset, and the second edit list entry below trims out
2987          * the same amount from the actual content. This makes sure
2988          * that the offset last sample is included in the edit
2989          * list duration as well. */
2990         if (version == 1) {
2991             avio_wb64(pb, delay);
2992             avio_wb64(pb, -1);
2993         } else {
2994             avio_wb32(pb, delay);
2995             avio_wb32(pb, -1);
2996         }
2997         avio_wb32(pb, 0x00010000);
2998     } else {
2999         /* Avoid accidentally ending up with start_ct = -1 which has got a
3000          * special meaning. Normally start_ct should end up positive or zero
3001          * here, but use FFMIN in case dts is a small positive integer
3002          * rounded to 0 when represented in MOV_TIMESCALE units. */
3003         av_assert0(av_rescale_rnd(start_dts, MOV_TIMESCALE, track->timescale, AV_ROUND_DOWN) <= 0);
3004         start_ct  = -FFMIN(start_dts, 0);
3005         /* Note, this delay is calculated from the pts of the first sample,
3006          * ensuring that we don't reduce the duration for cases with
3007          * dts<0 pts=0. */
3008         duration += delay;
3009     }
3010
3011     /* For fragmented files, we don't know the full length yet. Setting
3012      * duration to 0 allows us to only specify the offset, including
3013      * the rest of the content (from all future fragments) without specifying
3014      * an explicit duration. */
3015     if (mov->flags & FF_MOV_FLAG_FRAGMENT)
3016         duration = 0;
3017
3018     /* duration */
3019     if (version == 1) {
3020         avio_wb64(pb, duration);
3021         avio_wb64(pb, start_ct);
3022     } else {
3023         avio_wb32(pb, duration);
3024         avio_wb32(pb, start_ct);
3025     }
3026     avio_wb32(pb, 0x00010000);
3027     return size;
3028 }
3029
3030 static int mov_write_tref_tag(AVIOContext *pb, MOVTrack *track)
3031 {
3032     avio_wb32(pb, 20);   // size
3033     ffio_wfourcc(pb, "tref");
3034     avio_wb32(pb, 12);   // size (subatom)
3035     avio_wl32(pb, track->tref_tag);
3036     avio_wb32(pb, track->tref_id);
3037     return 20;
3038 }
3039
3040 // goes at the end of each track!  ... Critical for PSP playback ("Incompatible data" without it)
3041 static int mov_write_uuid_tag_psp(AVIOContext *pb, MOVTrack *mov)
3042 {
3043     avio_wb32(pb, 0x34); /* size ... reports as 28 in mp4box! */
3044     ffio_wfourcc(pb, "uuid");
3045     ffio_wfourcc(pb, "USMT");
3046     avio_wb32(pb, 0x21d24fce);
3047     avio_wb32(pb, 0xbb88695c);
3048     avio_wb32(pb, 0xfac9c740);
3049     avio_wb32(pb, 0x1c);     // another size here!
3050     ffio_wfourcc(pb, "MTDT");
3051     avio_wb32(pb, 0x00010012);
3052     avio_wb32(pb, 0x0a);
3053     avio_wb32(pb, 0x55c40000);
3054     avio_wb32(pb, 0x1);
3055     avio_wb32(pb, 0x0);
3056     return 0x34;
3057 }
3058
3059 static int mov_write_udta_sdp(AVIOContext *pb, MOVTrack *track)
3060 {
3061     AVFormatContext *ctx = track->rtp_ctx;
3062     char buf[1000] = "";
3063     int len;
3064
3065     ff_sdp_write_media(buf, sizeof(buf), ctx->streams[0], track->src_track,
3066                        NULL, NULL, 0, 0, ctx);
3067     av_strlcatf(buf, sizeof(buf), "a=control:streamid=%d\r\n", track->track_id);
3068     len = strlen(buf);
3069
3070     avio_wb32(pb, len + 24);
3071     ffio_wfourcc(pb, "udta");
3072     avio_wb32(pb, len + 16);
3073     ffio_wfourcc(pb, "hnti");
3074     avio_wb32(pb, len + 8);
3075     ffio_wfourcc(pb, "sdp ");
3076     avio_write(pb, buf, len);
3077     return len + 24;
3078 }
3079
3080 static int mov_write_track_metadata(AVIOContext *pb, AVStream *st,
3081                                     const char *tag, const char *str)
3082 {
3083     int64_t pos = avio_tell(pb);
3084     AVDictionaryEntry *t = av_dict_get(st->metadata, str, NULL, 0);
3085     if (!t || !utf8len(t->value))
3086         return 0;
3087
3088     avio_wb32(pb, 0);   /* size */
3089     ffio_wfourcc(pb, tag); /* type */
3090     avio_write(pb, t->value, strlen(t->value)); /* UTF8 string value */
3091     return update_size(pb, pos);
3092 }
3093
3094 static int mov_write_track_udta_tag(AVIOContext *pb, MOVMuxContext *mov,
3095                                     AVStream *st)
3096 {
3097     AVIOContext *pb_buf;
3098     int ret, size;
3099     uint8_t *buf;
3100
3101     if (!st)
3102         return 0;
3103
3104     ret = avio_open_dyn_buf(&pb_buf);
3105     if (ret < 0)
3106         return ret;
3107
3108     if (mov->mode & (MODE_MP4|MODE_MOV))
3109         mov_write_track_metadata(pb_buf, st, "name", "title");
3110
3111     if ((size = avio_close_dyn_buf(pb_buf, &buf)) > 0) {
3112         avio_wb32(pb, size + 8);
3113         ffio_wfourcc(pb, "udta");
3114         avio_write(pb, buf, size);
3115     }
3116     av_free(buf);
3117
3118     return 0;
3119 }
3120
3121 static int mov_write_trak_tag(AVFormatContext *s, AVIOContext *pb, MOVMuxContext *mov,
3122                               MOVTrack *track, AVStream *st)
3123 {
3124     int64_t pos = avio_tell(pb);
3125     int entry_backup = track->entry;
3126     int chunk_backup = track->chunkCount;
3127     int ret;
3128
3129     /* If we want to have an empty moov, but some samples already have been
3130      * buffered (delay_moov), pretend that no samples have been written yet. */
3131     if (mov->flags & FF_MOV_FLAG_EMPTY_MOOV)
3132         track->chunkCount = track->entry = 0;
3133
3134     avio_wb32(pb, 0); /* size */
3135     ffio_wfourcc(pb, "trak");
3136     mov_write_tkhd_tag(pb, mov, track, st);
3137
3138     av_assert2(mov->use_editlist >= 0);
3139
3140     if (track->start_dts != AV_NOPTS_VALUE) {
3141         if (mov->use_editlist)
3142             mov_write_edts_tag(pb, mov, track);  // PSP Movies and several other cases require edts box
3143         else if ((track->entry && track->cluster[0].dts) || track->mode == MODE_PSP || is_clcp_track(track))
3144             av_log(mov->fc, AV_LOG_WARNING,
3145                    "Not writing any edit list even though one would have been required\n");
3146     }
3147
3148     if (track->tref_tag)
3149         mov_write_tref_tag(pb, track);
3150
3151     if ((ret = mov_write_mdia_tag(s, pb, mov, track)) < 0)
3152         return ret;
3153     if (track->mode == MODE_PSP)
3154         mov_write_uuid_tag_psp(pb, track); // PSP Movies require this uuid box
3155     if (track->tag == MKTAG('r','t','p',' '))
3156         mov_write_udta_sdp(pb, track);
3157     if (track->mode == MODE_MOV) {
3158         if (track->par->codec_type == AVMEDIA_TYPE_VIDEO) {
3159             double sample_aspect_ratio = av_q2d(st->sample_aspect_ratio);
3160             if (st->sample_aspect_ratio.num && 1.0 != sample_aspect_ratio) {
3161                 mov_write_tapt_tag(pb, track);
3162             }
3163         }
3164         if (is_clcp_track(track) && st->sample_aspect_ratio.num) {
3165             mov_write_tapt_tag(pb, track);
3166         }
3167     }
3168     mov_write_track_udta_tag(pb, mov, st);
3169     track->entry = entry_backup;
3170     track->chunkCount = chunk_backup;
3171     return update_size(pb, pos);
3172 }
3173
3174 static int mov_write_iods_tag(AVIOContext *pb, MOVMuxContext *mov)
3175 {
3176     int i, has_audio = 0, has_video = 0;
3177     int64_t pos = avio_tell(pb);
3178     int audio_profile = mov->iods_audio_profile;
3179     int video_profile = mov->iods_video_profile;
3180     for (i = 0; i < mov->nb_streams; i++) {
3181         if (mov->tracks[i].entry > 0 || mov->flags & FF_MOV_FLAG_EMPTY_MOOV) {
3182             has_audio |= mov->tracks[i].par->codec_type == AVMEDIA_TYPE_AUDIO;
3183             has_video |= mov->tracks[i].par->codec_type == AVMEDIA_TYPE_VIDEO;
3184         }
3185     }
3186     if (audio_profile < 0)
3187         audio_profile = 0xFF - has_audio;
3188     if (video_profile < 0)
3189         video_profile = 0xFF - has_video;
3190     avio_wb32(pb, 0x0); /* size */
3191     ffio_wfourcc(pb, "iods");
3192     avio_wb32(pb, 0);    /* version & flags */
3193     put_descr(pb, 0x10, 7);
3194     avio_wb16(pb, 0x004f);
3195     avio_w8(pb, 0xff);
3196     avio_w8(pb, 0xff);
3197     avio_w8(pb, audio_profile);
3198     avio_w8(pb, video_profile);
3199     avio_w8(pb, 0xff);
3200     return update_size(pb, pos);
3201 }
3202
3203 static int mov_write_trex_tag(AVIOContext *pb, MOVTrack *track)
3204 {
3205     avio_wb32(pb, 0x20); /* size */
3206     ffio_wfourcc(pb, "trex");
3207     avio_wb32(pb, 0);   /* version & flags */
3208     avio_wb32(pb, track->track_id); /* track ID */
3209     avio_wb32(pb, 1);   /* default sample description index */
3210     avio_wb32(pb, 0);   /* default sample duration */
3211     avio_wb32(pb, 0);   /* default sample size */
3212     avio_wb32(pb, 0);   /* default sample flags */
3213     return 0;
3214 }
3215
3216 static int mov_write_mvex_tag(AVIOContext *pb, MOVMuxContext *mov)
3217 {
3218     int64_t pos = avio_tell(pb);
3219     int i;
3220     avio_wb32(pb, 0x0); /* size */
3221     ffio_wfourcc(pb, "mvex");
3222     for (i = 0; i < mov->nb_streams; i++)
3223         mov_write_trex_tag(pb, &mov->tracks[i]);
3224     return update_size(pb, pos);
3225 }
3226
3227 static int mov_write_mvhd_tag(AVIOContext *pb, MOVMuxContext *mov)
3228 {
3229     int max_track_id = 1, i;
3230     int64_t max_track_len = 0;
3231     int version;
3232
3233     for (i = 0; i < mov->nb_streams; i++) {
3234         if (mov->tracks[i].entry > 0 && mov->tracks[i].timescale) {
3235             int64_t max_track_len_temp = av_rescale_rnd(mov->tracks[i].track_duration,
3236                                                 MOV_TIMESCALE,
3237                                                 mov->tracks[i].timescale,
3238                                                 AV_ROUND_UP);
3239             if (max_track_len < max_track_len_temp)
3240                 max_track_len = max_track_len_temp;
3241             if (max_track_id < mov->tracks[i].track_id)
3242                 max_track_id = mov->tracks[i].track_id;
3243         }
3244     }
3245     /* If using delay_moov, make sure the output is the same as if no
3246      * samples had been written yet. */
3247     if (mov->flags & FF_MOV_FLAG_EMPTY_MOOV) {
3248         max_track_len = 0;
3249         max_track_id  = 1;
3250     }
3251
3252     version = max_track_len < UINT32_MAX ? 0 : 1;
3253     avio_wb32(pb, version == 1 ? 120 : 108); /* size */
3254
3255     ffio_wfourcc(pb, "mvhd");
3256     avio_w8(pb, version);
3257     avio_wb24(pb, 0); /* flags */
3258     if (version == 1) {
3259         avio_wb64(pb, mov->time);
3260         avio_wb64(pb, mov->time);
3261     } else {
3262         avio_wb32(pb, mov->time); /* creation time */
3263         avio_wb32(pb, mov->time); /* modification time */
3264     }
3265     avio_wb32(pb, MOV_TIMESCALE);
3266     (version == 1) ? avio_wb64(pb, max_track_len) : avio_wb32(pb, max_track_len); /* duration of longest track */
3267
3268     avio_wb32(pb, 0x00010000); /* reserved (preferred rate) 1.0 = normal */
3269     avio_wb16(pb, 0x0100); /* reserved (preferred volume) 1.0 = normal */
3270     avio_wb16(pb, 0); /* reserved */
3271     avio_wb32(pb, 0); /* reserved */
3272     avio_wb32(pb, 0); /* reserved */
3273
3274     /* Matrix structure */
3275     write_matrix(pb, 1, 0, 0, 1, 0, 0);
3276
3277     avio_wb32(pb, 0); /* reserved (preview time) */
3278     avio_wb32(pb, 0); /* reserved (preview duration) */
3279     avio_wb32(pb, 0); /* reserved (poster time) */
3280     avio_wb32(pb, 0); /* reserved (selection time) */
3281     avio_wb32(pb, 0); /* reserved (selection duration) */
3282     avio_wb32(pb, 0); /* reserved (current time) */
3283     avio_wb32(pb, max_track_id + 1); /* Next track id */
3284     return 0x6c;
3285 }
3286
3287 static int mov_write_itunes_hdlr_tag(AVIOContext *pb, MOVMuxContext *mov,
3288                                      AVFormatContext *s)
3289 {
3290     avio_wb32(pb, 33); /* size */
3291     ffio_wfourcc(pb, "hdlr");
3292     avio_wb32(pb, 0);
3293     avio_wb32(pb, 0);
3294     ffio_wfourcc(pb, "mdir");
3295     ffio_wfourcc(pb, "appl");
3296     avio_wb32(pb, 0);
3297     avio_wb32(pb, 0);
3298     avio_w8(pb, 0);
3299     return 33;
3300 }
3301
3302 /* helper function to write a data tag with the specified string as data */
3303 static int mov_write_string_data_tag(AVIOContext *pb, const char *data, int lang, int long_style)
3304 {
3305     if (long_style) {
3306         int size = 16 + strlen(data);
3307         avio_wb32(pb, size); /* size */
3308         ffio_wfourcc(pb, "data");
3309         avio_wb32(pb, 1);
3310         avio_wb32(pb, 0);
3311         avio_write(pb, data, strlen(data));
3312         return size;
3313     } else {
3314         if (!lang)
3315             lang = ff_mov_iso639_to_lang("und", 1);
3316         avio_wb16(pb, strlen(data)); /* string length */
3317         avio_wb16(pb, lang);
3318         avio_write(pb, data, strlen(data));
3319         return strlen(data) + 4;
3320     }
3321 }
3322
3323 static int mov_write_string_tag(AVIOContext *pb, const char *name,
3324                                 const char *value, int lang, int long_style)
3325 {
3326     int size = 0;
3327     if (value && value[0]) {
3328         int64_t pos = avio_tell(pb);
3329         avio_wb32(pb, 0); /* size */
3330         ffio_wfourcc(pb, name);
3331         mov_write_string_data_tag(pb, value, lang, long_style);
3332         size = update_size(pb, pos);
3333     }
3334     return size;
3335 }
3336
3337 static AVDictionaryEntry *get_metadata_lang(AVFormatContext *s,
3338                                             const char *tag, int *lang)
3339 {
3340     int l, len, len2;
3341     AVDictionaryEntry *t, *t2 = NULL;
3342     char tag2[16];
3343
3344     *lang = 0;
3345
3346     if (!(t = av_dict_get(s->metadata, tag, NULL, 0)))
3347         return NULL;
3348
3349     len = strlen(t->key);
3350     snprintf(tag2, sizeof(tag2), "%s-", tag);
3351     while ((t2 = av_dict_get(s->metadata, tag2, t2, AV_DICT_IGNORE_SUFFIX))) {
3352         len2 = strlen(t2->key);
3353         if (len2 == len + 4 && !strcmp(t->value, t2->value)
3354             && (l = ff_mov_iso639_to_lang(&t2->key[len2 - 3], 1)) >= 0) {
3355             *lang = l;
3356             return t;
3357         }
3358     }
3359     return t;
3360 }
3361
3362 static int mov_write_string_metadata(AVFormatContext *s, AVIOContext *pb,
3363                                      const char *name, const char *tag,
3364                                      int long_style)
3365 {
3366     int lang;
3367     AVDictionaryEntry *t = get_metadata_lang(s, tag, &lang);
3368     if (!t)
3369         return 0;
3370     return mov_write_string_tag(pb, name, t->value, lang, long_style);
3371 }
3372
3373 /* iTunes bpm number */
3374 static int mov_write_tmpo_tag(AVIOContext *pb, AVFormatContext *s)
3375 {
3376     AVDictionaryEntry *t = av_dict_get(s->metadata, "tmpo", NULL, 0);
3377     int size = 0, tmpo = t ? atoi(t->value) : 0;
3378     if (tmpo) {
3379         size = 26;
3380         avio_wb32(pb, size);
3381         ffio_wfourcc(pb, "tmpo");
3382         avio_wb32(pb, size-8); /* size */
3383         ffio_wfourcc(pb, "data");
3384         avio_wb32(pb, 0x15);  //type specifier
3385         avio_wb32(pb, 0);
3386         avio_wb16(pb, tmpo);        // data
3387     }
3388     return size;
3389 }
3390
3391 /* 3GPP TS 26.244 */
3392 static int mov_write_loci_tag(AVFormatContext *s, AVIOContext *pb)
3393 {
3394     int lang;
3395     int64_t pos = avio_tell(pb);
3396     double latitude, longitude, altitude;
3397     int32_t latitude_fix, longitude_fix, altitude_fix;
3398     AVDictionaryEntry *t = get_metadata_lang(s, "location", &lang);
3399     const char *ptr, *place = "";
3400     char *end;
3401     static const char *astronomical_body = "earth";
3402     if (!t)
3403         return 0;
3404
3405     ptr = t->value;
3406     longitude = strtod(ptr, &end);
3407     if (end == ptr) {
3408         av_log(s, AV_LOG_WARNING, "malformed location metadata\n");
3409         return 0;
3410     }
3411     ptr = end;
3412     latitude = strtod(ptr, &end);
3413     if (end == ptr) {
3414         av_log(s, AV_LOG_WARNING, "malformed location metadata\n");
3415         return 0;
3416     }
3417     ptr = end;
3418     altitude = strtod(ptr, &end);
3419     /* If no altitude was present, the default 0 should be fine */
3420     if (*end == '/')
3421         place = end + 1;
3422
3423     latitude_fix  = (int32_t) ((1 << 16) * latitude);
3424     longitude_fix = (int32_t) ((1 << 16) * longitude);
3425     altitude_fix  = (int32_t) ((1 << 16) * altitude);
3426
3427     avio_wb32(pb, 0);         /* size */
3428     ffio_wfourcc(pb, "loci"); /* type */
3429     avio_wb32(pb, 0);         /* version + flags */
3430     avio_wb16(pb, lang);
3431     avio_write(pb, place, strlen(place) + 1);
3432     avio_w8(pb, 0);           /* role of place (0 == shooting location, 1 == real location, 2 == fictional location) */
3433     avio_wb32(pb, latitude_fix);
3434     avio_wb32(pb, longitude_fix);
3435     avio_wb32(pb, altitude_fix);
3436     avio_write(pb, astronomical_body, strlen(astronomical_body) + 1);
3437     avio_w8(pb, 0);           /* additional notes, null terminated string */
3438
3439     return update_size(pb, pos);
3440 }
3441
3442 /* iTunes track or disc number */
3443 static int mov_write_trkn_tag(AVIOContext *pb, MOVMuxContext *mov,
3444                               AVFormatContext *s, int disc)
3445 {
3446     AVDictionaryEntry *t = av_dict_get(s->metadata,
3447                                        disc ? "disc" : "track",
3448                                        NULL, 0);
3449     int size = 0, track = t ? atoi(t->value) : 0;
3450     if (track) {
3451         int tracks = 0;
3452         char *slash = strchr(t->value, '/');
3453         if (slash)
3454             tracks = atoi(slash + 1);
3455         avio_wb32(pb, 32); /* size */
3456         ffio_wfourcc(pb, disc ? "disk" : "trkn");
3457         avio_wb32(pb, 24); /* size */
3458         ffio_wfourcc(pb, "data");
3459         avio_wb32(pb, 0);        // 8 bytes empty
3460         avio_wb32(pb, 0);
3461         avio_wb16(pb, 0);        // empty
3462         avio_wb16(pb, track);    // track / disc number
3463         avio_wb16(pb, tracks);   // total track / disc number
3464         avio_wb16(pb, 0);        // empty
3465         size = 32;
3466     }
3467     return size;
3468 }
3469
3470 static int mov_write_int8_metadata(AVFormatContext *s, AVIOContext *pb,
3471                                    const char *name, const char *tag,
3472                                    int len)
3473 {
3474     AVDictionaryEntry *t = NULL;
3475     uint8_t num;
3476     int size = 24 + len;
3477
3478     if (len != 1 && len != 4)
3479         return -1;
3480
3481     if (!(t = av_dict_get(s->metadata, tag, NULL, 0)))
3482         return 0;
3483     num = atoi(t->value);
3484
3485     avio_wb32(pb, size);
3486     ffio_wfourcc(pb, name);
3487     avio_wb32(pb, size - 8);
3488     ffio_wfourcc(pb, "data");
3489     avio_wb32(pb, 0x15);
3490     avio_wb32(pb, 0);
3491     if (len==4) avio_wb32(pb, num);
3492     else        avio_w8 (pb, num);
3493
3494     return size;
3495 }
3496
3497 static int mov_write_covr(AVIOContext *pb, AVFormatContext *s)
3498 {
3499     MOVMuxContext *mov = s->priv_data;
3500     int64_t pos = 0;
3501     int i;
3502
3503     for (i = 0; i < s->nb_streams; i++) {
3504         MOVTrack *trk = &mov->tracks[i];
3505
3506         if (!is_cover_image(trk->st) || trk->cover_image.size <= 0)
3507             continue;
3508
3509         if (!pos) {
3510             pos = avio_tell(pb);
3511             avio_wb32(pb, 0);
3512             ffio_wfourcc(pb, "covr");
3513         }
3514         avio_wb32(pb, 16 + trk->cover_image.size);
3515         ffio_wfourcc(pb, "data");
3516         avio_wb32(pb, trk->tag);
3517         avio_wb32(pb , 0);
3518         avio_write(pb, trk->cover_image.data, trk->cover_image.size);
3519     }
3520
3521     return pos ? update_size(pb, pos) : 0;
3522 }
3523
3524 /* iTunes meta data list */
3525 static int mov_write_ilst_tag(AVIOContext *pb, MOVMuxContext *mov,
3526                               AVFormatContext *s)
3527 {
3528     int64_t pos = avio_tell(pb);
3529     avio_wb32(pb, 0); /* size */
3530     ffio_wfourcc(pb, "ilst");
3531     mov_write_string_metadata(s, pb, "\251nam", "title"    , 1);
3532     mov_write_string_metadata(s, pb, "\251ART", "artist"   , 1);
3533     mov_write_string_metadata(s, pb, "aART", "album_artist", 1);
3534     mov_write_string_metadata(s, pb, "\251wrt", "composer" , 1);
3535     mov_write_string_metadata(s, pb, "\251alb", "album"    , 1);
3536     mov_write_string_metadata(s, pb, "\251day", "date"     , 1);
3537     if (!mov_write_string_metadata(s, pb, "\251too", "encoding_tool", 1)) {
3538         if (!(s->flags & AVFMT_FLAG_BITEXACT))
3539             mov_write_string_tag(pb, "\251too", LIBAVFORMAT_IDENT, 0, 1);
3540     }
3541     mov_write_string_metadata(s, pb, "\251cmt", "comment"  , 1);
3542     mov_write_string_metadata(s, pb, "\251gen", "genre"    , 1);
3543     mov_write_string_metadata(s, pb, "cprt",    "copyright", 1);
3544     mov_write_string_metadata(s, pb, "\251grp", "grouping" , 1);
3545     mov_write_string_metadata(s, pb, "\251lyr", "lyrics"   , 1);
3546     mov_write_string_metadata(s, pb, "desc",    "description",1);
3547     mov_write_string_metadata(s, pb, "ldes",    "synopsis" , 1);
3548     mov_write_string_metadata(s, pb, "tvsh",    "show"     , 1);
3549     mov_write_string_metadata(s, pb, "tven",    "episode_id",1);
3550     mov_write_string_metadata(s, pb, "tvnn",    "network"  , 1);
3551     mov_write_string_metadata(s, pb, "keyw",    "keywords"  , 1);
3552     mov_write_int8_metadata  (s, pb, "tves",    "episode_sort",4);
3553     mov_write_int8_metadata  (s, pb, "tvsn",    "season_number",4);
3554     mov_write_int8_metadata  (s, pb, "stik",    "media_type",1);
3555     mov_write_int8_metadata  (s, pb, "hdvd",    "hd_video",  1);
3556     mov_write_int8_metadata  (s, pb, "pgap",    "gapless_playback",1);
3557     mov_write_int8_metadata  (s, pb, "cpil",    "compilation", 1);
3558     mov_write_covr(pb, s);
3559     mov_write_trkn_tag(pb, mov, s, 0); // track number
3560     mov_write_trkn_tag(pb, mov, s, 1); // disc number
3561     mov_write_tmpo_tag(pb, s);
3562     return update_size(pb, pos);
3563 }
3564
3565 static int mov_write_mdta_hdlr_tag(AVIOContext *pb, MOVMuxContext *mov,
3566                                    AVFormatContext *s)
3567 {
3568     avio_wb32(pb, 33); /* size */
3569     ffio_wfourcc(pb, "hdlr");
3570     avio_wb32(pb, 0);
3571     avio_wb32(pb, 0);
3572     ffio_wfourcc(pb, "mdta");
3573     avio_wb32(pb, 0);
3574     avio_wb32(pb, 0);
3575     avio_wb32(pb, 0);
3576     avio_w8(pb, 0);
3577     return 33;
3578 }
3579
3580 static int mov_write_mdta_keys_tag(AVIOContext *pb, MOVMuxContext *mov,
3581                                    AVFormatContext *s)
3582 {
3583     AVDictionaryEntry *t = NULL;
3584     int64_t pos = avio_tell(pb);
3585     int64_t curpos, entry_pos;
3586     int count = 0;
3587
3588     avio_wb32(pb, 0); /* size */
3589     ffio_wfourcc(pb, "keys");
3590     avio_wb32(pb, 0);
3591     entry_pos = avio_tell(pb);
3592     avio_wb32(pb, 0); /* entry count */
3593
3594     while (t = av_dict_get(s->metadata, "", t, AV_DICT_IGNORE_SUFFIX)) {
3595         avio_wb32(pb, strlen(t->key) + 8);
3596         ffio_wfourcc(pb, "mdta");
3597         avio_write(pb, t->key, strlen(t->key));
3598         count += 1;
3599     }
3600     curpos = avio_tell(pb);
3601     avio_seek(pb, entry_pos, SEEK_SET);
3602     avio_wb32(pb, count); // rewrite entry count
3603     avio_seek(pb, curpos, SEEK_SET);
3604
3605     return update_size(pb, pos);
3606 }
3607
3608 static int mov_write_mdta_ilst_tag(AVIOContext *pb, MOVMuxContext *mov,
3609                                    AVFormatContext *s)
3610 {
3611     AVDictionaryEntry *t = NULL;
3612     int64_t pos = avio_tell(pb);
3613     int count = 1; /* keys are 1-index based */
3614
3615     avio_wb32(pb, 0); /* size */
3616     ffio_wfourcc(pb, "ilst");
3617
3618     while (t = av_dict_get(s->metadata, "", t, AV_DICT_IGNORE_SUFFIX)) {
3619         int64_t entry_pos = avio_tell(pb);
3620         avio_wb32(pb, 0); /* size */
3621         avio_wb32(pb, count); /* key */
3622         mov_write_string_data_tag(pb, t->value, 0, 1);
3623         update_size(pb, entry_pos);
3624         count += 1;
3625     }
3626     return update_size(pb, pos);
3627 }
3628
3629 /* meta data tags */
3630 static int mov_write_meta_tag(AVIOContext *pb, MOVMuxContext *mov,
3631                               AVFormatContext *s)
3632 {
3633     int size = 0;
3634     int64_t pos = avio_tell(pb);
3635     avio_wb32(pb, 0); /* size */
3636     ffio_wfourcc(pb, "meta");
3637     avio_wb32(pb, 0);
3638     if (mov->flags & FF_MOV_FLAG_USE_MDTA) {
3639         mov_write_mdta_hdlr_tag(pb, mov, s);
3640         mov_write_mdta_keys_tag(pb, mov, s);
3641         mov_write_mdta_ilst_tag(pb, mov, s);
3642     }
3643     else {
3644         /* iTunes metadata tag */
3645         mov_write_itunes_hdlr_tag(pb, mov, s);
3646         mov_write_ilst_tag(pb, mov, s);
3647     }
3648     size = update_size(pb, pos);
3649     return size;
3650 }
3651
3652 static int mov_write_raw_metadata_tag(AVFormatContext *s, AVIOContext *pb,
3653                                       const char *name, const char *key)
3654 {
3655     int len;
3656     AVDictionaryEntry *t;
3657
3658     if (!(t = av_dict_get(s->metadata, key, NULL, 0)))
3659         return 0;
3660
3661     len = strlen(t->value);
3662     if (len > 0) {
3663         int size = len + 8;
3664         avio_wb32(pb, size);
3665         ffio_wfourcc(pb, name);
3666         avio_write(pb, t->value, len);
3667         return size;
3668     }
3669     return 0;
3670 }
3671
3672 static int ascii_to_wc(AVIOContext *pb, const uint8_t *b)
3673 {
3674     int val;
3675     while (*b) {
3676         GET_UTF8(val, *b++, return -1;)
3677         avio_wb16(pb, val);
3678     }
3679     avio_wb16(pb, 0x00);
3680     return 0;
3681 }
3682
3683 static uint16_t language_code(const char *str)
3684 {
3685     return (((str[0] - 0x60) & 0x1F) << 10) +
3686            (((str[1] - 0x60) & 0x1F) <<  5) +
3687            (( str[2] - 0x60) & 0x1F);
3688 }
3689
3690 static int mov_write_3gp_udta_tag(AVIOContext *pb, AVFormatContext *s,
3691                                   const char *tag, const char *str)
3692 {
3693     int64_t pos = avio_tell(pb);
3694     AVDictionaryEntry *t = av_dict_get(s->metadata, str, NULL, 0);
3695     if (!t || !utf8len(t->value))
3696         return 0;
3697     avio_wb32(pb, 0);   /* size */
3698     ffio_wfourcc(pb, tag); /* type */
3699     avio_wb32(pb, 0);   /* version + flags */
3700     if (!strcmp(tag, "yrrc"))
3701         avio_wb16(pb, atoi(t->value));
3702     else {
3703         avio_wb16(pb, language_code("eng")); /* language */
3704         avio_write(pb, t->value, strlen(t->value) + 1); /* UTF8 string value */
3705         if (!strcmp(tag, "albm") &&
3706             (t = av_dict_get(s->metadata, "track", NULL, 0)))
3707             avio_w8(pb, atoi(t->value));
3708     }
3709     return update_size(pb, pos);
3710 }
3711
3712 static int mov_write_chpl_tag(AVIOContext *pb, AVFormatContext *s)
3713 {
3714     int64_t pos = avio_tell(pb);
3715     int i, nb_chapters = FFMIN(s->nb_chapters, 255);
3716
3717     avio_wb32(pb, 0);            // size
3718     ffio_wfourcc(pb, "chpl");
3719     avio_wb32(pb, 0x01000000);   // version + flags
3720     avio_wb32(pb, 0);            // unknown
3721     avio_w8(pb, nb_chapters);
3722
3723     for (i = 0; i < nb_chapters; i++) {
3724         AVChapter *c = s->chapters[i];
3725         AVDictionaryEntry *t;
3726         avio_wb64(pb, av_rescale_q(c->start, c->time_base, (AVRational){1,10000000}));
3727
3728         if ((t = av_dict_get(c->metadata, "title", NULL, 0))) {
3729             int len = FFMIN(strlen(t->value), 255);
3730             avio_w8(pb, len);
3731             avio_write(pb, t->value, len);
3732         } else
3733             avio_w8(pb, 0);
3734     }
3735     return update_size(pb, pos);
3736 }
3737
3738 static int mov_write_udta_tag(AVIOContext *pb, MOVMuxContext *mov,
3739                               AVFormatContext *s)
3740 {
3741     AVIOContext *pb_buf;
3742     int ret, size;
3743     uint8_t *buf;
3744
3745     ret = avio_open_dyn_buf(&pb_buf);
3746     if (ret < 0)
3747         return ret;
3748
3749     if (mov->mode & MODE_3GP) {
3750         mov_write_3gp_udta_tag(pb_buf, s, "perf", "artist");
3751         mov_write_3gp_udta_tag(pb_buf, s, "titl", "title");
3752         mov_write_3gp_udta_tag(pb_buf, s, "auth", "author");
3753         mov_write_3gp_udta_tag(pb_buf, s, "gnre", "genre");
3754         mov_write_3gp_udta_tag(pb_buf, s, "dscp", "comment");
3755         mov_write_3gp_udta_tag(pb_buf, s, "albm", "album");
3756         mov_write_3gp_udta_tag(pb_buf, s, "cprt", "copyright");
3757         mov_write_3gp_udta_tag(pb_buf, s, "yrrc", "date");
3758         mov_write_loci_tag(s, pb_buf);
3759     } else if (mov->mode == MODE_MOV && !(mov->flags & FF_MOV_FLAG_USE_MDTA)) { // the title field breaks gtkpod with mp4 and my suspicion is that stuff is not valid in mp4
3760         mov_write_string_metadata(s, pb_buf, "\251ART", "artist",      0);
3761         mov_write_string_metadata(s, pb_buf, "\251nam", "title",       0);
3762         mov_write_string_metadata(s, pb_buf, "\251aut", "author",      0);
3763         mov_write_string_metadata(s, pb_buf, "\251alb", "album",       0);
3764         mov_write_string_metadata(s, pb_buf, "\251day", "date",        0);
3765         mov_write_string_metadata(s, pb_buf, "\251swr", "encoder",     0);
3766         // currently ignored by mov.c
3767         mov_write_string_metadata(s, pb_buf, "\251des", "comment",     0);
3768         // add support for libquicktime, this atom is also actually read by mov.c
3769         mov_write_string_metadata(s, pb_buf, "\251cmt", "comment",     0);
3770         mov_write_string_metadata(s, pb_buf, "\251gen", "genre",       0);
3771         mov_write_string_metadata(s, pb_buf, "\251cpy", "copyright",   0);
3772         mov_write_string_metadata(s, pb_buf, "\251mak", "make",        0);
3773         mov_write_string_metadata(s, pb_buf, "\251mod", "model",       0);
3774         mov_write_string_metadata(s, pb_buf, "\251xyz", "location",    0);
3775         mov_write_string_metadata(s, pb_buf, "\251key", "keywords",    0);
3776         mov_write_raw_metadata_tag(s, pb_buf, "XMP_", "xmp");
3777     } else {
3778         /* iTunes meta data */
3779         mov_write_meta_tag(pb_buf, mov, s);
3780         mov_write_loci_tag(s, pb_buf);
3781     }
3782
3783     if (s->nb_chapters && !(mov->flags & FF_MOV_FLAG_DISABLE_CHPL))
3784         mov_write_chpl_tag(pb_buf, s);
3785
3786     if ((size = avio_close_dyn_buf(pb_buf, &buf)) > 0) {
3787         avio_wb32(pb, size + 8);
3788         ffio_wfourcc(pb, "udta");
3789         avio_write(pb, buf, size);
3790     }
3791     av_free(buf);
3792
3793     return 0;
3794 }
3795
3796 static void mov_write_psp_udta_tag(AVIOContext *pb,
3797                                    const char *str, const char *lang, int type)
3798 {
3799     int len = utf8len(str) + 1;
3800     if (len <= 0)
3801         return;
3802     avio_wb16(pb, len * 2 + 10);        /* size */
3803     avio_wb32(pb, type);                /* type */
3804     avio_wb16(pb, language_code(lang)); /* language */
3805     avio_wb16(pb, 0x01);                /* ? */
3806     ascii_to_wc(pb, str);
3807 }
3808
3809 static int mov_write_uuidusmt_tag(AVIOContext *pb, AVFormatContext *s)
3810 {
3811     AVDictionaryEntry *title = av_dict_get(s->metadata, "title", NULL, 0);
3812     int64_t pos, pos2;
3813
3814     if (title) {
3815         pos = avio_tell(pb);
3816         avio_wb32(pb, 0); /* size placeholder*/
3817         ffio_wfourcc(pb, "uuid");
3818         ffio_wfourcc(pb, "USMT");
3819         avio_wb32(pb, 0x21d24fce); /* 96 bit UUID */
3820         avio_wb32(pb, 0xbb88695c);
3821         avio_wb32(pb, 0xfac9c740);
3822
3823         pos2 = avio_tell(pb);
3824         avio_wb32(pb, 0); /* size placeholder*/
3825         ffio_wfourcc(pb, "MTDT");
3826         avio_wb16(pb, 4);
3827
3828         // ?
3829         avio_wb16(pb, 0x0C);                 /* size */
3830         avio_wb32(pb, 0x0B);                 /* type */
3831         avio_wb16(pb, language_code("und")); /* language */
3832         avio_wb16(pb, 0x0);                  /* ? */
3833         avio_wb16(pb, 0x021C);               /* data */
3834
3835         if (!(s->flags & AVFMT_FLAG_BITEXACT))
3836             mov_write_psp_udta_tag(pb, LIBAVCODEC_IDENT,      "eng", 0x04);
3837         mov_write_psp_udta_tag(pb, title->value,          "eng", 0x01);
3838         mov_write_psp_udta_tag(pb, "2006/04/01 11:11:11", "und", 0x03);
3839
3840         update_size(pb, pos2);
3841         return update_size(pb, pos);
3842     }
3843
3844     return 0;
3845 }
3846
3847 static void build_chunks(MOVTrack *trk)
3848 {
3849     int i;
3850     MOVIentry *chunk = &trk->cluster[0];
3851     uint64_t chunkSize = chunk->size;
3852     chunk->chunkNum = 1;
3853     if (trk->chunkCount)
3854         return;
3855     trk->chunkCount = 1;
3856     for (i = 1; i<trk->entry; i++){
3857         if (chunk->pos + chunkSize == trk->cluster[i].pos &&
3858             chunkSize + trk->cluster[i].size < (1<<20)){
3859             chunkSize             += trk->cluster[i].size;
3860             chunk->samples_in_chunk += trk->cluster[i].entries;
3861         } else {
3862             trk->cluster[i].chunkNum = chunk->chunkNum+1;
3863             chunk=&trk->cluster[i];
3864             chunkSize = chunk->size;
3865             trk->chunkCount++;
3866         }
3867     }
3868 }
3869
3870 /**
3871  * Assign track ids. If option "use_stream_ids_as_track_ids" is set,
3872  * the stream ids are used as track ids.
3873  *
3874  * This assumes mov->tracks and s->streams are in the same order and
3875  * there are no gaps in either of them (so mov->tracks[n] refers to
3876  * s->streams[n]).
3877  *
3878  * As an exception, there can be more entries in
3879  * s->streams than in mov->tracks, in which case new track ids are
3880  * generated (starting after the largest found stream id).
3881  */
3882 static int mov_setup_track_ids(MOVMuxContext *mov, AVFormatContext *s)
3883 {
3884     int i;
3885
3886     if (mov->track_ids_ok)
3887         return 0;
3888
3889     if (mov->use_stream_ids_as_track_ids) {
3890         int next_generated_track_id = 0;
3891         for (i = 0; i < s->nb_streams; i++) {
3892             if (s->streams[i]->id > next_generated_track_id)
3893                 next_generated_track_id = s->streams[i]->id;
3894         }
3895
3896         for (i = 0; i < mov->nb_streams; i++) {
3897             if (mov->tracks[i].entry <= 0 && !(mov->flags & FF_MOV_FLAG_FRAGMENT))
3898                 continue;
3899
3900             mov->tracks[i].track_id = i >= s->nb_streams ? ++next_generated_track_id : s->streams[i]->id;
3901         }
3902     } else {
3903         for (i = 0; i < mov->nb_streams; i++) {
3904             if (mov->tracks[i].entry <= 0 && !(mov->flags & FF_MOV_FLAG_FRAGMENT))
3905                 continue;
3906
3907             mov->tracks[i].track_id = i + 1;
3908         }
3909     }
3910
3911     mov->track_ids_ok = 1;
3912
3913     return 0;
3914 }
3915
3916 static int mov_write_moov_tag(AVIOContext *pb, MOVMuxContext *mov,
3917                               AVFormatContext *s)
3918 {
3919     int i;
3920     int64_t pos = avio_tell(pb);
3921     avio_wb32(pb, 0); /* size placeholder*/
3922     ffio_wfourcc(pb, "moov");
3923
3924     mov_setup_track_ids(mov, s);
3925
3926     for (i = 0; i < mov->nb_streams; i++) {
3927         if (mov->tracks[i].entry <= 0 && !(mov->flags & FF_MOV_FLAG_FRAGMENT))
3928             continue;
3929
3930         mov->tracks[i].time     = mov->time;
3931
3932         if (mov->tracks[i].entry)
3933             build_chunks(&mov->tracks[i]);
3934     }
3935
3936     if (mov->chapter_track)
3937         for (i = 0; i < s->nb_streams; i++) {
3938             mov->tracks[i].tref_tag = MKTAG('c','h','a','p');
3939             mov->tracks[i].tref_id  = mov->tracks[mov->chapter_track].track_id;
3940         }
3941     for (i = 0; i < mov->nb_streams; i++) {
3942         MOVTrack *track = &mov->tracks[i];
3943         if (track->tag == MKTAG('r','t','p',' ')) {
3944             track->tref_tag = MKTAG('h','i','n','t');
3945             track->tref_id = mov->tracks[track->src_track].track_id;
3946         } else if (track->par->codec_type == AVMEDIA_TYPE_AUDIO) {
3947             int * fallback, size;
3948             fallback = (int*)av_stream_get_side_data(track->st,
3949                                                      AV_PKT_DATA_FALLBACK_TRACK,
3950                                                      &size);
3951             if (fallback != NULL && size == sizeof(int)) {
3952                 if (*fallback >= 0 && *fallback < mov->nb_streams) {
3953                     track->tref_tag = MKTAG('f','a','l','l');
3954                     track->tref_id = mov->tracks[*fallback].track_id;
3955                 }
3956             }
3957         }
3958     }
3959     for (i = 0; i < mov->nb_streams; i++) {
3960         if (mov->tracks[i].tag == MKTAG('t','m','c','d')) {
3961             int src_trk = mov->tracks[i].src_track;
3962             mov->tracks[src_trk].tref_tag = mov->tracks[i].tag;
3963             mov->tracks[src_trk].tref_id  = mov->tracks[i].track_id;
3964             //src_trk may have a different timescale than the tmcd track
3965             mov->tracks[i].track_duration = av_rescale(mov->tracks[src_trk].track_duration,
3966                                                        mov->tracks[i].timescale,
3967                                                        mov->tracks[src_trk].timescale);
3968         }
3969     }
3970
3971     mov_write_mvhd_tag(pb, mov);
3972     if (mov->mode != MODE_MOV && !mov->iods_skip)
3973         mov_write_iods_tag(pb, mov);
3974     for (i = 0; i < mov->nb_streams; i++) {
3975         if (mov->tracks[i].entry > 0 || mov->flags & FF_MOV_FLAG_FRAGMENT) {
3976             int ret = mov_write_trak_tag(s, pb, mov, &(mov->tracks[i]), i < s->nb_streams ? s->streams[i] : NULL);
3977             if (ret < 0)
3978                 return ret;
3979         }
3980     }
3981     if (mov->flags & FF_MOV_FLAG_FRAGMENT)
3982         mov_write_mvex_tag(pb, mov); /* QuickTime requires trak to precede this */
3983
3984     if (mov->mode == MODE_PSP)
3985         mov_write_uuidusmt_tag(pb, s);
3986     else
3987         mov_write_udta_tag(pb, mov, s);
3988
3989     return update_size(pb, pos);
3990 }
3991
3992 static void param_write_int(AVIOContext *pb, const char *name, int value)
3993 {
3994     avio_printf(pb, "<param name=\"%s\" value=\"%d\" valuetype=\"data\"/>\n", name, value);
3995 }
3996
3997 static void param_write_string(AVIOContext *pb, const char *name, const char *value)
3998 {
3999     avio_printf(pb, "<param name=\"%s\" value=\"%s\" valuetype=\"data\"/>\n", name, value);
4000 }
4001
4002 static void param_write_hex(AVIOContext *pb, const char *name, const uint8_t *value, int len)
4003 {
4004     char buf[150];
4005     len = FFMIN(sizeof(buf) / 2 - 1, len);
4006     ff_data_to_hex(buf, value, len, 0);
4007     buf[2 * len] = '\0';
4008     avio_printf(pb, "<param name=\"%s\" value=\"%s\" valuetype=\"data\"/>\n", name, buf);
4009 }
4010
4011 static int mov_write_isml_manifest(AVIOContext *pb, MOVMuxContext *mov, AVFormatContext *s)
4012 {
4013     int64_t pos = avio_tell(pb);
4014     int i;
4015     int64_t manifest_bit_rate = 0;
4016     AVCPBProperties *props = NULL;
4017
4018     static const uint8_t uuid[] = {
4019         0xa5, 0xd4, 0x0b, 0x30, 0xe8, 0x14, 0x11, 0xdd,
4020         0xba, 0x2f, 0x08, 0x00, 0x20, 0x0c, 0x9a, 0x66
4021     };
4022
4023     avio_wb32(pb, 0);
4024     ffio_wfourcc(pb, "uuid");
4025     avio_write(pb, uuid, sizeof(uuid));
4026     avio_wb32(pb, 0);
4027
4028     avio_printf(pb, "<?xml version=\"1.0\" encoding=\"utf-8\"?>\n");
4029     avio_printf(pb, "<smil xmlns=\"http://www.w3.org/2001/SMIL20/Language\">\n");
4030     avio_printf(pb, "<head>\n");
4031     if (!(mov->fc->flags & AVFMT_FLAG_BITEXACT))
4032         avio_printf(pb, "<meta name=\"creator\" content=\"%s\" />\n",
4033                     LIBAVFORMAT_IDENT);
4034     avio_printf(pb, "</head>\n");
4035     avio_printf(pb, "<body>\n");
4036     avio_printf(pb, "<switch>\n");
4037
4038     mov_setup_track_ids(mov, s);
4039
4040     for (i = 0; i < mov->nb_streams; i++) {
4041         MOVTrack *track = &mov->tracks[i];
4042         const char *type;
4043         int track_id = track->track_id;
4044         char track_name_buf[32] = { 0 };
4045
4046         AVStream *st = track->st;
4047         AVDictionaryEntry *lang = av_dict_get(st->metadata, "language", NULL,0);
4048
4049         if (track->par->codec_type == AVMEDIA_TYPE_VIDEO && !is_cover_image(st)) {
4050             type = "video";
4051         } else if (track->par->codec_type == AVMEDIA_TYPE_AUDIO) {
4052             type = "audio";
4053         } else {
4054             continue;
4055         }
4056
4057         props = (AVCPBProperties*)av_stream_get_side_data(track->st, AV_PKT_DATA_CPB_PROPERTIES, NULL);
4058
4059         if (track->par->bit_rate) {
4060             manifest_bit_rate = track->par->bit_rate;
4061         } else if (props) {
4062             manifest_bit_rate = props->max_bitrate;
4063         }
4064
4065         avio_printf(pb, "<%s systemBitrate=\"%"PRId64"\">\n", type,
4066                     manifest_bit_rate);
4067         param_write_int(pb, "systemBitrate", manifest_bit_rate);
4068         param_write_int(pb, "trackID", track_id);
4069         param_write_string(pb, "systemLanguage", lang ? lang->value : "und");
4070
4071         /* Build track name piece by piece: */
4072         /* 1. track type */
4073         av_strlcat(track_name_buf, type, sizeof(track_name_buf));
4074         /* 2. track language, if available */
4075         if (lang)
4076             av_strlcatf(track_name_buf, sizeof(track_name_buf),
4077                         "_%s", lang->value);
4078         /* 3. special type suffix */
4079         /* "_cc" = closed captions, "_ad" = audio_description */
4080         if (st->disposition & AV_DISPOSITION_HEARING_IMPAIRED)
4081             av_strlcat(track_name_buf, "_cc", sizeof(track_name_buf));
4082         else if (st->disposition & AV_DISPOSITION_VISUAL_IMPAIRED)
4083             av_strlcat(track_name_buf, "_ad", sizeof(track_name_buf));
4084
4085         param_write_string(pb, "trackName", track_name_buf);
4086
4087         if (track->par->codec_type == AVMEDIA_TYPE_VIDEO) {
4088             if (track->par->codec_id == AV_CODEC_ID_H264) {
4089                 uint8_t *ptr;
4090                 int size = track->par->extradata_size;
4091                 if (!ff_avc_write_annexb_extradata(track->par->extradata, &ptr,
4092                                                    &size)) {
4093                     param_write_hex(pb, "CodecPrivateData",
4094                                     ptr ? ptr : track->par->extradata,
4095                                     size);
4096                     av_free(ptr);
4097                 }
4098                 param_write_string(pb, "FourCC", "H264");
4099             } else if (track->par->codec_id == AV_CODEC_ID_VC1) {
4100                 param_write_string(pb, "FourCC", "WVC1");
4101                 param_write_hex(pb, "CodecPrivateData", track->par->extradata,
4102                                 track->par->extradata_size);
4103             }
4104             param_write_int(pb, "MaxWidth", track->par->width);
4105             param_write_int(pb, "MaxHeight", track->par->height);
4106             param_write_int(pb, "DisplayWidth", track->par->width);
4107             param_write_int(pb, "DisplayHeight", track->par->height);
4108         } else {
4109             if (track->par->codec_id == AV_CODEC_ID_AAC) {
4110                 switch (track->par->profile)
4111                 {
4112                     case FF_PROFILE_AAC_HE_V2:
4113                         param_write_string(pb, "FourCC", "AACP");
4114                         break;
4115                     case FF_PROFILE_AAC_HE:
4116                         param_write_string(pb, "FourCC", "AACH");
4117                         break;
4118                     default:
4119                         param_write_string(pb, "FourCC", "AACL");
4120                 }
4121             } else if (track->par->codec_id == AV_CODEC_ID_WMAPRO) {
4122                 param_write_string(pb, "FourCC", "WMAP");
4123             }
4124             param_write_hex(pb, "CodecPrivateData", track->par->extradata,
4125                             track->par->extradata_size);
4126             param_write_int(pb, "AudioTag", ff_codec_get_tag(ff_codec_wav_tags,
4127                                                              track->par->codec_id));
4128             param_write_int(pb, "Channels", track->par->channels);
4129             param_write_int(pb, "SamplingRate", track->par->sample_rate);
4130             param_write_int(pb, "BitsPerSample", 16);
4131             param_write_int(pb, "PacketSize", track->par->block_align ?
4132                                               track->par->block_align : 4);
4133         }
4134         avio_printf(pb, "</%s>\n", type);
4135     }
4136     avio_printf(pb, "</switch>\n");
4137     avio_printf(pb, "</body>\n");
4138     avio_printf(pb, "</smil>\n");
4139
4140     return update_size(pb, pos);
4141 }
4142
4143 static int mov_write_mfhd_tag(AVIOContext *pb, MOVMuxContext *mov)
4144 {
4145     avio_wb32(pb, 16);
4146     ffio_wfourcc(pb, "mfhd");
4147     avio_wb32(pb, 0);
4148     avio_wb32(pb, mov->fragments);
4149     return 0;
4150 }
4151
4152 static uint32_t get_sample_flags(MOVTrack *track, MOVIentry *entry)
4153 {
4154     return entry->flags & MOV_SYNC_SAMPLE ? MOV_FRAG_SAMPLE_FLAG_DEPENDS_NO :
4155            (MOV_FRAG_SAMPLE_FLAG_DEPENDS_YES | MOV_FRAG_SAMPLE_FLAG_IS_NON_SYNC);
4156 }
4157
4158 static int mov_write_tfhd_tag(AVIOContext *pb, MOVMuxContext *mov,
4159                               MOVTrack *track, int64_t moof_offset)
4160 {
4161     int64_t pos = avio_tell(pb);
4162     uint32_t flags = MOV_TFHD_DEFAULT_SIZE | MOV_TFHD_DEFAULT_DURATION |
4163                      MOV_TFHD_BASE_DATA_OFFSET;
4164     if (!track->entry) {
4165         flags |= MOV_TFHD_DURATION_IS_EMPTY;
4166     } else {
4167         flags |= MOV_TFHD_DEFAULT_FLAGS;
4168     }
4169     if (mov->flags & FF_MOV_FLAG_OMIT_TFHD_OFFSET)
4170         flags &= ~MOV_TFHD_BASE_DATA_OFFSET;
4171     if (mov->flags & FF_MOV_FLAG_DEFAULT_BASE_MOOF) {
4172         flags &= ~MOV_TFHD_BASE_DATA_OFFSET;
4173         flags |= MOV_TFHD_DEFAULT_BASE_IS_MOOF;
4174     }
4175
4176     /* Don't set a default sample size, the silverlight player refuses
4177      * to play files with that set. Don't set a default sample duration,
4178      * WMP freaks out if it is set. Don't set a base data offset, PIFF
4179      * file format says it MUST NOT be set. */
4180     if (track->mode == MODE_ISM)
4181         flags &= ~(MOV_TFHD_DEFAULT_SIZE | MOV_TFHD_DEFAULT_DURATION |
4182                    MOV_TFHD_BASE_DATA_OFFSET);
4183
4184     avio_wb32(pb, 0); /* size placeholder */
4185     ffio_wfourcc(pb, "tfhd");
4186     avio_w8(pb, 0); /* version */
4187     avio_wb24(pb, flags);
4188
4189     avio_wb32(pb, track->track_id); /* track-id */
4190     if (flags & MOV_TFHD_BASE_DATA_OFFSET)
4191         avio_wb64(pb, moof_offset);
4192     if (flags & MOV_TFHD_DEFAULT_DURATION) {
4193         track->default_duration = get_cluster_duration(track, 0);
4194         avio_wb32(pb, track->default_duration);
4195     }
4196     if (flags & MOV_TFHD_DEFAULT_SIZE) {
4197         track->default_size = track->entry ? track->cluster[0].size : 1;
4198         avio_wb32(pb, track->default_size);
4199     } else
4200         track->default_size = -1;
4201
4202     if (flags & MOV_TFHD_DEFAULT_FLAGS) {
4203         /* Set the default flags based on the second sample, if available.
4204          * If the first sample is different, that can be signaled via a separate field. */
4205         if (track->entry > 1)
4206             track->default_sample_flags = get_sample_flags(track, &track->cluster[1]);
4207         else
4208             track->default_sample_flags =
4209                 track->par->codec_type == AVMEDIA_TYPE_VIDEO ?
4210                 (MOV_FRAG_SAMPLE_FLAG_DEPENDS_YES | MOV_FRAG_SAMPLE_FLAG_IS_NON_SYNC) :
4211                 MOV_FRAG_SAMPLE_FLAG_DEPENDS_NO;
4212         avio_wb32(pb, track->default_sample_flags);
4213     }
4214
4215     return update_size(pb, pos);
4216 }
4217
4218 static int mov_write_trun_tag(AVIOContext *pb, MOVMuxContext *mov,
4219                               MOVTrack *track, int moof_size,
4220                               int first, int end)
4221 {
4222     int64_t pos = avio_tell(pb);
4223     uint32_t flags = MOV_TRUN_DATA_OFFSET;
4224     int i;
4225
4226     for (i = first; i < end; i++) {
4227         if (get_cluster_duration(track, i) != track->default_duration)
4228             flags |= MOV_TRUN_SAMPLE_DURATION;
4229         if (track->cluster[i].size != track->default_size)
4230             flags |= MOV_TRUN_SAMPLE_SIZE;
4231         if (i > first && get_sample_flags(track, &track->cluster[i]) != track->default_sample_flags)
4232             flags |= MOV_TRUN_SAMPLE_FLAGS;
4233     }
4234     if (!(flags & MOV_TRUN_SAMPLE_FLAGS) && track->entry > 0 &&
4235          get_sample_flags(track, &track->cluster[0]) != track->default_sample_flags)
4236         flags |= MOV_TRUN_FIRST_SAMPLE_FLAGS;
4237     if (track->flags & MOV_TRACK_CTTS)
4238         flags |= MOV_TRUN_SAMPLE_CTS;
4239
4240     avio_wb32(pb, 0); /* size placeholder */
4241     ffio_wfourcc(pb, "trun");
4242     if (mov->flags & FF_MOV_FLAG_NEGATIVE_CTS_OFFSETS)
4243         avio_w8(pb, 1); /* version */
4244     else
4245         avio_w8(pb, 0); /* version */
4246     avio_wb24(pb, flags);
4247
4248     avio_wb32(pb, end - first); /* sample count */
4249     if (mov->flags & FF_MOV_FLAG_OMIT_TFHD_OFFSET &&
4250         !(mov->flags & FF_MOV_FLAG_DEFAULT_BASE_MOOF) &&
4251         !mov->first_trun)
4252         avio_wb32(pb, 0); /* Later tracks follow immediately after the previous one */
4253     else
4254         avio_wb32(pb, moof_size + 8 + track->data_offset +
4255                       track->cluster[first].pos); /* data offset */
4256     if (flags & MOV_TRUN_FIRST_SAMPLE_FLAGS)
4257         avio_wb32(pb, get_sample_flags(track, &track->cluster[first]));
4258
4259     for (i = first; i < end; i++) {
4260         if (flags & MOV_TRUN_SAMPLE_DURATION)
4261             avio_wb32(pb, get_cluster_duration(track, i));
4262         if (flags & MOV_TRUN_SAMPLE_SIZE)
4263             avio_wb32(pb, track->cluster[i].size);
4264         if (flags & MOV_TRUN_SAMPLE_FLAGS)
4265             avio_wb32(pb, get_sample_flags(track, &track->cluster[i]));
4266         if (flags & MOV_TRUN_SAMPLE_CTS)
4267             avio_wb32(pb, track->cluster[i].cts);
4268     }
4269
4270     mov->first_trun = 0;
4271     return update_size(pb, pos);
4272 }
4273
4274 static int mov_write_tfxd_tag(AVIOContext *pb, MOVTrack *track)
4275 {
4276     int64_t pos = avio_tell(pb);
4277     static const uint8_t uuid[] = {
4278         0x6d, 0x1d, 0x9b, 0x05, 0x42, 0xd5, 0x44, 0xe6,
4279         0x80, 0xe2, 0x14, 0x1d, 0xaf, 0xf7, 0x57, 0xb2
4280     };
4281
4282     avio_wb32(pb, 0); /* size placeholder */
4283     ffio_wfourcc(pb, "uuid");
4284     avio_write(pb, uuid, sizeof(uuid));
4285     avio_w8(pb, 1);
4286     avio_wb24(pb, 0);
4287     avio_wb64(pb, track->start_dts + track->frag_start +
4288                   track->cluster[0].cts);
4289     avio_wb64(pb, track->end_pts -
4290                   (track->cluster[0].dts + track->cluster[0].cts));
4291
4292     return update_size(pb, pos);
4293 }
4294
4295 static int mov_write_tfrf_tag(AVIOContext *pb, MOVMuxContext *mov,
4296                               MOVTrack *track, int entry)
4297 {
4298     int n = track->nb_frag_info - 1 - entry, i;
4299     int size = 8 + 16 + 4 + 1 + 16*n;
4300     static const uint8_t uuid[] = {
4301         0xd4, 0x80, 0x7e, 0xf2, 0xca, 0x39, 0x46, 0x95,
4302         0x8e, 0x54, 0x26, 0xcb, 0x9e, 0x46, 0xa7, 0x9f
4303     };
4304
4305     if (entry < 0)
4306         return 0;
4307
4308     avio_seek(pb, track->frag_info[entry].tfrf_offset, SEEK_SET);
4309     avio_wb32(pb, size);
4310     ffio_wfourcc(pb, "uuid");
4311     avio_write(pb, uuid, sizeof(uuid));
4312     avio_w8(pb, 1);
4313     avio_wb24(pb, 0);
4314     avio_w8(pb, n);
4315     for (i = 0; i < n; i++) {
4316         int index = entry + 1 + i;
4317         avio_wb64(pb, track->frag_info[index].time);
4318         avio_wb64(pb, track->frag_info[index].duration);
4319     }
4320     if (n < mov->ism_lookahead) {
4321         int free_size = 16 * (mov->ism_lookahead - n);
4322         avio_wb32(pb, free_size);
4323         ffio_wfourcc(pb, "free");
4324         ffio_fill(pb, 0, free_size - 8);
4325     }
4326
4327     return 0;
4328 }
4329
4330 static int mov_write_tfrf_tags(AVIOContext *pb, MOVMuxContext *mov,
4331                                MOVTrack *track)
4332 {
4333     int64_t pos = avio_tell(pb);
4334     int i;
4335     for (i = 0; i < mov->ism_lookahead; i++) {
4336         /* Update the tfrf tag for the last ism_lookahead fragments,
4337          * nb_frag_info - 1 is the next fragment to be written. */
4338         mov_write_tfrf_tag(pb, mov, track, track->nb_frag_info - 2 - i);
4339     }
4340     avio_seek(pb, pos, SEEK_SET);
4341     return 0;
4342 }
4343
4344 static int mov_add_tfra_entries(AVIOContext *pb, MOVMuxContext *mov, int tracks,
4345                                 int size)
4346 {
4347     int i;
4348     for (i = 0; i < mov->nb_streams; i++) {
4349         MOVTrack *track = &mov->tracks[i];
4350         MOVFragmentInfo *info;
4351         if ((tracks >= 0 && i != tracks) || !track->entry)
4352             continue;
4353         track->nb_frag_info++;
4354         if (track->nb_frag_info >= track->frag_info_capacity) {
4355             unsigned new_capacity = track->nb_frag_info + MOV_FRAG_INFO_ALLOC_INCREMENT;
4356             if (av_reallocp_array(&track->frag_info,
4357                                   new_capacity,
4358                                   sizeof(*track->frag_info)))
4359                 return AVERROR(ENOMEM);
4360             track->frag_info_capacity = new_capacity;
4361         }
4362         info = &track->frag_info[track->nb_frag_info - 1];
4363         info->offset   = avio_tell(pb);
4364         info->size     = size;
4365         // Try to recreate the original pts for the first packet
4366         // from the fields we have stored
4367         info->time     = track->start_dts + track->frag_start +
4368                          track->cluster[0].cts;
4369         info->duration = track->end_pts -
4370                          (track->cluster[0].dts + track->cluster[0].cts);
4371         // If the pts is less than zero, we will have trimmed
4372         // away parts of the media track using an edit list,
4373         // and the corresponding start presentation time is zero.
4374         if (info->time < 0) {
4375             info->duration += info->time;
4376             info->time = 0;
4377         }
4378         info->tfrf_offset = 0;
4379         mov_write_tfrf_tags(pb, mov, track);
4380     }
4381     return 0;
4382 }
4383
4384 static void mov_prune_frag_info(MOVMuxContext *mov, int tracks, int max)
4385 {
4386     int i;
4387     for (i = 0; i < mov->nb_streams; i++) {
4388         MOVTrack *track = &mov->tracks[i];
4389         if ((tracks >= 0 && i != tracks) || !track->entry)
4390             continue;
4391         if (track->nb_frag_info > max) {
4392             memmove(track->frag_info, track->frag_info + (track->nb_frag_info - max), max * sizeof(*track->frag_info));
4393             track->nb_frag_info = max;
4394         }
4395     }
4396 }
4397
4398 static int mov_write_tfdt_tag(AVIOContext *pb, MOVTrack *track)
4399 {
4400     int64_t pos = avio_tell(pb);
4401
4402     avio_wb32(pb, 0); /* size */
4403     ffio_wfourcc(pb, "tfdt");
4404     avio_w8(pb, 1); /* version */
4405     avio_wb24(pb, 0);
4406     avio_wb64(pb, track->frag_start);
4407     return update_size(pb, pos);
4408 }
4409
4410 static int mov_write_traf_tag(AVIOContext *pb, MOVMuxContext *mov,
4411                               MOVTrack *track, int64_t moof_offset,
4412                               int moof_size)
4413 {
4414     int64_t pos = avio_tell(pb);
4415     int i, start = 0;
4416     avio_wb32(pb, 0); /* size placeholder */
4417     ffio_wfourcc(pb, "traf");
4418
4419     mov_write_tfhd_tag(pb, mov, track, moof_offset);
4420     if (mov->mode != MODE_ISM)
4421         mov_write_tfdt_tag(pb, track);
4422     for (i = 1; i < track->entry; i++) {
4423         if (track->cluster[i].pos != track->cluster[i - 1].pos + track->cluster[i - 1].size) {
4424             mov_write_trun_tag(pb, mov, track, moof_size, start, i);
4425             start = i;
4426         }
4427     }
4428     mov_write_trun_tag(pb, mov, track, moof_size, start, track->entry);
4429     if (mov->mode == MODE_ISM) {
4430         mov_write_tfxd_tag(pb, track);
4431
4432         if (mov->ism_lookahead) {
4433             int i, size = 16 + 4 + 1 + 16 * mov->ism_lookahead;
4434
4435             if (track->nb_frag_info > 0) {
4436                 MOVFragmentInfo *info = &track->frag_info[track->nb_frag_info - 1];
4437                 if (!info->tfrf_offset)
4438                     info->tfrf_offset = avio_tell(pb);
4439             }
4440             avio_wb32(pb, 8 + size);
4441             ffio_wfourcc(pb, "free");
4442             for (i = 0; i < size; i++)
4443                 avio_w8(pb, 0);
4444         }
4445     }
4446
4447     return update_size(pb, pos);
4448 }
4449
4450 static int mov_write_moof_tag_internal(AVIOContext *pb, MOVMuxContext *mov,
4451                                        int tracks, int moof_size)
4452 {
4453     int64_t pos = avio_tell(pb);
4454     int i;
4455
4456     avio_wb32(pb, 0); /* size placeholder */
4457     ffio_wfourcc(pb, "moof");
4458     mov->first_trun = 1;
4459
4460     mov_write_mfhd_tag(pb, mov);
4461     for (i = 0; i < mov->nb_streams; i++) {
4462         MOVTrack *track = &mov->tracks[i];
4463         if (tracks >= 0 && i != tracks)
4464             continue;
4465         if (!track->entry)
4466             continue;
4467         mov_write_traf_tag(pb, mov, track, pos, moof_size);
4468     }
4469
4470     return update_size(pb, pos);
4471 }
4472
4473 static int mov_write_sidx_tag(AVIOContext *pb,
4474                               MOVTrack *track, int ref_size, int total_sidx_size)
4475 {
4476     int64_t pos = avio_tell(pb), offset_pos, end_pos;
4477     int64_t presentation_time, duration, offset;
4478     int starts_with_SAP, i, entries;
4479
4480     if (track->entry) {
4481         entries = 1;
4482         presentation_time = track->start_dts + track->frag_start +
4483                             track->cluster[0].cts;
4484         duration = track->end_pts -
4485                    (track->cluster[0].dts + track->cluster[0].cts);
4486         starts_with_SAP = track->cluster[0].flags & MOV_SYNC_SAMPLE;
4487
4488         // pts<0 should be cut away using edts
4489         if (presentation_time < 0) {
4490             duration += presentation_time;
4491             presentation_time = 0;
4492         }
4493     } else {
4494         entries = track->nb_frag_info;
4495         if (entries <= 0)
4496             return 0;
4497         presentation_time = track->frag_info[0].time;
4498     }
4499
4500     avio_wb32(pb, 0); /* size */
4501     ffio_wfourcc(pb, "sidx");
4502     avio_w8(pb, 1); /* version */
4503     avio_wb24(pb, 0);
4504     avio_wb32(pb, track->track_id); /* reference_ID */
4505     avio_wb32(pb, track->timescale); /* timescale */
4506     avio_wb64(pb, presentation_time); /* earliest_presentation_time */
4507     offset_pos = avio_tell(pb);
4508     avio_wb64(pb, 0); /* first_offset (offset to referenced moof) */
4509     avio_wb16(pb, 0); /* reserved */
4510
4511     avio_wb16(pb, entries); /* reference_count */
4512     for (i = 0; i < entries; i++) {
4513         if (!track->entry) {
4514             if (i > 1 && track->frag_info[i].offset != track->frag_info[i - 1].offset + track->frag_info[i - 1].size) {
4515                av_log(NULL, AV_LOG_ERROR, "Non-consecutive fragments, writing incorrect sidx\n");
4516             }
4517             duration = track->frag_info[i].duration;
4518             ref_size = track->frag_info[i].size;
4519             starts_with_SAP = 1;
4520         }
4521         avio_wb32(pb, (0 << 31) | (ref_size & 0x7fffffff)); /* reference_type (0 = media) | referenced_size */
4522         avio_wb32(pb, duration); /* subsegment_duration */
4523         avio_wb32(pb, (starts_with_SAP << 31) | (0 << 28) | 0); /* starts_with_SAP | SAP_type | SAP_delta_time */
4524     }
4525
4526     end_pos = avio_tell(pb);
4527     offset = pos + total_sidx_size - end_pos;
4528     avio_seek(pb, offset_pos, SEEK_SET);
4529     avio_wb64(pb, offset);
4530     avio_seek(pb, end_pos, SEEK_SET);
4531     return update_size(pb, pos);
4532 }
4533
4534 static int mov_write_sidx_tags(AVIOContext *pb, MOVMuxContext *mov,
4535                                int tracks, int ref_size)
4536 {
4537     int i, round, ret;
4538     AVIOContext *avio_buf;
4539     int total_size = 0;
4540     for (round = 0; round < 2; round++) {
4541         // First run one round to calculate the total size of all
4542         // sidx atoms.
4543         // This would be much simpler if we'd only write one sidx
4544         // atom, for the first track in the moof.
4545         if (round == 0) {
4546             if ((ret = ffio_open_null_buf(&avio_buf)) < 0)
4547                 return ret;
4548         } else {
4549             avio_buf = pb;
4550         }
4551         for (i = 0; i < mov->nb_streams; i++) {
4552             MOVTrack *track = &mov->tracks[i];
4553             if (tracks >= 0 && i != tracks)
4554                 continue;
4555             // When writing a sidx for the full file, entry is 0, but
4556             // we want to include all tracks. ref_size is 0 in this case,
4557             // since we read it from frag_info instead.
4558             if (!track->entry && ref_size > 0)
4559                 continue;
4560             total_size -= mov_write_sidx_tag(avio_buf, track, ref_size,
4561                                              total_size);
4562         }
4563         if (round == 0)
4564             total_size = ffio_close_null_buf(avio_buf);
4565     }
4566     return 0;
4567 }
4568
4569 static int mov_write_prft_tag(AVIOContext *pb, MOVMuxContext *mov, int tracks)
4570 {
4571     int64_t pos = avio_tell(pb), pts_us, ntp_ts;
4572     MOVTrack *first_track;
4573
4574     /* PRFT should be associated with at most one track. So, choosing only the
4575      * first track. */
4576     if (tracks > 0)
4577         return 0;
4578     first_track = &(mov->tracks[0]);
4579
4580     if (!first_track->entry) {
4581         av_log(mov->fc, AV_LOG_WARNING, "Unable to write PRFT, no entries in the track\n");
4582         return 0;
4583     }
4584
4585     if (first_track->cluster[0].pts == AV_NOPTS_VALUE) {
4586         av_log(mov->fc, AV_LOG_WARNING, "Unable to write PRFT, first PTS is invalid\n");
4587         return 0;
4588     }
4589
4590     if (mov->write_prft == MOV_PRFT_SRC_WALLCLOCK) {
4591         ntp_ts = ff_get_formatted_ntp_time(ff_ntp_time());
4592     } else if (mov->write_prft == MOV_PRFT_SRC_PTS) {
4593         pts_us = av_rescale_q(first_track->cluster[0].pts,
4594                               first_track->st->time_base, AV_TIME_BASE_Q);
4595         ntp_ts = ff_get_formatted_ntp_time(pts_us + NTP_OFFSET_US);
4596     } else {
4597         av_log(mov->fc, AV_LOG_WARNING, "Unsupported PRFT box configuration: %d\n",
4598                mov->write_prft);
4599         return 0;
4600     }
4601
4602     avio_wb32(pb, 0);                           // Size place holder
4603     ffio_wfourcc(pb, "prft");                   // Type
4604     avio_w8(pb, 1);                             // Version
4605     avio_wb24(pb, 0);                           // Flags
4606     avio_wb32(pb, first_track->track_id);       // reference track ID
4607     avio_wb64(pb, ntp_ts);                      // NTP time stamp
4608     avio_wb64(pb, first_track->cluster[0].pts); //media time
4609     return update_size(pb, pos);
4610 }
4611
4612 static int mov_write_moof_tag(AVIOContext *pb, MOVMuxContext *mov, int tracks,
4613                               int64_t mdat_size)
4614 {
4615     AVIOContext *avio_buf;
4616     int ret, moof_size;
4617
4618     if ((ret = ffio_open_null_buf(&avio_buf)) < 0)
4619         return ret;
4620     mov_write_moof_tag_internal(avio_buf, mov, tracks, 0);
4621     moof_size = ffio_close_null_buf(avio_buf);
4622
4623     if (mov->flags & FF_MOV_FLAG_DASH &&
4624         !(mov->flags & (FF_MOV_FLAG_GLOBAL_SIDX | FF_MOV_FLAG_SKIP_SIDX)))
4625         mov_write_sidx_tags(pb, mov, tracks, moof_size + 8 + mdat_size);
4626
4627     if (mov->write_prft > MOV_PRFT_NONE && mov->write_prft < MOV_PRFT_NB)
4628         mov_write_prft_tag(pb, mov, tracks);
4629
4630     if (mov->flags & FF_MOV_FLAG_GLOBAL_SIDX ||
4631         !(mov->flags & FF_MOV_FLAG_SKIP_TRAILER) ||
4632         mov->ism_lookahead) {
4633         if ((ret = mov_add_tfra_entries(pb, mov, tracks, moof_size + 8 + mdat_size)) < 0)
4634             return ret;
4635         if (!(mov->flags & FF_MOV_FLAG_GLOBAL_SIDX) &&
4636             mov->flags & FF_MOV_FLAG_SKIP_TRAILER) {
4637             mov_prune_frag_info(mov, tracks, mov->ism_lookahead + 1);
4638         }
4639     }
4640
4641     return mov_write_moof_tag_internal(pb, mov, tracks, moof_size);
4642 }
4643
4644 static int mov_write_tfra_tag(AVIOContext *pb, MOVTrack *track)
4645 {
4646     int64_t pos = avio_tell(pb);
4647     int i;
4648
4649     avio_wb32(pb, 0); /* size placeholder */
4650     ffio_wfourcc(pb, "tfra");
4651     avio_w8(pb, 1); /* version */
4652     avio_wb24(pb, 0);
4653
4654     avio_wb32(pb, track->track_id);
4655     avio_wb32(pb, 0); /* length of traf/trun/sample num */
4656     avio_wb32(pb, track->nb_frag_info);
4657     for (i = 0; i < track->nb_frag_info; i++) {
4658         avio_wb64(pb, track->frag_info[i].time);
4659         avio_wb64(pb, track->frag_info[i].offset + track->data_offset);
4660         avio_w8(pb, 1); /* traf number */
4661         avio_w8(pb, 1); /* trun number */
4662         avio_w8(pb, 1); /* sample number */
4663     }
4664
4665     return update_size(pb, pos);
4666 }
4667
4668 static int mov_write_mfra_tag(AVIOContext *pb, MOVMuxContext *mov)
4669 {
4670     int64_t pos = avio_tell(pb);
4671     int i;
4672
4673     avio_wb32(pb, 0); /* size placeholder */
4674     ffio_wfourcc(pb, "mfra");
4675     /* An empty mfra atom is enough to indicate to the publishing point that
4676      * the stream has ended. */
4677     if (mov->flags & FF_MOV_FLAG_ISML)
4678         return update_size(pb, pos);
4679
4680     for (i = 0; i < mov->nb_streams; i++) {
4681         MOVTrack *track = &mov->tracks[i];
4682         if (track->nb_frag_info)
4683             mov_write_tfra_tag(pb, track);
4684     }
4685
4686     avio_wb32(pb, 16);
4687     ffio_wfourcc(pb, "mfro");
4688     avio_wb32(pb, 0); /* version + flags */
4689     avio_wb32(pb, avio_tell(pb) + 4 - pos);
4690
4691     return update_size(pb, pos);
4692 }
4693
4694 static int mov_write_mdat_tag(AVIOContext *pb, MOVMuxContext *mov)
4695 {
4696     avio_wb32(pb, 8);    // placeholder for extended size field (64 bit)
4697     ffio_wfourcc(pb, mov->mode == MODE_MOV ? "wide" : "free");
4698
4699     mov->mdat_pos = avio_tell(pb);
4700     avio_wb32(pb, 0); /* size placeholder*/
4701     ffio_wfourcc(pb, "mdat");
4702     return 0;
4703 }
4704
4705 /* TODO: This needs to be more general */
4706 static int mov_write_ftyp_tag(AVIOContext *pb, AVFormatContext *s)
4707 {
4708     MOVMuxContext *mov = s->priv_data;
4709     int64_t pos = avio_tell(pb);
4710     int has_h264 = 0, has_video = 0;
4711     int minor = 0x200;
4712     int i;
4713
4714     for (i = 0; i < s->nb_streams; i++) {
4715         AVStream *st = s->streams[i];
4716         if (is_cover_image(st))
4717             continue;
4718         if (st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO)
4719             has_video = 1;
4720         if (st->codecpar->codec_id == AV_CODEC_ID_H264)
4721             has_h264 = 1;
4722     }
4723
4724     avio_wb32(pb, 0); /* size */
4725     ffio_wfourcc(pb, "ftyp");
4726
4727     if (mov->major_brand && strlen(mov->major_brand) >= 4)
4728         ffio_wfourcc(pb, mov->major_brand);
4729     else if (mov->mode == MODE_3GP) {
4730         ffio_wfourcc(pb, has_h264 ? "3gp6"  : "3gp4");
4731         minor =     has_h264 ?   0x100 :   0x200;
4732     } else if (mov->mode & MODE_3G2) {
4733         ffio_wfourcc(pb, has_h264 ? "3g2b"  : "3g2a");
4734         minor =     has_h264 ? 0x20000 : 0x10000;
4735     } else if (mov->mode == MODE_PSP)
4736         ffio_wfourcc(pb, "MSNV");
4737     else if (mov->mode == MODE_MP4 && mov->flags & FF_MOV_FLAG_DEFAULT_BASE_MOOF)
4738         ffio_wfourcc(pb, "iso5"); // Required when using default-base-is-moof
4739     else if (mov->mode == MODE_MP4 && mov->flags & FF_MOV_FLAG_NEGATIVE_CTS_OFFSETS)
4740         ffio_wfourcc(pb, "iso4");
4741     else if (mov->mode == MODE_MP4)
4742         ffio_wfourcc(pb, "isom");
4743     else if (mov->mode == MODE_IPOD)
4744         ffio_wfourcc(pb, has_video ? "M4V ":"M4A ");
4745     else if (mov->mode == MODE_ISM)
4746         ffio_wfourcc(pb, "isml");
4747     else if (mov->mode == MODE_F4V)
4748         ffio_wfourcc(pb, "f4v ");
4749     else
4750         ffio_wfourcc(pb, "qt  ");
4751
4752     avio_wb32(pb, minor);
4753
4754     if (mov->mode == MODE_MOV)
4755         ffio_wfourcc(pb, "qt  ");
4756     else if (mov->mode == MODE_ISM) {
4757         ffio_wfourcc(pb, "piff");
4758     } else if (!(mov->flags & FF_MOV_FLAG_DEFAULT_BASE_MOOF)) {
4759         ffio_wfourcc(pb, "isom");
4760         ffio_wfourcc(pb, "iso2");
4761         if (has_h264)
4762             ffio_wfourcc(pb, "avc1");
4763     }
4764
4765     // We add tfdt atoms when fragmenting, signal this with the iso6 compatible
4766     // brand. This is compatible with users that don't understand tfdt.
4767     if (mov->flags & FF_MOV_FLAG_FRAGMENT && mov->mode != MODE_ISM)
4768         ffio_wfourcc(pb, "iso6");
4769
4770     if (mov->mode == MODE_3GP)
4771         ffio_wfourcc(pb, has_h264 ? "3gp6":"3gp4");
4772     else if (mov->mode & MODE_3G2)
4773         ffio_wfourcc(pb, has_h264 ? "3g2b":"3g2a");
4774     else if (mov->mode == MODE_PSP)
4775         ffio_wfourcc(pb, "MSNV");
4776     else if (mov->mode == MODE_MP4)
4777         ffio_wfourcc(pb, "mp41");
4778
4779     if (mov->flags & FF_MOV_FLAG_DASH && mov->flags & FF_MOV_FLAG_GLOBAL_SIDX)
4780         ffio_wfourcc(pb, "dash");
4781
4782     return update_size(pb, pos);
4783 }
4784
4785 static int mov_write_uuidprof_tag(AVIOContext *pb, AVFormatContext *s)
4786 {
4787     AVStream       *video_st    = s->streams[0];
4788     AVCodecParameters *video_par = s->streams[0]->codecpar;
4789     AVCodecParameters *audio_par = s->streams[1]->codecpar;
4790     int audio_rate = audio_par->sample_rate;
4791     int64_t frame_rate = video_st->avg_frame_rate.den ?
4792                         (video_st->avg_frame_rate.num * 0x10000LL) / video_st->avg_frame_rate.den :
4793                         0;
4794     int audio_kbitrate = audio_par->bit_rate / 1000;
4795     int video_kbitrate = FFMIN(video_par->bit_rate / 1000, 800 - audio_kbitrate);
4796
4797     if (frame_rate < 0 || frame_rate > INT32_MAX) {
4798         av_log(s, AV_LOG_ERROR, "Frame rate %f outside supported range\n", frame_rate / (double)0x10000);
4799         return AVERROR(EINVAL);
4800     }
4801
4802     avio_wb32(pb, 0x94); /* size */
4803     ffio_wfourcc(pb, "uuid");
4804     ffio_wfourcc(pb, "PROF");
4805
4806     avio_wb32(pb, 0x21d24fce); /* 96 bit UUID */
4807     avio_wb32(pb, 0xbb88695c);
4808     avio_wb32(pb, 0xfac9c740);
4809
4810     avio_wb32(pb, 0x0);  /* ? */
4811     avio_wb32(pb, 0x3);  /* 3 sections ? */
4812
4813     avio_wb32(pb, 0x14); /* size */
4814     ffio_wfourcc(pb, "FPRF");
4815     avio_wb32(pb, 0x0);  /* ? */
4816     avio_wb32(pb, 0x0);  /* ? */
4817     avio_wb32(pb, 0x0);  /* ? */
4818
4819     avio_wb32(pb, 0x2c);  /* size */
4820     ffio_wfourcc(pb, "APRF"); /* audio */
4821     avio_wb32(pb, 0x0);
4822     avio_wb32(pb, 0x2);   /* TrackID */
4823     ffio_wfourcc(pb, "mp4a");
4824     avio_wb32(pb, 0x20f);
4825     avio_wb32(pb, 0x0);
4826     avio_wb32(pb, audio_kbitrate);
4827     avio_wb32(pb, audio_kbitrate);
4828     avio_wb32(pb, audio_rate);
4829     avio_wb32(pb, audio_par->channels);
4830
4831     avio_wb32(pb, 0x34);  /* size */
4832     ffio_wfourcc(pb, "VPRF");   /* video */
4833     avio_wb32(pb, 0x0);
4834     avio_wb32(pb, 0x1);    /* TrackID */
4835     if (video_par->codec_id == AV_CODEC_ID_H264) {
4836         ffio_wfourcc(pb, "avc1");
4837         avio_wb16(pb, 0x014D);
4838         avio_wb16(pb, 0x0015);
4839     } else {
4840         ffio_wfourcc(pb, "mp4v");
4841         avio_wb16(pb, 0x0000);
4842         avio_wb16(pb, 0x0103);
4843     }
4844     avio_wb32(pb, 0x0);
4845     avio_wb32(pb, video_kbitrate);
4846     avio_wb32(pb, video_kbitrate);
4847     avio_wb32(pb, frame_rate);
4848     avio_wb32(pb, frame_rate);
4849     avio_wb16(pb, video_par->width);
4850     avio_wb16(pb, video_par->height);
4851     avio_wb32(pb, 0x010001); /* ? */
4852
4853     return 0;
4854 }
4855
4856 static int mov_write_identification(AVIOContext *pb, AVFormatContext *s)
4857 {
4858     MOVMuxContext *mov = s->priv_data;
4859     int i;
4860
4861     mov_write_ftyp_tag(pb,s);
4862     if (mov->mode == MODE_PSP) {
4863         int video_streams_nb = 0, audio_streams_nb = 0, other_streams_nb = 0;
4864         for (i = 0; i < s->nb_streams; i++) {
4865             AVStream *st = s->streams[i];
4866             if (is_cover_image(st))
4867                 continue;
4868             if (st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO)
4869                 video_streams_nb++;
4870             else if (st->codecpar->codec_type == AVMEDIA_TYPE_AUDIO)
4871                 audio_streams_nb++;
4872             else
4873                 other_streams_nb++;
4874             }
4875
4876         if (video_streams_nb != 1 || audio_streams_nb != 1 || other_streams_nb) {
4877             av_log(s, AV_LOG_ERROR, "PSP mode need one video and one audio stream\n");
4878             return AVERROR(EINVAL);
4879         }
4880         return mov_write_uuidprof_tag(pb, s);
4881     }
4882     return 0;
4883 }
4884
4885 static int mov_parse_mpeg2_frame(AVPacket *pkt, uint32_t *flags)
4886 {
4887     uint32_t c = -1;
4888     int i, closed_gop = 0;
4889
4890     for (i = 0; i < pkt->size - 4; i++) {
4891         c = (c << 8) + pkt->data[i];
4892         if (c == 0x1b8) { // gop
4893             closed_gop = pkt->data[i + 4] >> 6 & 0x01;
4894         } else if (c == 0x100) { // pic
4895             int temp_ref = (pkt->data[i + 1] << 2) | (pkt->data[i + 2] >> 6);
4896             if (!temp_ref || closed_gop) // I picture is not reordered
4897                 *flags = MOV_SYNC_SAMPLE;
4898             else
4899                 *flags = MOV_PARTIAL_SYNC_SAMPLE;
4900             break;
4901         }
4902     }
4903     return 0;
4904 }
4905
4906 static void mov_parse_vc1_frame(AVPacket *pkt, MOVTrack *trk)
4907 {
4908     const uint8_t *start, *next, *end = pkt->data + pkt->size;
4909     int seq = 0, entry = 0;
4910     int key = pkt->flags & AV_PKT_FLAG_KEY;
4911     start = find_next_marker(pkt->data, end);
4912     for (next = start; next < end; start = next) {
4913         next = find_next_marker(start + 4, end);
4914         switch (AV_RB32(start)) {
4915         case VC1_CODE_SEQHDR:
4916             seq = 1;
4917             break;
4918         case VC1_CODE_ENTRYPOINT:
4919             entry = 1;
4920             break;
4921         case VC1_CODE_SLICE:
4922             trk->vc1_info.slices = 1;
4923             break;
4924         }
4925     }
4926     if (!trk->entry && trk->vc1_info.first_packet_seen)
4927         trk->vc1_info.first_frag_written = 1;
4928     if (!trk->entry && !trk->vc1_info.first_frag_written) {
4929         /* First packet in first fragment */
4930         trk->vc1_info.first_packet_seq   = seq;
4931         trk->vc1_info.first_packet_entry = entry;
4932         trk->vc1_info.first_packet_seen  = 1;
4933     } else if ((seq && !trk->vc1_info.packet_seq) ||
4934                (entry && !trk->vc1_info.packet_entry)) {
4935         int i;
4936         for (i = 0; i < trk->entry; i++)
4937             trk->cluster[i].flags &= ~MOV_SYNC_SAMPLE;
4938         trk->has_keyframes = 0;
4939         if (seq)
4940             trk->vc1_info.packet_seq = 1;
4941         if (entry)
4942             trk->vc1_info.packet_entry = 1;
4943         if (!trk->vc1_info.first_frag_written) {
4944             /* First fragment */
4945             if ((!seq   || trk->vc1_info.first_packet_seq) &&
4946                 (!entry || trk->vc1_info.first_packet_entry)) {
4947                 /* First packet had the same headers as this one, readd the
4948                  * sync sample flag. */
4949                 trk->cluster[0].flags |= MOV_SYNC_SAMPLE;
4950                 trk->has_keyframes = 1;
4951             }
4952         }
4953     }
4954     if (trk->vc1_info.packet_seq && trk->vc1_info.packet_entry)
4955         key = seq && entry;
4956     else if (trk->vc1_info.packet_seq)
4957         key = seq;
4958     else if (trk->vc1_info.packet_entry)
4959         key = entry;
4960     if (key) {
4961         trk->cluster[trk->entry].flags |= MOV_SYNC_SAMPLE;
4962         trk->has_keyframes++;
4963     }
4964 }
4965
4966 static int mov_flush_fragment_interleaving(AVFormatContext *s, MOVTrack *track)
4967 {
4968     MOVMuxContext *mov = s->priv_data;
4969     int ret, buf_size;
4970     uint8_t *buf;
4971     int i, offset;
4972
4973     if (!track->mdat_buf)
4974         return 0;
4975     if (!mov->mdat_buf) {
4976         if ((ret = avio_open_dyn_buf(&mov->mdat_buf)) < 0)
4977             return ret;
4978     }
4979     buf_size = avio_close_dyn_buf(track->mdat_buf, &buf);
4980     track->mdat_buf = NULL;
4981
4982     offset = avio_tell(mov->mdat_buf);
4983     avio_write(mov->mdat_buf, buf, buf_size);
4984     av_free(buf);
4985
4986     for (i = track->entries_flushed; i < track->entry; i++)
4987         track->cluster[i].pos += offset;
4988     track->entries_flushed = track->entry;
4989     return 0;
4990 }
4991
4992 static int mov_flush_fragment(AVFormatContext *s, int force)
4993 {
4994     MOVMuxContext *mov = s->priv_data;
4995     int i, first_track = -1;
4996     int64_t mdat_size = 0;
4997     int ret;
4998     int has_video = 0, starts_with_key = 0, first_video_track = 1;
4999
5000     if (!(mov->flags & FF_MOV_FLAG_FRAGMENT))
5001         return 0;
5002
5003     // Try to fill in the duration of the last packet in each stream
5004     // from queued packets in the interleave queues. If the flushing
5005     // of fragments was triggered automatically by an AVPacket, we
5006     // already have reliable info for the end of that track, but other
5007     // tracks may need to be filled in.
5008     for (i = 0; i < s->nb_streams; i++) {
5009         MOVTrack *track = &mov->tracks[i];
5010         if (!track->end_reliable) {
5011             AVPacket pkt;
5012             if (!ff_interleaved_peek(s, i, &pkt, 1)) {
5013                 if (track->dts_shift != AV_NOPTS_VALUE)
5014                     pkt.dts += track->dts_shift;
5015                 track->track_duration = pkt.dts - track->start_dts;
5016                 if (pkt.pts != AV_NOPTS_VALUE)
5017                     track->end_pts = pkt.pts;
5018                 else
5019                     track->end_pts = pkt.dts;
5020             }
5021         }
5022     }
5023
5024     for (i = 0; i < mov->nb_streams; i++) {
5025         MOVTrack *track = &mov->tracks[i];
5026         if (track->entry <= 1)
5027             continue;
5028         // Sample durations are calculated as the diff of dts values,
5029         // but for the last sample in a fragment, we don't know the dts
5030         // of the first sample in the next fragment, so we have to rely
5031         // on what was set as duration in the AVPacket. Not all callers
5032         // set this though, so we might want to replace it with an
5033         // estimate if it currently is zero.
5034         if (get_cluster_duration(track, track->entry - 1) != 0)
5035             continue;
5036         // Use the duration (i.e. dts diff) of the second last sample for
5037         // the last one. This is a wild guess (and fatal if it turns out
5038         // to be too long), but probably the best we can do - having a zero
5039         // duration is bad as well.
5040         track->track_duration += get_cluster_duration(track, track->entry - 2);
5041         track->end_pts        += get_cluster_duration(track, track->entry - 2);
5042         if (!mov->missing_duration_warned) {
5043             av_log(s, AV_LOG_WARNING,
5044                    "Estimating the duration of the last packet in a "
5045                    "fragment, consider setting the duration field in "
5046                    "AVPacket instead.\n");
5047             mov->missing_duration_warned = 1;
5048         }
5049     }
5050
5051     if (!mov->moov_written) {
5052         int64_t pos = avio_tell(s->pb);
5053         uint8_t *buf;
5054         int buf_size, moov_size;
5055
5056         for (i = 0; i < mov->nb_streams; i++)
5057             if (!mov->tracks[i].entry && !is_cover_image(mov->tracks[i].st))
5058                 break;
5059         /* Don't write the initial moov unless all tracks have data */
5060         if (i < mov->nb_streams && !force)
5061             return 0;
5062
5063         moov_size = get_moov_size(s);
5064         for (i = 0; i < mov->nb_streams; i++)
5065             mov->tracks[i].data_offset = pos + moov_size + 8;
5066
5067         avio_write_marker(s->pb, AV_NOPTS_VALUE, AVIO_DATA_MARKER_HEADER);
5068         if (mov->flags & FF_MOV_FLAG_DELAY_MOOV)
5069             mov_write_identification(s->pb, s);
5070         if ((ret = mov_write_moov_tag(s->pb, mov, s)) < 0)
5071             return ret;
5072
5073         if (mov->flags & FF_MOV_FLAG_DELAY_MOOV) {
5074             if (mov->flags & FF_MOV_FLAG_GLOBAL_SIDX)
5075                 mov->reserved_header_pos = avio_tell(s->pb);
5076             avio_flush(s->pb);
5077             mov->moov_written = 1;
5078             return 0;
5079         }
5080
5081         buf_size = avio_close_dyn_buf(mov->mdat_buf, &buf);
5082         mov->mdat_buf = NULL;
5083         avio_wb32(s->pb, buf_size + 8);
5084         ffio_wfourcc(s->pb, "mdat");
5085         avio_write(s->pb, buf, buf_size);
5086         av_free(buf);
5087
5088         if (mov->flags & FF_MOV_FLAG_GLOBAL_SIDX)
5089             mov->reserved_header_pos = avio_tell(s->pb);
5090
5091         mov->moov_written = 1;
5092         mov->mdat_size = 0;
5093         for (i = 0; i < mov->nb_streams; i++) {
5094             if (mov->tracks[i].entry)
5095                 mov->tracks[i].frag_start += mov->tracks[i].start_dts +
5096                                              mov->tracks[i].track_duration -
5097                                              mov->tracks[i].cluster[0].dts;
5098             mov->tracks[i].entry = 0;
5099             mov->tracks[i].end_reliable = 0;
5100         }
5101         avio_flush(s->pb);
5102         return 0;
5103     }
5104
5105     if (mov->frag_interleave) {
5106         for (i = 0; i < mov->nb_streams; i++) {
5107             MOVTrack *track = &mov->tracks[i];
5108             int ret;
5109             if ((ret = mov_flush_fragment_interleaving(s, track)) < 0)
5110                 return ret;
5111         }
5112
5113         if (!mov->mdat_buf)
5114             return 0;
5115         mdat_size = avio_tell(mov->mdat_buf);
5116     }
5117
5118     for (i = 0; i < mov->nb_streams; i++) {
5119         MOVTrack *track = &mov->tracks[i];
5120         if (mov->flags & FF_MOV_FLAG_SEPARATE_MOOF || mov->frag_interleave)
5121             track->data_offset = 0;
5122         else
5123             track->data_offset = mdat_size;
5124         if (track->par->codec_type == AVMEDIA_TYPE_VIDEO) {
5125             has_video = 1;
5126             if (first_video_track) {
5127                 if (track->entry)
5128                     starts_with_key = track->cluster[0].flags & MOV_SYNC_SAMPLE;
5129                 first_video_track = 0;
5130             }
5131         }
5132         if (!track->entry)
5133             continue;
5134         if (track->mdat_buf)
5135             mdat_size += avio_tell(track->mdat_buf);
5136         if (first_track < 0)
5137             first_track = i;
5138     }
5139
5140     if (!mdat_size)
5141         return 0;
5142
5143     avio_write_marker(s->pb,
5144                       av_rescale(mov->tracks[first_track].cluster[0].dts, AV_TIME_BASE, mov->tracks[first_track].timescale),
5145                       (has_video ? starts_with_key : mov->tracks[first_track].cluster[0].flags & MOV_SYNC_SAMPLE) ? AVIO_DATA_MARKER_SYNC_POINT : AVIO_DATA_MARKER_BOUNDARY_POINT);
5146
5147     for (i = 0; i < mov->nb_streams; i++) {
5148         MOVTrack *track = &mov->tracks[i];
5149         int buf_size, write_moof = 1, moof_tracks = -1;
5150         uint8_t *buf;
5151         int64_t duration = 0;
5152
5153         if (track->entry)
5154             duration = track->start_dts + track->track_duration -
5155                        track->cluster[0].dts;
5156         if (mov->flags & FF_MOV_FLAG_SEPARATE_MOOF) {
5157             if (!track->mdat_buf)
5158                 continue;
5159             mdat_size = avio_tell(track->mdat_buf);
5160             moof_tracks = i;
5161         } else {
5162             write_moof = i == first_track;
5163         }
5164
5165         if (write_moof) {
5166             avio_flush(s->pb);
5167
5168             mov_write_moof_tag(s->pb, mov, moof_tracks, mdat_size);
5169             mov->fragments++;
5170
5171             avio_wb32(s->pb, mdat_size + 8);
5172             ffio_wfourcc(s->pb, "mdat");
5173         }
5174
5175         if (track->entry)
5176             track->frag_start += duration;
5177         track->entry = 0;
5178         track->entries_flushed = 0;
5179         track->end_reliable = 0;
5180         if (!mov->frag_interleave) {
5181             if (!track->mdat_buf)
5182                 continue;
5183             buf_size = avio_close_dyn_buf(track->mdat_buf, &buf);
5184             track->mdat_buf = NULL;
5185         } else {
5186             if (!mov->mdat_buf)
5187                 continue;
5188             buf_size = avio_close_dyn_buf(mov->mdat_buf, &buf);
5189             mov->mdat_buf = NULL;
5190         }
5191
5192         avio_write(s->pb, buf, buf_size);
5193         av_free(buf);
5194     }
5195
5196     mov->mdat_size = 0;
5197
5198     avio_flush(s->pb);
5199     return 0;
5200 }
5201
5202 static int mov_auto_flush_fragment(AVFormatContext *s, int force)
5203 {
5204     MOVMuxContext *mov = s->priv_data;
5205     int had_moov = mov->moov_written;
5206     int ret = mov_flush_fragment(s, force);
5207     if (ret < 0)
5208         return ret;
5209     // If using delay_moov, the first flush only wrote the moov,
5210     // not the actual moof+mdat pair, thus flush once again.
5211     if (!had_moov && mov->flags & FF_MOV_FLAG_DELAY_MOOV)
5212         ret = mov_flush_fragment(s, force);
5213     return ret;
5214 }
5215
5216 static int check_pkt(AVFormatContext *s, AVPacket *pkt)
5217 {
5218     MOVMuxContext *mov = s->priv_data;
5219     MOVTrack *trk = &mov->tracks[pkt->stream_index];
5220     int64_t ref;
5221     uint64_t duration;
5222
5223     if (trk->entry) {
5224         ref = trk->cluster[trk->entry - 1].dts;
5225     } else if (   trk->start_dts != AV_NOPTS_VALUE
5226                && !trk->frag_discont) {
5227         ref = trk->start_dts + trk->track_duration;
5228     } else
5229         ref = pkt->dts; // Skip tests for the first packet
5230
5231     if (trk->dts_shift != AV_NOPTS_VALUE) {
5232         /* With negative CTS offsets we have set an offset to the DTS,
5233          * reverse this for the check. */
5234         ref -= trk->dts_shift;
5235     }
5236
5237     duration = pkt->dts - ref;
5238     if (pkt->dts < ref || duration >= INT_MAX) {
5239         av_log(s, AV_LOG_ERROR, "Application provided duration: %"PRId64" / timestamp: %"PRId64" is out of range for mov/mp4 format\n",
5240             duration, pkt->dts
5241         );
5242
5243         pkt->dts = ref + 1;
5244         pkt->pts = AV_NOPTS_VALUE;
5245     }
5246
5247     if (pkt->duration < 0 || pkt->duration > INT_MAX) {
5248         av_log(s, AV_LOG_ERROR, "Application provided duration: %"PRId64" is invalid\n", pkt->duration);
5249         return AVERROR(EINVAL);
5250     }
5251     return 0;
5252 }
5253
5254 int ff_mov_write_packet(AVFormatContext *s, AVPacket *pkt)
5255 {
5256     MOVMuxContext *mov = s->priv_data;
5257     AVIOContext *pb = s->pb;
5258     MOVTrack *trk = &mov->tracks[pkt->stream_index];
5259     AVCodecParameters *par = trk->par;
5260     unsigned int samples_in_chunk = 0;
5261     int size = pkt->size, ret = 0;
5262     uint8_t *reformatted_data = NULL;
5263
5264     ret = check_pkt(s, pkt);
5265     if (ret < 0)
5266         return ret;
5267
5268     if (mov->flags & FF_MOV_FLAG_FRAGMENT) {
5269         int ret;
5270         if (mov->moov_written || mov->flags & FF_MOV_FLAG_EMPTY_MOOV) {
5271             if (mov->frag_interleave && mov->fragments > 0) {
5272                 if (trk->entry - trk->entries_flushed >= mov->frag_interleave) {
5273                     if ((ret = mov_flush_fragment_interleaving(s, trk)) < 0)
5274                         return ret;
5275                 }
5276             }
5277
5278             if (!trk->mdat_buf) {
5279                 if ((ret = avio_open_dyn_buf(&trk->mdat_buf)) < 0)
5280                     return ret;
5281             }
5282             pb = trk->mdat_buf;
5283         } else {
5284             if (!mov->mdat_buf) {
5285                 if ((ret = avio_open_dyn_buf(&mov->mdat_buf)) < 0)
5286                     return ret;
5287             }
5288             pb = mov->mdat_buf;
5289         }
5290     }
5291
5292     if (par->codec_id == AV_CODEC_ID_AMR_NB) {
5293         /* We must find out how many AMR blocks there are in one packet */
5294         static const uint16_t packed_size[16] =
5295             {13, 14, 16, 18, 20, 21, 27, 32, 6, 0, 0, 0, 0, 0, 0, 1};
5296         int len = 0;
5297
5298         while (len < size && samples_in_chunk < 100) {
5299             len += packed_size[(pkt->data[len] >> 3) & 0x0F];
5300             samples_in_chunk++;
5301         }
5302         if (samples_in_chunk > 1) {
5303             av_log(s, AV_LOG_ERROR, "fatal error, input is not a single packet, implement a AVParser for it\n");
5304             return -1;
5305         }
5306     } else if (par->codec_id == AV_CODEC_ID_ADPCM_MS ||
5307                par->codec_id == AV_CODEC_ID_ADPCM_IMA_WAV) {
5308         samples_in_chunk = trk->par->frame_size;
5309     } else if (trk->sample_size)
5310         samples_in_chunk = size / trk->sample_size;
5311     else
5312         samples_in_chunk = 1;
5313
5314     if (samples_in_chunk < 1) {
5315         av_log(s, AV_LOG_ERROR, "fatal error, input packet contains no samples\n");
5316         return AVERROR_PATCHWELCOME;
5317     }
5318
5319     /* copy extradata if it exists */
5320     if (trk->vos_len == 0 && par->extradata_size > 0 &&
5321         !TAG_IS_AVCI(trk->tag) &&
5322         (par->codec_id != AV_CODEC_ID_DNXHD)) {
5323         trk->vos_len  = par->extradata_size;
5324         trk->vos_data = av_malloc(trk->vos_len);
5325         if (!trk->vos_data) {
5326             ret = AVERROR(ENOMEM);
5327             goto err;
5328         }
5329         memcpy(trk->vos_data, par->extradata, trk->vos_len);
5330     }
5331
5332     if (par->codec_id == AV_CODEC_ID_AAC && pkt->size > 2 &&
5333         (AV_RB16(pkt->data) & 0xfff0) == 0xfff0) {
5334         if (!s->streams[pkt->stream_index]->nb_frames) {
5335             av_log(s, AV_LOG_ERROR, "Malformed AAC bitstream detected: "
5336                    "use the audio bitstream filter 'aac_adtstoasc' to fix it "
5337                    "('-bsf:a aac_adtstoasc' option with ffmpeg)\n");
5338             return -1;
5339         }
5340         av_log(s, AV_LOG_WARNING, "aac bitstream error\n");
5341     }
5342     if (par->codec_id == AV_CODEC_ID_H264 && trk->vos_len > 0 && *(uint8_t *)trk->vos_data != 1 && !TAG_IS_AVCI(trk->tag)) {
5343         /* from x264 or from bytestream H.264 */
5344         /* NAL reformatting needed */
5345         if (trk->hint_track >= 0 && trk->hint_track < mov->nb_streams) {
5346             ff_avc_parse_nal_units_buf(pkt->data, &reformatted_data,
5347                                        &size);
5348             avio_write(pb, reformatted_data, size);
5349         } else {
5350             if (trk->cenc.aes_ctr) {
5351                 size = ff_mov_cenc_avc_parse_nal_units(&trk->cenc, pb, pkt->data, size);
5352                 if (size < 0) {
5353                     ret = size;
5354                     goto err;
5355                 }
5356             } else {
5357                 size = ff_avc_parse_nal_units(pb, pkt->data, pkt->size);
5358             }
5359         }
5360     } else if (par->codec_id == AV_CODEC_ID_HEVC && trk->vos_len > 6 &&
5361                (AV_RB24(trk->vos_data) == 1 || AV_RB32(trk->vos_data) == 1)) {
5362         /* extradata is Annex B, assume the bitstream is too and convert it */
5363         if (trk->hint_track >= 0 && trk->hint_track < mov->nb_streams) {
5364             ff_hevc_annexb2mp4_buf(pkt->data, &reformatted_data, &size, 0, NULL);
5365             avio_write(pb, reformatted_data, size);
5366         } else {
5367             size = ff_hevc_annexb2mp4(pb, pkt->data, pkt->size, 0, NULL);
5368         }
5369     } else if (par->codec_id == AV_CODEC_ID_AV1) {
5370         if (trk->hint_track >= 0 && trk->hint_track < mov->nb_streams) {
5371             ff_av1_filter_obus_buf(pkt->data, &reformatted_data, &size);
5372             avio_write(pb, reformatted_data, size);
5373         } else {
5374             size = ff_av1_filter_obus(pb, pkt->data, pkt->size);
5375         }
5376 #if CONFIG_AC3_PARSER
5377     } else if (par->codec_id == AV_CODEC_ID_EAC3) {
5378         size = handle_eac3(mov, pkt, trk);
5379         if (size < 0)
5380             return size;
5381         else if (!size)
5382             goto end;
5383         avio_write(pb, pkt->data, size);
5384 #endif
5385     } else {
5386         if (trk->cenc.aes_ctr) {
5387             if (par->codec_id == AV_CODEC_ID_H264 && par->extradata_size > 4) {
5388                 int nal_size_length = (par->extradata[4] & 0x3) + 1;
5389                 ret = ff_mov_cenc_avc_write_nal_units(s, &trk->cenc, nal_size_length, pb, pkt->data, size);
5390             } else {
5391                 ret = ff_mov_cenc_write_packet(&trk->cenc, pb, pkt->data, size);
5392             }
5393
5394             if (ret) {
5395                 goto err;
5396             }
5397         } else {
5398             avio_write(pb, pkt->data, size);
5399         }
5400     }
5401
5402     if ((par->codec_id == AV_CODEC_ID_DNXHD ||
5403          par->codec_id == AV_CODEC_ID_AC3) && !trk->vos_len) {
5404         /* copy frame to create needed atoms */
5405         trk->vos_len  = size;
5406         trk->vos_data = av_malloc(size);
5407         if (!trk->vos_data) {
5408             ret = AVERROR(ENOMEM);
5409             goto err;
5410         }
5411         memcpy(trk->vos_data, pkt->data, size);
5412     }
5413
5414     if (trk->entry >= trk->cluster_capacity) {
5415         unsigned new_capacity = 2 * (trk->entry + MOV_INDEX_CLUSTER_SIZE);
5416         if (av_reallocp_array(&trk->cluster, new_capacity,
5417                               sizeof(*trk->cluster))) {
5418             ret = AVERROR(ENOMEM);
5419             goto err;
5420         }
5421         trk->cluster_capacity = new_capacity;
5422     }
5423
5424     trk->cluster[trk->entry].pos              = avio_tell(pb) - size;
5425     trk->cluster[trk->entry].samples_in_chunk = samples_in_chunk;
5426     trk->cluster[trk->entry].chunkNum         = 0;
5427     trk->cluster[trk->entry].size             = size;
5428     trk->cluster[trk->entry].entries          = samples_in_chunk;
5429     trk->cluster[trk->entry].dts              = pkt->dts;
5430     trk->cluster[trk->entry].pts              = pkt->pts;
5431     if (!trk->entry && trk->start_dts != AV_NOPTS_VALUE) {
5432         if (!trk->frag_discont) {
5433             /* First packet of a new fragment. We already wrote the duration
5434              * of the last packet of the previous fragment based on track_duration,
5435              * which might not exactly match our dts. Therefore adjust the dts
5436              * of this packet to be what the previous packets duration implies. */
5437             trk->cluster[trk->entry].dts = trk->start_dts + trk->track_duration;
5438             /* We also may have written the pts and the corresponding duration
5439              * in sidx/tfrf/tfxd tags; make sure the sidx pts and duration match up with
5440              * the next fragment. This means the cts of the first sample must
5441              * be the same in all fragments, unless end_pts was updated by
5442              * the packet causing the fragment to be written. */
5443             if ((mov->flags & FF_MOV_FLAG_DASH &&
5444                 !(mov->flags & (FF_MOV_FLAG_GLOBAL_SIDX | FF_MOV_FLAG_SKIP_SIDX))) ||
5445                 mov->mode == MODE_ISM)
5446                 pkt->pts = pkt->dts + trk->end_pts - trk->cluster[trk->entry].dts;
5447         } else {
5448             /* New fragment, but discontinuous from previous fragments.
5449              * Pretend the duration sum of the earlier fragments is
5450              * pkt->dts - trk->start_dts. */
5451             trk->frag_start = pkt->dts - trk->start_dts;
5452             trk->end_pts = AV_NOPTS_VALUE;
5453             trk->frag_discont = 0;
5454         }
5455     }
5456
5457     if (!trk->entry && trk->start_dts == AV_NOPTS_VALUE && !mov->use_editlist &&
5458         s->avoid_negative_ts == AVFMT_AVOID_NEG_TS_MAKE_ZERO) {
5459         /* Not using edit lists and shifting the first track to start from zero.
5460          * If the other streams start from a later timestamp, we won't be able
5461          * to signal the difference in starting time without an edit list.
5462          * Thus move the timestamp for this first sample to 0, increasing
5463          * its duration instead. */
5464         trk->cluster[trk->entry].dts = trk->start_dts = 0;
5465     }
5466     if (trk->start_dts == AV_NOPTS_VALUE) {
5467         trk->start_dts = pkt->dts;
5468         if (trk->frag_discont) {
5469             if (mov->use_editlist) {
5470                 /* Pretend the whole stream started at pts=0, with earlier fragments
5471                  * already written. If the stream started at pts=0, the duration sum
5472                  * of earlier fragments would have been pkt->pts. */
5473                 trk->frag_start = pkt->pts;
5474                 trk->start_dts  = pkt->dts - pkt->pts;
5475             } else {
5476                 /* Pretend the whole stream started at dts=0, with earlier fragments
5477                  * already written, with a duration summing up to pkt->dts. */
5478                 trk->frag_start = pkt->dts;
5479                 trk->start_dts  = 0;
5480             }
5481             trk->frag_discont = 0;
5482         } else if (pkt->dts && mov->moov_written)
5483             av_log(s, AV_LOG_WARNING,
5484                    "Track %d starts with a nonzero dts %"PRId64", while the moov "
5485                    "already has been written. Set the delay_moov flag to handle "
5486                    "this case.\n",
5487                    pkt->stream_index, pkt->dts);
5488     }
5489     trk->track_duration = pkt->dts - trk->start_dts + pkt->duration;
5490     trk->last_sample_is_subtitle_end = 0;
5491
5492     if (pkt->pts == AV_NOPTS_VALUE) {
5493         av_log(s, AV_LOG_WARNING, "pts has no value\n");
5494         pkt->pts = pkt->dts;
5495     }
5496     if (pkt->dts != pkt->pts)
5497         trk->flags |= MOV_TRACK_CTTS;
5498     trk->cluster[trk->entry].cts   = pkt->pts - pkt->dts;
5499     trk->cluster[trk->entry].flags = 0;
5500     if (trk->start_cts == AV_NOPTS_VALUE)
5501         trk->start_cts = pkt->pts - pkt->dts;
5502     if (trk->end_pts == AV_NOPTS_VALUE)
5503         trk->end_pts = trk->cluster[trk->entry].dts +
5504                        trk->cluster[trk->entry].cts + pkt->duration;
5505     else
5506         trk->end_pts = FFMAX(trk->end_pts, trk->cluster[trk->entry].dts +
5507                                            trk->cluster[trk->entry].cts +
5508                                            pkt->duration);
5509
5510     if (par->codec_id == AV_CODEC_ID_VC1) {
5511         mov_parse_vc1_frame(pkt, trk);
5512     } else if (pkt->flags & AV_PKT_FLAG_KEY) {
5513         if (mov->mode == MODE_MOV && par->codec_id == AV_CODEC_ID_MPEG2VIDEO &&
5514             trk->entry > 0) { // force sync sample for the first key frame
5515             mov_parse_mpeg2_frame(pkt, &trk->cluster[trk->entry].flags);
5516             if (trk->cluster[trk->entry].flags & MOV_PARTIAL_SYNC_SAMPLE)
5517                 trk->flags |= MOV_TRACK_STPS;
5518         } else {
5519             trk->cluster[trk->entry].flags = MOV_SYNC_SAMPLE;
5520         }
5521         if (trk->cluster[trk->entry].flags & MOV_SYNC_SAMPLE)
5522             trk->has_keyframes++;
5523     }
5524     if (pkt->flags & AV_PKT_FLAG_DISPOSABLE) {
5525         trk->cluster[trk->entry].flags |= MOV_DISPOSABLE_SAMPLE;
5526         trk->has_disposable++;
5527     }
5528     trk->entry++;
5529     trk->sample_count += samples_in_chunk;
5530     mov->mdat_size    += size;
5531
5532     if (trk->hint_track >= 0 && trk->hint_track < mov->nb_streams)
5533         ff_mov_add_hinted_packet(s, pkt, trk->hint_track, trk->entry,
5534                                  reformatted_data, size);
5535
5536 end:
5537 err:
5538
5539     av_free(reformatted_data);
5540     return ret;
5541 }
5542
5543 static int mov_write_single_packet(AVFormatContext *s, AVPacket *pkt)
5544 {
5545         MOVMuxContext *mov = s->priv_data;
5546         MOVTrack *trk = &mov->tracks[pkt->stream_index];
5547         AVCodecParameters *par = trk->par;
5548         int64_t frag_duration = 0;
5549         int size = pkt->size;
5550
5551         int ret = check_pkt(s, pkt);
5552         if (ret < 0)
5553             return ret;
5554
5555         if (mov->flags & FF_MOV_FLAG_FRAG_DISCONT) {
5556             int i;
5557             for (i = 0; i < s->nb_streams; i++)
5558                 mov->tracks[i].frag_discont = 1;
5559             mov->flags &= ~FF_MOV_FLAG_FRAG_DISCONT;
5560         }
5561
5562         if (mov->flags & FF_MOV_FLAG_NEGATIVE_CTS_OFFSETS) {
5563             if (trk->dts_shift == AV_NOPTS_VALUE)
5564                 trk->dts_shift = pkt->pts - pkt->dts;
5565             pkt->dts += trk->dts_shift;
5566         }
5567
5568         if (trk->par->codec_id == AV_CODEC_ID_MP4ALS ||
5569             trk->par->codec_id == AV_CODEC_ID_AAC ||
5570             trk->par->codec_id == AV_CODEC_ID_AV1 ||
5571             trk->par->codec_id == AV_CODEC_ID_FLAC) {
5572             int side_size = 0;
5573             uint8_t *side = av_packet_get_side_data(pkt, AV_PKT_DATA_NEW_EXTRADATA, &side_size);
5574             if (side && side_size > 0 && (side_size != par->extradata_size || memcmp(side, par->extradata, side_size))) {
5575                 void *newextra = av_mallocz(side_size + AV_INPUT_BUFFER_PADDING_SIZE);
5576                 if (!newextra)
5577                     return AVERROR(ENOMEM);
5578                 av_free(par->extradata);
5579                 par->extradata = newextra;
5580                 memcpy(par->extradata, side, side_size);
5581                 par->extradata_size = side_size;
5582                 if (!pkt->size) // Flush packet
5583                     mov->need_rewrite_extradata = 1;
5584             }
5585         }
5586
5587         if (!pkt->size) {
5588             if (trk->start_dts == AV_NOPTS_VALUE && trk->frag_discont) {
5589                 trk->start_dts = pkt->dts;
5590                 if (pkt->pts != AV_NOPTS_VALUE)
5591                     trk->start_cts = pkt->pts - pkt->dts;
5592                 else
5593                     trk->start_cts = 0;
5594             }
5595
5596             return 0;             /* Discard 0 sized packets */
5597         }
5598
5599         if (trk->entry && pkt->stream_index < s->nb_streams)
5600             frag_duration = av_rescale_q(pkt->dts - trk->cluster[0].dts,
5601                                          s->streams[pkt->stream_index]->time_base,
5602                                          AV_TIME_BASE_Q);
5603         if ((mov->max_fragment_duration &&
5604              frag_duration >= mov->max_fragment_duration) ||
5605              (mov->max_fragment_size && mov->mdat_size + size >= mov->max_fragment_size) ||
5606              (mov->flags & FF_MOV_FLAG_FRAG_KEYFRAME &&
5607               par->codec_type == AVMEDIA_TYPE_VIDEO &&
5608               trk->entry && pkt->flags & AV_PKT_FLAG_KEY) ||
5609               (mov->flags & FF_MOV_FLAG_FRAG_EVERY_FRAME)) {
5610             if (frag_duration >= mov->min_fragment_duration) {
5611                 // Set the duration of this track to line up with the next
5612                 // sample in this track. This avoids relying on AVPacket
5613                 // duration, but only helps for this particular track, not
5614                 // for the other ones that are flushed at the same time.
5615                 trk->track_duration = pkt->dts - trk->start_dts;
5616                 if (pkt->pts != AV_NOPTS_VALUE)
5617                     trk->end_pts = pkt->pts;
5618                 else
5619                     trk->end_pts = pkt->dts;
5620                 trk->end_reliable = 1;
5621                 mov_auto_flush_fragment(s, 0);
5622             }
5623         }
5624
5625         return ff_mov_write_packet(s, pkt);
5626 }
5627
5628 static int mov_write_subtitle_end_packet(AVFormatContext *s,
5629                                          int stream_index,
5630                                          int64_t dts) {
5631     AVPacket end;
5632     uint8_t data[2] = {0};
5633     int ret;
5634
5635     av_init_packet(&end);
5636     end.size = sizeof(data);
5637     end.data = data;
5638     end.pts = dts;
5639     end.dts = dts;
5640     end.duration = 0;
5641     end.stream_index = stream_index;
5642
5643     ret = mov_write_single_packet(s, &end);
5644     av_packet_unref(&end);
5645
5646     return ret;
5647 }
5648
5649 static int mov_write_packet(AVFormatContext *s, AVPacket *pkt)
5650 {
5651     MOVMuxContext *mov = s->priv_data;
5652     MOVTrack *trk;
5653
5654     if (!pkt) {
5655         mov_flush_fragment(s, 1);
5656         return 1;
5657     }
5658
5659     trk = &mov->tracks[pkt->stream_index];
5660
5661     if (is_cover_image(trk->st)) {
5662         int ret;
5663
5664         if (trk->st->nb_frames >= 1) {
5665             if (trk->st->nb_frames == 1)
5666                 av_log(s, AV_LOG_WARNING, "Got more than one picture in stream %d,"
5667                        " ignoring.\n", pkt->stream_index);
5668             return 0;
5669         }
5670
5671         if ((ret = av_packet_ref(&trk->cover_image, pkt)) < 0)
5672             return ret;
5673
5674         return 0;
5675     } else {
5676         int i;
5677
5678         if (!pkt->size)
5679             return mov_write_single_packet(s, pkt); /* Passthrough. */
5680
5681         /*
5682          * Subtitles require special handling.
5683          *
5684          * 1) For full complaince, every track must have a sample at
5685          * dts == 0, which is rarely true for subtitles. So, as soon
5686          * as we see any packet with dts > 0, write an empty subtitle
5687          * at dts == 0 for any subtitle track with no samples in it.
5688          *
5689          * 2) For each subtitle track, check if the current packet's
5690          * dts is past the duration of the last subtitle sample. If
5691          * so, we now need to write an end sample for that subtitle.
5692          *
5693          * This must be done conditionally to allow for subtitles that
5694          * immediately replace each other, in which case an end sample
5695          * is not needed, and is, in fact, actively harmful.
5696          *
5697          * 3) See mov_write_trailer for how the final end sample is
5698          * handled.
5699          */
5700         for (i = 0; i < mov->nb_streams; i++) {
5701             MOVTrack *trk = &mov->tracks[i];
5702             int ret;
5703
5704             if (trk->par->codec_id == AV_CODEC_ID_MOV_TEXT &&
5705                 trk->track_duration < pkt->dts &&
5706                 (trk->entry == 0 || !trk->last_sample_is_subtitle_end)) {
5707                 ret = mov_write_subtitle_end_packet(s, i, trk->track_duration);
5708                 if (ret < 0) return ret;
5709                 trk->last_sample_is_subtitle_end = 1;
5710             }
5711         }
5712
5713         if (trk->mode == MODE_MOV && trk->par->codec_type == AVMEDIA_TYPE_VIDEO) {
5714             AVPacket *opkt = pkt;
5715             int reshuffle_ret, ret;
5716             if (trk->is_unaligned_qt_rgb) {
5717                 int64_t bpc = trk->par->bits_per_coded_sample != 15 ? trk->par->bits_per_coded_sample : 16;
5718                 int expected_stride = ((trk->par->width * bpc + 15) >> 4)*2;
5719                 reshuffle_ret = ff_reshuffle_raw_rgb(s, &pkt, trk->par, expected_stride);
5720                 if (reshuffle_ret < 0)
5721                     return reshuffle_ret;
5722             } else
5723                 reshuffle_ret = 0;
5724             if (trk->par->format == AV_PIX_FMT_PAL8 && !trk->pal_done) {
5725                 ret = ff_get_packet_palette(s, opkt, reshuffle_ret, trk->palette);
5726                 if (ret < 0)
5727                     goto fail;
5728                 if (ret)
5729                     trk->pal_done++;
5730             } else if (trk->par->codec_id == AV_CODEC_ID_RAWVIDEO &&
5731                        (trk->par->format == AV_PIX_FMT_GRAY8 ||
5732                        trk->par->format == AV_PIX_FMT_MONOBLACK)) {
5733                 for (i = 0; i < pkt->size; i++)
5734                     pkt->data[i] = ~pkt->data[i];
5735             }
5736             if (reshuffle_ret) {
5737                 ret = mov_write_single_packet(s, pkt);
5738 fail:
5739                 if (reshuffle_ret)
5740                     av_packet_free(&pkt);
5741                 return ret;
5742             }
5743         }
5744
5745         return mov_write_single_packet(s, pkt);
5746     }
5747 }
5748
5749 // QuickTime chapters involve an additional text track with the chapter names
5750 // as samples, and a tref pointing from the other tracks to the chapter one.
5751 static int mov_create_chapter_track(AVFormatContext *s, int tracknum)
5752 {
5753     AVIOContext *pb;
5754
5755     MOVMuxContext *mov = s->priv_data;
5756     MOVTrack *track = &mov->tracks[tracknum];
5757     AVPacket pkt = { .stream_index = tracknum, .flags = AV_PKT_FLAG_KEY };
5758     int i, len;
5759
5760     track->mode = mov->mode;
5761     track->tag = MKTAG('t','e','x','t');
5762     track->timescale = MOV_TIMESCALE;
5763     track->par = avcodec_parameters_alloc();
5764     if (!track->par)
5765         return AVERROR(ENOMEM);
5766     track->par->codec_type = AVMEDIA_TYPE_SUBTITLE;
5767 #if 0
5768     // These properties are required to make QT recognize the chapter track
5769     uint8_t chapter_properties[43] = { 0, 0, 0, 0, 0, 0, 0, 1, };
5770     if (ff_alloc_extradata(track->par, sizeof(chapter_properties)))
5771         return AVERROR(ENOMEM);
5772     memcpy(track->par->extradata, chapter_properties, sizeof(chapter_properties));
5773 #else
5774     if (avio_open_dyn_buf(&pb) >= 0) {
5775         int size;
5776         uint8_t *buf;
5777
5778         /* Stub header (usually for Quicktime chapter track) */
5779         // TextSampleEntry
5780         avio_wb32(pb, 0x01); // displayFlags
5781         avio_w8(pb, 0x00);   // horizontal justification
5782         avio_w8(pb, 0x00);   // vertical justification
5783         avio_w8(pb, 0x00);   // bgColourRed
5784         avio_w8(pb, 0x00);   // bgColourGreen
5785         avio_w8(pb, 0x00);   // bgColourBlue
5786         avio_w8(pb, 0x00);   // bgColourAlpha
5787         // BoxRecord
5788         avio_wb16(pb, 0x00); // defTextBoxTop
5789         avio_wb16(pb, 0x00); // defTextBoxLeft
5790         avio_wb16(pb, 0x00); // defTextBoxBottom
5791         avio_wb16(pb, 0x00); // defTextBoxRight
5792         // StyleRecord
5793         avio_wb16(pb, 0x00); // startChar
5794         avio_wb16(pb, 0x00); // endChar
5795         avio_wb16(pb, 0x01); // fontID
5796         avio_w8(pb, 0x00);   // fontStyleFlags
5797         avio_w8(pb, 0x00);   // fontSize
5798         avio_w8(pb, 0x00);   // fgColourRed
5799         avio_w8(pb, 0x00);   // fgColourGreen
5800         avio_w8(pb, 0x00);   // fgColourBlue
5801         avio_w8(pb, 0x00);   // fgColourAlpha
5802         // FontTableBox
5803         avio_wb32(pb, 0x0D); // box size
5804         ffio_wfourcc(pb, "ftab"); // box atom name
5805         avio_wb16(pb, 0x01); // entry count
5806         // FontRecord
5807         avio_wb16(pb, 0x01); // font ID
5808         avio_w8(pb, 0x00);   // font name length
5809
5810         if ((size = avio_close_dyn_buf(pb, &buf)) > 0) {
5811             track->par->extradata = buf;
5812             track->par->extradata_size = size;
5813         } else {
5814             av_freep(&buf);
5815         }
5816     }
5817 #endif
5818
5819     for (i = 0; i < s->nb_chapters; i++) {
5820         AVChapter *c = s->chapters[i];
5821         AVDictionaryEntry *t;
5822
5823         int64_t end = av_rescale_q(c->end, c->time_base, (AVRational){1,MOV_TIMESCALE});
5824         pkt.pts = pkt.dts = av_rescale_q(c->start, c->time_base, (AVRational){1,MOV_TIMESCALE});
5825         pkt.duration = end - pkt.dts;
5826
5827         if ((t = av_dict_get(c->metadata, "title", NULL, 0))) {
5828             static const char encd[12] = {
5829                 0x00, 0x00, 0x00, 0x0C,
5830                 'e',  'n',  'c',  'd',
5831                 0x00, 0x00, 0x01, 0x00 };
5832             len      = strlen(t->value);
5833             pkt.size = len + 2 + 12;
5834             pkt.data = av_malloc(pkt.size);
5835             if (!pkt.data)
5836                 return AVERROR(ENOMEM);
5837             AV_WB16(pkt.data, len);
5838             memcpy(pkt.data + 2, t->value, len);
5839             memcpy(pkt.data + len + 2, encd, sizeof(encd));
5840             ff_mov_write_packet(s, &pkt);
5841             av_freep(&pkt.data);
5842         }
5843     }
5844
5845     return 0;
5846 }
5847
5848
5849 static int mov_check_timecode_track(AVFormatContext *s, AVTimecode *tc, int src_index, const char *tcstr)
5850 {
5851     int ret;
5852
5853     /* compute the frame number */
5854     ret = av_timecode_init_from_string(tc, find_fps(s,  s->streams[src_index]), tcstr, s);
5855     return ret;
5856 }
5857
5858 static int mov_create_timecode_track(AVFormatContext *s, int index, int src_index, AVTimecode tc)
5859 {
5860     int ret;
5861     MOVMuxContext *mov  = s->priv_data;
5862     MOVTrack *track     = &mov->tracks[index];
5863     AVStream *src_st    = s->streams[src_index];
5864     AVPacket pkt    = {.stream_index = index, .flags = AV_PKT_FLAG_KEY, .size = 4};
5865     AVRational rate = find_fps(s, src_st);
5866
5867     /* tmcd track based on video stream */
5868     track->mode      = mov->mode;
5869     track->tag       = MKTAG('t','m','c','d');
5870     track->src_track = src_index;
5871     track->timescale = mov->tracks[src_index].timescale;
5872     if (tc.flags & AV_TIMECODE_FLAG_DROPFRAME)
5873         track->timecode_flags |= MOV_TIMECODE_FLAG_DROPFRAME;
5874
5875     /* set st to src_st for metadata access*/
5876     track->st = src_st;
5877
5878     /* encode context: tmcd data stream */
5879     track->par = avcodec_parameters_alloc();
5880     if (!track->par)
5881         return AVERROR(ENOMEM);
5882     track->par->codec_type = AVMEDIA_TYPE_DATA;
5883     track->par->codec_tag  = track->tag;
5884     track->st->avg_frame_rate = av_inv_q(rate);
5885
5886     /* the tmcd track just contains one packet with the frame number */
5887     pkt.data = av_malloc(pkt.size);
5888     if (!pkt.data)
5889         return AVERROR(ENOMEM);
5890     AV_WB32(pkt.data, tc.start);
5891     ret = ff_mov_write_packet(s, &pkt);
5892     av_free(pkt.data);
5893     return ret;
5894 }
5895
5896 /*
5897  * st->disposition controls the "enabled" flag in the tkhd tag.
5898  * QuickTime will not play a track if it is not enabled.  So make sure
5899  * that one track of each type (audio, video, subtitle) is enabled.
5900  *
5901  * Subtitles are special.  For audio and video, setting "enabled" also
5902  * makes the track "default" (i.e. it is rendered when played). For
5903  * subtitles, an "enabled" subtitle is not rendered by default, but
5904  * if no subtitle is enabled, the subtitle menu in QuickTime will be
5905  * empty!
5906  */
5907 static void enable_tracks(AVFormatContext *s)
5908 {
5909     MOVMuxContext *mov = s->priv_data;
5910     int i;
5911     int enabled[AVMEDIA_TYPE_NB];
5912     int first[AVMEDIA_TYPE_NB];
5913
5914     for (i = 0; i < AVMEDIA_TYPE_NB; i++) {
5915         enabled[i] = 0;
5916         first[i] = -1;
5917     }
5918
5919     for (i = 0; i < s->nb_streams; i++) {
5920         AVStream *st = s->streams[i];
5921
5922         if (st->codecpar->codec_type <= AVMEDIA_TYPE_UNKNOWN ||
5923             st->codecpar->codec_type >= AVMEDIA_TYPE_NB ||
5924             is_cover_image(st))
5925             continue;
5926
5927         if (first[st->codecpar->codec_type] < 0)
5928             first[st->codecpar->codec_type] = i;
5929         if (st->disposition & AV_DISPOSITION_DEFAULT) {
5930             mov->tracks[i].flags |= MOV_TRACK_ENABLED;
5931             enabled[st->codecpar->codec_type]++;
5932         }
5933     }
5934
5935     for (i = 0; i < AVMEDIA_TYPE_NB; i++) {
5936         switch (i) {
5937         case AVMEDIA_TYPE_VIDEO:
5938         case AVMEDIA_TYPE_AUDIO:
5939         case AVMEDIA_TYPE_SUBTITLE:
5940             if (enabled[i] > 1)
5941                 mov->per_stream_grouping = 1;
5942             if (!enabled[i] && first[i] >= 0)
5943                 mov->tracks[first[i]].flags |= MOV_TRACK_ENABLED;
5944             break;
5945         }
5946     }
5947 }
5948
5949 static void mov_free(AVFormatContext *s)
5950 {
5951     MOVMuxContext *mov = s->priv_data;
5952     int i;
5953
5954     if (mov->chapter_track) {
5955         if (mov->tracks[mov->chapter_track].par)
5956             av_freep(&mov->tracks[mov->chapter_track].par->extradata);
5957         av_freep(&mov->tracks[mov->chapter_track].par);
5958     }
5959
5960     for (i = 0; i < mov->nb_streams; i++) {
5961         if (mov->tracks[i].tag == MKTAG('r','t','p',' '))
5962             ff_mov_close_hinting(&mov->tracks[i]);
5963         else if (mov->tracks[i].tag == MKTAG('t','m','c','d') && mov->nb_meta_tmcd)
5964             av_freep(&mov->tracks[i].par);
5965         av_freep(&mov->tracks[i].cluster);
5966         av_freep(&mov->tracks[i].frag_info);
5967         av_packet_unref(&mov->tracks[i].cover_image);
5968
5969         if (mov->tracks[i].eac3_priv) {
5970             struct eac3_info *info = mov->tracks[i].eac3_priv;
5971             av_packet_unref(&info->pkt);
5972             av_freep(&mov->tracks[i].eac3_priv);
5973         }
5974         if (mov->tracks[i].vos_len)
5975             av_freep(&mov->tracks[i].vos_data);
5976
5977         ff_mov_cenc_free(&mov->tracks[i].cenc);
5978     }
5979
5980     av_freep(&mov->tracks);
5981 }
5982
5983 static uint32_t rgb_to_yuv(uint32_t rgb)
5984 {
5985     uint8_t r, g, b;
5986     int y, cb, cr;
5987
5988     r = (rgb >> 16) & 0xFF;
5989     g = (rgb >>  8) & 0xFF;
5990     b = (rgb      ) & 0xFF;
5991
5992     y  = av_clip_uint8(( 16000 +  257 * r + 504 * g +  98 * b)/1000);
5993     cb = av_clip_uint8((128000 -  148 * r - 291 * g + 439 * b)/1000);
5994     cr = av_clip_uint8((128000 +  439 * r - 368 * g -  71 * b)/1000);
5995
5996     return (y << 16) | (cr << 8) | cb;
5997 }
5998
5999 static int mov_create_dvd_sub_decoder_specific_info(MOVTrack *track,
6000                                                     AVStream *st)
6001 {
6002     int i, width = 720, height = 480;
6003     int have_palette = 0, have_size = 0;
6004     uint32_t palette[16];
6005     char *cur = st->codecpar->extradata;
6006
6007     while (cur && *cur) {
6008         if (strncmp("palette:", cur, 8) == 0) {
6009             int i, count;
6010             count = sscanf(cur + 8,
6011                 "%06"PRIx32", %06"PRIx32", %06"PRIx32", %06"PRIx32", "
6012                 "%06"PRIx32", %06"PRIx32", %06"PRIx32", %06"PRIx32", "
6013                 "%06"PRIx32", %06"PRIx32", %06"PRIx32", %06"PRIx32", "
6014                 "%06"PRIx32", %06"PRIx32", %06"PRIx32", %06"PRIx32"",
6015                 &palette[ 0], &palette[ 1], &palette[ 2], &palette[ 3],
6016                 &palette[ 4], &palette[ 5], &palette[ 6], &palette[ 7],
6017                 &palette[ 8], &palette[ 9], &palette[10], &palette[11],
6018                 &palette[12], &palette[13], &palette[14], &palette[15]);
6019
6020             for (i = 0; i < count; i++) {
6021                 palette[i] = rgb_to_yuv(palette[i]);
6022             }
6023             have_palette = 1;
6024         } else if (!strncmp("size:", cur, 5)) {
6025             sscanf(cur + 5, "%dx%d", &width, &height);
6026             have_size = 1;
6027         }
6028         if (have_palette && have_size)
6029             break;
6030         cur += strcspn(cur, "\n\r");
6031         cur += strspn(cur, "\n\r");
6032     }
6033     if (have_palette) {
6034         track->vos_data = av_malloc(16*4);
6035         if (!track->vos_data)
6036             return AVERROR(ENOMEM);
6037         for (i = 0; i < 16; i++) {
6038             AV_WB32(track->vos_data + i * 4, palette[i]);
6039         }
6040         track->vos_len = 16 * 4;
6041     }
6042     st->codecpar->width = width;
6043     st->codecpar->height = track->height = height;
6044
6045     return 0;
6046 }
6047
6048 static int mov_init(AVFormatContext *s)
6049 {
6050     MOVMuxContext *mov = s->priv_data;
6051     AVDictionaryEntry *global_tcr = av_dict_get(s->metadata, "timecode", NULL, 0);
6052     int i, ret;
6053
6054     mov->fc = s;
6055
6056     /* Default mode == MP4 */
6057     mov->mode = MODE_MP4;
6058
6059     if (s->oformat) {
6060         if (!strcmp("3gp", s->oformat->name)) mov->mode = MODE_3GP;
6061         else if (!strcmp("3g2", s->oformat->name)) mov->mode = MODE_3GP|MODE_3G2;
6062         else if (!strcmp("mov", s->oformat->name)) mov->mode = MODE_MOV;
6063         else if (!strcmp("psp", s->oformat->name)) mov->mode = MODE_PSP;
6064         else if (!strcmp("ipod",s->oformat->name)) mov->mode = MODE_IPOD;
6065         else if (!strcmp("ismv",s->oformat->name)) mov->mode = MODE_ISM;
6066         else if (!strcmp("f4v", s->oformat->name)) mov->mode = MODE_F4V;
6067     }
6068
6069     if (mov->flags & FF_MOV_FLAG_DELAY_MOOV)
6070         mov->flags |= FF_MOV_FLAG_EMPTY_MOOV;
6071
6072     /* Set the FRAGMENT flag if any of the fragmentation methods are
6073      * enabled. */
6074     if (mov->max_fragment_duration || mov->max_fragment_size ||
6075         mov->flags & (FF_MOV_FLAG_EMPTY_MOOV |
6076                       FF_MOV_FLAG_FRAG_KEYFRAME |
6077                       FF_MOV_FLAG_FRAG_CUSTOM |
6078                       FF_MOV_FLAG_FRAG_EVERY_FRAME))
6079         mov->flags |= FF_MOV_FLAG_FRAGMENT;
6080
6081     /* Set other implicit flags immediately */
6082     if (mov->mode == MODE_ISM)
6083         mov->flags |= FF_MOV_FLAG_EMPTY_MOOV | FF_MOV_FLAG_SEPARATE_MOOF |
6084                       FF_MOV_FLAG_FRAGMENT | FF_MOV_FLAG_NEGATIVE_CTS_OFFSETS;
6085     if (mov->flags & FF_MOV_FLAG_DASH)
6086         mov->flags |= FF_MOV_FLAG_FRAGMENT | FF_MOV_FLAG_EMPTY_MOOV |
6087                       FF_MOV_FLAG_DEFAULT_BASE_MOOF;
6088
6089     if (mov->flags & FF_MOV_FLAG_EMPTY_MOOV && s->flags & AVFMT_FLAG_AUTO_BSF) {
6090         av_log(s, AV_LOG_VERBOSE, "Empty MOOV enabled; disabling automatic bitstream filtering\n");
6091         s->flags &= ~AVFMT_FLAG_AUTO_BSF;
6092     }
6093
6094     if (mov->flags & FF_MOV_FLAG_GLOBAL_SIDX && mov->flags & FF_MOV_FLAG_SKIP_SIDX) {
6095         av_log(s, AV_LOG_WARNING, "Global SIDX enabled; Ignoring skip_sidx option\n");
6096         mov->flags &= ~FF_MOV_FLAG_SKIP_SIDX;
6097     }
6098
6099     if (mov->flags & FF_MOV_FLAG_FASTSTART) {
6100         mov->reserved_moov_size = -1;
6101     }
6102
6103     if (mov->use_editlist < 0) {
6104         mov->use_editlist = 1;
6105         if (mov->flags & FF_MOV_FLAG_FRAGMENT &&
6106             !(mov->flags & FF_MOV_FLAG_DELAY_MOOV)) {
6107             // If we can avoid needing an edit list by shifting the
6108             // tracks, prefer that over (trying to) write edit lists
6109             // in fragmented output.
6110             if (s->avoid_negative_ts == AVFMT_AVOID_NEG_TS_AUTO ||
6111                 s->avoid_negative_ts == AVFMT_AVOID_NEG_TS_MAKE_ZERO)
6112                 mov->use_editlist = 0;
6113         }
6114     }
6115     if (mov->flags & FF_MOV_FLAG_EMPTY_MOOV &&
6116         !(mov->flags & FF_MOV_FLAG_DELAY_MOOV) && mov->use_editlist)
6117         av_log(s, AV_LOG_WARNING, "No meaningful edit list will be written when using empty_moov without delay_moov\n");
6118
6119     if (!mov->use_editlist && s->avoid_negative_ts == AVFMT_AVOID_NEG_TS_AUTO)
6120         s->avoid_negative_ts = AVFMT_AVOID_NEG_TS_MAKE_ZERO;
6121
6122     /* Clear the omit_tfhd_offset flag if default_base_moof is set;
6123      * if the latter is set that's enough and omit_tfhd_offset doesn't
6124      * add anything extra on top of that. */
6125     if (mov->flags & FF_MOV_FLAG_OMIT_TFHD_OFFSET &&
6126         mov->flags & FF_MOV_FLAG_DEFAULT_BASE_MOOF)
6127         mov->flags &= ~FF_MOV_FLAG_OMIT_TFHD_OFFSET;
6128
6129     if (mov->frag_interleave &&
6130         mov->flags & (FF_MOV_FLAG_OMIT_TFHD_OFFSET | FF_MOV_FLAG_SEPARATE_MOOF)) {
6131         av_log(s, AV_LOG_ERROR,
6132                "Sample interleaving in fragments is mutually exclusive with "
6133                "omit_tfhd_offset and separate_moof\n");
6134         return AVERROR(EINVAL);
6135     }
6136
6137     /* Non-seekable output is ok if using fragmentation. If ism_lookahead
6138      * is enabled, we don't support non-seekable output at all. */
6139     if (!(s->pb->seekable & AVIO_SEEKABLE_NORMAL) &&
6140         (!(mov->flags & FF_MOV_FLAG_FRAGMENT) || mov->ism_lookahead)) {
6141         av_log(s, AV_LOG_ERROR, "muxer does not support non seekable output\n");
6142         return AVERROR(EINVAL);
6143     }
6144
6145     mov->nb_streams = s->nb_streams;
6146     if (mov->mode & (MODE_MP4|MODE_MOV|MODE_IPOD) && s->nb_chapters)
6147         mov->chapter_track = mov->nb_streams++;
6148
6149     if (mov->flags & FF_MOV_FLAG_RTP_HINT) {
6150         for (i = 0; i < s->nb_streams; i++)
6151             if (rtp_hinting_needed(s->streams[i]))
6152                 mov->nb_streams++;
6153     }
6154
6155     if (   mov->write_tmcd == -1 && (mov->mode == MODE_MOV || mov->mode == MODE_MP4)
6156         || mov->write_tmcd == 1) {
6157         /* +1 tmcd track for each video stream with a timecode */
6158         for (i = 0; i < s->nb_streams; i++) {
6159             AVStream *st = s->streams[i];
6160             AVDictionaryEntry *t = global_tcr;
6161             if (st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO &&
6162                 (t || (t=av_dict_get(st->metadata, "timecode", NULL, 0)))) {
6163                 AVTimecode tc;
6164                 ret = mov_check_timecode_track(s, &tc, i, t->value);
6165                 if (ret >= 0)
6166                     mov->nb_meta_tmcd++;
6167             }
6168         }
6169
6170         /* check if there is already a tmcd track to remux */
6171         if (mov->nb_meta_tmcd) {
6172             for (i = 0; i < s->nb_streams; i++) {
6173                 AVStream *st = s->streams[i];
6174                 if (st->codecpar->codec_tag == MKTAG('t','m','c','d')) {
6175                     av_log(s, AV_LOG_WARNING, "You requested a copy of the original timecode track "
6176                            "so timecode metadata are now ignored\n");
6177                     mov->nb_meta_tmcd = 0;
6178                 }
6179             }
6180         }
6181
6182         mov->nb_streams += mov->nb_meta_tmcd;
6183     }
6184
6185     // Reserve an extra stream for chapters for the case where chapters
6186     // are written in the trailer
6187     mov->tracks = av_mallocz_array((mov->nb_streams + 1), sizeof(*mov->tracks));
6188     if (!mov->tracks)
6189         return AVERROR(ENOMEM);
6190
6191     if (mov->encryption_scheme_str != NULL && strcmp(mov->encryption_scheme_str, "none") != 0) {
6192         if (strcmp(mov->encryption_scheme_str, "cenc-aes-ctr") == 0) {
6193             mov->encryption_scheme = MOV_ENC_CENC_AES_CTR;
6194
6195             if (mov->encryption_key_len != AES_CTR_KEY_SIZE) {
6196                 av_log(s, AV_LOG_ERROR, "Invalid encryption key len %d expected %d\n",
6197                     mov->encryption_key_len, AES_CTR_KEY_SIZE);
6198                 return AVERROR(EINVAL);
6199             }
6200
6201             if (mov->encryption_kid_len != CENC_KID_SIZE) {
6202                 av_log(s, AV_LOG_ERROR, "Invalid encryption kid len %d expected %d\n",
6203                     mov->encryption_kid_len, CENC_KID_SIZE);
6204                 return AVERROR(EINVAL);
6205             }
6206         } else {
6207             av_log(s, AV_LOG_ERROR, "unsupported encryption scheme %s\n",
6208                 mov->encryption_scheme_str);
6209             return AVERROR(EINVAL);
6210         }
6211     }
6212
6213     for (i = 0; i < s->nb_streams; i++) {
6214         AVStream *st= s->streams[i];
6215         MOVTrack *track= &mov->tracks[i];
6216         AVDictionaryEntry *lang = av_dict_get(st->metadata, "language", NULL,0);
6217
6218         track->st  = st;
6219         track->par = st->codecpar;
6220         track->language = ff_mov_iso639_to_lang(lang?lang->value:"und", mov->mode!=MODE_MOV);
6221         if (track->language < 0)
6222             track->language = 0;
6223         track->mode = mov->mode;
6224         track->tag  = mov_find_codec_tag(s, track);
6225         if (!track->tag) {
6226             av_log(s, AV_LOG_ERROR, "Could not find tag for codec %s in stream #%d, "
6227                    "codec not currently supported in container\n",
6228                    avcodec_get_name(st->codecpar->codec_id), i);
6229             return AVERROR(EINVAL);
6230         }
6231         /* If hinting of this track is enabled by a later hint track,
6232          * this is updated. */
6233         track->hint_track = -1;
6234         track->start_dts  = AV_NOPTS_VALUE;
6235         track->start_cts  = AV_NOPTS_VALUE;
6236         track->end_pts    = AV_NOPTS_VALUE;
6237         track->dts_shift  = AV_NOPTS_VALUE;
6238         if (st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO) {
6239             if (track->tag == MKTAG('m','x','3','p') || track->tag == MKTAG('m','x','3','n') ||
6240                 track->tag == MKTAG('m','x','4','p') || track->tag == MKTAG('m','x','4','n') ||
6241                 track->tag == MKTAG('m','x','5','p') || track->tag == MKTAG('m','x','5','n')) {
6242                 if (st->codecpar->width != 720 || (st->codecpar->height != 608 && st->codecpar->height != 512)) {
6243                     av_log(s, AV_LOG_ERROR, "D-10/IMX must use 720x608 or 720x512 video resolution\n");
6244                     return AVERROR(EINVAL);
6245                 }
6246                 track->height = track->tag >> 24 == 'n' ? 486 : 576;
6247             }
6248             if (mov->video_track_timescale) {
6249                 track->timescale = mov->video_track_timescale;
6250             } else {
6251                 track->timescale = st->time_base.den;
6252                 while(track->timescale < 10000)
6253                     track->timescale *= 2;
6254             }
6255             if (st->codecpar->width > 65535 || st->codecpar->height > 65535) {
6256                 av_log(s, AV_LOG_ERROR, "Resolution %dx%d too large for mov/mp4\n", st->codecpar->width, st->codecpar->height);
6257                 return AVERROR(EINVAL);
6258             }
6259             if (track->mode == MODE_MOV && track->timescale > 100000)
6260                 av_log(s, AV_LOG_WARNING,
6261                        "WARNING codec timebase is very high. If duration is too long,\n"
6262                        "file may not be playable by quicktime. Specify a shorter timebase\n"
6263                        "or choose different container.\n");
6264             if (track->mode == MODE_MOV &&
6265                 track->par->codec_id == AV_CODEC_ID_RAWVIDEO &&
6266                 track->tag == MKTAG('r','a','w',' ')) {
6267                 enum AVPixelFormat pix_fmt = track->par->format;
6268                 if (pix_fmt == AV_PIX_FMT_NONE && track->par->bits_per_coded_sample == 1)
6269                     pix_fmt = AV_PIX_FMT_MONOWHITE;
6270                 track->is_unaligned_qt_rgb =
6271                         pix_fmt == AV_PIX_FMT_RGB24 ||
6272                         pix_fmt == AV_PIX_FMT_BGR24 ||
6273                         pix_fmt == AV_PIX_FMT_PAL8 ||
6274                         pix_fmt == AV_PIX_FMT_GRAY8 ||
6275                         pix_fmt == AV_PIX_FMT_MONOWHITE ||
6276                         pix_fmt == AV_PIX_FMT_MONOBLACK;
6277             }
6278             if (track->par->codec_id == AV_CODEC_ID_VP9 ||
6279                 track->par->codec_id == AV_CODEC_ID_AV1) {
6280                 if (track->mode != MODE_MP4) {
6281                     av_log(s, AV_LOG_ERROR, "%s only supported in MP4.\n", avcodec_get_name(track->par->codec_id));
6282                     return AVERROR(EINVAL);
6283                 }
6284             } else if (track->par->codec_id == AV_CODEC_ID_VP8) {
6285                 /* altref frames handling is not defined in the spec as of version v1.0,
6286                  * so just forbid muxing VP8 streams altogether until a new version does */
6287                 av_log(s, AV_LOG_ERROR, "VP8 muxing is currently not supported.\n");
6288                 return AVERROR_PATCHWELCOME;
6289             }
6290         } else if (st->codecpar->codec_type == AVMEDIA_TYPE_AUDIO) {
6291             track->timescale = st->codecpar->sample_rate;
6292             if (!st->codecpar->frame_size && !av_get_bits_per_sample(st->codecpar->codec_id)) {
6293                 av_log(s, AV_LOG_WARNING, "track %d: codec frame size is not set\n", i);
6294                 track->audio_vbr = 1;
6295             }else if (st->codecpar->codec_id == AV_CODEC_ID_ADPCM_MS ||
6296                      st->codecpar->codec_id == AV_CODEC_ID_ADPCM_IMA_WAV ||
6297                      st->codecpar->codec_id == AV_CODEC_ID_ILBC){
6298                 if (!st->codecpar->block_align) {
6299                     av_log(s, AV_LOG_ERROR, "track %d: codec block align is not set for adpcm\n", i);
6300                     return AVERROR(EINVAL);
6301                 }
6302                 track->sample_size = st->codecpar->block_align;
6303             }else if (st->codecpar->frame_size > 1){ /* assume compressed audio */
6304                 track->audio_vbr = 1;
6305             }else{
6306                 track->sample_size = (av_get_bits_per_sample(st->codecpar->codec_id) >> 3) * st->codecpar->channels;
6307             }
6308             if (st->codecpar->codec_id == AV_CODEC_ID_ILBC ||
6309                 st->codecpar->codec_id == AV_CODEC_ID_ADPCM_IMA_QT) {
6310                 track->audio_vbr = 1;
6311             }
6312             if (track->mode != MODE_MOV &&
6313                 track->par->codec_id == AV_CODEC_ID_MP3 && track->timescale < 16000) {
6314                 if (s->strict_std_compliance >= FF_COMPLIANCE_NORMAL) {
6315                     av_log(s, AV_LOG_ERROR, "track %d: muxing mp3 at %dhz is not standard, to mux anyway set strict to -1\n",
6316                         i, track->par->sample_rate);
6317                     return AVERROR(EINVAL);
6318                 } else {
6319                     av_log(s, AV_LOG_WARNING, "track %d: muxing mp3 at %dhz is not standard in MP4\n",
6320                            i, track->par->sample_rate);
6321                 }
6322             }
6323             if (track->par->codec_id == AV_CODEC_ID_FLAC ||
6324                 track->par->codec_id == AV_CODEC_ID_OPUS) {
6325                 if (track->mode != MODE_MP4) {
6326                     av_log(s, AV_LOG_ERROR, "%s only supported in MP4.\n", avcodec_get_name(track->par->codec_id));
6327                     return AVERROR(EINVAL);
6328                 }
6329                 if (s->strict_std_compliance > FF_COMPLIANCE_EXPERIMENTAL) {
6330                     av_log(s, AV_LOG_ERROR,
6331                            "%s in MP4 support is experimental, add "
6332                            "'-strict %d' if you want to use it.\n",
6333                            avcodec_get_name(track->par->codec_id), FF_COMPLIANCE_EXPERIMENTAL);
6334                     return AVERROR_EXPERIMENTAL;
6335                 }
6336             }
6337         } else if (st->codecpar->codec_type == AVMEDIA_TYPE_SUBTITLE) {
6338             track->timescale = st->time_base.den;
6339         } else if (st->codecpar->codec_type == AVMEDIA_TYPE_DATA) {
6340             track->timescale = st->time_base.den;
6341         } else {
6342             track->timescale = MOV_TIMESCALE;
6343         }
6344         if (!track->height)
6345             track->height = st->codecpar->height;
6346         /* The ism specific timescale isn't mandatory, but is assumed by
6347          * some tools, such as mp4split. */
6348         if (mov->mode == MODE_ISM)
6349             track->timescale = 10000000;
6350
6351         avpriv_set_pts_info(st, 64, 1, track->timescale);
6352
6353         if (mov->encryption_scheme == MOV_ENC_CENC_AES_CTR) {
6354             ret = ff_mov_cenc_init(&track->cenc, mov->encryption_key,
6355                 track->par->codec_id == AV_CODEC_ID_H264, s->flags & AVFMT_FLAG_BITEXACT);
6356             if (ret)
6357                 return ret;
6358         }
6359     }
6360
6361     enable_tracks(s);
6362     return 0;
6363 }
6364
6365 static int mov_write_header(AVFormatContext *s)
6366 {
6367     AVIOContext *pb = s->pb;
6368     MOVMuxContext *mov = s->priv_data;
6369     AVDictionaryEntry *t, *global_tcr = av_dict_get(s->metadata, "timecode", NULL, 0);
6370     int i, ret, hint_track = 0, tmcd_track = 0, nb_tracks = s->nb_streams;
6371
6372     if (mov->mode & (MODE_MP4|MODE_MOV|MODE_IPOD) && s->nb_chapters)
6373         nb_tracks++;
6374
6375     if (mov->flags & FF_MOV_FLAG_RTP_HINT) {
6376         hint_track = nb_tracks;
6377         for (i = 0; i < s->nb_streams; i++)
6378             if (rtp_hinting_needed(s->streams[i]))
6379                 nb_tracks++;
6380     }
6381
6382     if (mov->nb_meta_tmcd)
6383         tmcd_track = nb_tracks;
6384
6385     for (i = 0; i < s->nb_streams; i++) {
6386         int j;
6387         AVStream *st= s->streams[i];
6388         MOVTrack *track= &mov->tracks[i];
6389
6390         /* copy extradata if it exists */
6391         if (st->codecpar->extradata_size) {
6392             if (st->codecpar->codec_id == AV_CODEC_ID_DVD_SUBTITLE)
6393                 mov_create_dvd_sub_decoder_specific_info(track, st);
6394             else if (!TAG_IS_AVCI(track->tag) && st->codecpar->codec_id != AV_CODEC_ID_DNXHD) {
6395                 track->vos_len  = st->codecpar->extradata_size;
6396                 track->vos_data = av_malloc(track->vos_len);
6397                 if (!track->vos_data) {
6398                     return AVERROR(ENOMEM);
6399                 }
6400                 memcpy(track->vos_data, st->codecpar->extradata, track->vos_len);
6401             }
6402         }
6403
6404         if (st->codecpar->codec_type != AVMEDIA_TYPE_AUDIO ||
6405             track->par->channel_layout != AV_CH_LAYOUT_MONO)
6406             continue;
6407
6408         for (j = 0; j < s->nb_streams; j++) {
6409             AVStream *stj= s->streams[j];
6410             MOVTrack *trackj= &mov->tracks[j];
6411             if (j == i)
6412                 continue;
6413
6414             if (stj->codecpar->codec_type != AVMEDIA_TYPE_AUDIO ||
6415                 trackj->par->channel_layout != AV_CH_LAYOUT_MONO ||
6416                 trackj->language != track->language ||
6417                 trackj->tag != track->tag
6418             )
6419                 continue;
6420             track->multichannel_as_mono++;
6421         }
6422     }
6423
6424     if (!(mov->flags & FF_MOV_FLAG_DELAY_MOOV)) {
6425         if ((ret = mov_write_identification(pb, s)) < 0)
6426             return ret;
6427     }
6428
6429     if (mov->reserved_moov_size){
6430         mov->reserved_header_pos = avio_tell(pb);
6431         if (mov->reserved_moov_size > 0)
6432             avio_skip(pb, mov->reserved_moov_size);
6433     }
6434
6435     if (mov->flags & FF_MOV_FLAG_FRAGMENT) {
6436         /* If no fragmentation options have been set, set a default. */
6437         if (!(mov->flags & (FF_MOV_FLAG_FRAG_KEYFRAME |
6438                             FF_MOV_FLAG_FRAG_CUSTOM |
6439                             FF_MOV_FLAG_FRAG_EVERY_FRAME)) &&
6440             !mov->max_fragment_duration && !mov->max_fragment_size)
6441             mov->flags |= FF_MOV_FLAG_FRAG_KEYFRAME;
6442     } else {
6443         if (mov->flags & FF_MOV_FLAG_FASTSTART)
6444             mov->reserved_header_pos = avio_tell(pb);
6445         mov_write_mdat_tag(pb, mov);
6446     }
6447
6448     ff_parse_creation_time_metadata(s, &mov->time, 1);
6449     if (mov->time)
6450         mov->time += 0x7C25B080; // 1970 based -> 1904 based
6451
6452     if (mov->chapter_track)
6453         if ((ret = mov_create_chapter_track(s, mov->chapter_track)) < 0)
6454             return ret;
6455
6456     if (mov->flags & FF_MOV_FLAG_RTP_HINT) {
6457         for (i = 0; i < s->nb_streams; i++) {
6458             if (rtp_hinting_needed(s->streams[i])) {
6459                 if ((ret = ff_mov_init_hinting(s, hint_track, i)) < 0)
6460                     return ret;
6461                 hint_track++;
6462             }
6463         }
6464     }
6465
6466     if (mov->nb_meta_tmcd) {
6467         /* Initialize the tmcd tracks */
6468         for (i = 0; i < s->nb_streams; i++) {
6469             AVStream *st = s->streams[i];
6470             t = global_tcr;
6471
6472             if (st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO) {
6473                 AVTimecode tc;
6474                 if (!t)
6475                     t = av_dict_get(st->metadata, "timecode", NULL, 0);
6476                 if (!t)
6477                     continue;
6478                 if (mov_check_timecode_track(s, &tc, i, t->value) < 0)
6479                     continue;
6480                 if ((ret = mov_create_timecode_track(s, tmcd_track, i, tc)) < 0)
6481                     return ret;
6482                 tmcd_track++;
6483             }
6484         }
6485     }
6486
6487     avio_flush(pb);
6488
6489     if (mov->flags & FF_MOV_FLAG_ISML)
6490         mov_write_isml_manifest(pb, mov, s);
6491
6492     if (mov->flags & FF_MOV_FLAG_EMPTY_MOOV &&
6493         !(mov->flags & FF_MOV_FLAG_DELAY_MOOV)) {
6494         if ((ret = mov_write_moov_tag(pb, mov, s)) < 0)
6495             return ret;
6496         avio_flush(pb);
6497         mov->moov_written = 1;
6498         if (mov->flags & FF_MOV_FLAG_GLOBAL_SIDX)
6499             mov->reserved_header_pos = avio_tell(pb);
6500     }
6501
6502     return 0;
6503 }
6504
6505 static int get_moov_size(AVFormatContext *s)
6506 {
6507     int ret;
6508     AVIOContext *moov_buf;
6509     MOVMuxContext *mov = s->priv_data;
6510
6511     if ((ret = ffio_open_null_buf(&moov_buf)) < 0)
6512         return ret;
6513     if ((ret = mov_write_moov_tag(moov_buf, mov, s)) < 0)
6514         return ret;
6515     return ffio_close_null_buf(moov_buf);
6516 }
6517
6518 static int get_sidx_size(AVFormatContext *s)
6519 {
6520     int ret;
6521     AVIOContext *buf;
6522     MOVMuxContext *mov = s->priv_data;
6523
6524     if ((ret = ffio_open_null_buf(&buf)) < 0)
6525         return ret;
6526     mov_write_sidx_tags(buf, mov, -1, 0);
6527     return ffio_close_null_buf(buf);
6528 }
6529
6530 /*
6531  * This function gets the moov size if moved to the top of the file: the chunk
6532  * offset table can switch between stco (32-bit entries) to co64 (64-bit
6533  * entries) when the moov is moved to the beginning, so the size of the moov
6534  * would change. It also updates the chunk offset tables.
6535  */
6536 static int compute_moov_size(AVFormatContext *s)
6537 {
6538     int i, moov_size, moov_size2;
6539     MOVMuxContext *mov = s->priv_data;
6540
6541     moov_size = get_moov_size(s);
6542     if (moov_size < 0)
6543         return moov_size;
6544
6545     for (i = 0; i < mov->nb_streams; i++)
6546         mov->tracks[i].data_offset += moov_size;
6547
6548     moov_size2 = get_moov_size(s);
6549     if (moov_size2 < 0)
6550         return moov_size2;
6551
6552     /* if the size changed, we just switched from stco to co64 and need to
6553      * update the offsets */
6554     if (moov_size2 != moov_size)
6555         for (i = 0; i < mov->nb_streams; i++)
6556             mov->tracks[i].data_offset += moov_size2 - moov_size;
6557
6558     return moov_size2;
6559 }
6560
6561 static int compute_sidx_size(AVFormatContext *s)
6562 {
6563     int i, sidx_size;
6564     MOVMuxContext *mov = s->priv_data;
6565
6566     sidx_size = get_sidx_size(s);
6567     if (sidx_size < 0)
6568         return sidx_size;
6569
6570     for (i = 0; i < mov->nb_streams; i++)
6571         mov->tracks[i].data_offset += sidx_size;
6572
6573     return sidx_size;
6574 }
6575
6576 static int shift_data(AVFormatContext *s)
6577 {
6578     int ret = 0, moov_size;
6579     MOVMuxContext *mov = s->priv_data;
6580     int64_t pos, pos_end = avio_tell(s->pb);
6581     uint8_t *buf, *read_buf[2];
6582     int read_buf_id = 0;
6583     int read_size[2];
6584     AVIOContext *read_pb;
6585
6586     if (mov->flags & FF_MOV_FLAG_FRAGMENT)
6587         moov_size = compute_sidx_size(s);
6588     else
6589         moov_size = compute_moov_size(s);
6590     if (moov_size < 0)
6591         return moov_size;
6592
6593     buf = av_malloc(moov_size * 2);
6594     if (!buf)
6595         return AVERROR(ENOMEM);
6596     read_buf[0] = buf;
6597     read_buf[1] = buf + moov_size;
6598
6599     /* Shift the data: the AVIO context of the output can only be used for
6600      * writing, so we re-open the same output, but for reading. It also avoids
6601      * a read/seek/write/seek back and forth. */
6602     avio_flush(s->pb);
6603     ret = s->io_open(s, &read_pb, s->url, AVIO_FLAG_READ, NULL);
6604     if (ret < 0) {
6605         av_log(s, AV_LOG_ERROR, "Unable to re-open %s output file for "
6606                "the second pass (faststart)\n", s->url);
6607         goto end;
6608     }
6609
6610     /* mark the end of the shift to up to the last data we wrote, and get ready
6611      * for writing */
6612     pos_end = avio_tell(s->pb);
6613     avio_seek(s->pb, mov->reserved_header_pos + moov_size, SEEK_SET);
6614
6615     /* start reading at where the new moov will be placed */
6616     avio_seek(read_pb, mov->reserved_header_pos, SEEK_SET);
6617     pos = avio_tell(read_pb);
6618
6619 #define READ_BLOCK do {                                                             \
6620     read_size[read_buf_id] = avio_read(read_pb, read_buf[read_buf_id], moov_size);  \
6621     read_buf_id ^= 1;                                                               \
6622 } while (0)
6623
6624     /* shift data by chunk of at most moov_size */
6625     READ_BLOCK;
6626     do {
6627         int n;
6628         READ_BLOCK;
6629         n = read_size[read_buf_id];
6630         if (n <= 0)
6631             break;
6632         avio_write(s->pb, read_buf[read_buf_id], n);
6633         pos += n;
6634     } while (pos < pos_end);
6635     ff_format_io_close(s, &read_pb);
6636
6637 end:
6638     av_free(buf);
6639     return ret;
6640 }
6641
6642 static int mov_write_trailer(AVFormatContext *s)
6643 {
6644     MOVMuxContext *mov = s->priv_data;
6645     AVIOContext *pb = s->pb;
6646     int res = 0;
6647     int i;
6648     int64_t moov_pos;
6649
6650     if (mov->need_rewrite_extradata) {
6651         for (i = 0; i < s->nb_streams; i++) {
6652             MOVTrack *track = &mov->tracks[i];
6653             AVCodecParameters *par = track->par;
6654
6655             track->vos_len  = par->extradata_size;
6656             track->vos_data = av_malloc(track->vos_len);
6657             if (!track->vos_data)
6658                 return AVERROR(ENOMEM);
6659             memcpy(track->vos_data, par->extradata, track->vos_len);
6660         }
6661         mov->need_rewrite_extradata = 0;
6662     }
6663
6664     /*
6665      * Before actually writing the trailer, make sure that there are no
6666      * dangling subtitles, that need a terminating sample.
6667      */
6668     for (i = 0; i < mov->nb_streams; i++) {
6669         MOVTrack *trk = &mov->tracks[i];
6670         if (trk->par->codec_id == AV_CODEC_ID_MOV_TEXT &&
6671             !trk->last_sample_is_subtitle_end) {
6672             mov_write_subtitle_end_packet(s, i, trk->track_duration);
6673             trk->last_sample_is_subtitle_end = 1;
6674         }
6675     }
6676
6677     // If there were no chapters when the header was written, but there
6678     // are chapters now, write them in the trailer.  This only works
6679     // when we are not doing fragments.
6680     if (!mov->chapter_track && !(mov->flags & FF_MOV_FLAG_FRAGMENT)) {
6681         if (mov->mode & (MODE_MP4|MODE_MOV|MODE_IPOD) && s->nb_chapters) {
6682             mov->chapter_track = mov->nb_streams++;
6683             if ((res = mov_create_chapter_track(s, mov->chapter_track)) < 0)
6684                 return res;
6685         }
6686     }
6687
6688     if (!(mov->flags & FF_MOV_FLAG_FRAGMENT)) {
6689         moov_pos = avio_tell(pb);
6690
6691         /* Write size of mdat tag */
6692         if (mov->mdat_size + 8 <= UINT32_MAX) {
6693             avio_seek(pb, mov->mdat_pos, SEEK_SET);
6694             avio_wb32(pb, mov->mdat_size + 8);
6695         } else {
6696             /* overwrite 'wide' placeholder atom */
6697             avio_seek(pb, mov->mdat_pos - 8, SEEK_SET);
6698             /* special value: real atom size will be 64 bit value after
6699              * tag field */
6700             avio_wb32(pb, 1);
6701             ffio_wfourcc(pb, "mdat");
6702             avio_wb64(pb, mov->mdat_size + 16);
6703         }
6704         avio_seek(pb, mov->reserved_moov_size > 0 ? mov->reserved_header_pos : moov_pos, SEEK_SET);
6705
6706         if (mov->flags & FF_MOV_FLAG_FASTSTART) {
6707             av_log(s, AV_LOG_INFO, "Starting second pass: moving the moov atom to the beginning of the file\n");
6708             res = shift_data(s);
6709             if (res < 0)
6710                 return res;
6711             avio_seek(pb, mov->reserved_header_pos, SEEK_SET);
6712             if ((res = mov_write_moov_tag(pb, mov, s)) < 0)
6713                 return res;
6714         } else if (mov->reserved_moov_size > 0) {
6715             int64_t size;
6716             if ((res = mov_write_moov_tag(pb, mov, s)) < 0)
6717                 return res;
6718             size = mov->reserved_moov_size - (avio_tell(pb) - mov->reserved_header_pos);
6719             if (size < 8){
6720                 av_log(s, AV_LOG_ERROR, "reserved_moov_size is too small, needed %"PRId64" additional\n", 8-size);
6721                 return AVERROR(EINVAL);
6722             }
6723             avio_wb32(pb, size);
6724             ffio_wfourcc(pb, "free");
6725             ffio_fill(pb, 0, size - 8);
6726             avio_seek(pb, moov_pos, SEEK_SET);
6727         } else {
6728             if ((res = mov_write_moov_tag(pb, mov, s)) < 0)
6729                 return res;
6730         }
6731         res = 0;
6732     } else {
6733         mov_auto_flush_fragment(s, 1);
6734         for (i = 0; i < mov->nb_streams; i++)
6735            mov->tracks[i].data_offset = 0;
6736         if (mov->flags & FF_MOV_FLAG_GLOBAL_SIDX) {
6737             int64_t end;
6738             av_log(s, AV_LOG_INFO, "Starting second pass: inserting sidx atoms\n");
6739             res = shift_data(s);
6740             if (res < 0)
6741                 return res;
6742             end = avio_tell(pb);
6743             avio_seek(pb, mov->reserved_header_pos, SEEK_SET);
6744             mov_write_sidx_tags(pb, mov, -1, 0);
6745             avio_seek(pb, end, SEEK_SET);
6746         }
6747         if (!(mov->flags & FF_MOV_FLAG_SKIP_TRAILER)) {
6748             avio_write_marker(s->pb, AV_NOPTS_VALUE, AVIO_DATA_MARKER_TRAILER);
6749             mov_write_mfra_tag(pb, mov);
6750         }
6751     }
6752
6753     return res;
6754 }
6755
6756 static int mov_check_bitstream(struct AVFormatContext *s, const AVPacket *pkt)
6757 {
6758     int ret = 1;
6759     AVStream *st = s->streams[pkt->stream_index];
6760
6761     if (st->codecpar->codec_id == AV_CODEC_ID_AAC) {
6762         if (pkt->size > 2 && (AV_RB16(pkt->data) & 0xfff0) == 0xfff0)
6763             ret = ff_stream_add_bitstream_filter(st, "aac_adtstoasc", NULL);
6764     } else if (st->codecpar->codec_id == AV_CODEC_ID_VP9) {
6765         ret = ff_stream_add_bitstream_filter(st, "vp9_superframe", NULL);
6766     }
6767
6768     return ret;
6769 }
6770
6771 static const AVCodecTag codec_3gp_tags[] = {
6772     { AV_CODEC_ID_H263,     MKTAG('s','2','6','3') },
6773     { AV_CODEC_ID_H264,     MKTAG('a','v','c','1') },
6774     { AV_CODEC_ID_MPEG4,    MKTAG('m','p','4','v') },
6775     { AV_CODEC_ID_AAC,      MKTAG('m','p','4','a') },
6776     { AV_CODEC_ID_AMR_NB,   MKTAG('s','a','m','r') },
6777     { AV_CODEC_ID_AMR_WB,   MKTAG('s','a','w','b') },
6778     { AV_CODEC_ID_MOV_TEXT, MKTAG('t','x','3','g') },
6779     { AV_CODEC_ID_NONE, 0 },
6780 };
6781
6782 const AVCodecTag codec_mp4_tags[] = {
6783     { AV_CODEC_ID_MPEG4       , MKTAG('m', 'p', '4', 'v') },
6784     { AV_CODEC_ID_H264        , MKTAG('a', 'v', 'c', '1') },
6785     { AV_CODEC_ID_H264        , MKTAG('a', 'v', 'c', '3') },
6786     { AV_CODEC_ID_HEVC        , MKTAG('h', 'e', 'v', '1') },
6787     { AV_CODEC_ID_HEVC        , MKTAG('h', 'v', 'c', '1') },
6788     { AV_CODEC_ID_MPEG2VIDEO  , MKTAG('m', 'p', '4', 'v') },
6789     { AV_CODEC_ID_MPEG1VIDEO  , MKTAG('m', 'p', '4', 'v') },
6790     { AV_CODEC_ID_MJPEG       , MKTAG('m', 'p', '4', 'v') },
6791     { AV_CODEC_ID_PNG         , MKTAG('m', 'p', '4', 'v') },
6792     { AV_CODEC_ID_JPEG2000    , MKTAG('m', 'p', '4', 'v') },
6793     { AV_CODEC_ID_VC1         , MKTAG('v', 'c', '-', '1') },
6794     { AV_CODEC_ID_DIRAC       , MKTAG('d', 'r', 'a', 'c') },
6795     { AV_CODEC_ID_TSCC2       , MKTAG('m', 'p', '4', 'v') },
6796     { AV_CODEC_ID_VP9         , MKTAG('v', 'p', '0', '9') },
6797     { AV_CODEC_ID_AV1         , MKTAG('a', 'v', '0', '1') },
6798     { AV_CODEC_ID_AAC         , MKTAG('m', 'p', '4', 'a') },
6799     { AV_CODEC_ID_MP4ALS      , MKTAG('m', 'p', '4', 'a') },
6800     { AV_CODEC_ID_MP3         , MKTAG('m', 'p', '4', 'a') },
6801     { AV_CODEC_ID_MP2         , MKTAG('m', 'p', '4', 'a') },
6802     { AV_CODEC_ID_AC3         , MKTAG('a', 'c', '-', '3') },
6803     { AV_CODEC_ID_EAC3        , MKTAG('e', 'c', '-', '3') },
6804     { AV_CODEC_ID_DTS         , MKTAG('m', 'p', '4', 'a') },
6805     { AV_CODEC_ID_FLAC        , MKTAG('f', 'L', 'a', 'C') },
6806     { AV_CODEC_ID_OPUS        , MKTAG('O', 'p', 'u', 's') },
6807     { AV_CODEC_ID_VORBIS      , MKTAG('m', 'p', '4', 'a') },
6808     { AV_CODEC_ID_QCELP       , MKTAG('m', 'p', '4', 'a') },
6809     { AV_CODEC_ID_EVRC        , MKTAG('m', 'p', '4', 'a') },
6810     { AV_CODEC_ID_DVD_SUBTITLE, MKTAG('m', 'p', '4', 's') },
6811     { AV_CODEC_ID_MOV_TEXT    , MKTAG('t', 'x', '3', 'g') },
6812     { AV_CODEC_ID_BIN_DATA    , MKTAG('g', 'p', 'm', 'd') },
6813     { AV_CODEC_ID_NONE        ,    0 },
6814 };
6815
6816 const AVCodecTag codec_ism_tags[] = {
6817     { AV_CODEC_ID_WMAPRO      , MKTAG('w', 'm', 'a', ' ') },
6818     { AV_CODEC_ID_NONE        ,    0 },
6819 };
6820
6821 static const AVCodecTag codec_ipod_tags[] = {
6822     { AV_CODEC_ID_H264,     MKTAG('a','v','c','1') },
6823     { AV_CODEC_ID_MPEG4,    MKTAG('m','p','4','v') },
6824     { AV_CODEC_ID_AAC,      MKTAG('m','p','4','a') },
6825     { AV_CODEC_ID_ALAC,     MKTAG('a','l','a','c') },
6826     { AV_CODEC_ID_AC3,      MKTAG('a','c','-','3') },
6827     { AV_CODEC_ID_MOV_TEXT, MKTAG('t','x','3','g') },
6828     { AV_CODEC_ID_MOV_TEXT, MKTAG('t','e','x','t') },
6829     { AV_CODEC_ID_NONE, 0 },
6830 };
6831
6832 static const AVCodecTag codec_f4v_tags[] = {
6833     { AV_CODEC_ID_MP3,    MKTAG('.','m','p','3') },
6834     { AV_CODEC_ID_AAC,    MKTAG('m','p','4','a') },
6835     { AV_CODEC_ID_H264,   MKTAG('a','v','c','1') },
6836     { AV_CODEC_ID_VP6A,   MKTAG('V','P','6','A') },
6837     { AV_CODEC_ID_VP6F,   MKTAG('V','P','6','F') },
6838     { AV_CODEC_ID_NONE, 0 },
6839 };
6840
6841 #if CONFIG_MOV_MUXER
6842 MOV_CLASS(mov)
6843 AVOutputFormat ff_mov_muxer = {
6844     .name              = "mov",
6845     .long_name         = NULL_IF_CONFIG_SMALL("QuickTime / MOV"),
6846     .extensions        = "mov",
6847     .priv_data_size    = sizeof(MOVMuxContext),
6848     .audio_codec       = AV_CODEC_ID_AAC,
6849     .video_codec       = CONFIG_LIBX264_ENCODER ?
6850                          AV_CODEC_ID_H264 : AV_CODEC_ID_MPEG4,
6851     .init              = mov_init,
6852     .write_header      = mov_write_header,
6853     .write_packet      = mov_write_packet,
6854     .write_trailer     = mov_write_trailer,
6855     .deinit            = mov_free,
6856     .flags             = AVFMT_GLOBALHEADER | AVFMT_ALLOW_FLUSH | AVFMT_TS_NEGATIVE,
6857     .codec_tag         = (const AVCodecTag* const []){
6858         ff_codec_movvideo_tags, ff_codec_movaudio_tags, ff_codec_movsubtitle_tags, 0
6859     },
6860     .check_bitstream   = mov_check_bitstream,
6861     .priv_class        = &mov_muxer_class,
6862 };
6863 #endif
6864 #if CONFIG_TGP_MUXER
6865 MOV_CLASS(tgp)
6866 AVOutputFormat ff_tgp_muxer = {
6867     .name              = "3gp",
6868     .long_name         = NULL_IF_CONFIG_SMALL("3GP (3GPP file format)"),
6869     .extensions        = "3gp",
6870     .priv_data_size    = sizeof(MOVMuxContext),
6871     .audio_codec       = AV_CODEC_ID_AMR_NB,
6872     .video_codec       = AV_CODEC_ID_H263,
6873     .init              = mov_init,
6874     .write_header      = mov_write_header,
6875     .write_packet      = mov_write_packet,
6876     .write_trailer     = mov_write_trailer,
6877     .deinit            = mov_free,
6878     .flags             = AVFMT_GLOBALHEADER | AVFMT_ALLOW_FLUSH | AVFMT_TS_NEGATIVE,
6879     .codec_tag         = (const AVCodecTag* const []){ codec_3gp_tags, 0 },
6880     .check_bitstream   = mov_check_bitstream,
6881     .priv_class        = &tgp_muxer_class,
6882 };
6883 #endif
6884 #if CONFIG_MP4_MUXER
6885 MOV_CLASS(mp4)
6886 AVOutputFormat ff_mp4_muxer = {
6887     .name              = "mp4",
6888     .long_name         = NULL_IF_CONFIG_SMALL("MP4 (MPEG-4 Part 14)"),
6889     .mime_type         = "video/mp4",
6890     .extensions        = "mp4",
6891     .priv_data_size    = sizeof(MOVMuxContext),
6892     .audio_codec       = AV_CODEC_ID_AAC,
6893     .video_codec       = CONFIG_LIBX264_ENCODER ?
6894                          AV_CODEC_ID_H264 : AV_CODEC_ID_MPEG4,
6895     .init              = mov_init,
6896     .write_header      = mov_write_header,
6897     .write_packet      = mov_write_packet,
6898     .write_trailer     = mov_write_trailer,
6899     .deinit            = mov_free,
6900     .flags             = AVFMT_GLOBALHEADER | AVFMT_ALLOW_FLUSH | AVFMT_TS_NEGATIVE,
6901     .codec_tag         = (const AVCodecTag* const []){ codec_mp4_tags, 0 },
6902     .check_bitstream   = mov_check_bitstream,
6903     .priv_class        = &mp4_muxer_class,
6904 };
6905 #endif
6906 #if CONFIG_PSP_MUXER
6907 MOV_CLASS(psp)
6908 AVOutputFormat ff_psp_muxer = {
6909     .name              = "psp",
6910     .long_name         = NULL_IF_CONFIG_SMALL("PSP MP4 (MPEG-4 Part 14)"),
6911     .extensions        = "mp4,psp",
6912     .priv_data_size    = sizeof(MOVMuxContext),
6913     .audio_codec       = AV_CODEC_ID_AAC,
6914     .video_codec       = CONFIG_LIBX264_ENCODER ?
6915                          AV_CODEC_ID_H264 : AV_CODEC_ID_MPEG4,
6916     .init              = mov_init,
6917     .write_header      = mov_write_header,
6918     .write_packet      = mov_write_packet,
6919     .write_trailer     = mov_write_trailer,
6920     .deinit            = mov_free,
6921     .flags             = AVFMT_GLOBALHEADER | AVFMT_ALLOW_FLUSH | AVFMT_TS_NEGATIVE,
6922     .codec_tag         = (const AVCodecTag* const []){ codec_mp4_tags, 0 },
6923     .check_bitstream   = mov_check_bitstream,
6924     .priv_class        = &psp_muxer_class,
6925 };
6926 #endif
6927 #if CONFIG_TG2_MUXER
6928 MOV_CLASS(tg2)
6929 AVOutputFormat ff_tg2_muxer = {
6930     .name              = "3g2",
6931     .long_name         = NULL_IF_CONFIG_SMALL("3GP2 (3GPP2 file format)"),
6932     .extensions        = "3g2",
6933     .priv_data_size    = sizeof(MOVMuxContext),
6934     .audio_codec       = AV_CODEC_ID_AMR_NB,
6935     .video_codec       = AV_CODEC_ID_H263,
6936     .init              = mov_init,
6937     .write_header      = mov_write_header,
6938     .write_packet      = mov_write_packet,
6939     .write_trailer     = mov_write_trailer,
6940     .deinit            = mov_free,
6941     .flags             = AVFMT_GLOBALHEADER | AVFMT_ALLOW_FLUSH | AVFMT_TS_NEGATIVE,
6942     .codec_tag         = (const AVCodecTag* const []){ codec_3gp_tags, 0 },
6943     .check_bitstream   = mov_check_bitstream,
6944     .priv_class        = &tg2_muxer_class,
6945 };
6946 #endif
6947 #if CONFIG_IPOD_MUXER
6948 MOV_CLASS(ipod)
6949 AVOutputFormat ff_ipod_muxer = {
6950     .name              = "ipod",
6951     .long_name         = NULL_IF_CONFIG_SMALL("iPod H.264 MP4 (MPEG-4 Part 14)"),
6952     .mime_type         = "video/mp4",
6953     .extensions        = "m4v,m4a,m4b",
6954     .priv_data_size    = sizeof(MOVMuxContext),
6955     .audio_codec       = AV_CODEC_ID_AAC,
6956     .video_codec       = AV_CODEC_ID_H264,
6957     .init              = mov_init,
6958     .write_header      = mov_write_header,
6959     .write_packet      = mov_write_packet,
6960     .write_trailer     = mov_write_trailer,
6961     .deinit            = mov_free,
6962     .flags             = AVFMT_GLOBALHEADER | AVFMT_ALLOW_FLUSH | AVFMT_TS_NEGATIVE,
6963     .codec_tag         = (const AVCodecTag* const []){ codec_ipod_tags, 0 },
6964     .check_bitstream   = mov_check_bitstream,
6965     .priv_class        = &ipod_muxer_class,
6966 };
6967 #endif
6968 #if CONFIG_ISMV_MUXER
6969 MOV_CLASS(ismv)
6970 AVOutputFormat ff_ismv_muxer = {
6971     .name              = "ismv",
6972     .long_name         = NULL_IF_CONFIG_SMALL("ISMV/ISMA (Smooth Streaming)"),
6973     .mime_type         = "video/mp4",
6974     .extensions        = "ismv,isma",
6975     .priv_data_size    = sizeof(MOVMuxContext),
6976     .audio_codec       = AV_CODEC_ID_AAC,
6977     .video_codec       = AV_CODEC_ID_H264,
6978     .init              = mov_init,
6979     .write_header      = mov_write_header,
6980     .write_packet      = mov_write_packet,
6981     .write_trailer     = mov_write_trailer,
6982     .deinit            = mov_free,
6983     .flags             = AVFMT_GLOBALHEADER | AVFMT_ALLOW_FLUSH | AVFMT_TS_NEGATIVE,
6984     .codec_tag         = (const AVCodecTag* const []){
6985         codec_mp4_tags, codec_ism_tags, 0 },
6986     .check_bitstream   = mov_check_bitstream,
6987     .priv_class        = &ismv_muxer_class,
6988 };
6989 #endif
6990 #if CONFIG_F4V_MUXER
6991 MOV_CLASS(f4v)
6992 AVOutputFormat ff_f4v_muxer = {
6993     .name              = "f4v",
6994     .long_name         = NULL_IF_CONFIG_SMALL("F4V Adobe Flash Video"),
6995     .mime_type         = "application/f4v",
6996     .extensions        = "f4v",
6997     .priv_data_size    = sizeof(MOVMuxContext),
6998     .audio_codec       = AV_CODEC_ID_AAC,
6999     .video_codec       = AV_CODEC_ID_H264,
7000     .init              = mov_init,
7001     .write_header      = mov_write_header,
7002     .write_packet      = mov_write_packet,
7003     .write_trailer     = mov_write_trailer,
7004     .deinit            = mov_free,
7005     .flags             = AVFMT_GLOBALHEADER | AVFMT_ALLOW_FLUSH,
7006     .codec_tag         = (const AVCodecTag* const []){ codec_f4v_tags, 0 },
7007     .check_bitstream   = mov_check_bitstream,
7008     .priv_class        = &f4v_muxer_class,
7009 };
7010 #endif