git.sesse.net Git - ffmpeg/blob - libavformat/matroskaenc.c

   1 /*
   2  * Matroska muxer
   3  * Copyright (c) 2007 David Conrad
   4  *
   5  * This file is part of Libav.
   6  *
   7  * Libav is free software; you can redistribute it and/or
   8  * modify it under the terms of the GNU Lesser General Public
   9  * License as published by the Free Software Foundation; either
  10  * version 2.1 of the License, or (at your option) any later version.
  11  *
  12  * Libav is distributed in the hope that it will be useful,
  13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  15  * Lesser General Public License for more details.
  16  *
  17  * You should have received a copy of the GNU Lesser General Public
  18  * License along with Libav; if not, write to the Free Software
  19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
  20  */
  21
  22 #include <stdint.h>
  23
  24 #include "avc.h"
  25 #include "hevc.h"
  26 #include "avformat.h"
  27 #include "avlanguage.h"
  28 #include "flacenc.h"
  29 #include "internal.h"
  30 #include "isom.h"
  31 #include "matroska.h"
  32 #include "riff.h"
  33 #include "vorbiscomment.h"
  34 #include "wv.h"
  35
  36 #include "libavutil/avstring.h"
  37 #include "libavutil/channel_layout.h"
  38 #include "libavutil/dict.h"
  39 #include "libavutil/intfloat.h"
  40 #include "libavutil/intreadwrite.h"
  41 #include "libavutil/lfg.h"
  42 #include "libavutil/mathematics.h"
  43 #include "libavutil/opt.h"
  44 #include "libavutil/random_seed.h"
  45 #include "libavutil/samplefmt.h"
  46 #include "libavutil/stereo3d.h"
  47
  48 #include "libavcodec/xiph.h"
  49 #include "libavcodec/mpeg4audio.h"
  50
  51 typedef struct ebml_master {
  52     int64_t         pos;                ///< absolute offset in the file where the master's elements start
  53     int             sizebytes;          ///< how many bytes were reserved for the size
  54 } ebml_master;
  55
  56 typedef struct mkv_seekhead_entry {
  57     unsigned int    elementid;
  58     uint64_t        segmentpos;
  59 } mkv_seekhead_entry;
  60
  61 typedef struct mkv_seekhead {
  62     int64_t                 filepos;
  63     int64_t                 segment_offset;     ///< the file offset to the beginning of the segment
  64     int                     reserved_size;      ///< -1 if appending to file
  65     int                     max_entries;
  66     mkv_seekhead_entry      *entries;
  67     int                     num_entries;
  68 } mkv_seekhead;
  69
  70 typedef struct mkv_cuepoint {
  71     uint64_t        pts;
  72     int             tracknum;
  73     int64_t         cluster_pos;        ///< file offset of the cluster containing the block
  74 } mkv_cuepoint;
  75
  76 typedef struct mkv_cues {
  77     int64_t         segment_offset;
  78     mkv_cuepoint    *entries;
  79     int             num_entries;
  80 } mkv_cues;
  81
  82 typedef struct mkv_track {
  83     int             write_dts;
  84     int64_t         ts_offset;
  85 } mkv_track;
  86
  87 #define MODE_MATROSKAv2 0x01
  88 #define MODE_WEBM       0x02
  89
  90 typedef struct MatroskaMuxContext {
  91     const AVClass  *class;
  92     int             mode;
  93     AVIOContext   *dyn_bc;
  94     ebml_master     segment;
  95     int64_t         segment_offset;
  96     ebml_master     cluster;
  97     int64_t         cluster_pos;        ///< file offset of the current cluster
  98     int64_t         cluster_pts;
  99     int64_t         duration_offset;
 100     int64_t         duration;
 101     mkv_seekhead    *main_seekhead;
 102     mkv_cues        *cues;
 103     mkv_track       *tracks;
 104
 105     AVPacket        cur_audio_pkt;
 106
 107     int have_attachments;
 108
 109     int reserve_cues_space;
 110     int cluster_size_limit;
 111     int64_t cues_pos;
 112     int64_t cluster_time_limit;
 113     int wrote_chapters;
 114 } MatroskaMuxContext;
 115
 116
 117 /** 2 bytes * 3 for EBML IDs, 3 1-byte EBML lengths, 8 bytes for 64 bit
 118  * offset, 4 bytes for target EBML ID */
 119 #define MAX_SEEKENTRY_SIZE 21
 120
 121 /** per-cuepoint-track - 3 1-byte EBML IDs, 3 1-byte EBML sizes, 2
 122  * 8-byte uint max */
 123 #define MAX_CUETRACKPOS_SIZE 22
 124
 125 /** per-cuepoint - 2 1-byte EBML IDs, 2 1-byte EBML sizes, 8-byte uint max */
 126 #define MAX_CUEPOINT_SIZE(num_tracks) 12 + MAX_CUETRACKPOS_SIZE * num_tracks
 127
 128 static int ebml_id_size(unsigned int id)
 129 {
 130     return (av_log2(id + 1) - 1) / 7 + 1;
 131 }
 132
 133 static void put_ebml_id(AVIOContext *pb, unsigned int id)
 134 {
 135     int i = ebml_id_size(id);
 136     while (i--)
 137         avio_w8(pb, id >> (i * 8));
 138 }
 139
 140 /**
 141  * Write an EBML size meaning "unknown size".
 142  *
 143  * @param bytes The number of bytes the size should occupy (maximum: 8).
 144  */
 145 static void put_ebml_size_unknown(AVIOContext *pb, int bytes)
 146 {
 147     assert(bytes <= 8);
 148     avio_w8(pb, 0x1ff >> bytes);
 149     while (--bytes)
 150         avio_w8(pb, 0xff);
 151 }
 152
 153 /**
 154  * Calculate how many bytes are needed to represent a given number in EBML.
 155  */
 156 static int ebml_num_size(uint64_t num)
 157 {
 158     int bytes = 1;
 159     while ((num + 1) >> bytes * 7)
 160         bytes++;
 161     return bytes;
 162 }
 163
 164 /**
 165  * Write a number in EBML variable length format.
 166  *
 167  * @param bytes The number of bytes that need to be used to write the number.
 168  *              If zero, any number of bytes can be used.
 169  */
 170 static void put_ebml_num(AVIOContext *pb, uint64_t num, int bytes)
 171 {
 172     int i, needed_bytes = ebml_num_size(num);
 173
 174     // sizes larger than this are currently undefined in EBML
 175     assert(num < (1ULL << 56) - 1);
 176
 177     if (bytes == 0)
 178         // don't care how many bytes are used, so use the min
 179         bytes = needed_bytes;
 180     // the bytes needed to write the given size would exceed the bytes
 181     // that we need to use, so write unknown size. This shouldn't happen.
 182     assert(bytes >= needed_bytes);
 183
 184     num |= 1ULL << bytes * 7;
 185     for (i = bytes - 1; i >= 0; i--)
 186         avio_w8(pb, num >> i * 8);
 187 }
 188
 189 static void put_ebml_uint(AVIOContext *pb, unsigned int elementid, uint64_t val)
 190 {
 191     int i, bytes = 1;
 192     uint64_t tmp = val;
 193     while (tmp >>= 8)
 194         bytes++;
 195
 196     put_ebml_id(pb, elementid);
 197     put_ebml_num(pb, bytes, 0);
 198     for (i = bytes - 1; i >= 0; i--)
 199         avio_w8(pb, val >> i * 8);
 200 }
 201
 202 static void put_ebml_float(AVIOContext *pb, unsigned int elementid, double val)
 203 {
 204     put_ebml_id(pb, elementid);
 205     put_ebml_num(pb, 8, 0);
 206     avio_wb64(pb, av_double2int(val));
 207 }
 208
 209 static void put_ebml_binary(AVIOContext *pb, unsigned int elementid,
 210                             const void *buf, int size)
 211 {
 212     put_ebml_id(pb, elementid);
 213     put_ebml_num(pb, size, 0);
 214     avio_write(pb, buf, size);
 215 }
 216
 217 static void put_ebml_string(AVIOContext *pb, unsigned int elementid,
 218                             const char *str)
 219 {
 220     put_ebml_binary(pb, elementid, str, strlen(str));
 221 }
 222
 223 /**
 224  * Write a void element of a given size. Useful for reserving space in
 225  * the file to be written to later.
 226  *
 227  * @param size The number of bytes to reserve, which must be at least 2.
 228  */
 229 static void put_ebml_void(AVIOContext *pb, uint64_t size)
 230 {
 231     int64_t currentpos = avio_tell(pb);
 232
 233     assert(size >= 2);
 234
 235     put_ebml_id(pb, EBML_ID_VOID);
 236     // we need to subtract the length needed to store the size from the
 237     // size we need to reserve so 2 cases, we use 8 bytes to store the
 238     // size if possible, 1 byte otherwise
 239     if (size < 10)
 240         put_ebml_num(pb, size - 1, 0);
 241     else
 242         put_ebml_num(pb, size - 9, 8);
 243     while (avio_tell(pb) < currentpos + size)
 244         avio_w8(pb, 0);
 245 }
 246
 247 static ebml_master start_ebml_master(AVIOContext *pb, unsigned int elementid,
 248                                      uint64_t expectedsize)
 249 {
 250     int bytes = expectedsize ? ebml_num_size(expectedsize) : 8;
 251     put_ebml_id(pb, elementid);
 252     put_ebml_size_unknown(pb, bytes);
 253     return (ebml_master) {avio_tell(pb), bytes };
 254 }
 255
 256 static void end_ebml_master(AVIOContext *pb, ebml_master master)
 257 {
 258     int64_t pos = avio_tell(pb);
 259
 260     if (avio_seek(pb, master.pos - master.sizebytes, SEEK_SET) < 0)
 261         return;
 262     put_ebml_num(pb, pos - master.pos, master.sizebytes);
 263     avio_seek(pb, pos, SEEK_SET);
 264 }
 265
 266 static void put_xiph_size(AVIOContext *pb, int size)
 267 {
 268     int i;
 269     for (i = 0; i < size / 255; i++)
 270         avio_w8(pb, 255);
 271     avio_w8(pb, size % 255);
 272 }
 273
 274 /**
 275  * Initialize a mkv_seekhead element to be ready to index level 1 Matroska
 276  * elements. If a maximum number of elements is specified, enough space
 277  * will be reserved at the current file location to write a seek head of
 278  * that size.
 279  *
 280  * @param segment_offset The absolute offset to the position in the file
 281  *                       where the segment begins.
 282  * @param numelements The maximum number of elements that will be indexed
 283  *                    by this seek head, 0 if unlimited.
 284  */
 285 static mkv_seekhead *mkv_start_seekhead(AVIOContext *pb, int64_t segment_offset,
 286                                         int numelements)
 287 {
 288     mkv_seekhead *new_seekhead = av_mallocz(sizeof(mkv_seekhead));
 289     if (!new_seekhead)
 290         return NULL;
 291
 292     new_seekhead->segment_offset = segment_offset;
 293
 294     if (numelements > 0) {
 295         new_seekhead->filepos = avio_tell(pb);
 296         // 21 bytes max for a seek entry, 10 bytes max for the SeekHead ID
 297         // and size, and 3 bytes to guarantee that an EBML void element
 298         // will fit afterwards
 299         new_seekhead->reserved_size = numelements * MAX_SEEKENTRY_SIZE + 13;
 300         new_seekhead->max_entries   = numelements;
 301         put_ebml_void(pb, new_seekhead->reserved_size);
 302     }
 303     return new_seekhead;
 304 }
 305
 306 static int mkv_add_seekhead_entry(mkv_seekhead *seekhead, unsigned int elementid, uint64_t filepos)
 307 {
 308     int err;
 309
 310     // don't store more elements than we reserved space for
 311     if (seekhead->max_entries > 0 && seekhead->max_entries <= seekhead->num_entries)
 312         return -1;
 313
 314     if ((err = av_reallocp_array(&seekhead->entries, seekhead->num_entries + 1,
 315                                  sizeof(*seekhead->entries))) < 0) {
 316         seekhead->num_entries = 0;
 317         return err;
 318     }
 319
 320     seekhead->entries[seekhead->num_entries].elementid    = elementid;
 321     seekhead->entries[seekhead->num_entries++].segmentpos = filepos - seekhead->segment_offset;
 322
 323     return 0;
 324 }
 325
 326 /**
 327  * Write the seek head to the file and free it. If a maximum number of
 328  * elements was specified to mkv_start_seekhead(), the seek head will
 329  * be written at the location reserved for it. Otherwise, it is written
 330  * at the current location in the file.
 331  *
 332  * @return The file offset where the seekhead was written,
 333  * -1 if an error occurred.
 334  */
 335 static int64_t mkv_write_seekhead(AVIOContext *pb, mkv_seekhead *seekhead)
 336 {
 337     ebml_master metaseek, seekentry;
 338     int64_t currentpos;
 339     int i;
 340
 341     currentpos = avio_tell(pb);
 342
 343     if (seekhead->reserved_size > 0) {
 344         if (avio_seek(pb, seekhead->filepos, SEEK_SET) < 0) {
 345             currentpos = -1;
 346             goto fail;
 347         }
 348     }
 349
 350     metaseek = start_ebml_master(pb, MATROSKA_ID_SEEKHEAD, seekhead->reserved_size);
 351     for (i = 0; i < seekhead->num_entries; i++) {
 352         mkv_seekhead_entry *entry = &seekhead->entries[i];
 353
 354         seekentry = start_ebml_master(pb, MATROSKA_ID_SEEKENTRY, MAX_SEEKENTRY_SIZE);
 355
 356         put_ebml_id(pb, MATROSKA_ID_SEEKID);
 357         put_ebml_num(pb, ebml_id_size(entry->elementid), 0);
 358         put_ebml_id(pb, entry->elementid);
 359
 360         put_ebml_uint(pb, MATROSKA_ID_SEEKPOSITION, entry->segmentpos);
 361         end_ebml_master(pb, seekentry);
 362     }
 363     end_ebml_master(pb, metaseek);
 364
 365     if (seekhead->reserved_size > 0) {
 366         uint64_t remaining = seekhead->filepos + seekhead->reserved_size - avio_tell(pb);
 367         put_ebml_void(pb, remaining);
 368         avio_seek(pb, currentpos, SEEK_SET);
 369
 370         currentpos = seekhead->filepos;
 371     }
 372 fail:
 373     av_free(seekhead->entries);
 374     av_free(seekhead);
 375
 376     return currentpos;
 377 }
 378
 379 static mkv_cues *mkv_start_cues(int64_t segment_offset)
 380 {
 381     mkv_cues *cues = av_mallocz(sizeof(mkv_cues));
 382     if (!cues)
 383         return NULL;
 384
 385     cues->segment_offset = segment_offset;
 386     return cues;
 387 }
 388
 389 static int mkv_add_cuepoint(mkv_cues *cues, int stream, int64_t ts, int64_t cluster_pos)
 390 {
 391     int err;
 392
 393     if (ts < 0)
 394         return 0;
 395
 396     if ((err = av_reallocp_array(&cues->entries, cues->num_entries + 1,
 397                                  sizeof(*cues->entries))) < 0) {
 398         cues->num_entries = 0;
 399         return err;
 400     }
 401
 402     cues->entries[cues->num_entries].pts           = ts;
 403     cues->entries[cues->num_entries].tracknum      = stream + 1;
 404     cues->entries[cues->num_entries++].cluster_pos = cluster_pos - cues->segment_offset;
 405
 406     return 0;
 407 }
 408
 409 static int64_t mkv_write_cues(AVIOContext *pb, mkv_cues *cues, int num_tracks)
 410 {
 411     ebml_master cues_element;
 412     int64_t currentpos;
 413     int i, j;
 414
 415     currentpos = avio_tell(pb);
 416     cues_element = start_ebml_master(pb, MATROSKA_ID_CUES, 0);
 417
 418     for (i = 0; i < cues->num_entries; i++) {
 419         ebml_master cuepoint, track_positions;
 420         mkv_cuepoint *entry = &cues->entries[i];
 421         uint64_t pts = entry->pts;
 422
 423         cuepoint = start_ebml_master(pb, MATROSKA_ID_POINTENTRY, MAX_CUEPOINT_SIZE(num_tracks));
 424         put_ebml_uint(pb, MATROSKA_ID_CUETIME, pts);
 425
 426         // put all the entries from different tracks that have the exact same
 427         // timestamp into the same CuePoint
 428         for (j = 0; j < cues->num_entries - i && entry[j].pts == pts; j++) {
 429             track_positions = start_ebml_master(pb, MATROSKA_ID_CUETRACKPOSITION, MAX_CUETRACKPOS_SIZE);
 430             put_ebml_uint(pb, MATROSKA_ID_CUETRACK          , entry[j].tracknum   );
 431             put_ebml_uint(pb, MATROSKA_ID_CUECLUSTERPOSITION, entry[j].cluster_pos);
 432             end_ebml_master(pb, track_positions);
 433         }
 434         i += j - 1;
 435         end_ebml_master(pb, cuepoint);
 436     }
 437     end_ebml_master(pb, cues_element);
 438
 439     return currentpos;
 440 }
 441
 442 static int put_xiph_codecpriv(AVFormatContext *s, AVIOContext *pb, AVCodecParameters *par)
 443 {
 444     uint8_t *header_start[3];
 445     int header_len[3];
 446     int first_header_size;
 447     int j;
 448
 449     if (par->codec_id == AV_CODEC_ID_VORBIS)
 450         first_header_size = 30;
 451     else
 452         first_header_size = 42;
 453
 454     if (avpriv_split_xiph_headers(par->extradata, par->extradata_size,
 455                               first_header_size, header_start, header_len) < 0) {
 456         av_log(s, AV_LOG_ERROR, "Extradata corrupt.\n");
 457         return -1;
 458     }
 459
 460     avio_w8(pb, 2);                    // number packets - 1
 461     for (j = 0; j < 2; j++) {
 462         put_xiph_size(pb, header_len[j]);
 463     }
 464     for (j = 0; j < 3; j++)
 465         avio_write(pb, header_start[j], header_len[j]);
 466
 467     return 0;
 468 }
 469
 470 static int put_wv_codecpriv(AVIOContext *pb, AVCodecParameters *par)
 471 {
 472     if (par->extradata && par->extradata_size == 2)
 473         avio_write(pb, par->extradata, 2);
 474     else
 475         avio_wl16(pb, 0x403); // fallback to the version mentioned in matroska specs
 476     return 0;
 477 }
 478
 479 static int put_flac_codecpriv(AVFormatContext *s,
 480                               AVIOContext *pb, AVCodecParameters *par)
 481 {
 482     int write_comment = (par->channel_layout &&
 483                          !(par->channel_layout & ~0x3ffffULL) &&
 484                          !ff_flac_is_native_layout(par->channel_layout));
 485     int ret = ff_flac_write_header(pb, par->extradata, par->extradata_size,
 486                                    !write_comment);
 487
 488     if (ret < 0)
 489         return ret;
 490
 491     if (write_comment) {
 492         const char *vendor = (s->flags & AVFMT_FLAG_BITEXACT) ?
 493                              "Libav" : LIBAVFORMAT_IDENT;
 494         AVDictionary *dict = NULL;
 495         uint8_t buf[32], *data, *p;
 496         int len;
 497
 498         snprintf(buf, sizeof(buf), "0x%"PRIx64, par->channel_layout);
 499         av_dict_set(&dict, "WAVEFORMATEXTENSIBLE_CHANNEL_MASK", buf, 0);
 500
 501         len = ff_vorbiscomment_length(dict, vendor);
 502         data = av_malloc(len + 4);
 503         if (!data) {
 504             av_dict_free(&dict);
 505             return AVERROR(ENOMEM);
 506         }
 507
 508         data[0] = 0x84;
 509         AV_WB24(data + 1, len);
 510
 511         p = data + 4;
 512         ff_vorbiscomment_write(&p, &dict, vendor);
 513
 514         avio_write(pb, data, len + 4);
 515
 516         av_freep(&data);
 517         av_dict_free(&dict);
 518     }
 519
 520     return 0;
 521 }
 522
 523 static int get_aac_sample_rates(AVFormatContext *s, AVCodecParameters *par,
 524                                 int *sample_rate, int *output_sample_rate)
 525 {
 526     MPEG4AudioConfig mp4ac;
 527
 528     if (avpriv_mpeg4audio_get_config(&mp4ac, par->extradata,
 529                                      par->extradata_size * 8, 1) < 0) {
 530         av_log(s, AV_LOG_ERROR,
 531                "Error parsing AAC extradata, unable to determine samplerate.\n");
 532         return AVERROR(EINVAL);
 533     }
 534
 535     *sample_rate        = mp4ac.sample_rate;
 536     *output_sample_rate = mp4ac.ext_sample_rate;
 537     return 0;
 538 }
 539
 540 static int mkv_write_native_codecprivate(AVFormatContext *s,
 541                                          AVCodecParameters *par,
 542                                          AVIOContext *dyn_cp)
 543 {
 544     switch (par->codec_id) {
 545     case AV_CODEC_ID_VORBIS:
 546     case AV_CODEC_ID_THEORA:
 547         return put_xiph_codecpriv(s, dyn_cp, par);
 548     case AV_CODEC_ID_FLAC:
 549         return put_flac_codecpriv(s, dyn_cp, par);
 550     case AV_CODEC_ID_WAVPACK:
 551         return put_wv_codecpriv(dyn_cp, par);
 552     case AV_CODEC_ID_H264:
 553         return ff_isom_write_avcc(dyn_cp, par->extradata,
 554                                   par->extradata_size);
 555     case AV_CODEC_ID_HEVC:
 556         return ff_isom_write_hvcc(dyn_cp, par->extradata,
 557                                   par->extradata_size, 0);
 558     case AV_CODEC_ID_ALAC:
 559         if (par->extradata_size < 36) {
 560             av_log(s, AV_LOG_ERROR,
 561                    "Invalid extradata found, ALAC expects a 36-byte "
 562                    "QuickTime atom.");
 563             return AVERROR_INVALIDDATA;
 564         } else
 565             avio_write(dyn_cp, par->extradata + 12,
 566                        par->extradata_size - 12);
 567         break;
 568     default:
 569         if (par->extradata_size)
 570         avio_write(dyn_cp, par->extradata, par->extradata_size);
 571     }
 572
 573     return 0;
 574 }
 575
 576 static int mkv_write_codecprivate(AVFormatContext *s, AVIOContext *pb,
 577                                   AVCodecParameters *par,
 578                                   int native_id, int qt_id)
 579 {
 580     AVIOContext *dyn_cp;
 581     uint8_t *codecpriv;
 582     int ret, codecpriv_size;
 583
 584     ret = avio_open_dyn_buf(&dyn_cp);
 585     if (ret < 0)
 586         return ret;
 587
 588     if (native_id) {
 589         ret = mkv_write_native_codecprivate(s, par, dyn_cp);
 590     } else if (par->codec_type == AVMEDIA_TYPE_VIDEO) {
 591         if (qt_id) {
 592             if (!par->codec_tag)
 593                 par->codec_tag = ff_codec_get_tag(ff_codec_movvideo_tags,
 594                                                   par->codec_id);
 595             if (par->extradata_size)
 596                 avio_write(dyn_cp, par->extradata, par->extradata_size);
 597         } else {
 598             if (!par->codec_tag)
 599                 par->codec_tag = ff_codec_get_tag(ff_codec_bmp_tags,
 600                                                   par->codec_id);
 601             if (!par->codec_tag) {
 602                 av_log(s, AV_LOG_ERROR, "No bmp codec ID found.\n");
 603                 ret = -1;
 604             }
 605
 606             ff_put_bmp_header(dyn_cp, par, ff_codec_bmp_tags, 0);
 607         }
 608     } else if (par->codec_type == AVMEDIA_TYPE_AUDIO) {
 609         unsigned int tag;
 610         tag = ff_codec_get_tag(ff_codec_wav_tags, par->codec_id);
 611         if (!tag) {
 612             av_log(s, AV_LOG_ERROR, "No wav codec ID found.\n");
 613             ret = -1;
 614         }
 615         if (!par->codec_tag)
 616             par->codec_tag = tag;
 617
 618         ff_put_wav_header(s, dyn_cp, par);
 619     }
 620
 621     codecpriv_size = avio_close_dyn_buf(dyn_cp, &codecpriv);
 622     if (codecpriv_size)
 623         put_ebml_binary(pb, MATROSKA_ID_CODECPRIVATE, codecpriv,
 624                         codecpriv_size);
 625     av_free(codecpriv);
 626     return ret;
 627 }
 628
 629 static void mkv_write_field_order(AVIOContext *pb,
 630                                   enum AVFieldOrder field_order)
 631 {
 632     switch (field_order) {
 633     case AV_FIELD_UNKNOWN:
 634         put_ebml_uint(pb, MATROSKA_ID_VIDEOFLAGINTERLACED,
 635                       MATROSKA_VIDEO_INTERLACE_FLAG_UNDETERMINED);
 636         break;
 637     case AV_FIELD_PROGRESSIVE:
 638         put_ebml_uint(pb, MATROSKA_ID_VIDEOFLAGINTERLACED,
 639                       MATROSKA_VIDEO_INTERLACE_FLAG_PROGRESSIVE);
 640         break;
 641     case AV_FIELD_TT:
 642     case AV_FIELD_BB:
 643     case AV_FIELD_TB:
 644     case AV_FIELD_BT:
 645         put_ebml_uint(pb, MATROSKA_ID_VIDEOFLAGINTERLACED,
 646                       MATROSKA_VIDEO_INTERLACE_FLAG_INTERLACED);
 647         switch (field_order) {
 648         case AV_FIELD_TT:
 649             put_ebml_uint(pb, MATROSKA_ID_VIDEOFIELDORDER,
 650                           MATROSKA_VIDEO_FIELDORDER_TT);
 651             break;
 652         case AV_FIELD_BB:
 653              put_ebml_uint(pb, MATROSKA_ID_VIDEOFIELDORDER,
 654                           MATROSKA_VIDEO_FIELDORDER_BB);
 655             break;
 656         case AV_FIELD_TB:
 657             put_ebml_uint(pb, MATROSKA_ID_VIDEOFIELDORDER,
 658                           MATROSKA_VIDEO_FIELDORDER_TB);
 659             break;
 660         case AV_FIELD_BT:
 661             put_ebml_uint(pb, MATROSKA_ID_VIDEOFIELDORDER,
 662                           MATROSKA_VIDEO_FIELDORDER_BT);
 663             break;
 664         }
 665     }
 666 }
 667
 668 static int mkv_write_stereo_mode(AVFormatContext *s, AVIOContext *pb,
 669                                  AVStream *st, int mode)
 670 {
 671     int i;
 672     int display_width, display_height;
 673     int h_width = 1, h_height = 1;
 674     AVCodecParameters *par = st->codecpar;
 675     AVDictionaryEntry *tag;
 676     MatroskaVideoStereoModeType format = MATROSKA_VIDEO_STEREOMODE_TYPE_NB;
 677
 678     // convert metadata into proper side data and add it to the stream
 679     if ((tag = av_dict_get(s->metadata, "stereo_mode", NULL, 0))) {
 680         int stereo_mode = atoi(tag->value);
 681         if (stereo_mode < MATROSKA_VIDEO_STEREOMODE_TYPE_NB &&
 682             stereo_mode != 10 && stereo_mode != 12) {
 683             int ret = ff_mkv_stereo3d_conv(st, stereo_mode);
 684             if (ret < 0)
 685                 return ret;
 686         }
 687     }
 688
 689     // iterate to find the stereo3d side data
 690     for (i = 0; i < st->nb_side_data; i++) {
 691         AVPacketSideData sd = st->side_data[i];
 692         if (sd.type == AV_PKT_DATA_STEREO3D) {
 693             AVStereo3D *stereo = (AVStereo3D *)sd.data;
 694
 695             switch (stereo->type) {
 696             case AV_STEREO3D_2D:
 697                 format = MATROSKA_VIDEO_STEREOMODE_TYPE_MONO;
 698                 break;
 699             case AV_STEREO3D_SIDEBYSIDE:
 700                 format = (stereo->flags & AV_STEREO3D_FLAG_INVERT)
 701                     ? MATROSKA_VIDEO_STEREOMODE_TYPE_RIGHT_LEFT
 702                     : MATROSKA_VIDEO_STEREOMODE_TYPE_LEFT_RIGHT;
 703                 h_width = 2;
 704                 break;
 705             case AV_STEREO3D_TOPBOTTOM:
 706                 format = MATROSKA_VIDEO_STEREOMODE_TYPE_TOP_BOTTOM;
 707                 if (stereo->flags & AV_STEREO3D_FLAG_INVERT)
 708                     format--;
 709                 h_height = 2;
 710                 break;
 711             case AV_STEREO3D_CHECKERBOARD:
 712                 format = MATROSKA_VIDEO_STEREOMODE_TYPE_CHECKERBOARD_LR;
 713                 if (stereo->flags & AV_STEREO3D_FLAG_INVERT)
 714                     format--;
 715                 break;
 716             case AV_STEREO3D_LINES:
 717                 format = MATROSKA_VIDEO_STEREOMODE_TYPE_ROW_INTERLEAVED_LR;
 718                 if (stereo->flags & AV_STEREO3D_FLAG_INVERT)
 719                     format--;
 720                 h_height = 2;
 721                 break;
 722             case AV_STEREO3D_COLUMNS:
 723                 format = MATROSKA_VIDEO_STEREOMODE_TYPE_COL_INTERLEAVED_LR;
 724                 if (stereo->flags & AV_STEREO3D_FLAG_INVERT)
 725                     format--;
 726                 h_width = 2;
 727                 break;
 728             case AV_STEREO3D_FRAMESEQUENCE:
 729                 format = MATROSKA_VIDEO_STEREOMODE_TYPE_BOTH_EYES_BLOCK_LR;
 730                 if (stereo->flags & AV_STEREO3D_FLAG_INVERT)
 731                     format++;
 732                 break;
 733             }
 734
 735             break;
 736         }
 737     }
 738
 739     // if webm, do not write unsupported modes
 740     if (mode == MODE_WEBM &&
 741         (format > MATROSKA_VIDEO_STEREOMODE_TYPE_TOP_BOTTOM &&
 742          format != MATROSKA_VIDEO_STEREOMODE_TYPE_RIGHT_LEFT))
 743         format = MATROSKA_VIDEO_STEREOMODE_TYPE_NB;
 744
 745     // write StereoMode if format is valid
 746     if (format < MATROSKA_VIDEO_STEREOMODE_TYPE_NB)
 747         put_ebml_uint(pb, MATROSKA_ID_VIDEOSTEREOMODE, format);
 748
 749     // write DisplayWidth and DisplayHeight, they contain the size of
 750     // a single source view and/or the display aspect ratio
 751     display_width  = par->width  / h_width;
 752     display_height = par->height / h_height;
 753     if (st->sample_aspect_ratio.num) {
 754         display_width *= av_q2d(st->sample_aspect_ratio);
 755         put_ebml_uint(pb, MATROSKA_ID_VIDEODISPLAYUNIT, 3); // DAR
 756     }
 757     if (st->sample_aspect_ratio.num ||
 758         format < MATROSKA_VIDEO_STEREOMODE_TYPE_NB) {
 759         put_ebml_uint(pb, MATROSKA_ID_VIDEODISPLAYWIDTH,  display_width);
 760         put_ebml_uint(pb, MATROSKA_ID_VIDEODISPLAYHEIGHT, display_height);
 761     }
 762
 763     return 0;
 764 }
 765
 766 static int mkv_write_track(AVFormatContext *s, MatroskaMuxContext *mkv,
 767                            int i, AVIOContext *pb)
 768 {
 769     AVStream *st = s->streams[i];
 770     AVCodecParameters *par = st->codecpar;
 771     ebml_master subinfo, track;
 772     int native_id = 0;
 773     int qt_id = 0;
 774     int bit_depth = av_get_bits_per_sample(par->codec_id);
 775     int sample_rate = par->sample_rate;
 776     int output_sample_rate = 0;
 777     int j, ret;
 778     AVDictionaryEntry *tag;
 779
 780     // ms precision is the de-facto standard timescale for mkv files
 781     avpriv_set_pts_info(st, 64, 1, 1000);
 782
 783     if (par->codec_type == AVMEDIA_TYPE_ATTACHMENT) {
 784         mkv->have_attachments = 1;
 785         return 0;
 786     }
 787
 788     if (!bit_depth)
 789         bit_depth = av_get_bytes_per_sample(par->format) << 3;
 790
 791     if (par->codec_id == AV_CODEC_ID_AAC) {
 792         ret = get_aac_sample_rates(s, par, &sample_rate, &output_sample_rate);
 793         if (ret < 0)
 794             return ret;
 795     }
 796
 797     track = start_ebml_master(pb, MATROSKA_ID_TRACKENTRY, 0);
 798     put_ebml_uint (pb, MATROSKA_ID_TRACKNUMBER     , i + 1);
 799     put_ebml_uint (pb, MATROSKA_ID_TRACKUID        , i + 1);
 800     put_ebml_uint (pb, MATROSKA_ID_TRACKFLAGLACING , 0);    // no lacing (yet)
 801
 802     if ((tag = av_dict_get(st->metadata, "title", NULL, 0)))
 803         put_ebml_string(pb, MATROSKA_ID_TRACKNAME, tag->value);
 804     tag = av_dict_get(st->metadata, "language", NULL, 0);
 805     put_ebml_string(pb, MATROSKA_ID_TRACKLANGUAGE, tag ? tag->value:"und");
 806
 807     // The default value for TRACKFLAGDEFAULT is 1, so add element
 808     // if we need to clear it.
 809     if (!(st->disposition & AV_DISPOSITION_DEFAULT))
 810         put_ebml_uint(pb, MATROSKA_ID_TRACKFLAGDEFAULT, !!(st->disposition & AV_DISPOSITION_DEFAULT));
 811     if (st->disposition & AV_DISPOSITION_FORCED)
 812         put_ebml_uint(pb, MATROSKA_ID_TRACKFLAGFORCED, !!(st->disposition & AV_DISPOSITION_FORCED));
 813
 814     if (par->codec_type == AVMEDIA_TYPE_AUDIO && par->initial_padding) {
 815         mkv->tracks[i].ts_offset = av_rescale_q(par->initial_padding,
 816                                                 (AVRational){ 1, par->sample_rate },
 817                                                 st->time_base);
 818
 819         put_ebml_uint(pb, MATROSKA_ID_CODECDELAY,
 820                       av_rescale_q(par->initial_padding,
 821                                    (AVRational){ 1, par->sample_rate },
 822                                    (AVRational){ 1, 1000000000 }));
 823     }
 824
 825     // look for a codec ID string specific to mkv to use,
 826     // if none are found, use AVI codes
 827     for (j = 0; ff_mkv_codec_tags[j].id != AV_CODEC_ID_NONE; j++) {
 828         if (ff_mkv_codec_tags[j].id == par->codec_id) {
 829             put_ebml_string(pb, MATROSKA_ID_CODECID, ff_mkv_codec_tags[j].str);
 830             native_id = 1;
 831             break;
 832         }
 833     }
 834
 835     if (mkv->mode == MODE_WEBM && !(par->codec_id == AV_CODEC_ID_VP8 ||
 836                                     par->codec_id == AV_CODEC_ID_VP9 ||
 837                                     par->codec_id == AV_CODEC_ID_OPUS ||
 838                                     par->codec_id == AV_CODEC_ID_VORBIS)) {
 839         av_log(s, AV_LOG_ERROR,
 840                "Only VP8 or VP9 video and Vorbis or Opus audio are supported for WebM.\n");
 841         return AVERROR(EINVAL);
 842     }
 843
 844     switch (par->codec_type) {
 845     case AVMEDIA_TYPE_VIDEO:
 846         put_ebml_uint(pb, MATROSKA_ID_TRACKTYPE, MATROSKA_TRACK_TYPE_VIDEO);
 847         if (st->avg_frame_rate.num > 0 && st->avg_frame_rate.den > 0)
 848             put_ebml_uint(pb, MATROSKA_ID_TRACKDEFAULTDURATION, 1E9 / av_q2d(st->avg_frame_rate));
 849
 850         if (!native_id &&
 851             ff_codec_get_tag(ff_codec_movvideo_tags, par->codec_id) &&
 852             (!ff_codec_get_tag(ff_codec_bmp_tags,    par->codec_id) ||
 853              par->codec_id == AV_CODEC_ID_SVQ1 ||
 854              par->codec_id == AV_CODEC_ID_SVQ3 ||
 855              par->codec_id == AV_CODEC_ID_CINEPAK))
 856             qt_id = 1;
 857
 858         if (qt_id)
 859             put_ebml_string(pb, MATROSKA_ID_CODECID, "V_QUICKTIME");
 860         else if (!native_id) {
 861             // if there is no mkv-specific codec ID, use VFW mode
 862             put_ebml_string(pb, MATROSKA_ID_CODECID, "V_MS/VFW/FOURCC");
 863             mkv->tracks[i].write_dts = 1;
 864         }
 865
 866         subinfo = start_ebml_master(pb, MATROSKA_ID_TRACKVIDEO, 0);
 867
 868         put_ebml_uint (pb, MATROSKA_ID_VIDEOPIXELWIDTH , par->width);
 869         put_ebml_uint (pb, MATROSKA_ID_VIDEOPIXELHEIGHT, par->height);
 870
 871         mkv_write_field_order(pb, par->field_order);
 872
 873         // check both side data and metadata for stereo information,
 874         // write the result to the bitstream if any is found
 875         ret = mkv_write_stereo_mode(s, pb, st, mkv->mode);
 876         if (ret < 0)
 877             return ret;
 878
 879         end_ebml_master(pb, subinfo);
 880         break;
 881
 882     case AVMEDIA_TYPE_AUDIO:
 883         put_ebml_uint(pb, MATROSKA_ID_TRACKTYPE, MATROSKA_TRACK_TYPE_AUDIO);
 884
 885         if (!native_id)
 886             // no mkv-specific ID, use ACM mode
 887             put_ebml_string(pb, MATROSKA_ID_CODECID, "A_MS/ACM");
 888
 889         subinfo = start_ebml_master(pb, MATROSKA_ID_TRACKAUDIO, 0);
 890         put_ebml_uint  (pb, MATROSKA_ID_AUDIOCHANNELS    , par->channels);
 891         put_ebml_float (pb, MATROSKA_ID_AUDIOSAMPLINGFREQ, sample_rate);
 892         if (output_sample_rate)
 893             put_ebml_float(pb, MATROSKA_ID_AUDIOOUTSAMPLINGFREQ, output_sample_rate);
 894         if (bit_depth)
 895             put_ebml_uint(pb, MATROSKA_ID_AUDIOBITDEPTH, bit_depth);
 896         end_ebml_master(pb, subinfo);
 897         break;
 898
 899     case AVMEDIA_TYPE_SUBTITLE:
 900         put_ebml_uint(pb, MATROSKA_ID_TRACKTYPE, MATROSKA_TRACK_TYPE_SUBTITLE);
 901         if (!native_id) {
 902             av_log(s, AV_LOG_ERROR, "Subtitle codec %d is not supported.\n", par->codec_id);
 903             return AVERROR(ENOSYS);
 904         }
 905         break;
 906     default:
 907         av_log(s, AV_LOG_ERROR, "Only audio, video, and subtitles are supported for Matroska.\n");
 908         break;
 909     }
 910     ret = mkv_write_codecprivate(s, pb, par, native_id, qt_id);
 911     if (ret < 0)
 912         return ret;
 913
 914     end_ebml_master(pb, track);
 915
 916     return 0;
 917 }
 918
 919 static int mkv_write_tracks(AVFormatContext *s)
 920 {
 921     MatroskaMuxContext *mkv = s->priv_data;
 922     AVIOContext *pb = s->pb;
 923     ebml_master tracks;
 924     int i, ret;
 925
 926     ret = mkv_add_seekhead_entry(mkv->main_seekhead, MATROSKA_ID_TRACKS, avio_tell(pb));
 927     if (ret < 0)
 928         return ret;
 929
 930     tracks = start_ebml_master(pb, MATROSKA_ID_TRACKS, 0);
 931     for (i = 0; i < s->nb_streams; i++) {
 932         ret = mkv_write_track(s, mkv, i, pb);
 933         if (ret < 0)
 934             return ret;
 935     }
 936     end_ebml_master(pb, tracks);
 937     return 0;
 938 }
 939
 940 static int mkv_write_chapters(AVFormatContext *s)
 941 {
 942     MatroskaMuxContext *mkv = s->priv_data;
 943     AVIOContext *pb = s->pb;
 944     ebml_master chapters, editionentry;
 945     AVRational scale = {1, 1E9};
 946     int i, ret;
 947
 948     if (!s->nb_chapters || mkv->wrote_chapters)
 949         return 0;
 950
 951     ret = mkv_add_seekhead_entry(mkv->main_seekhead, MATROSKA_ID_CHAPTERS, avio_tell(pb));
 952     if (ret < 0) return ret;
 953
 954     chapters     = start_ebml_master(pb, MATROSKA_ID_CHAPTERS    , 0);
 955     editionentry = start_ebml_master(pb, MATROSKA_ID_EDITIONENTRY, 0);
 956     put_ebml_uint(pb, MATROSKA_ID_EDITIONFLAGDEFAULT, 1);
 957     put_ebml_uint(pb, MATROSKA_ID_EDITIONFLAGHIDDEN , 0);
 958     for (i = 0; i < s->nb_chapters; i++) {
 959         ebml_master chapteratom, chapterdisplay;
 960         AVChapter *c     = s->chapters[i];
 961         int64_t chapterstart = av_rescale_q(c->start, c->time_base, scale);
 962         int64_t chapterend   = av_rescale_q(c->end,   c->time_base, scale);
 963         AVDictionaryEntry *t = NULL;
 964         if (chapterstart < 0 || chapterstart > chapterend || chapterend < 0) {
 965             av_log(s, AV_LOG_ERROR,
 966                    "Invalid chapter start (%"PRId64") or end (%"PRId64").\n",
 967                    chapterstart, chapterend);
 968             return AVERROR_INVALIDDATA;
 969         }
 970
 971         chapteratom = start_ebml_master(pb, MATROSKA_ID_CHAPTERATOM, 0);
 972         put_ebml_uint(pb, MATROSKA_ID_CHAPTERUID, c->id);
 973         put_ebml_uint(pb, MATROSKA_ID_CHAPTERTIMESTART, chapterstart);
 974         put_ebml_uint(pb, MATROSKA_ID_CHAPTERTIMEEND, chapterend);
 975         put_ebml_uint(pb, MATROSKA_ID_CHAPTERFLAGHIDDEN , 0);
 976         put_ebml_uint(pb, MATROSKA_ID_CHAPTERFLAGENABLED, 1);
 977         if ((t = av_dict_get(c->metadata, "title", NULL, 0))) {
 978             chapterdisplay = start_ebml_master(pb, MATROSKA_ID_CHAPTERDISPLAY, 0);
 979             put_ebml_string(pb, MATROSKA_ID_CHAPSTRING, t->value);
 980             put_ebml_string(pb, MATROSKA_ID_CHAPLANG  , "und");
 981             end_ebml_master(pb, chapterdisplay);
 982         }
 983         end_ebml_master(pb, chapteratom);
 984     }
 985     end_ebml_master(pb, editionentry);
 986     end_ebml_master(pb, chapters);
 987
 988     mkv->wrote_chapters = 1;
 989     return 0;
 990 }
 991
 992 static int mkv_write_simpletag(AVIOContext *pb, AVDictionaryEntry *t)
 993 {
 994     uint8_t *key = av_strdup(t->key);
 995     uint8_t *p   = key;
 996     const uint8_t *lang = NULL;
 997     ebml_master tag;
 998
 999     if (!key)
1000         return AVERROR(ENOMEM);
1001
1002     if ((p = strrchr(p, '-')) &&
1003         (lang = av_convert_lang_to(p + 1, AV_LANG_ISO639_2_BIBL)))
1004         *p = 0;
1005
1006     p = key;
1007     while (*p) {
1008         if (*p == ' ')
1009             *p = '_';
1010         else if (*p >= 'a' && *p <= 'z')
1011             *p -= 'a' - 'A';
1012         p++;
1013     }
1014
1015     tag = start_ebml_master(pb, MATROSKA_ID_SIMPLETAG, 0);
1016     put_ebml_string(pb, MATROSKA_ID_TAGNAME, key);
1017     if (lang)
1018         put_ebml_string(pb, MATROSKA_ID_TAGLANG, lang);
1019     put_ebml_string(pb, MATROSKA_ID_TAGSTRING, t->value);
1020     end_ebml_master(pb, tag);
1021
1022     av_freep(&key);
1023     return 0;
1024 }
1025
1026 static int mkv_write_tag(AVFormatContext *s, AVDictionary *m, unsigned int elementid,
1027                          unsigned int uid, ebml_master *tags)
1028 {
1029     MatroskaMuxContext *mkv = s->priv_data;
1030     ebml_master tag, targets;
1031     AVDictionaryEntry *t = NULL;
1032     int ret;
1033
1034     if (!tags->pos) {
1035         ret = mkv_add_seekhead_entry(mkv->main_seekhead, MATROSKA_ID_TAGS, avio_tell(s->pb));
1036         if (ret < 0) return ret;
1037
1038         *tags = start_ebml_master(s->pb, MATROSKA_ID_TAGS, 0);
1039     }
1040
1041     tag     = start_ebml_master(s->pb, MATROSKA_ID_TAG,        0);
1042     targets = start_ebml_master(s->pb, MATROSKA_ID_TAGTARGETS, 0);
1043     if (elementid)
1044         put_ebml_uint(s->pb, elementid, uid);
1045     end_ebml_master(s->pb, targets);
1046
1047     while ((t = av_dict_get(m, "", t, AV_DICT_IGNORE_SUFFIX))) {
1048         if (av_strcasecmp(t->key, "title") &&
1049             av_strcasecmp(t->key, "encoding_tool") &&
1050             (elementid != MATROSKA_ID_TAGTARGETS_TRACKUID ||
1051              av_strcasecmp(t->key, "language"))) {
1052             ret = mkv_write_simpletag(s->pb, t);
1053             if (ret < 0)
1054                 return ret;
1055         }
1056     }
1057
1058     end_ebml_master(s->pb, tag);
1059     return 0;
1060 }
1061
1062 static int mkv_write_tags(AVFormatContext *s)
1063 {
1064     ebml_master tags = {0};
1065     int i, ret;
1066
1067     ff_metadata_conv_ctx(s, ff_mkv_metadata_conv, NULL);
1068
1069     if (av_dict_get(s->metadata, "", NULL, AV_DICT_IGNORE_SUFFIX)) {
1070         ret = mkv_write_tag(s, s->metadata, 0, 0, &tags);
1071         if (ret < 0) return ret;
1072     }
1073
1074     for (i = 0; i < s->nb_streams; i++) {
1075         AVStream *st = s->streams[i];
1076
1077         if (!av_dict_get(st->metadata, "", 0, AV_DICT_IGNORE_SUFFIX))
1078             continue;
1079
1080         ret = mkv_write_tag(s, st->metadata, MATROSKA_ID_TAGTARGETS_TRACKUID, i + 1, &tags);
1081         if (ret < 0) return ret;
1082     }
1083
1084     for (i = 0; i < s->nb_chapters; i++) {
1085         AVChapter *ch = s->chapters[i];
1086
1087         if (!av_dict_get(ch->metadata, "", NULL, AV_DICT_IGNORE_SUFFIX))
1088             continue;
1089
1090         ret = mkv_write_tag(s, ch->metadata, MATROSKA_ID_TAGTARGETS_CHAPTERUID, ch->id, &tags);
1091         if (ret < 0) return ret;
1092     }
1093
1094     if (tags.pos)
1095         end_ebml_master(s->pb, tags);
1096     return 0;
1097 }
1098
1099 static int mkv_write_attachments(AVFormatContext *s)
1100 {
1101     MatroskaMuxContext *mkv = s->priv_data;
1102     AVIOContext *pb = s->pb;
1103     ebml_master attachments;
1104     AVLFG c;
1105     int i, ret;
1106
1107     if (!mkv->have_attachments)
1108         return 0;
1109
1110     av_lfg_init(&c, av_get_random_seed());
1111
1112     ret = mkv_add_seekhead_entry(mkv->main_seekhead, MATROSKA_ID_ATTACHMENTS, avio_tell(pb));
1113     if (ret < 0) return ret;
1114
1115     attachments = start_ebml_master(pb, MATROSKA_ID_ATTACHMENTS, 0);
1116
1117     for (i = 0; i < s->nb_streams; i++) {
1118         AVStream *st = s->streams[i];
1119         ebml_master attached_file;
1120         AVDictionaryEntry *t;
1121         const char *mimetype = NULL;
1122
1123         if (st->codecpar->codec_type != AVMEDIA_TYPE_ATTACHMENT)
1124             continue;
1125
1126         attached_file = start_ebml_master(pb, MATROSKA_ID_ATTACHEDFILE, 0);
1127
1128         if (t = av_dict_get(st->metadata, "title", NULL, 0))
1129             put_ebml_string(pb, MATROSKA_ID_FILEDESC, t->value);
1130         if (!(t = av_dict_get(st->metadata, "filename", NULL, 0))) {
1131             av_log(s, AV_LOG_ERROR, "Attachment stream %d has no filename tag.\n", i);
1132             return AVERROR(EINVAL);
1133         }
1134         put_ebml_string(pb, MATROSKA_ID_FILENAME, t->value);
1135         if (t = av_dict_get(st->metadata, "mimetype", NULL, 0))
1136             mimetype = t->value;
1137         else if (st->codecpar->codec_id != AV_CODEC_ID_NONE ) {
1138             int i;
1139             for (i = 0; ff_mkv_mime_tags[i].id != AV_CODEC_ID_NONE; i++)
1140                 if (ff_mkv_mime_tags[i].id == st->codecpar->codec_id) {
1141                     mimetype = ff_mkv_mime_tags[i].str;
1142                     break;
1143                 }
1144             for (i = 0; ff_mkv_image_mime_tags[i].id != AV_CODEC_ID_NONE; i++)
1145                 if (ff_mkv_image_mime_tags[i].id == st->codecpar->codec_id) {
1146                     mimetype = ff_mkv_image_mime_tags[i].str;
1147                     break;
1148                 }
1149         }
1150         if (!mimetype) {
1151             av_log(s, AV_LOG_ERROR, "Attachment stream %d has no mimetype tag and "
1152                                     "it cannot be deduced from the codec id.\n", i);
1153             return AVERROR(EINVAL);
1154         }
1155
1156         put_ebml_string(pb, MATROSKA_ID_FILEMIMETYPE, mimetype);
1157         put_ebml_binary(pb, MATROSKA_ID_FILEDATA, st->codecpar->extradata, st->codecpar->extradata_size);
1158         put_ebml_uint(pb, MATROSKA_ID_FILEUID, av_lfg_get(&c));
1159         end_ebml_master(pb, attached_file);
1160     }
1161     end_ebml_master(pb, attachments);
1162
1163     return 0;
1164 }
1165
1166 static int mkv_write_header(AVFormatContext *s)
1167 {
1168     MatroskaMuxContext *mkv = s->priv_data;
1169     AVIOContext *pb = s->pb;
1170     ebml_master ebml_header, segment_info;
1171     AVDictionaryEntry *tag;
1172     int ret, i;
1173
1174     if (!strcmp(s->oformat->name, "webm"))
1175         mkv->mode = MODE_WEBM;
1176     else
1177         mkv->mode = MODE_MATROSKAv2;
1178
1179     mkv->tracks = av_mallocz(s->nb_streams * sizeof(*mkv->tracks));
1180     if (!mkv->tracks)
1181         return AVERROR(ENOMEM);
1182
1183     ebml_header = start_ebml_master(pb, EBML_ID_HEADER, 0);
1184     put_ebml_uint   (pb, EBML_ID_EBMLVERSION        ,           1);
1185     put_ebml_uint   (pb, EBML_ID_EBMLREADVERSION    ,           1);
1186     put_ebml_uint   (pb, EBML_ID_EBMLMAXIDLENGTH    ,           4);
1187     put_ebml_uint   (pb, EBML_ID_EBMLMAXSIZELENGTH  ,           8);
1188     put_ebml_string (pb, EBML_ID_DOCTYPE            , s->oformat->name);
1189     put_ebml_uint   (pb, EBML_ID_DOCTYPEVERSION     ,           4);
1190     put_ebml_uint   (pb, EBML_ID_DOCTYPEREADVERSION ,           2);
1191     end_ebml_master(pb, ebml_header);
1192
1193     mkv->segment = start_ebml_master(pb, MATROSKA_ID_SEGMENT, 0);
1194     mkv->segment_offset = avio_tell(pb);
1195
1196     // we write 2 seek heads - one at the end of the file to point to each
1197     // cluster, and one at the beginning to point to all other level one
1198     // elements (including the seek head at the end of the file), which
1199     // isn't more than 10 elements if we only write one of each other
1200     // currently defined level 1 element
1201     mkv->main_seekhead    = mkv_start_seekhead(pb, mkv->segment_offset, 10);
1202     if (!mkv->main_seekhead)
1203         return AVERROR(ENOMEM);
1204
1205     ret = mkv_add_seekhead_entry(mkv->main_seekhead, MATROSKA_ID_INFO, avio_tell(pb));
1206     if (ret < 0) return ret;
1207
1208     segment_info = start_ebml_master(pb, MATROSKA_ID_INFO, 0);
1209     put_ebml_uint(pb, MATROSKA_ID_TIMECODESCALE, 1000000);
1210     if ((tag = av_dict_get(s->metadata, "title", NULL, 0)))
1211         put_ebml_string(pb, MATROSKA_ID_TITLE, tag->value);
1212     if (!(s->flags & AVFMT_FLAG_BITEXACT)) {
1213         uint32_t segment_uid[4];
1214         AVLFG lfg;
1215
1216         av_lfg_init(&lfg, av_get_random_seed());
1217
1218         for (i = 0; i < 4; i++)
1219             segment_uid[i] = av_lfg_get(&lfg);
1220
1221         put_ebml_string(pb, MATROSKA_ID_MUXINGAPP, LIBAVFORMAT_IDENT);
1222         if ((tag = av_dict_get(s->metadata, "encoding_tool", NULL, 0)))
1223             put_ebml_string(pb, MATROSKA_ID_WRITINGAPP, tag->value);
1224         else
1225             put_ebml_string(pb, MATROSKA_ID_WRITINGAPP, LIBAVFORMAT_IDENT);
1226         put_ebml_binary(pb, MATROSKA_ID_SEGMENTUID, segment_uid, 16);
1227     }
1228
1229     // reserve space for the duration
1230     mkv->duration = 0;
1231     mkv->duration_offset = avio_tell(pb);
1232     put_ebml_void(pb, 11);                  // assumes double-precision float to be written
1233     end_ebml_master(pb, segment_info);
1234
1235     ret = mkv_write_tracks(s);
1236     if (ret < 0)
1237         return ret;
1238
1239     if (mkv->mode != MODE_WEBM) {
1240         ret = mkv_write_chapters(s);
1241         if (ret < 0)
1242             return ret;
1243
1244         ret = mkv_write_tags(s);
1245         if (ret < 0)
1246             return ret;
1247
1248         ret = mkv_write_attachments(s);
1249         if (ret < 0)
1250             return ret;
1251     }
1252
1253     if (!s->pb->seekable)
1254         mkv_write_seekhead(pb, mkv->main_seekhead);
1255
1256     mkv->cues = mkv_start_cues(mkv->segment_offset);
1257     if (!mkv->cues)
1258         return AVERROR(ENOMEM);
1259
1260     if (pb->seekable && mkv->reserve_cues_space) {
1261         mkv->cues_pos = avio_tell(pb);
1262         put_ebml_void(pb, mkv->reserve_cues_space);
1263     }
1264
1265     av_init_packet(&mkv->cur_audio_pkt);
1266     mkv->cur_audio_pkt.size = 0;
1267
1268     avio_flush(pb);
1269
1270     // start a new cluster every 5 MB or 5 sec, or 32k / 1 sec for streaming or
1271     // after 4k and on a keyframe
1272     if (pb->seekable) {
1273         if (mkv->cluster_time_limit < 0)
1274             mkv->cluster_time_limit = 5000;
1275         if (mkv->cluster_size_limit < 0)
1276             mkv->cluster_size_limit = 5 * 1024 * 1024;
1277     } else {
1278         if (mkv->cluster_time_limit < 0)
1279             mkv->cluster_time_limit = 1000;
1280         if (mkv->cluster_size_limit < 0)
1281             mkv->cluster_size_limit = 32 * 1024;
1282     }
1283
1284     return 0;
1285 }
1286
1287 static int mkv_blockgroup_size(int pkt_size)
1288 {
1289     int size = pkt_size + 4;
1290     size += ebml_num_size(size);
1291     size += 2;              // EBML ID for block and block duration
1292     size += 8;              // max size of block duration
1293     size += ebml_num_size(size);
1294     size += 1;              // blockgroup EBML ID
1295     return size;
1296 }
1297
1298 static int ass_get_duration(AVFormatContext *s, const uint8_t *p)
1299 {
1300     int sh, sm, ss, sc, eh, em, es, ec;
1301     uint64_t start, end;
1302
1303     if (sscanf(p, "%*[^,],%d:%d:%d%*c%d,%d:%d:%d%*c%d",
1304                &sh, &sm, &ss, &sc, &eh, &em, &es, &ec) != 8)
1305         return 0;
1306
1307     if (sh > 9 || sm > 59 || ss > 59 || sc > 99 ||
1308         eh > 9 || em > 59 || es > 59 || ec > 99) {
1309         av_log(s, AV_LOG_WARNING,
1310                "Non-standard time reference %d:%d:%d.%d,%d:%d:%d.%d\n",
1311                sh, sm, ss, sc, eh, em, es, ec);
1312         return 0;
1313     }
1314
1315     start = 3600000 * sh + 60000 * sm + 1000 * ss + 10 * sc;
1316     end   = 3600000 * eh + 60000 * em + 1000 * es + 10 * ec;
1317
1318     if (start > end) {
1319         av_log(s, AV_LOG_WARNING,
1320                "Unexpected time reference %d:%d:%d.%d,%d:%d:%d.%d\n",
1321                sh, sm, ss, sc, eh, em, es, ec);
1322         return 0;
1323     }
1324
1325     return end - start;
1326 }
1327
1328 static int mkv_write_ass_blocks(AVFormatContext *s, AVIOContext *pb,
1329                                 AVPacket *pkt)
1330 {
1331     MatroskaMuxContext *mkv = s->priv_data;
1332     int i, layer = 0, max_duration = 0, size, line_size, data_size = pkt->size;
1333     uint8_t *start, *end, *data = pkt->data;
1334     ebml_master blockgroup;
1335     char buffer[2048];
1336
1337     while (data_size) {
1338         int duration = ass_get_duration(s, data);
1339         max_duration = FFMAX(duration, max_duration);
1340         end          = memchr(data, '\n', data_size);
1341         size         = line_size = end ? end - data + 1 : data_size;
1342         size        -= end ? (end[-1] == '\r') + 1 : 0;
1343         start        = data;
1344         for (i = 0; i < 3; i++, start++)
1345             if (!(start = memchr(start, ',', size - (start - data))))
1346                 return max_duration;
1347         size -= start - data;
1348         sscanf(data, "Dialogue: %d,", &layer);
1349         i = snprintf(buffer, sizeof(buffer), "%" PRId64 ",%d,",
1350                      s->streams[pkt->stream_index]->nb_frames, layer);
1351         size = FFMIN(i + size, sizeof(buffer));
1352         memcpy(buffer + i, start, size - i);
1353
1354         av_log(s, AV_LOG_DEBUG,
1355                "Writing block at offset %" PRIu64 ", size %d, "
1356                "pts %" PRId64 ", duration %d\n",
1357                avio_tell(pb), size, pkt->pts, duration);
1358         blockgroup = start_ebml_master(pb, MATROSKA_ID_BLOCKGROUP,
1359                                        mkv_blockgroup_size(size));
1360         put_ebml_id(pb, MATROSKA_ID_BLOCK);
1361         put_ebml_num(pb, size + 4, 0);
1362         // this assumes stream_index is less than 126
1363         avio_w8(pb, 0x80 | (pkt->stream_index + 1));
1364         avio_wb16(pb, pkt->pts - mkv->cluster_pts);
1365         avio_w8(pb, 0);
1366         avio_write(pb, buffer, size);
1367         put_ebml_uint(pb, MATROSKA_ID_BLOCKDURATION, duration);
1368         end_ebml_master(pb, blockgroup);
1369
1370         data      += line_size;
1371         data_size -= line_size;
1372     }
1373
1374     return max_duration;
1375 }
1376
1377 static int mkv_strip_wavpack(const uint8_t *src, uint8_t **pdst, int *size)
1378 {
1379     uint8_t *dst;
1380     int srclen = *size;
1381     int offset = 0;
1382     int ret;
1383
1384     dst = av_malloc(srclen);
1385     if (!dst)
1386         return AVERROR(ENOMEM);
1387
1388     while (srclen >= WV_HEADER_SIZE) {
1389         WvHeader header;
1390
1391         ret = ff_wv_parse_header(&header, src);
1392         if (ret < 0)
1393             goto fail;
1394         src    += WV_HEADER_SIZE;
1395         srclen -= WV_HEADER_SIZE;
1396
1397         if (srclen < header.blocksize) {
1398             ret = AVERROR_INVALIDDATA;
1399             goto fail;
1400         }
1401
1402         if (header.initial) {
1403             AV_WL32(dst + offset, header.samples);
1404             offset += 4;
1405         }
1406         AV_WL32(dst + offset,     header.flags);
1407         AV_WL32(dst + offset + 4, header.crc);
1408         offset += 8;
1409
1410         if (!(header.initial && header.final)) {
1411             AV_WL32(dst + offset, header.blocksize);
1412             offset += 4;
1413         }
1414
1415         memcpy(dst + offset, src, header.blocksize);
1416         src    += header.blocksize;
1417         srclen -= header.blocksize;
1418         offset += header.blocksize;
1419     }
1420
1421     *pdst = dst;
1422     *size = offset;
1423
1424     return 0;
1425 fail:
1426     av_freep(&dst);
1427     return ret;
1428 }
1429
1430 static void mkv_write_block(AVFormatContext *s, AVIOContext *pb,
1431                             unsigned int blockid, AVPacket *pkt, int flags)
1432 {
1433     MatroskaMuxContext *mkv = s->priv_data;
1434     AVCodecParameters *par = s->streams[pkt->stream_index]->codecpar;
1435     uint8_t *data = NULL;
1436     int offset = 0, size = pkt->size;
1437     int64_t ts = mkv->tracks[pkt->stream_index].write_dts ? pkt->dts : pkt->pts;
1438
1439     av_log(s, AV_LOG_DEBUG, "Writing block at offset %" PRIu64 ", size %d, "
1440            "pts %" PRId64 ", dts %" PRId64 ", duration %" PRId64 ", flags %d\n",
1441            avio_tell(pb), pkt->size, pkt->pts, pkt->dts, pkt->duration, flags);
1442     if (par->codec_id == AV_CODEC_ID_H264 && par->extradata_size > 0 &&
1443         (AV_RB24(par->extradata) == 1 || AV_RB32(par->extradata) == 1))
1444         ff_avc_parse_nal_units_buf(pkt->data, &data, &size);
1445     else if (par->codec_id == AV_CODEC_ID_HEVC && par->extradata_size > 6 &&
1446              (AV_RB24(par->extradata) == 1 || AV_RB32(par->extradata) == 1))
1447         /* extradata is Annex B, assume the bitstream is too and convert it */
1448         ff_hevc_annexb2mp4_buf(pkt->data, &data, &size, 0, NULL);
1449     else if (par->codec_id == AV_CODEC_ID_WAVPACK) {
1450         int ret = mkv_strip_wavpack(pkt->data, &data, &size);
1451         if (ret < 0) {
1452             av_log(s, AV_LOG_ERROR, "Error stripping a WavPack packet.\n");
1453             return;
1454         }
1455     } else
1456         data = pkt->data;
1457
1458     if (par->codec_id == AV_CODEC_ID_PRORES) {
1459         /* Matroska specification requires to remove the first QuickTime atom
1460          */
1461         size  -= 8;
1462         offset = 8;
1463     }
1464
1465     put_ebml_id(pb, blockid);
1466     put_ebml_num(pb, size + 4, 0);
1467     // this assumes stream_index is less than 126
1468     avio_w8(pb, 0x80 | (pkt->stream_index + 1));
1469     avio_wb16(pb, ts - mkv->cluster_pts);
1470     avio_w8(pb, flags);
1471     avio_write(pb, data + offset, size);
1472     if (data != pkt->data)
1473         av_free(data);
1474 }
1475
1476 static int srt_get_duration(uint8_t **buf)
1477 {
1478     int i, duration = 0;
1479
1480     for (i = 0; i < 2 && !duration; i++) {
1481         int s_hour, s_min, s_sec, s_hsec, e_hour, e_min, e_sec, e_hsec;
1482         if (sscanf(*buf, "%d:%2d:%2d%*1[,.]%3d --> %d:%2d:%2d%*1[,.]%3d",
1483                    &s_hour, &s_min, &s_sec, &s_hsec,
1484                    &e_hour, &e_min, &e_sec, &e_hsec) == 8) {
1485             s_min += 60 * s_hour;
1486             e_min += 60 * e_hour;
1487             s_sec += 60 * s_min;
1488
1489             e_sec  += 60 * e_min;
1490             s_hsec += 1000 * s_sec;
1491             e_hsec += 1000 * e_sec;
1492
1493             duration = e_hsec - s_hsec;
1494         }
1495         *buf += strcspn(*buf, "\n") + 1;
1496     }
1497     return duration;
1498 }
1499
1500 static int mkv_write_srt_blocks(AVFormatContext *s, AVIOContext *pb,
1501                                 AVPacket *pkt)
1502 {
1503     ebml_master blockgroup;
1504     AVPacket pkt2 = *pkt;
1505     int64_t duration = srt_get_duration(&pkt2.data);
1506     pkt2.size -= pkt2.data - pkt->data;
1507
1508     blockgroup = start_ebml_master(pb, MATROSKA_ID_BLOCKGROUP,
1509                                    mkv_blockgroup_size(pkt2.size));
1510     mkv_write_block(s, pb, MATROSKA_ID_BLOCK, &pkt2, 0);
1511     put_ebml_uint(pb, MATROSKA_ID_BLOCKDURATION, duration);
1512     end_ebml_master(pb, blockgroup);
1513
1514     return duration;
1515 }
1516
1517 static void mkv_flush_dynbuf(AVFormatContext *s)
1518 {
1519     MatroskaMuxContext *mkv = s->priv_data;
1520     int bufsize;
1521     uint8_t *dyn_buf;
1522
1523     if (!mkv->dyn_bc)
1524         return;
1525
1526     bufsize = avio_close_dyn_buf(mkv->dyn_bc, &dyn_buf);
1527     avio_write(s->pb, dyn_buf, bufsize);
1528     av_free(dyn_buf);
1529     mkv->dyn_bc = NULL;
1530 }
1531
1532 static int mkv_write_packet_internal(AVFormatContext *s, AVPacket *pkt)
1533 {
1534     MatroskaMuxContext *mkv = s->priv_data;
1535     AVIOContext *pb         = s->pb;
1536     AVCodecParameters *par  = s->streams[pkt->stream_index]->codecpar;
1537     int keyframe            = !!(pkt->flags & AV_PKT_FLAG_KEY);
1538     int duration            = pkt->duration;
1539     int ret;
1540     int64_t ts = mkv->tracks[pkt->stream_index].write_dts ? pkt->dts : pkt->pts;
1541
1542     if (ts == AV_NOPTS_VALUE) {
1543         av_log(s, AV_LOG_ERROR, "Can't write packet with unknown timestamp\n");
1544         return AVERROR(EINVAL);
1545     }
1546     ts += mkv->tracks[pkt->stream_index].ts_offset;
1547
1548     if (!s->pb->seekable) {
1549         if (!mkv->dyn_bc) {
1550             ret = avio_open_dyn_buf(&mkv->dyn_bc);
1551             if (ret < 0)
1552                 return ret;
1553         }
1554         pb = mkv->dyn_bc;
1555     }
1556
1557     if (!mkv->cluster_pos) {
1558         mkv->cluster_pos = avio_tell(s->pb);
1559         mkv->cluster     = start_ebml_master(pb, MATROSKA_ID_CLUSTER, 0);
1560         put_ebml_uint(pb, MATROSKA_ID_CLUSTERTIMECODE, FFMAX(0, ts));
1561         mkv->cluster_pts = FFMAX(0, ts);
1562     }
1563
1564     if (par->codec_type != AVMEDIA_TYPE_SUBTITLE) {
1565         mkv_write_block(s, pb, MATROSKA_ID_SIMPLEBLOCK, pkt, keyframe << 7);
1566     } else if (par->codec_id == AV_CODEC_ID_SSA) {
1567         duration = mkv_write_ass_blocks(s, pb, pkt);
1568     } else if (par->codec_id == AV_CODEC_ID_SRT) {
1569         duration = mkv_write_srt_blocks(s, pb, pkt);
1570     } else {
1571         ebml_master blockgroup = start_ebml_master(pb, MATROSKA_ID_BLOCKGROUP,
1572                                                    mkv_blockgroup_size(pkt->size));
1573         duration = pkt->duration;
1574 #if FF_API_CONVERGENCE_DURATION
1575 FF_DISABLE_DEPRECATION_WARNINGS
1576         if (pkt->convergence_duration)
1577             duration = pkt->convergence_duration;
1578 FF_ENABLE_DEPRECATION_WARNINGS
1579 #endif
1580         mkv_write_block(s, pb, MATROSKA_ID_BLOCK, pkt, 0);
1581         put_ebml_uint(pb, MATROSKA_ID_BLOCKDURATION, duration);
1582         end_ebml_master(pb, blockgroup);
1583     }
1584
1585     if (par->codec_type == AVMEDIA_TYPE_VIDEO && keyframe) {
1586         ret = mkv_add_cuepoint(mkv->cues, pkt->stream_index, ts,
1587                                mkv->cluster_pos);
1588         if (ret < 0)
1589             return ret;
1590     }
1591
1592     mkv->duration = FFMAX(mkv->duration, ts + duration);
1593     return 0;
1594 }
1595
1596 static int mkv_write_packet(AVFormatContext *s, AVPacket *pkt)
1597 {
1598     MatroskaMuxContext *mkv = s->priv_data;
1599     int codec_type          = s->streams[pkt->stream_index]->codecpar->codec_type;
1600     int keyframe            = !!(pkt->flags & AV_PKT_FLAG_KEY);
1601     int cluster_size;
1602     int64_t cluster_time;
1603     AVIOContext *pb;
1604     int ret;
1605
1606     if (mkv->tracks[pkt->stream_index].write_dts)
1607         cluster_time = pkt->dts - mkv->cluster_pts;
1608     else
1609         cluster_time = pkt->pts - mkv->cluster_pts;
1610     cluster_time += mkv->tracks[pkt->stream_index].ts_offset;
1611
1612     // start a new cluster every 5 MB or 5 sec, or 32k / 1 sec for streaming or
1613     // after 4k and on a keyframe
1614     if (s->pb->seekable) {
1615         pb = s->pb;
1616         cluster_size = avio_tell(pb) - mkv->cluster_pos;
1617     } else {
1618         pb = mkv->dyn_bc;
1619         cluster_size = avio_tell(pb);
1620     }
1621
1622     if (mkv->cluster_pos &&
1623         (cluster_size > mkv->cluster_size_limit ||
1624          cluster_time > mkv->cluster_time_limit ||
1625          (codec_type == AVMEDIA_TYPE_VIDEO && keyframe &&
1626           cluster_size > 4 * 1024))) {
1627         av_log(s, AV_LOG_DEBUG,
1628                "Starting new cluster at offset %" PRIu64 " bytes, "
1629                "pts %" PRIu64 "dts %" PRIu64 "\n",
1630                avio_tell(pb), pkt->pts, pkt->dts);
1631         end_ebml_master(pb, mkv->cluster);
1632         mkv->cluster_pos = 0;
1633         if (mkv->dyn_bc)
1634             mkv_flush_dynbuf(s);
1635         avio_flush(s->pb);
1636     }
1637
1638     // check if we have an audio packet cached
1639     if (mkv->cur_audio_pkt.size > 0) {
1640         ret = mkv_write_packet_internal(s, &mkv->cur_audio_pkt);
1641         av_packet_unref(&mkv->cur_audio_pkt);
1642         if (ret < 0) {
1643             av_log(s, AV_LOG_ERROR,
1644                    "Could not write cached audio packet ret:%d\n", ret);
1645             return ret;
1646         }
1647     }
1648
1649     // buffer an audio packet to ensure the packet containing the video
1650     // keyframe's timecode is contained in the same cluster for WebM
1651     if (codec_type == AVMEDIA_TYPE_AUDIO) {
1652         ret = av_packet_ref(&mkv->cur_audio_pkt, pkt);
1653     } else
1654         ret = mkv_write_packet_internal(s, pkt);
1655     return ret;
1656 }
1657
1658 static int mkv_write_flush_packet(AVFormatContext *s, AVPacket *pkt)
1659 {
1660     MatroskaMuxContext *mkv = s->priv_data;
1661     AVIOContext *pb;
1662     if (s->pb->seekable)
1663         pb = s->pb;
1664     else
1665         pb = mkv->dyn_bc;
1666     if (!pkt) {
1667         if (mkv->cluster_pos) {
1668             av_log(s, AV_LOG_DEBUG,
1669                    "Flushing cluster at offset %" PRIu64 " bytes\n",
1670                    avio_tell(pb));
1671             end_ebml_master(pb, mkv->cluster);
1672             mkv->cluster_pos = 0;
1673             if (mkv->dyn_bc)
1674                 mkv_flush_dynbuf(s);
1675             avio_flush(s->pb);
1676         }
1677         return 1;
1678     }
1679     return mkv_write_packet(s, pkt);
1680 }
1681
1682 static int mkv_write_trailer(AVFormatContext *s)
1683 {
1684     MatroskaMuxContext *mkv = s->priv_data;
1685     AVIOContext *pb = s->pb;
1686     int64_t currentpos, cuespos;
1687     int ret;
1688
1689     // check if we have an audio packet cached
1690     if (mkv->cur_audio_pkt.size > 0) {
1691         ret = mkv_write_packet_internal(s, &mkv->cur_audio_pkt);
1692         av_packet_unref(&mkv->cur_audio_pkt);
1693         if (ret < 0) {
1694             av_log(s, AV_LOG_ERROR,
1695                    "Could not write cached audio packet ret:%d\n", ret);
1696             return ret;
1697         }
1698     }
1699
1700     if (mkv->dyn_bc) {
1701         end_ebml_master(mkv->dyn_bc, mkv->cluster);
1702         mkv_flush_dynbuf(s);
1703     } else if (mkv->cluster_pos) {
1704         end_ebml_master(pb, mkv->cluster);
1705     }
1706
1707     if (mkv->mode != MODE_WEBM) {
1708         ret = mkv_write_chapters(s);
1709         if (ret < 0)
1710             return ret;
1711     }
1712
1713     if (pb->seekable) {
1714         if (mkv->cues->num_entries) {
1715             if (mkv->reserve_cues_space) {
1716                 int64_t cues_end;
1717
1718                 currentpos = avio_tell(pb);
1719                 avio_seek(pb, mkv->cues_pos, SEEK_SET);
1720
1721                 cuespos  = mkv_write_cues(pb, mkv->cues, s->nb_streams);
1722                 cues_end = avio_tell(pb);
1723                 if (cues_end > cuespos + mkv->reserve_cues_space) {
1724                     av_log(s, AV_LOG_ERROR,
1725                            "Insufficient space reserved for cues: %d "
1726                            "(needed: %" PRId64 ").\n",
1727                            mkv->reserve_cues_space, cues_end - cuespos);
1728                     return AVERROR(EINVAL);
1729                 }
1730
1731                 if (cues_end < cuespos + mkv->reserve_cues_space)
1732                     put_ebml_void(pb, mkv->reserve_cues_space -
1733                                   (cues_end - cuespos));
1734
1735                 avio_seek(pb, currentpos, SEEK_SET);
1736             } else {
1737                 cuespos = mkv_write_cues(pb, mkv->cues, s->nb_streams);
1738             }
1739
1740             ret = mkv_add_seekhead_entry(mkv->main_seekhead, MATROSKA_ID_CUES,
1741                                          cuespos);
1742             if (ret < 0)
1743                 return ret;
1744         }
1745
1746         mkv_write_seekhead(pb, mkv->main_seekhead);
1747
1748         // update the duration
1749         av_log(s, AV_LOG_DEBUG, "end duration = %" PRIu64 "\n", mkv->duration);
1750         currentpos = avio_tell(pb);
1751         avio_seek(pb, mkv->duration_offset, SEEK_SET);
1752         put_ebml_float(pb, MATROSKA_ID_DURATION, mkv->duration);
1753
1754         avio_seek(pb, currentpos, SEEK_SET);
1755     }
1756
1757     end_ebml_master(pb, mkv->segment);
1758     av_free(mkv->tracks);
1759     av_freep(&mkv->cues->entries);
1760     av_freep(&mkv->cues);
1761
1762     return 0;
1763 }
1764
1765 static int mkv_query_codec(enum AVCodecID codec_id, int std_compliance)
1766 {
1767     int i;
1768     for (i = 0; ff_mkv_codec_tags[i].id != AV_CODEC_ID_NONE; i++)
1769         if (ff_mkv_codec_tags[i].id == codec_id)
1770             return 1;
1771
1772     if (std_compliance < FF_COMPLIANCE_NORMAL) {
1773         enum AVMediaType type = avcodec_get_type(codec_id);
1774         // mkv theoretically supports any video/audio through VFW/ACM
1775         if (type == AVMEDIA_TYPE_VIDEO || type == AVMEDIA_TYPE_AUDIO)
1776             return 1;
1777     }
1778
1779     return 0;
1780 }
1781
1782 #define OFFSET(x) offsetof(MatroskaMuxContext, x)
1783 #define FLAGS AV_OPT_FLAG_ENCODING_PARAM
1784 static const AVOption options[] = {
1785     { "reserve_index_space", "Reserve a given amount of space (in bytes) at the beginning of the file for the index (cues).", OFFSET(reserve_cues_space), AV_OPT_TYPE_INT,   { .i64 = 0 },   0, INT_MAX,   FLAGS },
1786     { "cluster_size_limit",  "Store at most the provided amount of bytes in a cluster. ",                                     OFFSET(cluster_size_limit), AV_OPT_TYPE_INT  , { .i64 = -1 }, -1, INT_MAX,   FLAGS },
1787     { "cluster_time_limit",  "Store at most the provided number of milliseconds in a cluster.",                               OFFSET(cluster_time_limit), AV_OPT_TYPE_INT64, { .i64 = -1 }, -1, INT64_MAX, FLAGS },
1788     { NULL },
1789 };
1790
1791 #if CONFIG_MATROSKA_MUXER
1792 static const AVClass matroska_class = {
1793     .class_name = "matroska muxer",
1794     .item_name  = av_default_item_name,
1795     .option     = options,
1796     .version    = LIBAVUTIL_VERSION_INT,
1797 };
1798
1799 AVOutputFormat ff_matroska_muxer = {
1800     .name              = "matroska",
1801     .long_name         = NULL_IF_CONFIG_SMALL("Matroska"),
1802     .mime_type         = "video/x-matroska",
1803     .extensions        = "mkv",
1804     .priv_data_size    = sizeof(MatroskaMuxContext),
1805     .audio_codec       = CONFIG_LIBVORBIS_ENCODER ?
1806                          AV_CODEC_ID_VORBIS : AV_CODEC_ID_AC3,
1807     .video_codec       = CONFIG_LIBX264_ENCODER ?
1808                          AV_CODEC_ID_H264 : AV_CODEC_ID_MPEG4,
1809     .write_header      = mkv_write_header,
1810     .write_packet      = mkv_write_flush_packet,
1811     .write_trailer     = mkv_write_trailer,
1812     .flags             = AVFMT_GLOBALHEADER | AVFMT_VARIABLE_FPS |
1813                          AVFMT_TS_NONSTRICT | AVFMT_ALLOW_FLUSH,
1814     .codec_tag         = (const AVCodecTag* const []){
1815          ff_codec_bmp_tags, ff_codec_wav_tags, 0
1816     },
1817     .subtitle_codec    = AV_CODEC_ID_SSA,
1818     .query_codec       = mkv_query_codec,
1819     .priv_class        = &matroska_class,
1820 };
1821 #endif
1822
1823 #if CONFIG_WEBM_MUXER
1824 static const AVClass webm_class = {
1825     .class_name = "webm muxer",
1826     .item_name  = av_default_item_name,
1827     .option     = options,
1828     .version    = LIBAVUTIL_VERSION_INT,
1829 };
1830
1831 AVOutputFormat ff_webm_muxer = {
1832     .name              = "webm",
1833     .long_name         = NULL_IF_CONFIG_SMALL("WebM"),
1834     .mime_type         = "video/webm",
1835     .extensions        = "webm",
1836     .priv_data_size    = sizeof(MatroskaMuxContext),
1837     .audio_codec       = CONFIG_LIBOPUS_ENCODER ? AV_CODEC_ID_OPUS : AV_CODEC_ID_VORBIS,
1838     .video_codec       = CONFIG_LIBVPX_VP9_ENCODER? AV_CODEC_ID_VP9 : AV_CODEC_ID_VP8,
1839     .write_header      = mkv_write_header,
1840     .write_packet      = mkv_write_flush_packet,
1841     .write_trailer     = mkv_write_trailer,
1842     .flags             = AVFMT_GLOBALHEADER | AVFMT_VARIABLE_FPS |
1843                          AVFMT_TS_NONSTRICT | AVFMT_ALLOW_FLUSH,
1844     .priv_class        = &webm_class,
1845 };
1846 #endif
1847
1848 #if CONFIG_MATROSKA_AUDIO_MUXER
1849 static const AVClass mka_class = {
1850     .class_name = "matroska audio muxer",
1851     .item_name  = av_default_item_name,
1852     .option     = options,
1853     .version    = LIBAVUTIL_VERSION_INT,
1854 };
1855 AVOutputFormat ff_matroska_audio_muxer = {
1856     .name              = "matroska",
1857     .long_name         = NULL_IF_CONFIG_SMALL("Matroska"),
1858     .mime_type         = "audio/x-matroska",
1859     .extensions        = "mka",
1860     .priv_data_size    = sizeof(MatroskaMuxContext),
1861     .audio_codec       = CONFIG_LIBVORBIS_ENCODER ?
1862                          AV_CODEC_ID_VORBIS : AV_CODEC_ID_AC3,
1863     .video_codec       = AV_CODEC_ID_NONE,
1864     .write_header      = mkv_write_header,
1865     .write_packet      = mkv_write_flush_packet,
1866     .write_trailer     = mkv_write_trailer,
1867     .flags             = AVFMT_GLOBALHEADER | AVFMT_TS_NONSTRICT |
1868                          AVFMT_ALLOW_FLUSH,
1869     .codec_tag         = (const AVCodecTag* const []){ ff_codec_wav_tags, 0 },
1870     .priv_class        = &mka_class,
1871 };
1872 #endif