git.sesse.net Git - ffmpeg/blob - libavformat/nutenc.c

   1 /*
   2  * nut muxer
   3  * Copyright (c) 2004-2007 Michael Niedermayer
   4  *
   5  * This file is part of FFmpeg.
   6  *
   7  * FFmpeg is free software; you can redistribute it and/or
   8  * modify it under the terms of the GNU Lesser General Public
   9  * License as published by the Free Software Foundation; either
  10  * version 2.1 of the License, or (at your option) any later version.
  11  *
  12  * FFmpeg is distributed in the hope that it will be useful,
  13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  15  * Lesser General Public License for more details.
  16  *
  17  * You should have received a copy of the GNU Lesser General Public
  18  * License along with FFmpeg; if not, write to the Free Software
  19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
  20  */
  21
  22 #include <stdint.h>
  23
  24 #include "libavutil/intreadwrite.h"
  25 #include "libavutil/mathematics.h"
  26 #include "libavutil/tree.h"
  27 #include "libavutil/dict.h"
  28 #include "libavutil/avassert.h"
  29 #include "libavutil/time.h"
  30 #include "libavutil/opt.h"
  31 #include "libavcodec/bytestream.h"
  32 #include "libavcodec/mpegaudiodata.h"
  33 #include "nut.h"
  34 #include "internal.h"
  35 #include "avio_internal.h"
  36 #include "riff.h"
  37
  38 static int find_expected_header(AVCodecParameters *p, int size, int key_frame,
  39                                 uint8_t out[64])
  40 {
  41     int sample_rate = p->sample_rate;
  42
  43     if (size > 4096)
  44         return 0;
  45
  46     AV_WB24(out, 1);
  47
  48     if (p->codec_id == AV_CODEC_ID_MPEG4) {
  49         if (key_frame) {
  50             return 3;
  51         } else {
  52             out[3] = 0xB6;
  53             return 4;
  54         }
  55     } else if (p->codec_id == AV_CODEC_ID_MPEG1VIDEO ||
  56                p->codec_id == AV_CODEC_ID_MPEG2VIDEO) {
  57         return 3;
  58     } else if (p->codec_id == AV_CODEC_ID_H264) {
  59         return 3;
  60     } else if (p->codec_id == AV_CODEC_ID_MP3 ||
  61                p->codec_id == AV_CODEC_ID_MP2) {
  62         int lsf, mpeg25, sample_rate_index, bitrate_index, frame_size;
  63         int layer           = p->codec_id == AV_CODEC_ID_MP3 ? 3 : 2;
  64         unsigned int header = 0xFFF00000;
  65
  66         lsf           = sample_rate < (24000 + 32000) / 2;
  67         mpeg25        = sample_rate < (12000 + 16000) / 2;
  68         sample_rate <<= lsf + mpeg25;
  69         if      (sample_rate < (32000 + 44100) / 2) sample_rate_index = 2;
  70         else if (sample_rate < (44100 + 48000) / 2) sample_rate_index = 0;
  71         else                                        sample_rate_index = 1;
  72
  73         sample_rate = avpriv_mpa_freq_tab[sample_rate_index] >> (lsf + mpeg25);
  74
  75         for (bitrate_index = 2; bitrate_index < 30; bitrate_index++) {
  76             frame_size =
  77                 avpriv_mpa_bitrate_tab[lsf][layer - 1][bitrate_index >> 1];
  78             frame_size = (frame_size * 144000) / (sample_rate << lsf) +
  79                 (bitrate_index & 1);
  80
  81             if (frame_size == size)
  82                 break;
  83         }
  84
  85         header |= (!lsf) << 19;
  86         header |= (4 - layer) << 17;
  87         header |= 1 << 16; //no crc
  88         AV_WB32(out, header);
  89         if (size <= 0)
  90             return 2;  //we guess there is no crc, if there is one the user clearly does not care about overhead
  91         if (bitrate_index == 30)
  92             return -1;  //something is wrong ...
  93
  94         header |= (bitrate_index >> 1) << 12;
  95         header |= sample_rate_index << 10;
  96         header |= (bitrate_index & 1) << 9;
  97
  98         return 2; //FIXME actually put the needed ones in build_elision_headers()
  99         //return 3; //we guess that the private bit is not set
 100 //FIXME the above assumptions should be checked, if these turn out false too often something should be done
 101     }
 102     return 0;
 103 }
 104
 105 static int find_header_idx(AVFormatContext *s, AVCodecParameters *p, int size,
 106                            int frame_type)
 107 {
 108     NUTContext *nut = s->priv_data;
 109     uint8_t out[64];
 110     int i;
 111     int len = find_expected_header(p, size, frame_type, out);
 112
 113     for (i = 1; i < nut->header_count; i++) {
 114         if (len == nut->header_len[i] && !memcmp(out, nut->header[i], len)) {
 115             return i;
 116         }
 117     }
 118
 119     return 0;
 120 }
 121
 122 static void build_elision_headers(AVFormatContext *s)
 123 {
 124     NUTContext *nut = s->priv_data;
 125     int i;
 126     //FIXME this is lame
 127     //FIXME write a 2pass mode to find the maximal headers
 128     static const uint8_t headers[][5] = {
 129         { 3, 0x00, 0x00, 0x01 },
 130         { 4, 0x00, 0x00, 0x01, 0xB6},
 131         { 2, 0xFF, 0xFA }, //mp3+crc
 132         { 2, 0xFF, 0xFB }, //mp3
 133         { 2, 0xFF, 0xFC }, //mp2+crc
 134         { 2, 0xFF, 0xFD }, //mp2
 135     };
 136
 137     nut->header_count = 7;
 138     for (i = 1; i < nut->header_count; i++) {
 139         nut->header_len[i] = headers[i - 1][0];
 140         nut->header[i]     = &headers[i - 1][1];
 141     }
 142 }
 143
 144 static void build_frame_code(AVFormatContext *s)
 145 {
 146     NUTContext *nut = s->priv_data;
 147     int key_frame, index, pred, stream_id;
 148     int start = 1;
 149     int end   = 254;
 150     int keyframe_0_esc = s->nb_streams > 2;
 151     int pred_table[10];
 152     FrameCode *ft;
 153
 154     ft            = &nut->frame_code[start];
 155     ft->flags     = FLAG_CODED;
 156     ft->size_mul  = 1;
 157     ft->pts_delta = 1;
 158     start++;
 159
 160     if (keyframe_0_esc) {
 161         /* keyframe = 0 escape */
 162         FrameCode *ft = &nut->frame_code[start];
 163         ft->flags    = FLAG_STREAM_ID | FLAG_SIZE_MSB | FLAG_CODED_PTS;
 164         ft->size_mul = 1;
 165         start++;
 166     }
 167
 168     for (stream_id = 0; stream_id < s->nb_streams; stream_id++) {
 169         int start2 = start + (end - start) * stream_id       / s->nb_streams;
 170         int end2   = start + (end - start) * (stream_id + 1) / s->nb_streams;
 171         AVCodecParameters *par        = s->streams[stream_id]->codecpar;
 172         int is_audio                  = par->codec_type == AVMEDIA_TYPE_AUDIO;
 173         int intra_only        = /*codec->intra_only || */ is_audio;
 174         int pred_count;
 175         int frame_size = 0;
 176
 177         if (par->codec_type == AVMEDIA_TYPE_AUDIO) {
 178             frame_size = av_get_audio_frame_duration2(par, 0);
 179             if (par->codec_id == AV_CODEC_ID_VORBIS && !frame_size)
 180                 frame_size = 64;
 181         } else {
 182             AVRational f = av_div_q(av_inv_q(s->streams[stream_id]->avg_frame_rate), *nut->stream[stream_id].time_base);
 183             if (f.den == 1 && f.num>0)
 184                 frame_size = f.num;
 185         }
 186         if (!frame_size)
 187             frame_size = 1;
 188
 189         for (key_frame = 0; key_frame < 2; key_frame++) {
 190             if (!intra_only || !keyframe_0_esc || key_frame != 0) {
 191                 FrameCode *ft = &nut->frame_code[start2];
 192                 ft->flags     = FLAG_KEY * key_frame;
 193                 ft->flags    |= FLAG_SIZE_MSB | FLAG_CODED_PTS;
 194                 ft->stream_id = stream_id;
 195                 ft->size_mul  = 1;
 196                 if (is_audio)
 197                     ft->header_idx = find_header_idx(s, par, -1, key_frame);
 198                 start2++;
 199             }
 200         }
 201
 202         key_frame = intra_only;
 203 #if 1
 204         if (is_audio) {
 205             int frame_bytes;
 206             int pts;
 207
 208             if (par->block_align > 0) {
 209                 frame_bytes = par->block_align;
 210             } else {
 211                 int frame_size = av_get_audio_frame_duration2(par, 0);
 212                 frame_bytes = frame_size * (int64_t)par->bit_rate / (8 * par->sample_rate);
 213             }
 214
 215             for (pts = 0; pts < 2; pts++) {
 216                 for (pred = 0; pred < 2; pred++) {
 217                     FrameCode *ft  = &nut->frame_code[start2];
 218                     ft->flags      = FLAG_KEY * key_frame;
 219                     ft->stream_id  = stream_id;
 220                     ft->size_mul   = frame_bytes + 2;
 221                     ft->size_lsb   = frame_bytes + pred;
 222                     ft->pts_delta  = pts * frame_size;
 223                     ft->header_idx = find_header_idx(s, par, frame_bytes + pred, key_frame);
 224                     start2++;
 225                 }
 226             }
 227         } else {
 228             FrameCode *ft = &nut->frame_code[start2];
 229             ft->flags     = FLAG_KEY | FLAG_SIZE_MSB;
 230             ft->stream_id = stream_id;
 231             ft->size_mul  = 1;
 232             ft->pts_delta = frame_size;
 233             start2++;
 234         }
 235 #endif
 236
 237         if (par->video_delay) {
 238             pred_count    = 5;
 239             pred_table[0] = -2;
 240             pred_table[1] = -1;
 241             pred_table[2] = 1;
 242             pred_table[3] = 3;
 243             pred_table[4] = 4;
 244         } else if (par->codec_id == AV_CODEC_ID_VORBIS) {
 245             pred_count    = 3;
 246             pred_table[0] = 2;
 247             pred_table[1] = 9;
 248             pred_table[2] = 16;
 249         } else {
 250             pred_count    = 1;
 251             pred_table[0] = 1;
 252         }
 253
 254         for (pred = 0; pred < pred_count; pred++) {
 255             int start3 = start2 + (end2 - start2) * pred / pred_count;
 256             int end3   = start2 + (end2 - start2) * (pred + 1) / pred_count;
 257
 258             pred_table[pred] *= frame_size;
 259
 260             for (index = start3; index < end3; index++) {
 261                 FrameCode *ft = &nut->frame_code[index];
 262                 ft->flags     = FLAG_KEY * key_frame;
 263                 ft->flags    |= FLAG_SIZE_MSB;
 264                 ft->stream_id = stream_id;
 265 //FIXME use single byte size and pred from last
 266                 ft->size_mul  = end3 - start3;
 267                 ft->size_lsb  = index - start3;
 268                 ft->pts_delta = pred_table[pred];
 269                 if (is_audio)
 270                     ft->header_idx = find_header_idx(s, par, -1, key_frame);
 271             }
 272         }
 273     }
 274     memmove(&nut->frame_code['N' + 1], &nut->frame_code['N'], sizeof(FrameCode) * (255 - 'N'));
 275     nut->frame_code[0].flags       =
 276         nut->frame_code[255].flags =
 277         nut->frame_code['N'].flags = FLAG_INVALID;
 278 }
 279
 280 static void put_tt(NUTContext *nut, AVRational *time_base, AVIOContext *bc, uint64_t val)
 281 {
 282     val *= nut->time_base_count;
 283     val += time_base - nut->time_base;
 284     ff_put_v(bc, val);
 285 }
 286 /**
 287  * Store a string as vb.
 288  */
 289 static void put_str(AVIOContext *bc, const char *string)
 290 {
 291     size_t len = strlen(string);
 292
 293     ff_put_v(bc, len);
 294     avio_write(bc, string, len);
 295 }
 296
 297 static void put_s(AVIOContext *bc, int64_t val)
 298 {
 299     ff_put_v(bc, 2 * FFABS(val) - (val > 0));
 300 }
 301
 302 static void put_packet(NUTContext *nut, AVIOContext *bc, AVIOContext *dyn_bc,
 303                        uint64_t startcode)
 304 {
 305     uint8_t *dyn_buf = NULL;
 306     int dyn_size     = avio_get_dyn_buf(dyn_bc, &dyn_buf);
 307     int forw_ptr     = dyn_size + 4;
 308
 309     if (forw_ptr > 4096)
 310         ffio_init_checksum(bc, ff_crc04C11DB7_update, 0);
 311     avio_wb64(bc, startcode);
 312     ff_put_v(bc, forw_ptr);
 313     if (forw_ptr > 4096)
 314         avio_wl32(bc, ffio_get_checksum(bc));
 315
 316     ffio_init_checksum(bc, ff_crc04C11DB7_update, 0);
 317     avio_write(bc, dyn_buf, dyn_size);
 318     avio_wl32(bc, ffio_get_checksum(bc));
 319
 320     ffio_reset_dyn_buf(dyn_bc);
 321 }
 322
 323 static void write_mainheader(NUTContext *nut, AVIOContext *bc)
 324 {
 325     int i, j, tmp_pts, tmp_flags, tmp_stream, tmp_mul, tmp_size, tmp_fields,
 326         tmp_head_idx;
 327     int64_t tmp_match;
 328
 329     ff_put_v(bc, nut->version);
 330     if (nut->version > 3)
 331         ff_put_v(bc, nut->minor_version = 1);
 332     ff_put_v(bc, nut->avf->nb_streams);
 333     ff_put_v(bc, nut->max_distance);
 334     ff_put_v(bc, nut->time_base_count);
 335
 336     for (i = 0; i < nut->time_base_count; i++) {
 337         ff_put_v(bc, nut->time_base[i].num);
 338         ff_put_v(bc, nut->time_base[i].den);
 339     }
 340
 341     tmp_pts      = 0;
 342     tmp_mul      = 1;
 343     tmp_stream   = 0;
 344     tmp_match    = 1 - (1LL << 62);
 345     tmp_head_idx = 0;
 346     for (i = 0; i < 256; ) {
 347         tmp_fields = 0;
 348         tmp_size   = 0;
 349 //        tmp_res=0;
 350         if (tmp_pts      != nut->frame_code[i].pts_delta ) tmp_fields = 1;
 351         if (tmp_mul      != nut->frame_code[i].size_mul  ) tmp_fields = 2;
 352         if (tmp_stream   != nut->frame_code[i].stream_id ) tmp_fields = 3;
 353         if (tmp_size     != nut->frame_code[i].size_lsb  ) tmp_fields = 4;
 354 //        if (tmp_res    != nut->frame_code[i].res            ) tmp_fields=5;
 355         if (tmp_head_idx != nut->frame_code[i].header_idx) tmp_fields = 8;
 356
 357         tmp_pts    = nut->frame_code[i].pts_delta;
 358         tmp_flags  = nut->frame_code[i].flags;
 359         tmp_stream = nut->frame_code[i].stream_id;
 360         tmp_mul    = nut->frame_code[i].size_mul;
 361         tmp_size   = nut->frame_code[i].size_lsb;
 362 //        tmp_res   = nut->frame_code[i].res;
 363         tmp_head_idx = nut->frame_code[i].header_idx;
 364
 365         for (j = 0; i < 256; j++, i++) {
 366             if (i == 'N') {
 367                 j--;
 368                 continue;
 369             }
 370             if (nut->frame_code[i].pts_delta  != tmp_pts      ||
 371                 nut->frame_code[i].flags      != tmp_flags    ||
 372                 nut->frame_code[i].stream_id  != tmp_stream   ||
 373                 nut->frame_code[i].size_mul   != tmp_mul      ||
 374                 nut->frame_code[i].size_lsb   != tmp_size + j ||
 375 //              nut->frame_code[i].res        != tmp_res      ||
 376                 nut->frame_code[i].header_idx != tmp_head_idx)
 377                 break;
 378         }
 379         if (j != tmp_mul - tmp_size)
 380             tmp_fields = 6;
 381
 382         ff_put_v(bc, tmp_flags);
 383         ff_put_v(bc, tmp_fields);
 384         if (tmp_fields > 0) put_s(bc, tmp_pts);
 385         if (tmp_fields > 1) ff_put_v(bc, tmp_mul);
 386         if (tmp_fields > 2) ff_put_v(bc, tmp_stream);
 387         if (tmp_fields > 3) ff_put_v(bc, tmp_size);
 388         if (tmp_fields > 4) ff_put_v(bc, 0 /*tmp_res*/);
 389         if (tmp_fields > 5) ff_put_v(bc, j);
 390         if (tmp_fields > 6) ff_put_v(bc, tmp_match);
 391         if (tmp_fields > 7) ff_put_v(bc, tmp_head_idx);
 392     }
 393     ff_put_v(bc, nut->header_count - 1);
 394     for (i = 1; i < nut->header_count; i++) {
 395         ff_put_v(bc, nut->header_len[i]);
 396         avio_write(bc, nut->header[i], nut->header_len[i]);
 397     }
 398     // flags had been effectively introduced in version 4
 399     if (nut->version > 3)
 400         ff_put_v(bc, nut->flags);
 401 }
 402
 403 static int write_streamheader(AVFormatContext *avctx, AVIOContext *bc,
 404                               AVStream *st, int i)
 405 {
 406     NUTContext *nut       = avctx->priv_data;
 407     AVCodecParameters *par = st->codecpar;
 408
 409     ff_put_v(bc, i);
 410     switch (par->codec_type) {
 411     case AVMEDIA_TYPE_VIDEO:    ff_put_v(bc, 0); break;
 412     case AVMEDIA_TYPE_AUDIO:    ff_put_v(bc, 1); break;
 413     case AVMEDIA_TYPE_SUBTITLE: ff_put_v(bc, 2); break;
 414     default:                    ff_put_v(bc, 3); break;
 415     }
 416     ff_put_v(bc, 4);
 417
 418     if (par->codec_tag) {
 419         avio_wl32(bc, par->codec_tag);
 420     } else {
 421         av_log(avctx, AV_LOG_ERROR, "No codec tag defined for stream %d\n", i);
 422         return AVERROR(EINVAL);
 423     }
 424
 425     ff_put_v(bc, nut->stream[i].time_base - nut->time_base);
 426     ff_put_v(bc, nut->stream[i].msb_pts_shift);
 427     ff_put_v(bc, nut->stream[i].max_pts_distance);
 428     ff_put_v(bc, par->video_delay);
 429     avio_w8(bc, 0); /* flags: 0x1 - fixed_fps, 0x2 - index_present */
 430
 431     ff_put_v(bc, par->extradata_size);
 432     avio_write(bc, par->extradata, par->extradata_size);
 433
 434     switch (par->codec_type) {
 435     case AVMEDIA_TYPE_AUDIO:
 436         ff_put_v(bc, par->sample_rate);
 437         ff_put_v(bc, 1);
 438         ff_put_v(bc, par->channels);
 439         break;
 440     case AVMEDIA_TYPE_VIDEO:
 441         ff_put_v(bc, par->width);
 442         ff_put_v(bc, par->height);
 443
 444         if (st->sample_aspect_ratio.num <= 0 ||
 445             st->sample_aspect_ratio.den <= 0) {
 446             ff_put_v(bc, 0);
 447             ff_put_v(bc, 0);
 448         } else {
 449             ff_put_v(bc, st->sample_aspect_ratio.num);
 450             ff_put_v(bc, st->sample_aspect_ratio.den);
 451         }
 452         ff_put_v(bc, 0); /* csp type -- unknown */
 453         break;
 454     default:
 455         break;
 456     }
 457     return 0;
 458 }
 459
 460 static int add_info(AVIOContext *bc, const char *type, const char *value)
 461 {
 462     put_str(bc, type);
 463     put_s(bc, -1);
 464     put_str(bc, value);
 465     return 1;
 466 }
 467
 468 static int write_globalinfo(NUTContext *nut, AVIOContext *bc)
 469 {
 470     AVFormatContext *s   = nut->avf;
 471     AVDictionaryEntry *t = NULL;
 472     AVIOContext *dyn_bc;
 473     uint8_t *dyn_buf = NULL;
 474     int count        = 0, dyn_size;
 475     int ret          = avio_open_dyn_buf(&dyn_bc);
 476     if (ret < 0)
 477         return ret;
 478
 479     ff_standardize_creation_time(s);
 480     while ((t = av_dict_get(s->metadata, "", t, AV_DICT_IGNORE_SUFFIX)))
 481         count += add_info(dyn_bc, t->key, t->value);
 482
 483     ff_put_v(bc, 0); //stream_if_plus1
 484     ff_put_v(bc, 0); //chapter_id
 485     ff_put_v(bc, 0); //timestamp_start
 486     ff_put_v(bc, 0); //length
 487
 488     ff_put_v(bc, count);
 489
 490     dyn_size = avio_close_dyn_buf(dyn_bc, &dyn_buf);
 491     avio_write(bc, dyn_buf, dyn_size);
 492     av_free(dyn_buf);
 493     return 0;
 494 }
 495
 496 static int write_streaminfo(NUTContext *nut, AVIOContext *bc, int stream_id) {
 497     AVFormatContext *s= nut->avf;
 498     AVStream* st = s->streams[stream_id];
 499     AVDictionaryEntry *t = NULL;
 500     AVIOContext *dyn_bc;
 501     uint8_t *dyn_buf=NULL;
 502     int count=0, dyn_size, i;
 503     int ret = avio_open_dyn_buf(&dyn_bc);
 504     if (ret < 0)
 505         return ret;
 506
 507     while ((t = av_dict_get(st->metadata, "", t, AV_DICT_IGNORE_SUFFIX)))
 508         count += add_info(dyn_bc, t->key, t->value);
 509     for (i=0; ff_nut_dispositions[i].flag; ++i) {
 510         if (st->disposition & ff_nut_dispositions[i].flag)
 511             count += add_info(dyn_bc, "Disposition", ff_nut_dispositions[i].str);
 512     }
 513     if (st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO) {
 514         uint8_t buf[256];
 515         if (st->r_frame_rate.num>0 && st->r_frame_rate.den>0)
 516             snprintf(buf, sizeof(buf), "%d/%d", st->r_frame_rate.num, st->r_frame_rate.den);
 517         else
 518             snprintf(buf, sizeof(buf), "%d/%d", st->avg_frame_rate.num, st->avg_frame_rate.den);
 519         count += add_info(dyn_bc, "r_frame_rate", buf);
 520     }
 521     dyn_size = avio_close_dyn_buf(dyn_bc, &dyn_buf);
 522
 523     if (count) {
 524         ff_put_v(bc, stream_id + 1); //stream_id_plus1
 525         ff_put_v(bc, 0); //chapter_id
 526         ff_put_v(bc, 0); //timestamp_start
 527         ff_put_v(bc, 0); //length
 528
 529         ff_put_v(bc, count);
 530
 531         avio_write(bc, dyn_buf, dyn_size);
 532     }
 533
 534     av_free(dyn_buf);
 535     return count;
 536 }
 537
 538 static int write_chapter(NUTContext *nut, AVIOContext *bc, int id)
 539 {
 540     AVIOContext *dyn_bc;
 541     uint8_t *dyn_buf     = NULL;
 542     AVDictionaryEntry *t = NULL;
 543     AVChapter *ch        = nut->avf->chapters[id];
 544     int ret, dyn_size, count = 0;
 545
 546     ret = avio_open_dyn_buf(&dyn_bc);
 547     if (ret < 0)
 548         return ret;
 549
 550     ff_put_v(bc, 0);                                        // stream_id_plus1
 551     put_s(bc, id + 1);                                      // chapter_id
 552     put_tt(nut, nut->chapter[id].time_base, bc, ch->start); // chapter_start
 553     ff_put_v(bc, ch->end - ch->start);                      // chapter_len
 554
 555     while ((t = av_dict_get(ch->metadata, "", t, AV_DICT_IGNORE_SUFFIX)))
 556         count += add_info(dyn_bc, t->key, t->value);
 557
 558     ff_put_v(bc, count);
 559
 560     dyn_size = avio_close_dyn_buf(dyn_bc, &dyn_buf);
 561     avio_write(bc, dyn_buf, dyn_size);
 562     av_freep(&dyn_buf);
 563     return 0;
 564 }
 565
 566 static int write_index(NUTContext *nut, AVIOContext *bc) {
 567     int i;
 568     Syncpoint dummy= { .pos= 0 };
 569     Syncpoint *next_node[2] = { NULL };
 570     int64_t startpos = avio_tell(bc);
 571     int64_t payload_size;
 572
 573     put_tt(nut, nut->max_pts_tb, bc, nut->max_pts);
 574
 575     ff_put_v(bc, nut->sp_count);
 576
 577     for (i=0; i<nut->sp_count; i++) {
 578         av_tree_find(nut->syncpoints, &dummy, ff_nut_sp_pos_cmp, (void**)next_node);
 579         ff_put_v(bc, (next_node[1]->pos >> 4) - (dummy.pos>>4));
 580         dummy.pos = next_node[1]->pos;
 581     }
 582
 583     for (i=0; i<nut->avf->nb_streams; i++) {
 584         StreamContext *nus= &nut->stream[i];
 585         int64_t last_pts= -1;
 586         int j, k;
 587         for (j=0; j<nut->sp_count; j++) {
 588             int flag;
 589             int n = 0;
 590
 591             if (j && nus->keyframe_pts[j] == nus->keyframe_pts[j-1]) {
 592                 av_log(nut->avf, AV_LOG_WARNING, "Multiple keyframes with same PTS\n");
 593                 nus->keyframe_pts[j] = AV_NOPTS_VALUE;
 594             }
 595
 596             flag = (nus->keyframe_pts[j] != AV_NOPTS_VALUE) ^ (j+1 == nut->sp_count);
 597             for (; j<nut->sp_count && (nus->keyframe_pts[j] != AV_NOPTS_VALUE) == flag; j++)
 598                 n++;
 599
 600             ff_put_v(bc, 1 + 2*flag + 4*n);
 601             for (k= j - n; k<=j && k<nut->sp_count; k++) {
 602                 if (nus->keyframe_pts[k] == AV_NOPTS_VALUE)
 603                     continue;
 604                 av_assert0(nus->keyframe_pts[k] > last_pts);
 605                 ff_put_v(bc, nus->keyframe_pts[k] - last_pts);
 606                 last_pts = nus->keyframe_pts[k];
 607             }
 608         }
 609     }
 610
 611     payload_size = avio_tell(bc) - startpos + 8 + 4;
 612
 613     avio_wb64(bc, 8 + payload_size + av_log2(payload_size) / 7 + 1 + 4*(payload_size > 4096));
 614
 615     return 0;
 616 }
 617
 618 static int write_headers(AVFormatContext *avctx, AVIOContext *bc)
 619 {
 620     NUTContext *nut = avctx->priv_data;
 621     AVIOContext *dyn_bc;
 622     int i, ret;
 623
 624     ff_metadata_conv_ctx(avctx, ff_nut_metadata_conv, NULL);
 625
 626     ret = avio_open_dyn_buf(&dyn_bc);
 627     if (ret < 0)
 628         return ret;
 629     write_mainheader(nut, dyn_bc);
 630     put_packet(nut, bc, dyn_bc, MAIN_STARTCODE);
 631
 632     for (i = 0; i < nut->avf->nb_streams; i++) {
 633         ret = write_streamheader(avctx, dyn_bc, nut->avf->streams[i], i);
 634         if (ret < 0) {
 635             goto fail;
 636         }
 637         put_packet(nut, bc, dyn_bc, STREAM_STARTCODE);
 638     }
 639
 640     write_globalinfo(nut, dyn_bc);
 641     put_packet(nut, bc, dyn_bc, INFO_STARTCODE);
 642
 643     for (i = 0; i < nut->avf->nb_streams; i++) {
 644         ret = write_streaminfo(nut, dyn_bc, i);
 645         if (ret > 0)
 646             put_packet(nut, bc, dyn_bc, INFO_STARTCODE);
 647         else if (ret < 0) {
 648             goto fail;
 649         }
 650     }
 651
 652     for (i = 0; i < nut->avf->nb_chapters; i++) {
 653         ret = write_chapter(nut, dyn_bc, i);
 654         if (ret < 0) {
 655             goto fail;
 656         }
 657         put_packet(nut, bc, dyn_bc, INFO_STARTCODE);
 658     }
 659
 660     nut->last_syncpoint_pos = INT_MIN;
 661     nut->header_count++;
 662
 663     ret = 0;
 664 fail:
 665     ffio_free_dyn_buf(&dyn_bc);
 666
 667     return ret;
 668 }
 669
 670 static int nut_write_header(AVFormatContext *s)
 671 {
 672     NUTContext *nut = s->priv_data;
 673     AVIOContext *bc = s->pb;
 674     int i, j, ret;
 675
 676     nut->avf = s;
 677
 678     nut->version = FFMAX(NUT_STABLE_VERSION, 3 + !!nut->flags);
 679     if (nut->version > 3 && s->strict_std_compliance > FF_COMPLIANCE_EXPERIMENTAL) {
 680         av_log(s, AV_LOG_ERROR,
 681                "The additional syncpoint modes require version %d, "
 682                "that is currently not finalized, "
 683                "please set -f_strict experimental in order to enable it.\n",
 684                nut->version);
 685         return AVERROR_EXPERIMENTAL;
 686     }
 687
 688     nut->stream   = av_calloc(s->nb_streams,  sizeof(*nut->stream ));
 689     nut->chapter  = av_calloc(s->nb_chapters, sizeof(*nut->chapter));
 690     nut->time_base= av_calloc(s->nb_streams +
 691                               s->nb_chapters, sizeof(*nut->time_base));
 692     if (!nut->stream || !nut->chapter || !nut->time_base)
 693         return AVERROR(ENOMEM);
 694
 695     for (i = 0; i < s->nb_streams; i++) {
 696         AVStream *st = s->streams[i];
 697         int ssize;
 698         AVRational time_base;
 699         ff_parse_specific_params(st, &time_base.den, &ssize, &time_base.num);
 700
 701         if (st->codecpar->codec_type == AVMEDIA_TYPE_AUDIO && st->codecpar->sample_rate) {
 702             time_base = (AVRational) {1, st->codecpar->sample_rate};
 703         } else {
 704             time_base = ff_choose_timebase(s, st, 48000);
 705         }
 706
 707         avpriv_set_pts_info(st, 64, time_base.num, time_base.den);
 708
 709         for (j = 0; j < nut->time_base_count; j++)
 710             if (!memcmp(&time_base, &nut->time_base[j], sizeof(AVRational))) {
 711                 break;
 712             }
 713         nut->time_base[j]        = time_base;
 714         nut->stream[i].time_base = &nut->time_base[j];
 715         if (j == nut->time_base_count)
 716             nut->time_base_count++;
 717
 718         if (INT64_C(1000) * time_base.num >= time_base.den)
 719             nut->stream[i].msb_pts_shift = 7;
 720         else
 721             nut->stream[i].msb_pts_shift = 14;
 722         nut->stream[i].max_pts_distance =
 723             FFMAX(time_base.den, time_base.num) / time_base.num;
 724     }
 725
 726     for (i = 0; i < s->nb_chapters; i++) {
 727         AVChapter *ch = s->chapters[i];
 728
 729         for (j = 0; j < nut->time_base_count; j++)
 730             if (!memcmp(&ch->time_base, &nut->time_base[j], sizeof(AVRational)))
 731                 break;
 732
 733         nut->time_base[j]         = ch->time_base;
 734         nut->chapter[i].time_base = &nut->time_base[j];
 735         if (j == nut->time_base_count)
 736             nut->time_base_count++;
 737     }
 738
 739     nut->max_distance = MAX_DISTANCE;
 740     build_elision_headers(s);
 741     build_frame_code(s);
 742     av_assert0(nut->frame_code['N'].flags == FLAG_INVALID);
 743
 744     avio_write(bc, ID_STRING, strlen(ID_STRING));
 745     avio_w8(bc, 0);
 746
 747     if ((ret = write_headers(s, bc)) < 0)
 748         return ret;
 749
 750     if (s->avoid_negative_ts < 0)
 751         s->avoid_negative_ts = 1;
 752
 753     return 0;
 754 }
 755
 756 static int get_needed_flags(NUTContext *nut, StreamContext *nus, FrameCode *fc,
 757                             AVPacket *pkt)
 758 {
 759     int flags = 0;
 760
 761     if (pkt->flags & AV_PKT_FLAG_KEY)
 762         flags |= FLAG_KEY;
 763     if (pkt->stream_index != fc->stream_id)
 764         flags |= FLAG_STREAM_ID;
 765     if (pkt->size / fc->size_mul)
 766         flags |= FLAG_SIZE_MSB;
 767     if (pkt->pts - nus->last_pts != fc->pts_delta)
 768         flags |= FLAG_CODED_PTS;
 769     if (pkt->side_data_elems && nut->version > 3)
 770         flags |= FLAG_SM_DATA;
 771     if (pkt->size > 2 * nut->max_distance)
 772         flags |= FLAG_CHECKSUM;
 773     if (FFABS(pkt->pts - nus->last_pts) > nus->max_pts_distance)
 774         flags |= FLAG_CHECKSUM;
 775     if (fc->header_idx)
 776         if (pkt->size < nut->header_len[fc->header_idx] ||
 777             pkt->size > 4096                            ||
 778             memcmp(pkt->data, nut->header    [fc->header_idx],
 779                               nut->header_len[fc->header_idx]))
 780             flags |= FLAG_HEADER_IDX;
 781
 782     return flags | (fc->flags & FLAG_CODED);
 783 }
 784
 785 static int find_best_header_idx(NUTContext *nut, AVPacket *pkt)
 786 {
 787     int i;
 788     int best_i   = 0;
 789     int best_len = 0;
 790
 791     if (pkt->size > 4096)
 792         return 0;
 793
 794     for (i = 1; i < nut->header_count; i++)
 795         if (pkt->size >= nut->header_len[i]
 796             && nut->header_len[i] > best_len
 797             && !memcmp(pkt->data, nut->header[i], nut->header_len[i])) {
 798             best_i   = i;
 799             best_len = nut->header_len[i];
 800         }
 801     return best_i;
 802 }
 803
 804 static int write_sm_data(AVFormatContext *s, AVIOContext *bc, AVPacket *pkt, int is_meta)
 805 {
 806     int ret, i, dyn_size;
 807     unsigned flags;
 808     AVIOContext *dyn_bc;
 809     int sm_data_count = 0;
 810     uint8_t tmp[256];
 811     uint8_t *dyn_buf;
 812
 813     ret = avio_open_dyn_buf(&dyn_bc);
 814     if (ret < 0)
 815         return ret;
 816
 817     for (i = 0; i<pkt->side_data_elems; i++) {
 818         const uint8_t *data = pkt->side_data[i].data;
 819         int size = pkt->side_data[i].size;
 820         const uint8_t *data_end = data + size;
 821
 822         if (is_meta) {
 823             if (   pkt->side_data[i].type == AV_PKT_DATA_METADATA_UPDATE
 824                 || pkt->side_data[i].type == AV_PKT_DATA_STRINGS_METADATA) {
 825                 if (!size || data[size-1]) {
 826                     ret = AVERROR(EINVAL);
 827                     goto fail;
 828                 }
 829                 while (data < data_end) {
 830                     const uint8_t *key = data;
 831                     const uint8_t *val = data + strlen(key) + 1;
 832
 833                     if(val >= data_end) {
 834                         ret = AVERROR(EINVAL);
 835                         goto fail;
 836                     }
 837                     put_str(dyn_bc, key);
 838                     put_s(dyn_bc, -1);
 839                     put_str(dyn_bc, val);
 840                     data = val + strlen(val) + 1;
 841                     sm_data_count++;
 842                 }
 843             }
 844         } else {
 845             switch (pkt->side_data[i].type) {
 846             case AV_PKT_DATA_PALETTE:
 847             case AV_PKT_DATA_NEW_EXTRADATA:
 848             case AV_PKT_DATA_MATROSKA_BLOCKADDITIONAL:
 849             default:
 850                 if (pkt->side_data[i].type == AV_PKT_DATA_PALETTE) {
 851                     put_str(dyn_bc, "Palette");
 852                 } else if(pkt->side_data[i].type == AV_PKT_DATA_NEW_EXTRADATA) {
 853                     put_str(dyn_bc, "Extradata");
 854                 } else if(pkt->side_data[i].type == AV_PKT_DATA_MATROSKA_BLOCKADDITIONAL) {
 855                     snprintf(tmp, sizeof(tmp), "CodecSpecificSide%"PRId64"", AV_RB64(data));
 856                     put_str(dyn_bc, tmp);
 857                 } else {
 858                     snprintf(tmp, sizeof(tmp), "UserData%s-SD-%d",
 859                             (s->flags & AVFMT_FLAG_BITEXACT) ? "Lavf" : LIBAVFORMAT_IDENT,
 860                             pkt->side_data[i].type);
 861                     put_str(dyn_bc, tmp);
 862                 }
 863                 put_s(dyn_bc, -2);
 864                 put_str(dyn_bc, "bin");
 865                 ff_put_v(dyn_bc, pkt->side_data[i].size);
 866                 avio_write(dyn_bc, data, pkt->side_data[i].size);
 867                 sm_data_count++;
 868                 break;
 869             case AV_PKT_DATA_PARAM_CHANGE:
 870                 flags = bytestream_get_le32(&data);
 871                 if (flags & AV_SIDE_DATA_PARAM_CHANGE_CHANNEL_COUNT) {
 872                     put_str(dyn_bc, "Channels");
 873                     put_s(dyn_bc, bytestream_get_le32(&data));
 874                     sm_data_count++;
 875                 }
 876                 if (flags & AV_SIDE_DATA_PARAM_CHANGE_CHANNEL_LAYOUT) {
 877                     put_str(dyn_bc, "ChannelLayout");
 878                     put_s(dyn_bc, -2);
 879                     put_str(dyn_bc, "u64");
 880                     ff_put_v(bc, 8);
 881                     avio_write(dyn_bc, data, 8); data+=8;
 882                     sm_data_count++;
 883                 }
 884                 if (flags & AV_SIDE_DATA_PARAM_CHANGE_SAMPLE_RATE) {
 885                     put_str(dyn_bc, "SampleRate");
 886                     put_s(dyn_bc, bytestream_get_le32(&data));
 887                     sm_data_count++;
 888                 }
 889                 if (flags & AV_SIDE_DATA_PARAM_CHANGE_DIMENSIONS) {
 890                     put_str(dyn_bc, "Width");
 891                     put_s(dyn_bc, bytestream_get_le32(&data));
 892                     put_str(dyn_bc, "Height");
 893                     put_s(dyn_bc, bytestream_get_le32(&data));
 894                     sm_data_count+=2;
 895                 }
 896                 break;
 897             case AV_PKT_DATA_SKIP_SAMPLES:
 898                 if (AV_RL32(data)) {
 899                     put_str(dyn_bc, "SkipStart");
 900                     put_s(dyn_bc, (unsigned)AV_RL32(data));
 901                     sm_data_count++;
 902                 }
 903                 if (AV_RL32(data+4)) {
 904                     put_str(dyn_bc, "SkipEnd");
 905                     put_s(dyn_bc, (unsigned)AV_RL32(data+4));
 906                     sm_data_count++;
 907                 }
 908                 break;
 909             case AV_PKT_DATA_METADATA_UPDATE:
 910             case AV_PKT_DATA_STRINGS_METADATA:
 911             case AV_PKT_DATA_QUALITY_STATS:
 912                 // belongs into meta, not side data
 913                 break;
 914             }
 915         }
 916     }
 917
 918 fail:
 919     ff_put_v(bc, sm_data_count);
 920     dyn_size = avio_close_dyn_buf(dyn_bc, &dyn_buf);
 921     avio_write(bc, dyn_buf, dyn_size);
 922     av_freep(&dyn_buf);
 923
 924     return ret;
 925 }
 926
 927 static int nut_write_packet(AVFormatContext *s, AVPacket *pkt)
 928 {
 929     NUTContext *nut    = s->priv_data;
 930     StreamContext *nus = &nut->stream[pkt->stream_index];
 931     AVIOContext *bc    = s->pb, *dyn_bc, *sm_bc = NULL;
 932     FrameCode *fc;
 933     int64_t coded_pts;
 934     int best_length, frame_code, flags, needed_flags, i, header_idx;
 935     int best_header_idx;
 936     int key_frame = !!(pkt->flags & AV_PKT_FLAG_KEY);
 937     int store_sp  = 0;
 938     int ret = 0;
 939     int sm_size = 0;
 940     int data_size = pkt->size;
 941     uint8_t *sm_buf = NULL;
 942
 943     if (pkt->pts < 0) {
 944         av_log(s, AV_LOG_ERROR,
 945                "Negative pts not supported stream %d, pts %"PRId64"\n",
 946                pkt->stream_index, pkt->pts);
 947         if (pkt->pts == AV_NOPTS_VALUE)
 948             av_log(s, AV_LOG_ERROR, "Try to enable the genpts flag\n");
 949         return AVERROR(EINVAL);
 950     }
 951
 952     if (pkt->side_data_elems && nut->version > 3) {
 953         ret = avio_open_dyn_buf(&sm_bc);
 954         if (ret < 0)
 955             return ret;
 956         ret = write_sm_data(s, sm_bc, pkt, 0);
 957         if (ret >= 0)
 958             ret = write_sm_data(s, sm_bc, pkt, 1);
 959         sm_size = avio_close_dyn_buf(sm_bc, &sm_buf);
 960         if (ret < 0)
 961             goto fail;
 962         data_size += sm_size;
 963     }
 964
 965     if (1LL << (20 + 3 * nut->header_count) <= avio_tell(bc))
 966         write_headers(s, bc);
 967
 968     if (key_frame && !(nus->last_flags & FLAG_KEY))
 969         store_sp = 1;
 970
 971     if (data_size + 30 /*FIXME check*/ + avio_tell(bc) >= nut->last_syncpoint_pos + nut->max_distance)
 972         store_sp = 1;
 973
 974 //FIXME: Ensure store_sp is 1 in the first place.
 975
 976     if (store_sp &&
 977         (!(nut->flags & NUT_PIPE) || nut->last_syncpoint_pos == INT_MIN)) {
 978         int64_t sp_pos = INT64_MAX;
 979
 980         ff_nut_reset_ts(nut, *nus->time_base, pkt->dts);
 981         for (i = 0; i < s->nb_streams; i++) {
 982             AVStream *st   = s->streams[i];
 983             int64_t dts_tb = av_rescale_rnd(pkt->dts,
 984                 nus->time_base->num * (int64_t)nut->stream[i].time_base->den,
 985                 nus->time_base->den * (int64_t)nut->stream[i].time_base->num,
 986                 AV_ROUND_DOWN);
 987             int index = av_index_search_timestamp(st, dts_tb,
 988                                                   AVSEEK_FLAG_BACKWARD);
 989             if (index >= 0) {
 990                 sp_pos = FFMIN(sp_pos, st->index_entries[index].pos);
 991                 if (!nut->write_index && 2*index > st->nb_index_entries) {
 992                     memmove(st->index_entries,
 993                             st->index_entries + index,
 994                             sizeof(*st->index_entries) * (st->nb_index_entries - index));
 995                     st->nb_index_entries -=  index;
 996                 }
 997             }
 998         }
 999
1000         nut->last_syncpoint_pos = avio_tell(bc);
1001         ret                     = avio_open_dyn_buf(&dyn_bc);
1002         if (ret < 0)
1003             goto fail;
1004         put_tt(nut, nus->time_base, dyn_bc, pkt->dts);
1005         ff_put_v(dyn_bc, sp_pos != INT64_MAX ? (nut->last_syncpoint_pos - sp_pos) >> 4 : 0);
1006
1007         if (nut->flags & NUT_BROADCAST) {
1008             put_tt(nut, nus->time_base, dyn_bc,
1009                    av_rescale_q(av_gettime(), AV_TIME_BASE_Q, *nus->time_base));
1010         }
1011         put_packet(nut, bc, dyn_bc, SYNCPOINT_STARTCODE);
1012         ffio_free_dyn_buf(&dyn_bc);
1013
1014         if (nut->write_index) {
1015         if ((ret = ff_nut_add_sp(nut, nut->last_syncpoint_pos, 0 /*unused*/, pkt->dts)) < 0)
1016             goto fail;
1017
1018         if ((1ll<<60) % nut->sp_count == 0)
1019             for (i=0; i<s->nb_streams; i++) {
1020                 int j;
1021                 StreamContext *nus = &nut->stream[i];
1022                 av_reallocp_array(&nus->keyframe_pts, 2*nut->sp_count, sizeof(*nus->keyframe_pts));
1023                 if (!nus->keyframe_pts) {
1024                     ret = AVERROR(ENOMEM);
1025                     goto fail;
1026                 }
1027                 for (j=nut->sp_count == 1 ? 0 : nut->sp_count; j<2*nut->sp_count; j++)
1028                     nus->keyframe_pts[j] = AV_NOPTS_VALUE;
1029         }
1030         }
1031     }
1032     av_assert0(nus->last_pts != AV_NOPTS_VALUE);
1033
1034     coded_pts = pkt->pts & ((1 << nus->msb_pts_shift) - 1);
1035     if (ff_lsb2full(nus, coded_pts) != pkt->pts)
1036         coded_pts = pkt->pts + (1 << nus->msb_pts_shift);
1037
1038     best_header_idx = find_best_header_idx(nut, pkt);
1039
1040     best_length = INT_MAX;
1041     frame_code  = -1;
1042     for (i = 0; i < 256; i++) {
1043         int length    = 0;
1044         FrameCode *fc = &nut->frame_code[i];
1045         int flags     = fc->flags;
1046
1047         if (flags & FLAG_INVALID)
1048             continue;
1049         needed_flags = get_needed_flags(nut, nus, fc, pkt);
1050
1051         if (flags & FLAG_CODED) {
1052             length++;
1053             flags = needed_flags;
1054         }
1055
1056         if ((flags & needed_flags) != needed_flags)
1057             continue;
1058
1059         if ((flags ^ needed_flags) & FLAG_KEY)
1060             continue;
1061
1062         if (flags & FLAG_STREAM_ID)
1063             length += ff_get_v_length(pkt->stream_index);
1064
1065         if (data_size % fc->size_mul != fc->size_lsb)
1066             continue;
1067         if (flags & FLAG_SIZE_MSB)
1068             length += ff_get_v_length(data_size / fc->size_mul);
1069
1070         if (flags & FLAG_CHECKSUM)
1071             length += 4;
1072
1073         if (flags & FLAG_CODED_PTS)
1074             length += ff_get_v_length(coded_pts);
1075
1076         if (   (flags & FLAG_CODED)
1077             && nut->header_len[best_header_idx] > nut->header_len[fc->header_idx] + 1) {
1078             flags |= FLAG_HEADER_IDX;
1079         }
1080
1081         if (flags & FLAG_HEADER_IDX) {
1082             length += 1 - nut->header_len[best_header_idx];
1083         } else {
1084             length -= nut->header_len[fc->header_idx];
1085         }
1086
1087         length *= 4;
1088         length += !(flags & FLAG_CODED_PTS);
1089         length += !(flags & FLAG_CHECKSUM);
1090
1091         if (length < best_length) {
1092             best_length = length;
1093             frame_code  = i;
1094         }
1095     }
1096     av_assert0(frame_code != -1);
1097
1098     fc           = &nut->frame_code[frame_code];
1099     flags        = fc->flags;
1100     needed_flags = get_needed_flags(nut, nus, fc, pkt);
1101     header_idx   = fc->header_idx;
1102
1103     ffio_init_checksum(bc, ff_crc04C11DB7_update, 0);
1104     avio_w8(bc, frame_code);
1105     if (flags & FLAG_CODED) {
1106         ff_put_v(bc, (flags ^ needed_flags) & ~(FLAG_CODED));
1107         flags = needed_flags;
1108     }
1109     if (flags & FLAG_STREAM_ID)  ff_put_v(bc, pkt->stream_index);
1110     if (flags & FLAG_CODED_PTS)  ff_put_v(bc, coded_pts);
1111     if (flags & FLAG_SIZE_MSB )  ff_put_v(bc, data_size / fc->size_mul);
1112     if (flags & FLAG_HEADER_IDX) ff_put_v(bc, header_idx = best_header_idx);
1113
1114     if (flags & FLAG_CHECKSUM)   avio_wl32(bc, ffio_get_checksum(bc));
1115     else                         ffio_get_checksum(bc);
1116
1117     if (flags & FLAG_SM_DATA) {
1118         avio_write(bc, sm_buf, sm_size);
1119     }
1120     avio_write(bc, pkt->data + nut->header_len[header_idx], pkt->size - nut->header_len[header_idx]);
1121
1122     nus->last_flags = flags;
1123     nus->last_pts   = pkt->pts;
1124
1125     //FIXME just store one per syncpoint
1126     if (flags & FLAG_KEY && !(nut->flags & NUT_PIPE)) {
1127         av_add_index_entry(
1128             s->streams[pkt->stream_index],
1129             nut->last_syncpoint_pos,
1130             pkt->pts,
1131             0,
1132             0,
1133             AVINDEX_KEYFRAME);
1134         if (nus->keyframe_pts && nus->keyframe_pts[nut->sp_count] == AV_NOPTS_VALUE)
1135             nus->keyframe_pts[nut->sp_count] = pkt->pts;
1136     }
1137
1138     if (!nut->max_pts_tb || av_compare_ts(nut->max_pts, *nut->max_pts_tb, pkt->pts, *nus->time_base) < 0) {
1139         nut->max_pts = pkt->pts;
1140         nut->max_pts_tb = nus->time_base;
1141     }
1142
1143 fail:
1144     av_freep(&sm_buf);
1145
1146     return ret;
1147 }
1148
1149 static int nut_write_trailer(AVFormatContext *s)
1150 {
1151     NUTContext *nut = s->priv_data;
1152     AVIOContext *bc = s->pb, *dyn_bc;
1153     int ret;
1154
1155     while (nut->header_count < 3)
1156         write_headers(s, bc);
1157
1158     if (!nut->sp_count)
1159         return 0;
1160
1161     ret = avio_open_dyn_buf(&dyn_bc);
1162     if (ret >= 0) {
1163         av_assert1(nut->write_index); // sp_count should be 0 if no index is going to be written
1164         write_index(nut, dyn_bc);
1165         put_packet(nut, bc, dyn_bc, INDEX_STARTCODE);
1166         ffio_free_dyn_buf(&dyn_bc);
1167     }
1168
1169     return 0;
1170 }
1171
1172 static void nut_write_deinit(AVFormatContext *s)
1173 {
1174     NUTContext *nut = s->priv_data;
1175     int i;
1176
1177     ff_nut_free_sp(nut);
1178     if (nut->stream)
1179         for (i=0; i<s->nb_streams; i++)
1180             av_freep(&nut->stream[i].keyframe_pts);
1181
1182     av_freep(&nut->stream);
1183     av_freep(&nut->chapter);
1184     av_freep(&nut->time_base);
1185 }
1186
1187 #define OFFSET(x) offsetof(NUTContext, x)
1188 #define E AV_OPT_FLAG_ENCODING_PARAM
1189 static const AVOption options[] = {
1190     { "syncpoints",  "NUT syncpoint behaviour",                         OFFSET(flags), AV_OPT_TYPE_FLAGS, {.i64 = 0},             INT_MIN, INT_MAX, E, "syncpoints" },
1191     { "default",     "",                                                0,             AV_OPT_TYPE_CONST, {.i64 = 0},             INT_MIN, INT_MAX, E, "syncpoints" },
1192     { "none",        "Disable syncpoints, low overhead and unseekable", 0,             AV_OPT_TYPE_CONST, {.i64 = NUT_PIPE},      INT_MIN, INT_MAX, E, "syncpoints" },
1193     { "timestamped", "Extend syncpoints with a wallclock timestamp",    0,             AV_OPT_TYPE_CONST, {.i64 = NUT_BROADCAST}, INT_MIN, INT_MAX, E, "syncpoints" },
1194     { "write_index", "Write index",                               OFFSET(write_index), AV_OPT_TYPE_BOOL,  {.i64 = 1},                   0,       1, E, },
1195     { NULL },
1196 };
1197
1198 static const AVClass class = {
1199     .class_name = "nutenc",
1200     .item_name  = av_default_item_name,
1201     .option     = options,
1202     .version    = LIBAVUTIL_VERSION_INT,
1203 };
1204
1205 AVOutputFormat ff_nut_muxer = {
1206     .name           = "nut",
1207     .long_name      = NULL_IF_CONFIG_SMALL("NUT"),
1208     .mime_type      = "video/x-nut",
1209     .extensions     = "nut",
1210     .priv_data_size = sizeof(NUTContext),
1211     .audio_codec    = CONFIG_LIBVORBIS ? AV_CODEC_ID_VORBIS :
1212                       CONFIG_LIBMP3LAME ? AV_CODEC_ID_MP3 : AV_CODEC_ID_MP2,
1213     .video_codec    = AV_CODEC_ID_MPEG4,
1214     .write_header   = nut_write_header,
1215     .write_packet   = nut_write_packet,
1216     .write_trailer  = nut_write_trailer,
1217     .deinit         = nut_write_deinit,
1218     .flags          = AVFMT_GLOBALHEADER | AVFMT_VARIABLE_FPS,
1219     .codec_tag      = ff_nut_codec_tags,
1220     .priv_class     = &class,
1221 };