git.sesse.net Git - ffmpeg/blob - libavformat/mpegtsenc.c

   1 /*
   2  * MPEG2 transport stream (aka DVB) muxer
   3  * Copyright (c) 2003 Fabrice Bellard
   4  *
   5  * This file is part of FFmpeg.
   6  *
   7  * FFmpeg is free software; you can redistribute it and/or
   8  * modify it under the terms of the GNU Lesser General Public
   9  * License as published by the Free Software Foundation; either
  10  * version 2.1 of the License, or (at your option) any later version.
  11  *
  12  * FFmpeg is distributed in the hope that it will be useful,
  13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  15  * Lesser General Public License for more details.
  16  *
  17  * You should have received a copy of the GNU Lesser General Public
  18  * License along with FFmpeg; if not, write to the Free Software
  19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
  20  */
  21
  22 #include "libavutil/avassert.h"
  23 #include "libavutil/bswap.h"
  24 #include "libavutil/crc.h"
  25 #include "libavutil/dict.h"
  26 #include "libavutil/intreadwrite.h"
  27 #include "libavutil/mathematics.h"
  28 #include "libavutil/opt.h"
  29
  30 #include "libavcodec/internal.h"
  31
  32 #include "avformat.h"
  33 #include "internal.h"
  34 #include "mpegts.h"
  35
  36 #define PCR_TIME_BASE 27000000
  37
  38 /* write DVB SI sections */
  39
  40 /*********************************************/
  41 /* mpegts section writer */
  42
  43 typedef struct MpegTSSection {
  44     int pid;
  45     int cc;
  46     void (*write_packet)(struct MpegTSSection *s, const uint8_t *packet);
  47     void *opaque;
  48 } MpegTSSection;
  49
  50 typedef struct MpegTSService {
  51     MpegTSSection pmt; /* MPEG2 pmt table context */
  52     int sid;           /* service ID */
  53     char *name;
  54     char *provider_name;
  55     int pcr_pid;
  56     int pcr_packet_count;
  57     int pcr_packet_period;
  58 } MpegTSService;
  59
  60 typedef struct MpegTSWrite {
  61     const AVClass *av_class;
  62     MpegTSSection pat; /* MPEG2 pat table */
  63     MpegTSSection sdt; /* MPEG2 sdt table context */
  64     MpegTSService **services;
  65     int sdt_packet_count;
  66     int sdt_packet_period;
  67     int pat_packet_count;
  68     int pat_packet_period;
  69     int nb_services;
  70     int onid;
  71     int tsid;
  72     int64_t first_pcr;
  73     int mux_rate; ///< set to 1 when VBR
  74     int pes_payload_size;
  75
  76     int transport_stream_id;
  77     int original_network_id;
  78     int service_id;
  79
  80     int pmt_start_pid;
  81     int start_pid;
  82     int m2ts_mode;
  83
  84     int reemit_pat_pmt; // backward compatibility
  85
  86     int pcr_period;
  87 #define MPEGTS_FLAG_REEMIT_PAT_PMT  0x01
  88 #define MPEGTS_FLAG_AAC_LATM        0x02
  89     int flags;
  90     int copyts;
  91     int tables_version;
  92
  93     int omit_video_pes_length;
  94 } MpegTSWrite;
  95
  96 /* a PES packet header is generated every DEFAULT_PES_HEADER_FREQ packets */
  97 #define DEFAULT_PES_HEADER_FREQ  16
  98 #define DEFAULT_PES_PAYLOAD_SIZE ((DEFAULT_PES_HEADER_FREQ - 1) * 184 + 170)
  99
 100 /* The section length is 12 bits. The first 2 are set to 0, the remaining
 101  * 10 bits should not exceed 1021. */
 102 #define SECTION_LENGTH 1020
 103
 104 /* NOTE: 4 bytes must be left at the end for the crc32 */
 105 static void mpegts_write_section(MpegTSSection *s, uint8_t *buf, int len)
 106 {
 107     unsigned int crc;
 108     unsigned char packet[TS_PACKET_SIZE];
 109     const unsigned char *buf_ptr;
 110     unsigned char *q;
 111     int first, b, len1, left;
 112
 113     crc = av_bswap32(av_crc(av_crc_get_table(AV_CRC_32_IEEE),
 114                             -1, buf, len - 4));
 115
 116     buf[len - 4] = (crc >> 24) & 0xff;
 117     buf[len - 3] = (crc >> 16) & 0xff;
 118     buf[len - 2] = (crc >>  8) & 0xff;
 119     buf[len - 1] =  crc        & 0xff;
 120
 121     /* send each packet */
 122     buf_ptr = buf;
 123     while (len > 0) {
 124         first = buf == buf_ptr;
 125         q     = packet;
 126         *q++  = 0x47;
 127         b     = s->pid >> 8;
 128         if (first)
 129             b |= 0x40;
 130         *q++  = b;
 131         *q++  = s->pid;
 132         s->cc = s->cc + 1 & 0xf;
 133         *q++  = 0x10 | s->cc;
 134         if (first)
 135             *q++ = 0; /* 0 offset */
 136         len1 = TS_PACKET_SIZE - (q - packet);
 137         if (len1 > len)
 138             len1 = len;
 139         memcpy(q, buf_ptr, len1);
 140         q += len1;
 141         /* add known padding data */
 142         left = TS_PACKET_SIZE - (q - packet);
 143         if (left > 0)
 144             memset(q, 0xff, left);
 145
 146         s->write_packet(s, packet);
 147
 148         buf_ptr += len1;
 149         len     -= len1;
 150     }
 151 }
 152
 153 static inline void put16(uint8_t **q_ptr, int val)
 154 {
 155     uint8_t *q;
 156     q      = *q_ptr;
 157     *q++   = val >> 8;
 158     *q++   = val;
 159     *q_ptr = q;
 160 }
 161
 162 static int mpegts_write_section1(MpegTSSection *s, int tid, int id,
 163                                  int version, int sec_num, int last_sec_num,
 164                                  uint8_t *buf, int len)
 165 {
 166     uint8_t section[1024], *q;
 167     unsigned int tot_len;
 168     /* reserved_future_use field must be set to 1 for SDT */
 169     unsigned int flags = tid == SDT_TID ? 0xf000 : 0xb000;
 170
 171     tot_len = 3 + 5 + len + 4;
 172     /* check if not too big */
 173     if (tot_len > 1024)
 174         return AVERROR_INVALIDDATA;
 175
 176     q    = section;
 177     *q++ = tid;
 178     put16(&q, flags | (len + 5 + 4)); /* 5 byte header + 4 byte CRC */
 179     put16(&q, id);
 180     *q++ = 0xc1 | (version << 1); /* current_next_indicator = 1 */
 181     *q++ = sec_num;
 182     *q++ = last_sec_num;
 183     memcpy(q, buf, len);
 184
 185     mpegts_write_section(s, section, tot_len);
 186     return 0;
 187 }
 188
 189 /*********************************************/
 190 /* mpegts writer */
 191
 192 #define DEFAULT_PROVIDER_NAME   "FFmpeg"
 193 #define DEFAULT_SERVICE_NAME    "Service01"
 194
 195 /* we retransmit the SI info at this rate */
 196 #define SDT_RETRANS_TIME 500
 197 #define PAT_RETRANS_TIME 100
 198 #define PCR_RETRANS_TIME 20
 199
 200 typedef struct MpegTSWriteStream {
 201     struct MpegTSService *service;
 202     int pid; /* stream associated pid */
 203     int cc;
 204     int payload_size;
 205     int first_pts_check; ///< first pts check needed
 206     int prev_payload_key;
 207     int64_t payload_pts;
 208     int64_t payload_dts;
 209     int payload_flags;
 210     uint8_t *payload;
 211     AVFormatContext *amux;
 212     AVRational user_tb;
 213 } MpegTSWriteStream;
 214
 215 static void mpegts_write_pat(AVFormatContext *s)
 216 {
 217     MpegTSWrite *ts = s->priv_data;
 218     MpegTSService *service;
 219     uint8_t data[SECTION_LENGTH], *q;
 220     int i;
 221
 222     q = data;
 223     for (i = 0; i < ts->nb_services; i++) {
 224         service = ts->services[i];
 225         put16(&q, service->sid);
 226         put16(&q, 0xe000 | service->pmt.pid);
 227     }
 228     mpegts_write_section1(&ts->pat, PAT_TID, ts->tsid, ts->tables_version, 0, 0,
 229                           data, q - data);
 230 }
 231
 232 static int mpegts_write_pmt(AVFormatContext *s, MpegTSService *service)
 233 {
 234     MpegTSWrite *ts = s->priv_data;
 235     uint8_t data[SECTION_LENGTH], *q, *desc_length_ptr, *program_info_length_ptr;
 236     int val, stream_type, i;
 237
 238     q = data;
 239     put16(&q, 0xe000 | service->pcr_pid);
 240
 241     program_info_length_ptr = q;
 242     q += 2; /* patched after */
 243
 244     /* put program info here */
 245
 246     val = 0xf000 | (q - program_info_length_ptr - 2);
 247     program_info_length_ptr[0] = val >> 8;
 248     program_info_length_ptr[1] = val;
 249
 250     for (i = 0; i < s->nb_streams; i++) {
 251         AVStream *st = s->streams[i];
 252         MpegTSWriteStream *ts_st = st->priv_data;
 253         AVDictionaryEntry *lang = av_dict_get(st->metadata, "language", NULL, 0);
 254         switch (st->codec->codec_id) {
 255         case AV_CODEC_ID_MPEG1VIDEO:
 256         case AV_CODEC_ID_MPEG2VIDEO:
 257             stream_type = STREAM_TYPE_VIDEO_MPEG2;
 258             break;
 259         case AV_CODEC_ID_MPEG4:
 260             stream_type = STREAM_TYPE_VIDEO_MPEG4;
 261             break;
 262         case AV_CODEC_ID_H264:
 263             stream_type = STREAM_TYPE_VIDEO_H264;
 264             break;
 265         case AV_CODEC_ID_HEVC:
 266             stream_type = STREAM_TYPE_VIDEO_HEVC;
 267             break;
 268         case AV_CODEC_ID_CAVS:
 269             stream_type = STREAM_TYPE_VIDEO_CAVS;
 270             break;
 271         case AV_CODEC_ID_DIRAC:
 272             stream_type = STREAM_TYPE_VIDEO_DIRAC;
 273             break;
 274         case AV_CODEC_ID_MP2:
 275         case AV_CODEC_ID_MP3:
 276             stream_type = STREAM_TYPE_AUDIO_MPEG1;
 277             break;
 278         case AV_CODEC_ID_AAC:
 279             stream_type = (ts->flags & MPEGTS_FLAG_AAC_LATM)
 280                           ? STREAM_TYPE_AUDIO_AAC_LATM
 281                           : STREAM_TYPE_AUDIO_AAC;
 282             break;
 283         case AV_CODEC_ID_AAC_LATM:
 284             stream_type = STREAM_TYPE_AUDIO_AAC_LATM;
 285             break;
 286         case AV_CODEC_ID_AC3:
 287             stream_type = STREAM_TYPE_AUDIO_AC3;
 288             break;
 289         case AV_CODEC_ID_DTS:
 290             stream_type = STREAM_TYPE_AUDIO_DTS;
 291             break;
 292         case AV_CODEC_ID_TRUEHD:
 293             stream_type = STREAM_TYPE_AUDIO_TRUEHD;
 294             break;
 295         default:
 296             stream_type = STREAM_TYPE_PRIVATE_DATA;
 297             break;
 298         }
 299
 300         if (q - data > sizeof(data) - 32)
 301             return AVERROR(EINVAL);
 302
 303         *q++ = stream_type;
 304         put16(&q, 0xe000 | ts_st->pid);
 305         desc_length_ptr = q;
 306         q += 2; /* patched after */
 307
 308         /* write optional descriptors here */
 309         switch (st->codec->codec_type) {
 310         case AVMEDIA_TYPE_AUDIO:
 311             if (st->codec->codec_id==AV_CODEC_ID_EAC3) {
 312                 *q++=0x7a; // EAC3 descriptor see A038 DVB SI
 313                 *q++=1; // 1 byte, all flags sets to 0
 314                 *q++=0; // omit all fields...
 315             }
 316             if (st->codec->codec_id==AV_CODEC_ID_S302M) {
 317                 *q++ = 0x05; /* MPEG-2 registration descriptor*/
 318                 *q++ = 4;
 319                 *q++ = 'B';
 320                 *q++ = 'S';
 321                 *q++ = 'S';
 322                 *q++ = 'D';
 323             }
 324
 325             if (lang) {
 326                 char *p;
 327                 char *next = lang->value;
 328                 uint8_t *len_ptr;
 329
 330                 *q++     = 0x0a; /* ISO 639 language descriptor */
 331                 len_ptr  = q++;
 332                 *len_ptr = 0;
 333
 334                 for (p = lang->value; next && *len_ptr < 255 / 4 * 4 && q - data < sizeof(data) - 4; p = next + 1) {
 335                     next = strchr(p, ',');
 336                     if (strlen(p) != 3 && (!next || next != p + 3))
 337                         continue; /* not a 3-letter code */
 338
 339                     *q++ = *p++;
 340                     *q++ = *p++;
 341                     *q++ = *p++;
 342
 343                     if (st->disposition & AV_DISPOSITION_CLEAN_EFFECTS)
 344                         *q++ = 0x01;
 345                     else if (st->disposition & AV_DISPOSITION_HEARING_IMPAIRED)
 346                         *q++ = 0x02;
 347                     else if (st->disposition & AV_DISPOSITION_VISUAL_IMPAIRED)
 348                         *q++ = 0x03;
 349                     else
 350                         *q++ = 0; /* undefined type */
 351
 352                     *len_ptr += 4;
 353                 }
 354
 355                 if (*len_ptr == 0)
 356                     q -= 2; /* no language codes were written */
 357             }
 358             break;
 359         case AVMEDIA_TYPE_SUBTITLE:
 360         {
 361            const char default_language[] = "und";
 362            const char *language = lang && strlen(lang->value) >= 3 ? lang->value : default_language;
 363
 364            if (st->codec->codec_id == AV_CODEC_ID_DVB_SUBTITLE) {
 365                uint8_t *len_ptr;
 366                int extradata_copied = 0;
 367
 368                *q++ = 0x59; /* subtitling_descriptor */
 369                len_ptr = q++;
 370
 371                while (strlen(language) >= 3 && (sizeof(data) - (q - data)) >= 8) { /* 8 bytes per DVB subtitle substream data */
 372                    *q++ = *language++;
 373                    *q++ = *language++;
 374                    *q++ = *language++;
 375                    /* Skip comma */
 376                    if (*language != '\0')
 377                        language++;
 378
 379                    if (st->codec->extradata_size - extradata_copied >= 5) {
 380                        *q++ = st->codec->extradata[extradata_copied + 4]; /* subtitling_type */
 381                        memcpy(q, st->codec->extradata + extradata_copied, 4); /* composition_page_id and ancillary_page_id */
 382                        extradata_copied += 5;
 383                        q += 4;
 384                    } else {
 385                        /* subtitling_type:
 386                         * 0x10 - normal with no monitor aspect ratio criticality
 387                         * 0x20 - for the hard of hearing with no monitor aspect ratio criticality */
 388                        *q++ = (st->disposition & AV_DISPOSITION_HEARING_IMPAIRED) ? 0x20 : 0x10;
 389                        if ((st->codec->extradata_size == 4) && (extradata_copied == 0)) {
 390                            /* support of old 4-byte extradata format */
 391                            memcpy(q, st->codec->extradata, 4); /* composition_page_id and ancillary_page_id */
 392                            extradata_copied += 4;
 393                            q += 4;
 394                        } else {
 395                            put16(&q, 1); /* composition_page_id */
 396                            put16(&q, 1); /* ancillary_page_id */
 397                        }
 398                    }
 399                }
 400
 401                *len_ptr = q - len_ptr - 1;
 402            } else if (st->codec->codec_id == AV_CODEC_ID_DVB_TELETEXT) {
 403                uint8_t *len_ptr = NULL;
 404                int extradata_copied = 0;
 405
 406                /* The descriptor tag. teletext_descriptor */
 407                *q++ = 0x56;
 408                len_ptr = q++;
 409
 410                while (strlen(language) >= 3 && q - data < sizeof(data) - 6) {
 411                    *q++ = *language++;
 412                    *q++ = *language++;
 413                    *q++ = *language++;
 414                    /* Skip comma */
 415                    if (*language != '\0')
 416                        language++;
 417
 418                    if (st->codec->extradata_size - 1 > extradata_copied) {
 419                        memcpy(q, st->codec->extradata + extradata_copied, 2);
 420                        extradata_copied += 2;
 421                        q += 2;
 422                    } else {
 423                        /* The Teletext descriptor:
 424                         * teletext_type: This 5-bit field indicates the type of Teletext page indicated. (0x01 Initial Teletext page)
 425                         * teletext_magazine_number: This is a 3-bit field which identifies the magazine number.
 426                         * teletext_page_number: This is an 8-bit field giving two 4-bit hex digits identifying the page number. */
 427                        *q++ = 0x08;
 428                        *q++ = 0x00;
 429                    }
 430                }
 431
 432                *len_ptr = q - len_ptr - 1;
 433             }
 434         }
 435         break;
 436         case AVMEDIA_TYPE_VIDEO:
 437             if (stream_type == STREAM_TYPE_VIDEO_DIRAC) {
 438                 *q++ = 0x05; /*MPEG-2 registration descriptor*/
 439                 *q++ = 4;
 440                 *q++ = 'd';
 441                 *q++ = 'r';
 442                 *q++ = 'a';
 443                 *q++ = 'c';
 444             }
 445             break;
 446         case AVMEDIA_TYPE_DATA:
 447             if (st->codec->codec_id == AV_CODEC_ID_SMPTE_KLV) {
 448                 *q++ = 0x05; /* MPEG-2 registration descriptor */
 449                 *q++ = 4;
 450                 *q++ = 'K';
 451                 *q++ = 'L';
 452                 *q++ = 'V';
 453                 *q++ = 'A';
 454             }
 455             break;
 456         }
 457
 458         val = 0xf000 | (q - desc_length_ptr - 2);
 459         desc_length_ptr[0] = val >> 8;
 460         desc_length_ptr[1] = val;
 461     }
 462     mpegts_write_section1(&service->pmt, PMT_TID, service->sid, ts->tables_version, 0, 0,
 463                           data, q - data);
 464     return 0;
 465 }
 466
 467 /* NOTE: str == NULL is accepted for an empty string */
 468 static void putstr8(uint8_t **q_ptr, const char *str)
 469 {
 470     uint8_t *q;
 471     int len;
 472
 473     q = *q_ptr;
 474     if (!str)
 475         len = 0;
 476     else
 477         len = strlen(str);
 478     *q++ = len;
 479     memcpy(q, str, len);
 480     q     += len;
 481     *q_ptr = q;
 482 }
 483
 484 static void mpegts_write_sdt(AVFormatContext *s)
 485 {
 486     MpegTSWrite *ts = s->priv_data;
 487     MpegTSService *service;
 488     uint8_t data[SECTION_LENGTH], *q, *desc_list_len_ptr, *desc_len_ptr;
 489     int i, running_status, free_ca_mode, val;
 490
 491     q = data;
 492     put16(&q, ts->onid);
 493     *q++ = 0xff;
 494     for (i = 0; i < ts->nb_services; i++) {
 495         service = ts->services[i];
 496         put16(&q, service->sid);
 497         *q++              = 0xfc | 0x00; /* currently no EIT info */
 498         desc_list_len_ptr = q;
 499         q                += 2;
 500         running_status    = 4; /* running */
 501         free_ca_mode      = 0;
 502
 503         /* write only one descriptor for the service name and provider */
 504         *q++         = 0x48;
 505         desc_len_ptr = q;
 506         q++;
 507         *q++         = 0x01; /* digital television service */
 508         putstr8(&q, service->provider_name);
 509         putstr8(&q, service->name);
 510         desc_len_ptr[0] = q - desc_len_ptr - 1;
 511
 512         /* fill descriptor length */
 513         val = (running_status << 13) | (free_ca_mode << 12) |
 514               (q - desc_list_len_ptr - 2);
 515         desc_list_len_ptr[0] = val >> 8;
 516         desc_list_len_ptr[1] = val;
 517     }
 518     mpegts_write_section1(&ts->sdt, SDT_TID, ts->tsid, ts->tables_version, 0, 0,
 519                           data, q - data);
 520 }
 521
 522 static MpegTSService *mpegts_add_service(MpegTSWrite *ts, int sid,
 523                                          const char *provider_name,
 524                                          const char *name)
 525 {
 526     MpegTSService *service;
 527
 528     service = av_mallocz(sizeof(MpegTSService));
 529     if (!service)
 530         return NULL;
 531     service->pmt.pid       = ts->pmt_start_pid + ts->nb_services;
 532     service->sid           = sid;
 533     service->pcr_pid       = 0x1fff;
 534     service->provider_name = av_strdup(provider_name);
 535     service->name          = av_strdup(name);
 536     if (!service->provider_name || !service->name)
 537         goto fail;
 538     if (av_dynarray_add_nofree(&ts->services, &ts->nb_services, service) < 0)
 539         goto fail;
 540
 541     return service;
 542 fail:
 543     av_freep(&service->provider_name);
 544     av_freep(&service->name);
 545     av_free(service);
 546     return NULL;
 547 }
 548
 549 static int64_t get_pcr(const MpegTSWrite *ts, AVIOContext *pb)
 550 {
 551     return av_rescale(avio_tell(pb) + 11, 8 * PCR_TIME_BASE, ts->mux_rate) +
 552            ts->first_pcr;
 553 }
 554
 555 static void mpegts_prefix_m2ts_header(AVFormatContext *s)
 556 {
 557     MpegTSWrite *ts = s->priv_data;
 558     if (ts->m2ts_mode) {
 559         int64_t pcr = get_pcr(s->priv_data, s->pb);
 560         uint32_t tp_extra_header = pcr % 0x3fffffff;
 561         tp_extra_header = AV_RB32(&tp_extra_header);
 562         avio_write(s->pb, (unsigned char *) &tp_extra_header,
 563                 sizeof(tp_extra_header));
 564     }
 565 }
 566
 567 static void section_write_packet(MpegTSSection *s, const uint8_t *packet)
 568 {
 569     AVFormatContext *ctx = s->opaque;
 570     mpegts_prefix_m2ts_header(ctx);
 571     avio_write(ctx->pb, packet, TS_PACKET_SIZE);
 572 }
 573
 574 static int mpegts_write_header(AVFormatContext *s)
 575 {
 576     MpegTSWrite *ts = s->priv_data;
 577     MpegTSWriteStream *ts_st;
 578     MpegTSService *service;
 579     AVStream *st, *pcr_st = NULL;
 580     AVDictionaryEntry *title, *provider;
 581     int i, j;
 582     const char *service_name;
 583     const char *provider_name;
 584     int *pids;
 585     int ret;
 586
 587     if (s->max_delay < 0) /* Not set by the caller */
 588         s->max_delay = 0;
 589
 590     // round up to a whole number of TS packets
 591     ts->pes_payload_size = (ts->pes_payload_size + 14 + 183) / 184 * 184 - 14;
 592
 593     ts->tsid = ts->transport_stream_id;
 594     ts->onid = ts->original_network_id;
 595     /* allocate a single DVB service */
 596     title = av_dict_get(s->metadata, "service_name", NULL, 0);
 597     if (!title)
 598         title = av_dict_get(s->metadata, "title", NULL, 0);
 599     service_name  = title ? title->value : DEFAULT_SERVICE_NAME;
 600     provider      = av_dict_get(s->metadata, "service_provider", NULL, 0);
 601     provider_name = provider ? provider->value : DEFAULT_PROVIDER_NAME;
 602     service       = mpegts_add_service(ts, ts->service_id,
 603                                        provider_name, service_name);
 604
 605     if (!service)
 606         return AVERROR(ENOMEM);
 607
 608     service->pmt.write_packet = section_write_packet;
 609     service->pmt.opaque       = s;
 610     service->pmt.cc           = 15;
 611
 612     ts->pat.pid          = PAT_PID;
 613     /* Initialize at 15 so that it wraps and is equal to 0 for the
 614      * first packet we write. */
 615     ts->pat.cc           = 15;
 616     ts->pat.write_packet = section_write_packet;
 617     ts->pat.opaque       = s;
 618
 619     ts->sdt.pid          = SDT_PID;
 620     ts->sdt.cc           = 15;
 621     ts->sdt.write_packet = section_write_packet;
 622     ts->sdt.opaque       = s;
 623
 624     pids = av_malloc_array(s->nb_streams, sizeof(*pids));
 625     if (!pids) {
 626         ret = AVERROR(ENOMEM);
 627         goto fail;
 628     }
 629
 630     /* assign pids to each stream */
 631     for (i = 0; i < s->nb_streams; i++) {
 632         st = s->streams[i];
 633
 634         ts_st = av_mallocz(sizeof(MpegTSWriteStream));
 635         if (!ts_st) {
 636             ret = AVERROR(ENOMEM);
 637             goto fail;
 638         }
 639         st->priv_data = ts_st;
 640
 641         ts_st->user_tb = st->time_base;
 642         avpriv_set_pts_info(st, 33, 1, 90000);
 643
 644         ts_st->payload = av_mallocz(ts->pes_payload_size);
 645         if (!ts_st->payload) {
 646             ret = AVERROR(ENOMEM);
 647             goto fail;
 648         }
 649         ts_st->service = service;
 650         /* MPEG pid values < 16 are reserved. Applications which set st->id in
 651          * this range are assigned a calculated pid. */
 652         if (st->id < 16) {
 653             ts_st->pid = ts->start_pid + i;
 654         } else if (st->id < 0x1FFF) {
 655             ts_st->pid = st->id;
 656         } else {
 657             av_log(s, AV_LOG_ERROR,
 658                    "Invalid stream id %d, must be less than 8191\n", st->id);
 659             ret = AVERROR(EINVAL);
 660             goto fail;
 661         }
 662         if (ts_st->pid == service->pmt.pid) {
 663             av_log(s, AV_LOG_ERROR, "Duplicate stream id %d\n", ts_st->pid);
 664             ret = AVERROR(EINVAL);
 665             goto fail;
 666         }
 667         for (j = 0; j < i; j++) {
 668             if (pids[j] == ts_st->pid) {
 669                 av_log(s, AV_LOG_ERROR, "Duplicate stream id %d\n", ts_st->pid);
 670                 ret = AVERROR(EINVAL);
 671                 goto fail;
 672             }
 673         }
 674         pids[i]                = ts_st->pid;
 675         ts_st->payload_pts     = AV_NOPTS_VALUE;
 676         ts_st->payload_dts     = AV_NOPTS_VALUE;
 677         ts_st->first_pts_check = 1;
 678         ts_st->cc              = 15;
 679         /* update PCR pid by using the first video stream */
 680         if (st->codec->codec_type == AVMEDIA_TYPE_VIDEO &&
 681             service->pcr_pid == 0x1fff) {
 682             service->pcr_pid = ts_st->pid;
 683             pcr_st           = st;
 684         }
 685         if (st->codec->codec_id == AV_CODEC_ID_AAC &&
 686             st->codec->extradata_size > 0) {
 687             AVStream *ast;
 688             ts_st->amux = avformat_alloc_context();
 689             if (!ts_st->amux) {
 690                 ret = AVERROR(ENOMEM);
 691                 goto fail;
 692             }
 693             ts_st->amux->oformat =
 694                 av_guess_format((ts->flags & MPEGTS_FLAG_AAC_LATM) ? "latm" : "adts",
 695                                 NULL, NULL);
 696             if (!ts_st->amux->oformat) {
 697                 ret = AVERROR(EINVAL);
 698                 goto fail;
 699             }
 700             if (!(ast = avformat_new_stream(ts_st->amux, NULL))) {
 701                 ret = AVERROR(ENOMEM);
 702                 goto fail;
 703             }
 704             ret = avcodec_copy_context(ast->codec, st->codec);
 705             if (ret != 0)
 706                 goto fail;
 707             ret = avformat_write_header(ts_st->amux, NULL);
 708             if (ret < 0)
 709                 goto fail;
 710         }
 711     }
 712
 713     av_freep(&pids);
 714
 715     /* if no video stream, use the first stream as PCR */
 716     if (service->pcr_pid == 0x1fff && s->nb_streams > 0) {
 717         pcr_st           = s->streams[0];
 718         ts_st            = pcr_st->priv_data;
 719         service->pcr_pid = ts_st->pid;
 720     } else
 721         ts_st = pcr_st->priv_data;
 722
 723     if (ts->mux_rate > 1) {
 724         service->pcr_packet_period = (ts->mux_rate * ts->pcr_period) /
 725                                      (TS_PACKET_SIZE * 8 * 1000);
 726         ts->sdt_packet_period      = (ts->mux_rate * SDT_RETRANS_TIME) /
 727                                      (TS_PACKET_SIZE * 8 * 1000);
 728         ts->pat_packet_period      = (ts->mux_rate * PAT_RETRANS_TIME) /
 729                                      (TS_PACKET_SIZE * 8 * 1000);
 730
 731         if (ts->copyts < 1)
 732             ts->first_pcr = av_rescale(s->max_delay, PCR_TIME_BASE, AV_TIME_BASE);
 733     } else {
 734         /* Arbitrary values, PAT/PMT will also be written on video key frames */
 735         ts->sdt_packet_period = 200;
 736         ts->pat_packet_period = 40;
 737         if (pcr_st->codec->codec_type == AVMEDIA_TYPE_AUDIO) {
 738             if (!pcr_st->codec->frame_size) {
 739                 av_log(s, AV_LOG_WARNING, "frame size not set\n");
 740                 service->pcr_packet_period =
 741                     pcr_st->codec->sample_rate / (10 * 512);
 742             } else {
 743                 service->pcr_packet_period =
 744                     pcr_st->codec->sample_rate / (10 * pcr_st->codec->frame_size);
 745             }
 746         } else {
 747             // max delta PCR 0.1s
 748             // TODO: should be avg_frame_rate
 749             service->pcr_packet_period =
 750                 ts_st->user_tb.den / (10 * ts_st->user_tb.num);
 751         }
 752         if (!service->pcr_packet_period)
 753             service->pcr_packet_period = 1;
 754     }
 755
 756     // output a PCR as soon as possible
 757     service->pcr_packet_count = service->pcr_packet_period;
 758     ts->pat_packet_count      = ts->pat_packet_period - 1;
 759     ts->sdt_packet_count      = ts->sdt_packet_period - 1;
 760
 761     if (ts->mux_rate == 1)
 762         av_log(s, AV_LOG_VERBOSE, "muxrate VBR, ");
 763     else
 764         av_log(s, AV_LOG_VERBOSE, "muxrate %d, ", ts->mux_rate);
 765     av_log(s, AV_LOG_VERBOSE,
 766            "pcr every %d pkts, sdt every %d, pat/pmt every %d pkts\n",
 767            service->pcr_packet_period,
 768            ts->sdt_packet_period, ts->pat_packet_period);
 769
 770     if (ts->m2ts_mode == -1) {
 771         if (av_match_ext(s->filename, "m2ts")) {
 772             ts->m2ts_mode = 1;
 773         } else {
 774             ts->m2ts_mode = 0;
 775         }
 776     }
 777
 778     return 0;
 779
 780 fail:
 781     av_freep(&pids);
 782     for (i = 0; i < s->nb_streams; i++) {
 783         st    = s->streams[i];
 784         ts_st = st->priv_data;
 785         if (ts_st) {
 786             av_freep(&ts_st->payload);
 787             if (ts_st->amux) {
 788                 avformat_free_context(ts_st->amux);
 789                 ts_st->amux = NULL;
 790             }
 791         }
 792         av_freep(&st->priv_data);
 793     }
 794
 795     for (i = 0; i < ts->nb_services; i++) {
 796         service = ts->services[i];
 797         av_freep(&service->provider_name);
 798         av_freep(&service->name);
 799         av_free(service);
 800     }
 801     av_free(ts->services);
 802     return ret;
 803 }
 804
 805 /* send SDT, PAT and PMT tables regulary */
 806 static void retransmit_si_info(AVFormatContext *s, int force_pat)
 807 {
 808     MpegTSWrite *ts = s->priv_data;
 809     int i;
 810
 811     if (++ts->sdt_packet_count == ts->sdt_packet_period) {
 812         ts->sdt_packet_count = 0;
 813         mpegts_write_sdt(s);
 814     }
 815     if (++ts->pat_packet_count == ts->pat_packet_period || force_pat) {
 816         ts->pat_packet_count = 0;
 817         mpegts_write_pat(s);
 818         for (i = 0; i < ts->nb_services; i++)
 819             mpegts_write_pmt(s, ts->services[i]);
 820     }
 821 }
 822
 823 static int write_pcr_bits(uint8_t *buf, int64_t pcr)
 824 {
 825     int64_t pcr_low = pcr % 300, pcr_high = pcr / 300;
 826
 827     *buf++ = pcr_high >> 25;
 828     *buf++ = pcr_high >> 17;
 829     *buf++ = pcr_high >>  9;
 830     *buf++ = pcr_high >>  1;
 831     *buf++ = pcr_high <<  7 | pcr_low >> 8 | 0x7e;
 832     *buf++ = pcr_low;
 833
 834     return 6;
 835 }
 836
 837 /* Write a single null transport stream packet */
 838 static void mpegts_insert_null_packet(AVFormatContext *s)
 839 {
 840     uint8_t *q;
 841     uint8_t buf[TS_PACKET_SIZE];
 842
 843     q    = buf;
 844     *q++ = 0x47;
 845     *q++ = 0x00 | 0x1f;
 846     *q++ = 0xff;
 847     *q++ = 0x10;
 848     memset(q, 0x0FF, TS_PACKET_SIZE - (q - buf));
 849     mpegts_prefix_m2ts_header(s);
 850     avio_write(s->pb, buf, TS_PACKET_SIZE);
 851 }
 852
 853 /* Write a single transport stream packet with a PCR and no payload */
 854 static void mpegts_insert_pcr_only(AVFormatContext *s, AVStream *st)
 855 {
 856     MpegTSWrite *ts = s->priv_data;
 857     MpegTSWriteStream *ts_st = st->priv_data;
 858     uint8_t *q;
 859     uint8_t buf[TS_PACKET_SIZE];
 860
 861     q    = buf;
 862     *q++ = 0x47;
 863     *q++ = ts_st->pid >> 8;
 864     *q++ = ts_st->pid;
 865     *q++ = 0x20 | ts_st->cc;   /* Adaptation only */
 866     /* Continuity Count field does not increment (see 13818-1 section 2.4.3.3) */
 867     *q++ = TS_PACKET_SIZE - 5; /* Adaptation Field Length */
 868     *q++ = 0x10;               /* Adaptation flags: PCR present */
 869
 870     /* PCR coded into 6 bytes */
 871     q += write_pcr_bits(q, get_pcr(ts, s->pb));
 872
 873     /* stuffing bytes */
 874     memset(q, 0xFF, TS_PACKET_SIZE - (q - buf));
 875     mpegts_prefix_m2ts_header(s);
 876     avio_write(s->pb, buf, TS_PACKET_SIZE);
 877 }
 878
 879 static void write_pts(uint8_t *q, int fourbits, int64_t pts)
 880 {
 881     int val;
 882
 883     val  = fourbits << 4 | (((pts >> 30) & 0x07) << 1) | 1;
 884     *q++ = val;
 885     val  = (((pts >> 15) & 0x7fff) << 1) | 1;
 886     *q++ = val >> 8;
 887     *q++ = val;
 888     val  = (((pts) & 0x7fff) << 1) | 1;
 889     *q++ = val >> 8;
 890     *q++ = val;
 891 }
 892
 893 /* Set an adaptation field flag in an MPEG-TS packet*/
 894 static void set_af_flag(uint8_t *pkt, int flag)
 895 {
 896     // expect at least one flag to set
 897     av_assert0(flag);
 898
 899     if ((pkt[3] & 0x20) == 0) {
 900         // no AF yet, set adaptation field flag
 901         pkt[3] |= 0x20;
 902         // 1 byte length, no flags
 903         pkt[4] = 1;
 904         pkt[5] = 0;
 905     }
 906     pkt[5] |= flag;
 907 }
 908
 909 /* Extend the adaptation field by size bytes */
 910 static void extend_af(uint8_t *pkt, int size)
 911 {
 912     // expect already existing adaptation field
 913     av_assert0(pkt[3] & 0x20);
 914     pkt[4] += size;
 915 }
 916
 917 /* Get a pointer to MPEG-TS payload (right after TS packet header) */
 918 static uint8_t *get_ts_payload_start(uint8_t *pkt)
 919 {
 920     if (pkt[3] & 0x20)
 921         return pkt + 5 + pkt[4];
 922     else
 923         return pkt + 4;
 924 }
 925
 926 /* Add a PES header to the front of the payload, and segment into an integer
 927  * number of TS packets. The final TS packet is padded using an oversized
 928  * adaptation header to exactly fill the last TS packet.
 929  * NOTE: 'payload' contains a complete PES payload. */
 930 static void mpegts_write_pes(AVFormatContext *s, AVStream *st,
 931                              const uint8_t *payload, int payload_size,
 932                              int64_t pts, int64_t dts, int key)
 933 {
 934     MpegTSWriteStream *ts_st = st->priv_data;
 935     MpegTSWrite *ts = s->priv_data;
 936     uint8_t buf[TS_PACKET_SIZE];
 937     uint8_t *q;
 938     int val, is_start, len, header_len, write_pcr, is_dvb_subtitle, is_dvb_teletext, flags;
 939     int afc_len, stuffing_len;
 940     int64_t pcr = -1; /* avoid warning */
 941     int64_t delay = av_rescale(s->max_delay, 90000, AV_TIME_BASE);
 942     int force_pat = st->codec->codec_type == AVMEDIA_TYPE_VIDEO && key && !ts_st->prev_payload_key;
 943
 944     is_start = 1;
 945     while (payload_size > 0) {
 946         retransmit_si_info(s, force_pat);
 947         force_pat = 0;
 948
 949         write_pcr = 0;
 950         if (ts_st->pid == ts_st->service->pcr_pid) {
 951             if (ts->mux_rate > 1 || is_start) // VBR pcr period is based on frames
 952                 ts_st->service->pcr_packet_count++;
 953             if (ts_st->service->pcr_packet_count >=
 954                 ts_st->service->pcr_packet_period) {
 955                 ts_st->service->pcr_packet_count = 0;
 956                 write_pcr = 1;
 957             }
 958         }
 959
 960         if (ts->mux_rate > 1 && dts != AV_NOPTS_VALUE &&
 961             (dts - get_pcr(ts, s->pb) / 300) > delay) {
 962             /* pcr insert gets priority over null packet insert */
 963             if (write_pcr)
 964                 mpegts_insert_pcr_only(s, st);
 965             else
 966                 mpegts_insert_null_packet(s);
 967             /* recalculate write_pcr and possibly retransmit si_info */
 968             continue;
 969         }
 970
 971         /* prepare packet header */
 972         q    = buf;
 973         *q++ = 0x47;
 974         val  = ts_st->pid >> 8;
 975         if (is_start)
 976             val |= 0x40;
 977         *q++      = val;
 978         *q++      = ts_st->pid;
 979         ts_st->cc = ts_st->cc + 1 & 0xf;
 980         *q++      = 0x10 | ts_st->cc; // payload indicator + CC
 981         if (key && is_start && pts != AV_NOPTS_VALUE) {
 982             // set Random Access for key frames
 983             if (ts_st->pid == ts_st->service->pcr_pid)
 984                 write_pcr = 1;
 985             set_af_flag(buf, 0x40);
 986             q = get_ts_payload_start(buf);
 987         }
 988         if (write_pcr) {
 989             set_af_flag(buf, 0x10);
 990             q = get_ts_payload_start(buf);
 991             // add 11, pcr references the last byte of program clock reference base
 992             if (ts->mux_rate > 1)
 993                 pcr = get_pcr(ts, s->pb);
 994             else
 995                 pcr = (dts - delay) * 300;
 996             if (dts != AV_NOPTS_VALUE && dts < pcr / 300)
 997                 av_log(s, AV_LOG_WARNING, "dts < pcr, TS is invalid\n");
 998             extend_af(buf, write_pcr_bits(q, pcr));
 999             q = get_ts_payload_start(buf);
1000         }
1001         if (is_start) {
1002             int pes_extension = 0;
1003             int pes_header_stuffing_bytes = 0;
1004             /* write PES header */
1005             *q++ = 0x00;
1006             *q++ = 0x00;
1007             *q++ = 0x01;
1008             is_dvb_subtitle = 0;
1009             is_dvb_teletext = 0;
1010             if (st->codec->codec_type == AVMEDIA_TYPE_VIDEO) {
1011                 if (st->codec->codec_id == AV_CODEC_ID_DIRAC)
1012                     *q++ = 0xfd;
1013                 else
1014                     *q++ = 0xe0;
1015             } else if (st->codec->codec_type == AVMEDIA_TYPE_AUDIO &&
1016                        (st->codec->codec_id == AV_CODEC_ID_MP2 ||
1017                         st->codec->codec_id == AV_CODEC_ID_MP3 ||
1018                         st->codec->codec_id == AV_CODEC_ID_AAC)) {
1019                 *q++ = 0xc0;
1020             } else if (st->codec->codec_type == AVMEDIA_TYPE_AUDIO &&
1021                         st->codec->codec_id == AV_CODEC_ID_AC3 &&
1022                         ts->m2ts_mode) {
1023                 *q++ = 0xfd;
1024             } else {
1025                 *q++ = 0xbd;
1026                 if (st->codec->codec_type == AVMEDIA_TYPE_SUBTITLE) {
1027                     if (st->codec->codec_id == AV_CODEC_ID_DVB_SUBTITLE) {
1028                         is_dvb_subtitle = 1;
1029                     } else if (st->codec->codec_id == AV_CODEC_ID_DVB_TELETEXT) {
1030                         is_dvb_teletext = 1;
1031                     }
1032                 }
1033             }
1034             header_len = 0;
1035             flags      = 0;
1036             if (pts != AV_NOPTS_VALUE) {
1037                 header_len += 5;
1038                 flags      |= 0x80;
1039             }
1040             if (dts != AV_NOPTS_VALUE && pts != AV_NOPTS_VALUE && dts != pts) {
1041                 header_len += 5;
1042                 flags      |= 0x40;
1043             }
1044             if (st->codec->codec_type == AVMEDIA_TYPE_VIDEO &&
1045                 st->codec->codec_id == AV_CODEC_ID_DIRAC) {
1046                 /* set PES_extension_flag */
1047                 pes_extension = 1;
1048                 flags        |= 0x01;
1049
1050                 /* One byte for PES2 extension flag +
1051                  * one byte for extension length +
1052                  * one byte for extension id */
1053                 header_len += 3;
1054             }
1055             /* for Blu-ray AC3 Audio the PES Extension flag should be as follow
1056              * otherwise it will not play sound on blu-ray
1057              */
1058             if (ts->m2ts_mode &&
1059                 st->codec->codec_type == AVMEDIA_TYPE_AUDIO &&
1060                 st->codec->codec_id == AV_CODEC_ID_AC3) {
1061                         /* set PES_extension_flag */
1062                         pes_extension = 1;
1063                         flags |= 0x01;
1064                         header_len += 3;
1065             }
1066             if (is_dvb_teletext) {
1067                 pes_header_stuffing_bytes = 0x24 - header_len;
1068                 header_len = 0x24;
1069             }
1070             len = payload_size + header_len + 3;
1071             /* 3 extra bytes should be added to DVB subtitle payload: 0x20 0x00 at the beginning and trailing 0xff */
1072             if (is_dvb_subtitle) {
1073                 len += 3;
1074                 payload_size++;
1075             }
1076             if (len > 0xffff)
1077                 len = 0;
1078             if (ts->omit_video_pes_length && st->codec->codec_type == AVMEDIA_TYPE_VIDEO) {
1079                 len = 0;
1080             }
1081             *q++ = len >> 8;
1082             *q++ = len;
1083             val  = 0x80;
1084             /* data alignment indicator is required for subtitle and data streams */
1085             if (st->codec->codec_type == AVMEDIA_TYPE_SUBTITLE || st->codec->codec_type == AVMEDIA_TYPE_DATA)
1086                 val |= 0x04;
1087             *q++ = val;
1088             *q++ = flags;
1089             *q++ = header_len;
1090             if (pts != AV_NOPTS_VALUE) {
1091                 write_pts(q, flags >> 6, pts);
1092                 q += 5;
1093             }
1094             if (dts != AV_NOPTS_VALUE && pts != AV_NOPTS_VALUE && dts != pts) {
1095                 write_pts(q, 1, dts);
1096                 q += 5;
1097             }
1098             if (pes_extension && st->codec->codec_id == AV_CODEC_ID_DIRAC) {
1099                 flags = 0x01;  /* set PES_extension_flag_2 */
1100                 *q++  = flags;
1101                 *q++  = 0x80 | 0x01; /* marker bit + extension length */
1102                 /* Set the stream ID extension flag bit to 0 and
1103                  * write the extended stream ID. */
1104                 *q++ = 0x00 | 0x60;
1105             }
1106             /* For Blu-ray AC3 Audio Setting extended flags */
1107           if (ts->m2ts_mode &&
1108               pes_extension &&
1109               st->codec->codec_id == AV_CODEC_ID_AC3) {
1110                       flags = 0x01; /* set PES_extension_flag_2 */
1111                       *q++ = flags;
1112                       *q++ = 0x80 | 0x01; /* marker bit + extension length */
1113                       *q++ = 0x00 | 0x71; /* for AC3 Audio (specifically on blue-rays) */
1114               }
1115
1116
1117             if (is_dvb_subtitle) {
1118                 /* First two fields of DVB subtitles PES data:
1119                  * data_identifier: for DVB subtitle streams shall be coded with the value 0x20
1120                  * subtitle_stream_id: for DVB subtitle stream shall be identified by the value 0x00 */
1121                 *q++ = 0x20;
1122                 *q++ = 0x00;
1123             }
1124             if (is_dvb_teletext) {
1125                 memset(q, 0xff, pes_header_stuffing_bytes);
1126                 q += pes_header_stuffing_bytes;
1127             }
1128             is_start = 0;
1129         }
1130         /* header size */
1131         header_len = q - buf;
1132         /* data len */
1133         len = TS_PACKET_SIZE - header_len;
1134         if (len > payload_size)
1135             len = payload_size;
1136         stuffing_len = TS_PACKET_SIZE - header_len - len;
1137         if (stuffing_len > 0) {
1138             /* add stuffing with AFC */
1139             if (buf[3] & 0x20) {
1140                 /* stuffing already present: increase its size */
1141                 afc_len = buf[4] + 1;
1142                 memmove(buf + 4 + afc_len + stuffing_len,
1143                         buf + 4 + afc_len,
1144                         header_len - (4 + afc_len));
1145                 buf[4] += stuffing_len;
1146                 memset(buf + 4 + afc_len, 0xff, stuffing_len);
1147             } else {
1148                 /* add stuffing */
1149                 memmove(buf + 4 + stuffing_len, buf + 4, header_len - 4);
1150                 buf[3] |= 0x20;
1151                 buf[4]  = stuffing_len - 1;
1152                 if (stuffing_len >= 2) {
1153                     buf[5] = 0x00;
1154                     memset(buf + 6, 0xff, stuffing_len - 2);
1155                 }
1156             }
1157         }
1158
1159         if (is_dvb_subtitle && payload_size == len) {
1160             memcpy(buf + TS_PACKET_SIZE - len, payload, len - 1);
1161             buf[TS_PACKET_SIZE - 1] = 0xff; /* end_of_PES_data_field_marker: an 8-bit field with fixed contents 0xff for DVB subtitle */
1162         } else {
1163             memcpy(buf + TS_PACKET_SIZE - len, payload, len);
1164         }
1165
1166         payload      += len;
1167         payload_size -= len;
1168         mpegts_prefix_m2ts_header(s);
1169         avio_write(s->pb, buf, TS_PACKET_SIZE);
1170     }
1171     ts_st->prev_payload_key = key;
1172 }
1173
1174 int ff_check_h264_startcode(AVFormatContext *s, const AVStream *st, const AVPacket *pkt)
1175 {
1176     if (pkt->size < 5 || AV_RB32(pkt->data) != 0x0000001) {
1177         if (!st->nb_frames) {
1178             av_log(s, AV_LOG_ERROR, "H.264 bitstream malformed, "
1179                    "no startcode found, use the h264_mp4toannexb bitstream filter (-bsf h264_mp4toannexb)\n");
1180             return AVERROR_INVALIDDATA;
1181         }
1182         av_log(s, AV_LOG_WARNING, "H.264 bitstream error, startcode missing\n");
1183     }
1184     return 0;
1185 }
1186
1187 static int check_hevc_startcode(AVFormatContext *s, const AVStream *st, const AVPacket *pkt)
1188 {
1189     if (pkt->size < 5 || AV_RB32(pkt->data) != 0x0000001) {
1190         if (!st->nb_frames) {
1191             av_log(s, AV_LOG_ERROR, "HEVC bitstream malformed, no startcode found\n");
1192             return AVERROR_PATCHWELCOME;
1193         }
1194         av_log(s, AV_LOG_WARNING, "HEVC bitstream error, startcode missing\n");
1195     }
1196     return 0;
1197 }
1198
1199 static int mpegts_write_packet_internal(AVFormatContext *s, AVPacket *pkt)
1200 {
1201     AVStream *st = s->streams[pkt->stream_index];
1202     int size = pkt->size;
1203     uint8_t *buf = pkt->data;
1204     uint8_t *data = NULL;
1205     MpegTSWrite *ts = s->priv_data;
1206     MpegTSWriteStream *ts_st = st->priv_data;
1207     const int64_t delay = av_rescale(s->max_delay, 90000, AV_TIME_BASE) * 2;
1208     int64_t dts = pkt->dts, pts = pkt->pts;
1209
1210     if (ts->reemit_pat_pmt) {
1211         av_log(s, AV_LOG_WARNING,
1212                "resend_headers option is deprecated, use -mpegts_flags resend_headers\n");
1213         ts->reemit_pat_pmt = 0;
1214         ts->flags         |= MPEGTS_FLAG_REEMIT_PAT_PMT;
1215     }
1216
1217     if (ts->flags & MPEGTS_FLAG_REEMIT_PAT_PMT) {
1218         ts->pat_packet_count = ts->pat_packet_period - 1;
1219         ts->sdt_packet_count = ts->sdt_packet_period - 1;
1220         ts->flags           &= ~MPEGTS_FLAG_REEMIT_PAT_PMT;
1221     }
1222
1223     if (ts->copyts < 1) {
1224         if (pts != AV_NOPTS_VALUE)
1225             pts += delay;
1226         if (dts != AV_NOPTS_VALUE)
1227             dts += delay;
1228     }
1229
1230     if (ts_st->first_pts_check && pts == AV_NOPTS_VALUE) {
1231         av_log(s, AV_LOG_ERROR, "first pts value must be set\n");
1232         return AVERROR_INVALIDDATA;
1233     }
1234     ts_st->first_pts_check = 0;
1235
1236     if (st->codec->codec_id == AV_CODEC_ID_H264) {
1237         const uint8_t *p = buf, *buf_end = p + size;
1238         uint32_t state = -1;
1239         int ret = ff_check_h264_startcode(s, st, pkt);
1240         if (ret < 0)
1241             return ret;
1242
1243         do {
1244             p = avpriv_find_start_code(p, buf_end, &state);
1245             av_dlog(s, "nal %d\n", state & 0x1f);
1246         } while (p < buf_end && (state & 0x1f) != 9 &&
1247                  (state & 0x1f) != 5 && (state & 0x1f) != 1);
1248
1249         if ((state & 0x1f) != 9) { // AUD NAL
1250             data = av_malloc(pkt->size + 6);
1251             if (!data)
1252                 return AVERROR(ENOMEM);
1253             memcpy(data + 6, pkt->data, pkt->size);
1254             AV_WB32(data, 0x00000001);
1255             data[4] = 0x09;
1256             data[5] = 0xf0; // any slice type (0xe) + rbsp stop one bit
1257             buf     = data;
1258             size    = pkt->size + 6;
1259         }
1260     } else if (st->codec->codec_id == AV_CODEC_ID_AAC) {
1261         if (pkt->size < 2) {
1262             av_log(s, AV_LOG_ERROR, "AAC packet too short\n");
1263             return AVERROR_INVALIDDATA;
1264         }
1265         if ((AV_RB16(pkt->data) & 0xfff0) != 0xfff0) {
1266             int ret;
1267             AVPacket pkt2;
1268
1269             if (!ts_st->amux) {
1270                 av_log(s, AV_LOG_ERROR, "AAC bitstream not in ADTS format "
1271                                         "and extradata missing\n");
1272                 return AVERROR_INVALIDDATA;
1273             }
1274
1275             av_init_packet(&pkt2);
1276             pkt2.data = pkt->data;
1277             pkt2.size = pkt->size;
1278             av_assert0(pkt->dts != AV_NOPTS_VALUE);
1279             pkt2.dts = av_rescale_q(pkt->dts, st->time_base, ts_st->amux->streams[0]->time_base);
1280
1281             ret = avio_open_dyn_buf(&ts_st->amux->pb);
1282             if (ret < 0)
1283                 return AVERROR(ENOMEM);
1284
1285             ret = av_write_frame(ts_st->amux, &pkt2);
1286             if (ret < 0) {
1287                 avio_close_dyn_buf(ts_st->amux->pb, &data);
1288                 ts_st->amux->pb = NULL;
1289                 av_free(data);
1290                 return ret;
1291             }
1292             size            = avio_close_dyn_buf(ts_st->amux->pb, &data);
1293             ts_st->amux->pb = NULL;
1294             buf             = data;
1295         }
1296     } else if (st->codec->codec_id == AV_CODEC_ID_HEVC) {
1297         int ret = check_hevc_startcode(s, st, pkt);
1298         if (ret < 0)
1299             return ret;
1300     }
1301
1302     if (pkt->dts != AV_NOPTS_VALUE) {
1303         int i;
1304         for(i=0; i<s->nb_streams; i++) {
1305             AVStream *st2 = s->streams[i];
1306             MpegTSWriteStream *ts_st2 = st2->priv_data;
1307             if (   ts_st2->payload_size
1308                && (ts_st2->payload_dts == AV_NOPTS_VALUE || dts - ts_st2->payload_dts > delay/2)) {
1309                 mpegts_write_pes(s, st2, ts_st2->payload, ts_st2->payload_size,
1310                                 ts_st2->payload_pts, ts_st2->payload_dts,
1311                                 ts_st2->payload_flags & AV_PKT_FLAG_KEY);
1312                 ts_st2->payload_size = 0;
1313             }
1314         }
1315     }
1316
1317     if (ts_st->payload_size && ts_st->payload_size + size > ts->pes_payload_size) {
1318         mpegts_write_pes(s, st, ts_st->payload, ts_st->payload_size,
1319                          ts_st->payload_pts, ts_st->payload_dts,
1320                          ts_st->payload_flags & AV_PKT_FLAG_KEY);
1321         ts_st->payload_size = 0;
1322     }
1323
1324     if (st->codec->codec_type != AVMEDIA_TYPE_AUDIO || size > ts->pes_payload_size) {
1325         av_assert0(!ts_st->payload_size);
1326         // for video and subtitle, write a single pes packet
1327         mpegts_write_pes(s, st, buf, size, pts, dts,
1328                          pkt->flags & AV_PKT_FLAG_KEY);
1329         av_free(data);
1330         return 0;
1331     }
1332
1333     if (!ts_st->payload_size) {
1334         ts_st->payload_pts   = pts;
1335         ts_st->payload_dts   = dts;
1336         ts_st->payload_flags = pkt->flags;
1337     }
1338
1339     memcpy(ts_st->payload + ts_st->payload_size, buf, size);
1340     ts_st->payload_size += size;
1341
1342     av_free(data);
1343
1344     return 0;
1345 }
1346
1347 static void mpegts_write_flush(AVFormatContext *s)
1348 {
1349     int i;
1350
1351     /* flush current packets */
1352     for (i = 0; i < s->nb_streams; i++) {
1353         AVStream *st = s->streams[i];
1354         MpegTSWriteStream *ts_st = st->priv_data;
1355         if (ts_st->payload_size > 0) {
1356             mpegts_write_pes(s, st, ts_st->payload, ts_st->payload_size,
1357                              ts_st->payload_pts, ts_st->payload_dts,
1358                              ts_st->payload_flags & AV_PKT_FLAG_KEY);
1359             ts_st->payload_size = 0;
1360         }
1361     }
1362 }
1363
1364 static int mpegts_write_packet(AVFormatContext *s, AVPacket *pkt)
1365 {
1366     if (!pkt) {
1367         mpegts_write_flush(s);
1368         return 1;
1369     } else {
1370         return mpegts_write_packet_internal(s, pkt);
1371     }
1372 }
1373
1374 static int mpegts_write_end(AVFormatContext *s)
1375 {
1376     MpegTSWrite *ts = s->priv_data;
1377     MpegTSService *service;
1378     int i;
1379
1380     mpegts_write_flush(s);
1381
1382     for (i = 0; i < s->nb_streams; i++) {
1383         AVStream *st = s->streams[i];
1384         MpegTSWriteStream *ts_st = st->priv_data;
1385         av_freep(&ts_st->payload);
1386         if (ts_st->amux) {
1387             avformat_free_context(ts_st->amux);
1388             ts_st->amux = NULL;
1389         }
1390     }
1391
1392     for (i = 0; i < ts->nb_services; i++) {
1393         service = ts->services[i];
1394         av_freep(&service->provider_name);
1395         av_freep(&service->name);
1396         av_free(service);
1397     }
1398     av_free(ts->services);
1399
1400     return 0;
1401 }
1402
1403 static const AVOption options[] = {
1404     { "mpegts_transport_stream_id", "Set transport_stream_id field.",
1405       offsetof(MpegTSWrite, transport_stream_id), AV_OPT_TYPE_INT,
1406       { .i64 = 0x0001 }, 0x0001, 0xffff, AV_OPT_FLAG_ENCODING_PARAM },
1407     { "mpegts_original_network_id", "Set original_network_id field.",
1408       offsetof(MpegTSWrite, original_network_id), AV_OPT_TYPE_INT,
1409       { .i64 = 0x0001 }, 0x0001, 0xffff, AV_OPT_FLAG_ENCODING_PARAM },
1410     { "mpegts_service_id", "Set service_id field.",
1411       offsetof(MpegTSWrite, service_id), AV_OPT_TYPE_INT,
1412       { .i64 = 0x0001 }, 0x0001, 0xffff, AV_OPT_FLAG_ENCODING_PARAM },
1413     { "mpegts_pmt_start_pid", "Set the first pid of the PMT.",
1414       offsetof(MpegTSWrite, pmt_start_pid), AV_OPT_TYPE_INT,
1415       { .i64 = 0x1000 }, 0x0010, 0x1f00, AV_OPT_FLAG_ENCODING_PARAM },
1416     { "mpegts_start_pid", "Set the first pid.",
1417       offsetof(MpegTSWrite, start_pid), AV_OPT_TYPE_INT,
1418       { .i64 = 0x0100 }, 0x0100, 0x0f00, AV_OPT_FLAG_ENCODING_PARAM },
1419     { "mpegts_m2ts_mode", "Enable m2ts mode.",
1420       offsetof(MpegTSWrite, m2ts_mode), AV_OPT_TYPE_INT,
1421       { .i64 = -1 }, -1, 1, AV_OPT_FLAG_ENCODING_PARAM },
1422     { "muxrate", NULL,
1423       offsetof(MpegTSWrite, mux_rate), AV_OPT_TYPE_INT,
1424       { .i64 = 1 }, 0, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM },
1425     { "pes_payload_size", "Minimum PES packet payload in bytes",
1426       offsetof(MpegTSWrite, pes_payload_size), AV_OPT_TYPE_INT,
1427       { .i64 = DEFAULT_PES_PAYLOAD_SIZE }, 0, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM },
1428     { "mpegts_flags", "MPEG-TS muxing flags",
1429       offsetof(MpegTSWrite, flags), AV_OPT_TYPE_FLAGS, { .i64 = 0 }, 0, INT_MAX,
1430       AV_OPT_FLAG_ENCODING_PARAM, "mpegts_flags" },
1431     { "resend_headers", "Reemit PAT/PMT before writing the next packet",
1432       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_FLAG_REEMIT_PAT_PMT }, 0, INT_MAX,
1433       AV_OPT_FLAG_ENCODING_PARAM, "mpegts_flags" },
1434     { "latm", "Use LATM packetization for AAC",
1435       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_FLAG_AAC_LATM }, 0, INT_MAX,
1436       AV_OPT_FLAG_ENCODING_PARAM, "mpegts_flags" },
1437     // backward compatibility
1438     { "resend_headers", "Reemit PAT/PMT before writing the next packet",
1439       offsetof(MpegTSWrite, reemit_pat_pmt), AV_OPT_TYPE_INT,
1440       { .i64 = 0 }, 0, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM },
1441     { "mpegts_copyts", "don't offset dts/pts",
1442       offsetof(MpegTSWrite, copyts), AV_OPT_TYPE_INT,
1443       { .i64 = -1 }, -1, 1, AV_OPT_FLAG_ENCODING_PARAM },
1444     { "tables_version", "set PAT, PMT and SDT version",
1445       offsetof(MpegTSWrite, tables_version), AV_OPT_TYPE_INT,
1446       { .i64 = 0 }, 0, 31, AV_OPT_FLAG_ENCODING_PARAM },
1447     { "omit_video_pes_length", "Omit the PES packet length for video packets",
1448       offsetof(MpegTSWrite, omit_video_pes_length), AV_OPT_TYPE_INT,
1449       { .i64 = 1 }, 0, 1, AV_OPT_FLAG_ENCODING_PARAM },
1450     { "pcr_period", "PCR retransmission time",
1451       offsetof(MpegTSWrite, pcr_period), AV_OPT_TYPE_INT,
1452       { .i64 = PCR_RETRANS_TIME }, 0, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM },
1453     { NULL },
1454 };
1455
1456 static const AVClass mpegts_muxer_class = {
1457     .class_name = "MPEGTS muxer",
1458     .item_name  = av_default_item_name,
1459     .option     = options,
1460     .version    = LIBAVUTIL_VERSION_INT,
1461 };
1462
1463 AVOutputFormat ff_mpegts_muxer = {
1464     .name           = "mpegts",
1465     .long_name      = NULL_IF_CONFIG_SMALL("MPEG-TS (MPEG-2 Transport Stream)"),
1466     .mime_type      = "video/MP2T",
1467     .extensions     = "ts,m2t,m2ts,mts",
1468     .priv_data_size = sizeof(MpegTSWrite),
1469     .audio_codec    = AV_CODEC_ID_MP2,
1470     .video_codec    = AV_CODEC_ID_MPEG2VIDEO,
1471     .write_header   = mpegts_write_header,
1472     .write_packet   = mpegts_write_packet,
1473     .write_trailer  = mpegts_write_end,
1474     .flags          = AVFMT_ALLOW_FLUSH,
1475     .priv_class     = &mpegts_muxer_class,
1476 };