git.sesse.net Git - ffmpeg/blob - libavformat/mpegtsenc.c

   1 /*
   2  * MPEG-2 transport stream (aka DVB) muxer
   3  * Copyright (c) 2003 Fabrice Bellard
   4  *
   5  * This file is part of FFmpeg.
   6  *
   7  * FFmpeg is free software; you can redistribute it and/or
   8  * modify it under the terms of the GNU Lesser General Public
   9  * License as published by the Free Software Foundation; either
  10  * version 2.1 of the License, or (at your option) any later version.
  11  *
  12  * FFmpeg is distributed in the hope that it will be useful,
  13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  15  * Lesser General Public License for more details.
  16  *
  17  * You should have received a copy of the GNU Lesser General Public
  18  * License along with FFmpeg; if not, write to the Free Software
  19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
  20  */
  21
  22 #include "libavutil/avassert.h"
  23 #include "libavutil/bswap.h"
  24 #include "libavutil/crc.h"
  25 #include "libavutil/dict.h"
  26 #include "libavutil/intreadwrite.h"
  27 #include "libavutil/mathematics.h"
  28 #include "libavutil/opt.h"
  29
  30 #include "libavcodec/internal.h"
  31
  32 #include "avformat.h"
  33 #include "avio_internal.h"
  34 #include "internal.h"
  35 #include "mpegts.h"
  36
  37 #define PCR_TIME_BASE 27000000
  38
  39 /* write DVB SI sections */
  40
  41 #define DVB_PRIVATE_NETWORK_START 0xff01
  42
  43 /*********************************************/
  44 /* mpegts section writer */
  45
  46 typedef struct MpegTSSection {
  47     int pid;
  48     int cc;
  49     int discontinuity;
  50     void (*write_packet)(struct MpegTSSection *s, const uint8_t *packet);
  51     void *opaque;
  52 } MpegTSSection;
  53
  54 typedef struct MpegTSService {
  55     MpegTSSection pmt; /* MPEG-2 PMT table context */
  56     int sid;           /* service ID */
  57     uint8_t name[256];
  58     uint8_t provider_name[256];
  59     int pcr_pid;
  60     AVProgram *program;
  61 } MpegTSService;
  62
  63 // service_type values as defined in ETSI 300 468
  64 enum {
  65     MPEGTS_SERVICE_TYPE_DIGITAL_TV                   = 0x01,
  66     MPEGTS_SERVICE_TYPE_DIGITAL_RADIO                = 0x02,
  67     MPEGTS_SERVICE_TYPE_TELETEXT                     = 0x03,
  68     MPEGTS_SERVICE_TYPE_ADVANCED_CODEC_DIGITAL_RADIO = 0x0A,
  69     MPEGTS_SERVICE_TYPE_MPEG2_DIGITAL_HDTV           = 0x11,
  70     MPEGTS_SERVICE_TYPE_ADVANCED_CODEC_DIGITAL_SDTV  = 0x16,
  71     MPEGTS_SERVICE_TYPE_ADVANCED_CODEC_DIGITAL_HDTV  = 0x19,
  72     MPEGTS_SERVICE_TYPE_HEVC_DIGITAL_HDTV            = 0x1F,
  73 };
  74 typedef struct MpegTSWrite {
  75     const AVClass *av_class;
  76     MpegTSSection pat; /* MPEG-2 PAT table */
  77     MpegTSSection sdt; /* MPEG-2 SDT table context */
  78     MpegTSService **services;
  79     int64_t sdt_period; /* SDT period in PCR time base */
  80     int64_t pat_period; /* PAT/PMT period in PCR time base */
  81     int nb_services;
  82     int onid;
  83     int tsid;
  84     int64_t first_pcr;
  85     int64_t next_pcr;
  86     int mux_rate; ///< set to 1 when VBR
  87     int pes_payload_size;
  88
  89     int transport_stream_id;
  90     int original_network_id;
  91     int service_id;
  92     int service_type;
  93
  94     int pmt_start_pid;
  95     int start_pid;
  96     int m2ts_mode;
  97     int m2ts_video_pid;
  98     int m2ts_audio_pid;
  99     int m2ts_pgssub_pid;
 100     int m2ts_textsub_pid;
 101
 102     int pcr_period_ms;
 103 #define MPEGTS_FLAG_REEMIT_PAT_PMT  0x01
 104 #define MPEGTS_FLAG_AAC_LATM        0x02
 105 #define MPEGTS_FLAG_PAT_PMT_AT_FRAMES           0x04
 106 #define MPEGTS_FLAG_SYSTEM_B        0x08
 107 #define MPEGTS_FLAG_DISCONT         0x10
 108     int flags;
 109     int copyts;
 110     int tables_version;
 111     int64_t pat_period_us;
 112     int64_t sdt_period_us;
 113     int64_t last_pat_ts;
 114     int64_t last_sdt_ts;
 115
 116     int omit_video_pes_length;
 117 } MpegTSWrite;
 118
 119 /* a PES packet header is generated every DEFAULT_PES_HEADER_FREQ packets */
 120 #define DEFAULT_PES_HEADER_FREQ  16
 121 #define DEFAULT_PES_PAYLOAD_SIZE ((DEFAULT_PES_HEADER_FREQ - 1) * 184 + 170)
 122
 123 /* The section length is 12 bits. The first 2 are set to 0, the remaining
 124  * 10 bits should not exceed 1021. */
 125 #define SECTION_LENGTH 1020
 126
 127 /* NOTE: 4 bytes must be left at the end for the crc32 */
 128 static void mpegts_write_section(MpegTSSection *s, uint8_t *buf, int len)
 129 {
 130     unsigned int crc;
 131     unsigned char packet[TS_PACKET_SIZE];
 132     const unsigned char *buf_ptr;
 133     unsigned char *q;
 134     int first, b, len1, left;
 135
 136     crc = av_bswap32(av_crc(av_crc_get_table(AV_CRC_32_IEEE),
 137                             -1, buf, len - 4));
 138
 139     buf[len - 4] = (crc >> 24) & 0xff;
 140     buf[len - 3] = (crc >> 16) & 0xff;
 141     buf[len - 2] = (crc >>  8) & 0xff;
 142     buf[len - 1] =  crc        & 0xff;
 143
 144     /* send each packet */
 145     buf_ptr = buf;
 146     while (len > 0) {
 147         first = buf == buf_ptr;
 148         q     = packet;
 149         *q++  = 0x47;
 150         b     = s->pid >> 8;
 151         if (first)
 152             b |= 0x40;
 153         *q++  = b;
 154         *q++  = s->pid;
 155         s->cc = s->cc + 1 & 0xf;
 156         *q++  = 0x10 | s->cc;
 157         if (s->discontinuity) {
 158             q[-1] |= 0x20;
 159             *q++ = 1;
 160             *q++ = 0x80;
 161             s->discontinuity = 0;
 162         }
 163         if (first)
 164             *q++ = 0; /* 0 offset */
 165         len1 = TS_PACKET_SIZE - (q - packet);
 166         if (len1 > len)
 167             len1 = len;
 168         memcpy(q, buf_ptr, len1);
 169         q += len1;
 170         /* add known padding data */
 171         left = TS_PACKET_SIZE - (q - packet);
 172         if (left > 0)
 173             memset(q, 0xff, left);
 174
 175         s->write_packet(s, packet);
 176
 177         buf_ptr += len1;
 178         len     -= len1;
 179     }
 180 }
 181
 182 static inline void put16(uint8_t **q_ptr, int val)
 183 {
 184     uint8_t *q;
 185     q      = *q_ptr;
 186     *q++   = val >> 8;
 187     *q++   = val;
 188     *q_ptr = q;
 189 }
 190
 191 static int mpegts_write_section1(MpegTSSection *s, int tid, int id,
 192                                  int version, int sec_num, int last_sec_num,
 193                                  uint8_t *buf, int len)
 194 {
 195     uint8_t section[1024], *q;
 196     unsigned int tot_len;
 197     /* reserved_future_use field must be set to 1 for SDT */
 198     unsigned int flags = tid == SDT_TID ? 0xf000 : 0xb000;
 199
 200     tot_len = 3 + 5 + len + 4;
 201     /* check if not too big */
 202     if (tot_len > 1024)
 203         return AVERROR_INVALIDDATA;
 204
 205     q    = section;
 206     *q++ = tid;
 207     put16(&q, flags | (len + 5 + 4)); /* 5 byte header + 4 byte CRC */
 208     put16(&q, id);
 209     *q++ = 0xc1 | (version << 1); /* current_next_indicator = 1 */
 210     *q++ = sec_num;
 211     *q++ = last_sec_num;
 212     memcpy(q, buf, len);
 213
 214     mpegts_write_section(s, section, tot_len);
 215     return 0;
 216 }
 217
 218 /*********************************************/
 219 /* mpegts writer */
 220
 221 #define DEFAULT_PROVIDER_NAME   "FFmpeg"
 222 #define DEFAULT_SERVICE_NAME    "Service"
 223
 224 /* we retransmit the SI info at this rate */
 225 #define SDT_RETRANS_TIME 500
 226 #define PAT_RETRANS_TIME 100
 227 #define PCR_RETRANS_TIME 20
 228
 229 typedef struct MpegTSWriteStream {
 230     int pid; /* stream associated pid */
 231     int cc;
 232     int discontinuity;
 233     int payload_size;
 234     int first_pts_check; ///< first pts check needed
 235     int prev_payload_key;
 236     int64_t payload_pts;
 237     int64_t payload_dts;
 238     int payload_flags;
 239     uint8_t *payload;
 240     AVFormatContext *amux;
 241     int data_st_warning;
 242
 243     int64_t pcr_period; /* PCR period in PCR time base */
 244     int64_t last_pcr;
 245
 246     /* For Opus */
 247     int opus_queued_samples;
 248     int opus_pending_trim_start;
 249 } MpegTSWriteStream;
 250
 251 static void mpegts_write_pat(AVFormatContext *s)
 252 {
 253     MpegTSWrite *ts = s->priv_data;
 254     MpegTSService *service;
 255     uint8_t data[SECTION_LENGTH], *q;
 256     int i;
 257
 258     q = data;
 259     for (i = 0; i < ts->nb_services; i++) {
 260         service = ts->services[i];
 261         put16(&q, service->sid);
 262         put16(&q, 0xe000 | service->pmt.pid);
 263     }
 264     mpegts_write_section1(&ts->pat, PAT_TID, ts->tsid, ts->tables_version, 0, 0,
 265                           data, q - data);
 266 }
 267
 268 static void putbuf(uint8_t **q_ptr, const uint8_t *buf, size_t len)
 269 {
 270     memcpy(*q_ptr, buf, len);
 271     *q_ptr += len;
 272 }
 273
 274 static void put_registration_descriptor(uint8_t **q_ptr, uint32_t tag)
 275 {
 276     uint8_t *q = *q_ptr;
 277     *q++ = 0x05; /* MPEG-2 registration descriptor*/
 278     *q++ = 4;
 279     *q++ = tag;
 280     *q++ = tag >> 8;
 281     *q++ = tag >> 16;
 282     *q++ = tag >> 24;
 283     *q_ptr = q;
 284 }
 285
 286 static int get_dvb_stream_type(AVFormatContext *s, AVStream *st)
 287 {
 288     MpegTSWrite *ts = s->priv_data;
 289     MpegTSWriteStream *ts_st = st->priv_data;
 290     int stream_type;
 291
 292     switch (st->codecpar->codec_id) {
 293     case AV_CODEC_ID_MPEG1VIDEO:
 294     case AV_CODEC_ID_MPEG2VIDEO:
 295         stream_type = STREAM_TYPE_VIDEO_MPEG2;
 296         break;
 297     case AV_CODEC_ID_MPEG4:
 298         stream_type = STREAM_TYPE_VIDEO_MPEG4;
 299         break;
 300     case AV_CODEC_ID_H264:
 301         stream_type = STREAM_TYPE_VIDEO_H264;
 302         break;
 303     case AV_CODEC_ID_HEVC:
 304         stream_type = STREAM_TYPE_VIDEO_HEVC;
 305         break;
 306     case AV_CODEC_ID_CAVS:
 307         stream_type = STREAM_TYPE_VIDEO_CAVS;
 308         break;
 309     case AV_CODEC_ID_DIRAC:
 310         stream_type = STREAM_TYPE_VIDEO_DIRAC;
 311         break;
 312     case AV_CODEC_ID_VC1:
 313         stream_type = STREAM_TYPE_VIDEO_VC1;
 314         break;
 315     case AV_CODEC_ID_MP2:
 316     case AV_CODEC_ID_MP3:
 317         if (   st->codecpar->sample_rate > 0
 318             && st->codecpar->sample_rate < 32000) {
 319             stream_type = STREAM_TYPE_AUDIO_MPEG2;
 320         } else {
 321             stream_type = STREAM_TYPE_AUDIO_MPEG1;
 322         }
 323         break;
 324     case AV_CODEC_ID_AAC:
 325         stream_type = (ts->flags & MPEGTS_FLAG_AAC_LATM)
 326                       ? STREAM_TYPE_AUDIO_AAC_LATM
 327                       : STREAM_TYPE_AUDIO_AAC;
 328         break;
 329     case AV_CODEC_ID_AAC_LATM:
 330         stream_type = STREAM_TYPE_AUDIO_AAC_LATM;
 331         break;
 332     case AV_CODEC_ID_AC3:
 333         stream_type = (ts->flags & MPEGTS_FLAG_SYSTEM_B)
 334                       ? STREAM_TYPE_PRIVATE_DATA
 335                       : STREAM_TYPE_AUDIO_AC3;
 336         break;
 337     case AV_CODEC_ID_EAC3:
 338         stream_type = (ts->flags & MPEGTS_FLAG_SYSTEM_B)
 339                       ? STREAM_TYPE_PRIVATE_DATA
 340                       : STREAM_TYPE_AUDIO_EAC3;
 341         break;
 342     case AV_CODEC_ID_DTS:
 343         stream_type = STREAM_TYPE_AUDIO_DTS;
 344         break;
 345     case AV_CODEC_ID_TRUEHD:
 346         stream_type = STREAM_TYPE_AUDIO_TRUEHD;
 347         break;
 348     case AV_CODEC_ID_OPUS:
 349         stream_type = STREAM_TYPE_PRIVATE_DATA;
 350         break;
 351     case AV_CODEC_ID_TIMED_ID3:
 352         stream_type = STREAM_TYPE_METADATA;
 353         break;
 354     case AV_CODEC_ID_DVB_SUBTITLE:
 355     case AV_CODEC_ID_DVB_TELETEXT:
 356         stream_type = STREAM_TYPE_PRIVATE_DATA;
 357         break;
 358     default:
 359         av_log_once(s, AV_LOG_WARNING, AV_LOG_DEBUG, &ts_st->data_st_warning,
 360                     "Stream %d, codec %s, is muxed as a private data stream "
 361                     "and may not be recognized upon reading.\n", st->index,
 362                     avcodec_get_name(st->codecpar->codec_id));
 363         stream_type = STREAM_TYPE_PRIVATE_DATA;
 364         break;
 365     }
 366
 367     return stream_type;
 368 }
 369
 370 static int get_m2ts_stream_type(AVFormatContext *s, AVStream *st)
 371 {
 372     int stream_type;
 373     MpegTSWriteStream *ts_st = st->priv_data;
 374
 375     switch (st->codecpar->codec_id) {
 376     case AV_CODEC_ID_MPEG2VIDEO:
 377         stream_type = STREAM_TYPE_VIDEO_MPEG2;
 378         break;
 379     case AV_CODEC_ID_H264:
 380         stream_type = STREAM_TYPE_VIDEO_H264;
 381         break;
 382     case AV_CODEC_ID_VC1:
 383         stream_type = STREAM_TYPE_VIDEO_VC1;
 384         break;
 385     case AV_CODEC_ID_HEVC:
 386         stream_type = STREAM_TYPE_VIDEO_HEVC;
 387         break;
 388     case AV_CODEC_ID_PCM_BLURAY:
 389         stream_type = 0x80;
 390         break;
 391     case AV_CODEC_ID_AC3:
 392         stream_type = 0x81;
 393         break;
 394     case AV_CODEC_ID_DTS:
 395         stream_type = (st->codecpar->channels > 6) ? 0x85 : 0x82;
 396         break;
 397     case AV_CODEC_ID_TRUEHD:
 398         stream_type = 0x83;
 399         break;
 400     case AV_CODEC_ID_EAC3:
 401         stream_type = 0x84;
 402         break;
 403     case AV_CODEC_ID_HDMV_PGS_SUBTITLE:
 404         stream_type = 0x90;
 405         break;
 406     case AV_CODEC_ID_HDMV_TEXT_SUBTITLE:
 407         stream_type = 0x92;
 408         break;
 409     default:
 410         av_log_once(s, AV_LOG_WARNING, AV_LOG_DEBUG, &ts_st->data_st_warning,
 411                     "Stream %d, codec %s, is muxed as a private data stream "
 412                     "and may not be recognized upon reading.\n", st->index,
 413                     avcodec_get_name(st->codecpar->codec_id));
 414         stream_type = STREAM_TYPE_PRIVATE_DATA;
 415         break;
 416     }
 417
 418     return stream_type;
 419 }
 420
 421 static int mpegts_write_pmt(AVFormatContext *s, MpegTSService *service)
 422 {
 423     MpegTSWrite *ts = s->priv_data;
 424     uint8_t data[SECTION_LENGTH], *q, *desc_length_ptr, *program_info_length_ptr;
 425     int val, stream_type, i, err = 0;
 426
 427     q = data;
 428     put16(&q, 0xe000 | service->pcr_pid);
 429
 430     program_info_length_ptr = q;
 431     q += 2; /* patched after */
 432
 433     /* put program info here */
 434     if (ts->m2ts_mode) {
 435         put_registration_descriptor(&q, MKTAG('H', 'D', 'M', 'V'));
 436         *q++ = 0x88;        // descriptor_tag - hdmv_copy_control_descriptor
 437         *q++ = 0x04;        // descriptor_length
 438         put16(&q, 0x0fff);  // CA_System_ID
 439         *q++ = 0xfc;        // private_data_byte
 440         *q++ = 0xfc;        // private_data_byte
 441     }
 442
 443     val = 0xf000 | (q - program_info_length_ptr - 2);
 444     program_info_length_ptr[0] = val >> 8;
 445     program_info_length_ptr[1] = val;
 446
 447     for (i = 0; i < s->nb_streams; i++) {
 448         AVStream *st = s->streams[i];
 449         MpegTSWriteStream *ts_st = st->priv_data;
 450         AVDictionaryEntry *lang = av_dict_get(st->metadata, "language", NULL, 0);
 451
 452         if (s->nb_programs) {
 453             int k, found = 0;
 454             AVProgram *program = service->program;
 455
 456             for (k = 0; k < program->nb_stream_indexes; k++)
 457                 if (program->stream_index[k] == i) {
 458                     found = 1;
 459                     break;
 460                 }
 461
 462             if (!found)
 463                 continue;
 464         }
 465
 466         if (q - data > SECTION_LENGTH - 32) {
 467             err = 1;
 468             break;
 469         }
 470
 471         stream_type = ts->m2ts_mode ? get_m2ts_stream_type(s, st) : get_dvb_stream_type(s, st);
 472
 473         *q++ = stream_type;
 474         put16(&q, 0xe000 | ts_st->pid);
 475         desc_length_ptr = q;
 476         q += 2; /* patched after */
 477
 478         /* write optional descriptors here */
 479         switch (st->codecpar->codec_type) {
 480         case AVMEDIA_TYPE_AUDIO:
 481             if (st->codecpar->codec_id==AV_CODEC_ID_AC3 && (ts->flags & MPEGTS_FLAG_SYSTEM_B)) {
 482                 *q++=0x6a; // AC3 descriptor see A038 DVB SI
 483                 *q++=1; // 1 byte, all flags sets to 0
 484                 *q++=0; // omit all fields...
 485             }
 486             if (st->codecpar->codec_id==AV_CODEC_ID_EAC3 && (ts->flags & MPEGTS_FLAG_SYSTEM_B)) {
 487                 *q++=0x7a; // EAC3 descriptor see A038 DVB SI
 488                 *q++=1; // 1 byte, all flags sets to 0
 489                 *q++=0; // omit all fields...
 490             }
 491             if (st->codecpar->codec_id==AV_CODEC_ID_S302M)
 492                 put_registration_descriptor(&q, MKTAG('B', 'S', 'S', 'D'));
 493             if (st->codecpar->codec_id==AV_CODEC_ID_OPUS) {
 494                 /* 6 bytes registration descriptor, 4 bytes Opus audio descriptor */
 495                 if (q - data > SECTION_LENGTH - 6 - 4) {
 496                     err = 1;
 497                     break;
 498                 }
 499
 500                 put_registration_descriptor(&q, MKTAG('O', 'p', 'u', 's'));
 501
 502                 *q++ = 0x7f; /* DVB extension descriptor */
 503                 *q++ = 2;
 504                 *q++ = 0x80;
 505
 506                 if (st->codecpar->extradata && st->codecpar->extradata_size >= 19) {
 507                     if (st->codecpar->extradata[18] == 0 && st->codecpar->channels <= 2) {
 508                         /* RTP mapping family */
 509                         *q++ = st->codecpar->channels;
 510                     } else if (st->codecpar->extradata[18] == 1 && st->codecpar->channels <= 8 &&
 511                                st->codecpar->extradata_size >= 21 + st->codecpar->channels) {
 512                         static const uint8_t coupled_stream_counts[9] = {
 513                             1, 0, 1, 1, 2, 2, 2, 3, 3
 514                         };
 515                         static const uint8_t channel_map_a[8][8] = {
 516                             {0},
 517                             {0, 1},
 518                             {0, 2, 1},
 519                             {0, 1, 2, 3},
 520                             {0, 4, 1, 2, 3},
 521                             {0, 4, 1, 2, 3, 5},
 522                             {0, 4, 1, 2, 3, 5, 6},
 523                             {0, 6, 1, 2, 3, 4, 5, 7},
 524                         };
 525                         static const uint8_t channel_map_b[8][8] = {
 526                             {0},
 527                             {0, 1},
 528                             {0, 1, 2},
 529                             {0, 1, 2, 3},
 530                             {0, 1, 2, 3, 4},
 531                             {0, 1, 2, 3, 4, 5},
 532                             {0, 1, 2, 3, 4, 5, 6},
 533                             {0, 1, 2, 3, 4, 5, 6, 7},
 534                         };
 535                         /* Vorbis mapping family */
 536
 537                         if (st->codecpar->extradata[19] == st->codecpar->channels - coupled_stream_counts[st->codecpar->channels] &&
 538                             st->codecpar->extradata[20] == coupled_stream_counts[st->codecpar->channels] &&
 539                             memcmp(&st->codecpar->extradata[21], channel_map_a[st->codecpar->channels-1], st->codecpar->channels) == 0) {
 540                             *q++ = st->codecpar->channels;
 541                         } else if (st->codecpar->channels >= 2 && st->codecpar->extradata[19] == st->codecpar->channels &&
 542                                    st->codecpar->extradata[20] == 0 &&
 543                                    memcmp(&st->codecpar->extradata[21], channel_map_b[st->codecpar->channels-1], st->codecpar->channels) == 0) {
 544                             *q++ = st->codecpar->channels | 0x80;
 545                         } else {
 546                             /* Unsupported, could write an extended descriptor here */
 547                             av_log(s, AV_LOG_ERROR, "Unsupported Opus Vorbis-style channel mapping");
 548                             *q++ = 0xff;
 549                         }
 550                     } else {
 551                         /* Unsupported */
 552                         av_log(s, AV_LOG_ERROR, "Unsupported Opus channel mapping for family %d", st->codecpar->extradata[18]);
 553                         *q++ = 0xff;
 554                     }
 555                 } else if (st->codecpar->channels <= 2) {
 556                     /* Assume RTP mapping family */
 557                     *q++ = st->codecpar->channels;
 558                 } else {
 559                     /* Unsupported */
 560                     av_log(s, AV_LOG_ERROR, "Unsupported Opus channel mapping");
 561                     *q++ = 0xff;
 562                 }
 563             }
 564
 565             if (lang) {
 566                 char *p;
 567                 char *next = lang->value;
 568                 uint8_t *len_ptr;
 569
 570                 *q++     = 0x0a; /* ISO 639 language descriptor */
 571                 len_ptr  = q++;
 572                 *len_ptr = 0;
 573
 574                 for (p = lang->value; next && *len_ptr < 255 / 4 * 4; p = next + 1) {
 575                     if (q - data > SECTION_LENGTH - 4) {
 576                         err = 1;
 577                         break;
 578                     }
 579                     next = strchr(p, ',');
 580                     if (strlen(p) != 3 && (!next || next != p + 3))
 581                         continue; /* not a 3-letter code */
 582
 583                     *q++ = *p++;
 584                     *q++ = *p++;
 585                     *q++ = *p++;
 586
 587                     if (st->disposition & AV_DISPOSITION_CLEAN_EFFECTS)
 588                         *q++ = 0x01;
 589                     else if (st->disposition & AV_DISPOSITION_HEARING_IMPAIRED)
 590                         *q++ = 0x02;
 591                     else if (st->disposition & AV_DISPOSITION_VISUAL_IMPAIRED)
 592                         *q++ = 0x03;
 593                     else
 594                         *q++ = 0; /* undefined type */
 595
 596                     *len_ptr += 4;
 597                 }
 598
 599                 if (*len_ptr == 0)
 600                     q -= 2; /* no language codes were written */
 601             }
 602             break;
 603         case AVMEDIA_TYPE_SUBTITLE:
 604         {
 605            const char default_language[] = "und";
 606            const char *language = lang && strlen(lang->value) >= 3 ? lang->value : default_language;
 607
 608            if (st->codecpar->codec_id == AV_CODEC_ID_DVB_SUBTITLE) {
 609                uint8_t *len_ptr;
 610                int extradata_copied = 0;
 611
 612                *q++ = 0x59; /* subtitling_descriptor */
 613                len_ptr = q++;
 614
 615                while (strlen(language) >= 3) {
 616                    if (sizeof(data) - (q - data) < 8) { /* 8 bytes per DVB subtitle substream data */
 617                        err = 1;
 618                        break;
 619                    }
 620                    *q++ = *language++;
 621                    *q++ = *language++;
 622                    *q++ = *language++;
 623                    /* Skip comma */
 624                    if (*language != '\0')
 625                        language++;
 626
 627                    if (st->codecpar->extradata_size - extradata_copied >= 5) {
 628                        *q++ = st->codecpar->extradata[extradata_copied + 4]; /* subtitling_type */
 629                        memcpy(q, st->codecpar->extradata + extradata_copied, 4); /* composition_page_id and ancillary_page_id */
 630                        extradata_copied += 5;
 631                        q += 4;
 632                    } else {
 633                        /* subtitling_type:
 634                         * 0x10 - normal with no monitor aspect ratio criticality
 635                         * 0x20 - for the hard of hearing with no monitor aspect ratio criticality */
 636                        *q++ = (st->disposition & AV_DISPOSITION_HEARING_IMPAIRED) ? 0x20 : 0x10;
 637                        if ((st->codecpar->extradata_size == 4) && (extradata_copied == 0)) {
 638                            /* support of old 4-byte extradata format */
 639                            memcpy(q, st->codecpar->extradata, 4); /* composition_page_id and ancillary_page_id */
 640                            extradata_copied += 4;
 641                            q += 4;
 642                        } else {
 643                            put16(&q, 1); /* composition_page_id */
 644                            put16(&q, 1); /* ancillary_page_id */
 645                        }
 646                    }
 647                }
 648
 649                *len_ptr = q - len_ptr - 1;
 650            } else if (st->codecpar->codec_id == AV_CODEC_ID_DVB_TELETEXT) {
 651                uint8_t *len_ptr = NULL;
 652                int extradata_copied = 0;
 653
 654                /* The descriptor tag. teletext_descriptor */
 655                *q++ = 0x56;
 656                len_ptr = q++;
 657
 658                while (strlen(language) >= 3 && q - data < sizeof(data) - 6) {
 659                    *q++ = *language++;
 660                    *q++ = *language++;
 661                    *q++ = *language++;
 662                    /* Skip comma */
 663                    if (*language != '\0')
 664                        language++;
 665
 666                    if (st->codecpar->extradata_size - 1 > extradata_copied) {
 667                        memcpy(q, st->codecpar->extradata + extradata_copied, 2);
 668                        extradata_copied += 2;
 669                        q += 2;
 670                    } else {
 671                        /* The Teletext descriptor:
 672                         * teletext_type: This 5-bit field indicates the type of Teletext page indicated. (0x01 Initial Teletext page)
 673                         * teletext_magazine_number: This is a 3-bit field which identifies the magazine number.
 674                         * teletext_page_number: This is an 8-bit field giving two 4-bit hex digits identifying the page number. */
 675                        *q++ = 0x08;
 676                        *q++ = 0x00;
 677                    }
 678                }
 679
 680                *len_ptr = q - len_ptr - 1;
 681             }
 682         }
 683         break;
 684         case AVMEDIA_TYPE_VIDEO:
 685             if (stream_type == STREAM_TYPE_VIDEO_DIRAC) {
 686                 put_registration_descriptor(&q, MKTAG('d', 'r', 'a', 'c'));
 687             } else if (stream_type == STREAM_TYPE_VIDEO_VC1) {
 688                 put_registration_descriptor(&q, MKTAG('V', 'C', '-', '1'));
 689             } else if (stream_type == STREAM_TYPE_VIDEO_HEVC && s->strict_std_compliance <= FF_COMPLIANCE_NORMAL) {
 690                 put_registration_descriptor(&q, MKTAG('H', 'E', 'V', 'C'));
 691             }
 692             break;
 693         case AVMEDIA_TYPE_DATA:
 694             if (st->codecpar->codec_id == AV_CODEC_ID_SMPTE_KLV) {
 695                 put_registration_descriptor(&q, MKTAG('K', 'L', 'V', 'A'));
 696             } else if (st->codecpar->codec_id == AV_CODEC_ID_TIMED_ID3) {
 697                 const char *tag = "ID3 ";
 698                 *q++ = 0x26; /* metadata descriptor */
 699                 *q++ = 13;
 700                 put16(&q, 0xffff);    /* metadata application format */
 701                 putbuf(&q, tag, strlen(tag));
 702                 *q++ = 0xff;        /* metadata format */
 703                 putbuf(&q, tag, strlen(tag));
 704                 *q++ = 0;            /* metadata service ID */
 705                 *q++ = 0xF;          /* metadata_locator_record_flag|MPEG_carriage_flags|reserved */
 706             }
 707             break;
 708         }
 709
 710         val = 0xf000 | (q - desc_length_ptr - 2);
 711         desc_length_ptr[0] = val >> 8;
 712         desc_length_ptr[1] = val;
 713     }
 714
 715     if (err)
 716         av_log(s, AV_LOG_ERROR,
 717                "The PMT section cannot fit stream %d and all following streams.\n"
 718                "Try reducing the number of languages in the audio streams "
 719                "or the total number of streams.\n", i);
 720
 721     mpegts_write_section1(&service->pmt, PMT_TID, service->sid, ts->tables_version, 0, 0,
 722                           data, q - data);
 723     return 0;
 724 }
 725
 726 static void mpegts_write_sdt(AVFormatContext *s)
 727 {
 728     MpegTSWrite *ts = s->priv_data;
 729     MpegTSService *service;
 730     uint8_t data[SECTION_LENGTH], *q, *desc_list_len_ptr, *desc_len_ptr;
 731     int i, running_status, free_ca_mode, val;
 732
 733     q = data;
 734     put16(&q, ts->onid);
 735     *q++ = 0xff;
 736     for (i = 0; i < ts->nb_services; i++) {
 737         service = ts->services[i];
 738         put16(&q, service->sid);
 739         *q++              = 0xfc | 0x00; /* currently no EIT info */
 740         desc_list_len_ptr = q;
 741         q                += 2;
 742         running_status    = 4; /* running */
 743         free_ca_mode      = 0;
 744
 745         /* write only one descriptor for the service name and provider */
 746         *q++         = 0x48;
 747         desc_len_ptr = q;
 748         q++;
 749         *q++         = ts->service_type;
 750         putbuf(&q, service->provider_name, service->provider_name[0] + 1);
 751         putbuf(&q, service->name, service->name[0] + 1);
 752         desc_len_ptr[0] = q - desc_len_ptr - 1;
 753
 754         /* fill descriptor length */
 755         val = (running_status << 13) | (free_ca_mode << 12) |
 756               (q - desc_list_len_ptr - 2);
 757         desc_list_len_ptr[0] = val >> 8;
 758         desc_list_len_ptr[1] = val;
 759     }
 760     mpegts_write_section1(&ts->sdt, SDT_TID, ts->tsid, ts->tables_version, 0, 0,
 761                           data, q - data);
 762 }
 763
 764 /* This stores a string in buf with the correct encoding and also sets the
 765  * first byte as the length. !str is accepted for an empty string.
 766  * If the string is already encoded, invalid UTF-8 or has no multibyte sequence
 767  * then we keep it as is, otherwise we signal UTF-8 encoding. */
 768 static int encode_str8(uint8_t *buf, const char *str)
 769 {
 770     size_t str_len;
 771     if (!str)
 772         str = "";
 773     str_len = strlen(str);
 774     if (str[0] && (unsigned)str[0] >= 0x20) {   /* Make sure the string is not already encoded. */
 775         const uint8_t *q = str;
 776         int has_multibyte = 0;
 777         while (*q) {
 778             uint32_t code;
 779             GET_UTF8(code, *q++, goto invalid;) /* Is it valid UTF-8? */
 780             has_multibyte |= (code > 127);      /* Does it have multibyte UTF-8 chars in it? */
 781         }
 782         if (has_multibyte) {                    /* If we have multibyte chars and valid UTF-8, then encode as such! */
 783             if (str_len > 254)
 784                 return AVERROR(EINVAL);
 785             buf[0] = str_len + 1;
 786             buf[1] = 0x15;
 787             memcpy(&buf[2], str, str_len);
 788             return 0;
 789         }
 790     }
 791 invalid:
 792     /* Otherwise let's just encode the string as is! */
 793     if (str_len > 255)
 794         return AVERROR(EINVAL);
 795     buf[0] = str_len;
 796     memcpy(&buf[1], str, str_len);
 797     return 0;
 798 }
 799
 800 static int64_t get_pcr(const MpegTSWrite *ts, AVIOContext *pb)
 801 {
 802     return av_rescale(avio_tell(pb) + 11, 8 * PCR_TIME_BASE, ts->mux_rate) +
 803            ts->first_pcr;
 804 }
 805
 806 static void write_packet(AVFormatContext *s, const uint8_t *packet)
 807 {
 808     MpegTSWrite *ts = s->priv_data;
 809     if (ts->m2ts_mode) {
 810         int64_t pcr = get_pcr(s->priv_data, s->pb);
 811         uint32_t tp_extra_header = pcr % 0x3fffffff;
 812         tp_extra_header = AV_RB32(&tp_extra_header);
 813         avio_write(s->pb, (unsigned char *) &tp_extra_header,
 814                    sizeof(tp_extra_header));
 815     }
 816     avio_write(s->pb, packet, TS_PACKET_SIZE);
 817 }
 818
 819 static void section_write_packet(MpegTSSection *s, const uint8_t *packet)
 820 {
 821     AVFormatContext *ctx = s->opaque;
 822     write_packet(ctx, packet);
 823 }
 824
 825 static MpegTSService *mpegts_add_service(AVFormatContext *s, int sid,
 826                                          const AVDictionary *metadata,
 827                                          AVProgram *program)
 828 {
 829     MpegTSWrite *ts = s->priv_data;
 830     MpegTSService *service;
 831     AVDictionaryEntry *title, *provider;
 832     char default_service_name[32];
 833     const char *service_name;
 834     const char *provider_name;
 835
 836     title = av_dict_get(metadata, "service_name", NULL, 0);
 837     if (!title)
 838         title = av_dict_get(metadata, "title", NULL, 0);
 839     snprintf(default_service_name, sizeof(default_service_name), "%s%02d", DEFAULT_SERVICE_NAME, ts->nb_services + 1);
 840     service_name  = title ? title->value : default_service_name;
 841     provider      = av_dict_get(metadata, "service_provider", NULL, 0);
 842     provider_name = provider ? provider->value : DEFAULT_PROVIDER_NAME;
 843
 844     service = av_mallocz(sizeof(MpegTSService));
 845     if (!service)
 846         return NULL;
 847     service->pmt.pid       = ts->pmt_start_pid + ts->nb_services;
 848     service->sid           = sid;
 849     service->pcr_pid       = 0x1fff;
 850     if (encode_str8(service->provider_name, provider_name) < 0 ||
 851         encode_str8(service->name, service_name) < 0) {
 852         av_log(s, AV_LOG_ERROR, "Too long service or provider name\n");
 853         goto fail;
 854     }
 855     if (av_dynarray_add_nofree(&ts->services, &ts->nb_services, service) < 0)
 856         goto fail;
 857
 858     service->pmt.write_packet = section_write_packet;
 859     service->pmt.opaque       = s;
 860     service->pmt.cc           = 15;
 861     service->pmt.discontinuity= ts->flags & MPEGTS_FLAG_DISCONT;
 862     service->program          = program;
 863
 864     return service;
 865 fail:
 866     av_free(service);
 867     return NULL;
 868 }
 869
 870 static void enable_pcr_generation_for_stream(AVFormatContext *s, AVStream *pcr_st)
 871 {
 872     MpegTSWrite *ts = s->priv_data;
 873     MpegTSWriteStream *ts_st = pcr_st->priv_data;
 874
 875     if (ts->mux_rate > 1 || ts->pcr_period_ms >= 0) {
 876         int pcr_period_ms = ts->pcr_period_ms == -1 ? PCR_RETRANS_TIME : ts->pcr_period_ms;
 877         ts_st->pcr_period = av_rescale(pcr_period_ms, PCR_TIME_BASE, 1000);
 878     } else {
 879         /* By default, for VBR we select the highest multiple of frame duration which is less than 100 ms. */
 880         int64_t frame_period = 0;
 881         if (pcr_st->codecpar->codec_type == AVMEDIA_TYPE_AUDIO) {
 882             int frame_size = av_get_audio_frame_duration2(pcr_st->codecpar, 0);
 883             if (!frame_size) {
 884                av_log(s, AV_LOG_WARNING, "frame size not set\n");
 885                frame_size = 512;
 886             }
 887             frame_period = av_rescale_rnd(frame_size, PCR_TIME_BASE, pcr_st->codecpar->sample_rate, AV_ROUND_UP);
 888         } else if (pcr_st->avg_frame_rate.num) {
 889             frame_period = av_rescale_rnd(pcr_st->avg_frame_rate.den, PCR_TIME_BASE, pcr_st->avg_frame_rate.num, AV_ROUND_UP);
 890         }
 891         if (frame_period > 0 && frame_period <= PCR_TIME_BASE / 10)
 892             ts_st->pcr_period = frame_period * (PCR_TIME_BASE / 10 / frame_period);
 893         else
 894             ts_st->pcr_period = 1;
 895     }
 896
 897     // output a PCR as soon as possible
 898     ts_st->last_pcr   = ts->first_pcr - ts_st->pcr_period;
 899 }
 900
 901 static void select_pcr_streams(AVFormatContext *s)
 902 {
 903     MpegTSWrite *ts = s->priv_data;
 904
 905     for (int i = 0; i < ts->nb_services; i++) {
 906         MpegTSService *service = ts->services[i];
 907         AVStream *pcr_st = NULL;
 908         AVProgram *program = service->program;
 909         int nb_streams = program ? program->nb_stream_indexes : s->nb_streams;
 910
 911         for (int j = 0; j < nb_streams; j++) {
 912             AVStream *st = s->streams[program ? program->stream_index[j] : j];
 913             if (!pcr_st ||
 914                 pcr_st->codecpar->codec_type != AVMEDIA_TYPE_VIDEO && st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO)
 915             {
 916                 pcr_st = st;
 917             }
 918         }
 919
 920         if (pcr_st) {
 921             MpegTSWriteStream *ts_st = pcr_st->priv_data;
 922             service->pcr_pid = ts_st->pid;
 923             enable_pcr_generation_for_stream(s, pcr_st);
 924             av_log(s, AV_LOG_VERBOSE, "service %i using PCR in pid=%i, pcr_period=%"PRId64"ms\n",
 925                 service->sid, service->pcr_pid, av_rescale(ts_st->pcr_period, 1000, PCR_TIME_BASE));
 926         }
 927     }
 928 }
 929
 930 static int mpegts_init(AVFormatContext *s)
 931 {
 932     MpegTSWrite *ts = s->priv_data;
 933     int i, j;
 934     int *pids;
 935     int ret;
 936
 937     if (ts->m2ts_mode == -1) {
 938         if (av_match_ext(s->url, "m2ts")) {
 939             ts->m2ts_mode = 1;
 940         } else {
 941             ts->m2ts_mode = 0;
 942         }
 943     }
 944
 945     ts->m2ts_video_pid   = M2TS_VIDEO_PID;
 946     ts->m2ts_audio_pid   = M2TS_AUDIO_START_PID;
 947     ts->m2ts_pgssub_pid  = M2TS_PGSSUB_START_PID;
 948     ts->m2ts_textsub_pid = M2TS_TEXTSUB_PID;
 949
 950     if (ts->m2ts_mode) {
 951         ts->pmt_start_pid = M2TS_PMT_PID;
 952         if (s->nb_programs > 1) {
 953             av_log(s, AV_LOG_ERROR, "Only one program is allowed in m2ts mode!\n");
 954             return AVERROR(EINVAL);
 955         }
 956     }
 957
 958     if (s->max_delay < 0) /* Not set by the caller */
 959         s->max_delay = 0;
 960
 961     // round up to a whole number of TS packets
 962     ts->pes_payload_size = (ts->pes_payload_size + 14 + 183) / 184 * 184 - 14;
 963
 964     ts->tsid = ts->transport_stream_id;
 965     ts->onid = ts->original_network_id;
 966     if (!s->nb_programs) {
 967         /* allocate a single DVB service */
 968         if (!mpegts_add_service(s, ts->service_id, s->metadata, NULL))
 969             return AVERROR(ENOMEM);
 970     } else {
 971         for (i = 0; i < s->nb_programs; i++) {
 972             AVProgram *program = s->programs[i];
 973             if (!mpegts_add_service(s, program->id, program->metadata, program))
 974                 return AVERROR(ENOMEM);
 975         }
 976     }
 977
 978     ts->pat.pid          = PAT_PID;
 979     /* Initialize at 15 so that it wraps and is equal to 0 for the
 980      * first packet we write. */
 981     ts->pat.cc           = 15;
 982     ts->pat.discontinuity= ts->flags & MPEGTS_FLAG_DISCONT;
 983     ts->pat.write_packet = section_write_packet;
 984     ts->pat.opaque       = s;
 985
 986     ts->sdt.pid          = SDT_PID;
 987     ts->sdt.cc           = 15;
 988     ts->sdt.discontinuity= ts->flags & MPEGTS_FLAG_DISCONT;
 989     ts->sdt.write_packet = section_write_packet;
 990     ts->sdt.opaque       = s;
 991
 992     pids = av_malloc_array(s->nb_streams, sizeof(*pids));
 993     if (!pids) {
 994         ret = AVERROR(ENOMEM);
 995         goto fail;
 996     }
 997
 998     /* assign pids to each stream */
 999     for (i = 0; i < s->nb_streams; i++) {
1000         AVStream *st = s->streams[i];
1001         MpegTSWriteStream *ts_st;
1002
1003         ts_st = av_mallocz(sizeof(MpegTSWriteStream));
1004         if (!ts_st) {
1005             ret = AVERROR(ENOMEM);
1006             goto fail;
1007         }
1008         st->priv_data = ts_st;
1009
1010         avpriv_set_pts_info(st, 33, 1, 90000);
1011
1012         ts_st->payload = av_mallocz(ts->pes_payload_size);
1013         if (!ts_st->payload) {
1014             ret = AVERROR(ENOMEM);
1015             goto fail;
1016         }
1017
1018         /* MPEG pid values < 16 are reserved. Applications which set st->id in
1019          * this range are assigned a calculated pid. */
1020         if (st->id < 16) {
1021             if (ts->m2ts_mode) {
1022                 switch (st->codecpar->codec_type) {
1023                 case AVMEDIA_TYPE_VIDEO:
1024                     ts_st->pid = ts->m2ts_video_pid++;
1025                     break;
1026                 case AVMEDIA_TYPE_AUDIO:
1027                     ts_st->pid = ts->m2ts_audio_pid++;
1028                     break;
1029                 case AVMEDIA_TYPE_SUBTITLE:
1030                     switch (st->codecpar->codec_id) {
1031                     case AV_CODEC_ID_HDMV_PGS_SUBTITLE:
1032                         ts_st->pid = ts->m2ts_pgssub_pid++;
1033                         break;
1034                     case AV_CODEC_ID_HDMV_TEXT_SUBTITLE:
1035                         ts_st->pid = ts->m2ts_textsub_pid++;
1036                         break;
1037                     }
1038                     break;
1039                 }
1040                 if (ts->m2ts_video_pid   > M2TS_VIDEO_PID + 1          ||
1041                     ts->m2ts_audio_pid   > M2TS_AUDIO_START_PID + 32   ||
1042                     ts->m2ts_pgssub_pid  > M2TS_PGSSUB_START_PID + 32  ||
1043                     ts->m2ts_textsub_pid > M2TS_TEXTSUB_PID + 1        ||
1044                     ts_st->pid < 16) {
1045                     av_log(s, AV_LOG_ERROR, "Cannot automatically assign PID for stream %d\n", st->index);
1046                     ret = AVERROR(EINVAL);
1047                     goto fail;
1048                 }
1049             } else {
1050                 ts_st->pid = ts->start_pid + i;
1051             }
1052         } else {
1053             ts_st->pid = st->id;
1054         }
1055         if (ts_st->pid >= 0x1FFF) {
1056             av_log(s, AV_LOG_ERROR,
1057                    "Invalid stream id %d, must be less than 8191\n", st->id);
1058             ret = AVERROR(EINVAL);
1059             goto fail;
1060         }
1061         for (j = 0; j < ts->nb_services; j++) {
1062             if (ts->services[j]->pmt.pid > LAST_OTHER_PID) {
1063                 av_log(s, AV_LOG_ERROR,
1064                        "Invalid PMT PID %d, must be less than %d\n", ts->services[j]->pmt.pid, LAST_OTHER_PID + 1);
1065                 ret = AVERROR(EINVAL);
1066                 goto fail;
1067             }
1068             if (ts_st->pid == ts->services[j]->pmt.pid) {
1069                 av_log(s, AV_LOG_ERROR, "PID %d cannot be both elementary and PMT PID\n", ts_st->pid);
1070                 ret = AVERROR(EINVAL);
1071                 goto fail;
1072             }
1073         }
1074         for (j = 0; j < i; j++) {
1075             if (pids[j] == ts_st->pid) {
1076                 av_log(s, AV_LOG_ERROR, "Duplicate stream id %d\n", ts_st->pid);
1077                 ret = AVERROR(EINVAL);
1078                 goto fail;
1079             }
1080         }
1081         pids[i]                = ts_st->pid;
1082         ts_st->payload_pts     = AV_NOPTS_VALUE;
1083         ts_st->payload_dts     = AV_NOPTS_VALUE;
1084         ts_st->first_pts_check = 1;
1085         ts_st->cc              = 15;
1086         ts_st->discontinuity   = ts->flags & MPEGTS_FLAG_DISCONT;
1087         if (st->codecpar->codec_id == AV_CODEC_ID_AAC &&
1088             st->codecpar->extradata_size > 0) {
1089             AVStream *ast;
1090             ts_st->amux = avformat_alloc_context();
1091             if (!ts_st->amux) {
1092                 ret = AVERROR(ENOMEM);
1093                 goto fail;
1094             }
1095             ts_st->amux->oformat =
1096                 av_guess_format((ts->flags & MPEGTS_FLAG_AAC_LATM) ? "latm" : "adts",
1097                                 NULL, NULL);
1098             if (!ts_st->amux->oformat) {
1099                 ret = AVERROR(EINVAL);
1100                 goto fail;
1101             }
1102             if (!(ast = avformat_new_stream(ts_st->amux, NULL))) {
1103                 ret = AVERROR(ENOMEM);
1104                 goto fail;
1105             }
1106             ret = avcodec_parameters_copy(ast->codecpar, st->codecpar);
1107             if (ret != 0)
1108                 goto fail;
1109             ast->time_base = st->time_base;
1110             ret = avformat_write_header(ts_st->amux, NULL);
1111             if (ret < 0)
1112                 goto fail;
1113         }
1114         if (st->codecpar->codec_id == AV_CODEC_ID_OPUS) {
1115             ts_st->opus_pending_trim_start = st->codecpar->initial_padding * 48000 / st->codecpar->sample_rate;
1116         }
1117     }
1118
1119     av_freep(&pids);
1120
1121     if (ts->copyts < 1)
1122         ts->first_pcr = av_rescale(s->max_delay, PCR_TIME_BASE, AV_TIME_BASE);
1123
1124     select_pcr_streams(s);
1125
1126     ts->last_pat_ts = AV_NOPTS_VALUE;
1127     ts->last_sdt_ts = AV_NOPTS_VALUE;
1128     ts->pat_period = av_rescale(ts->pat_period_us, PCR_TIME_BASE, AV_TIME_BASE);
1129     ts->sdt_period = av_rescale(ts->sdt_period_us, PCR_TIME_BASE, AV_TIME_BASE);
1130
1131     if (ts->mux_rate == 1)
1132         av_log(s, AV_LOG_VERBOSE, "muxrate VBR, ");
1133     else
1134         av_log(s, AV_LOG_VERBOSE, "muxrate %d, ", ts->mux_rate);
1135     av_log(s, AV_LOG_VERBOSE,
1136            "sdt every %"PRId64" ms, pat/pmt every %"PRId64" ms\n",
1137            av_rescale(ts->sdt_period, 1000, PCR_TIME_BASE),
1138            av_rescale(ts->pat_period, 1000, PCR_TIME_BASE));
1139
1140     return 0;
1141
1142 fail:
1143     av_freep(&pids);
1144     return ret;
1145 }
1146
1147 /* send SDT, PAT and PMT tables regularly */
1148 static void retransmit_si_info(AVFormatContext *s, int force_pat, int force_sdt, int64_t pcr)
1149 {
1150     MpegTSWrite *ts = s->priv_data;
1151     int i;
1152
1153     if ((pcr != AV_NOPTS_VALUE && ts->last_sdt_ts == AV_NOPTS_VALUE) ||
1154         (pcr != AV_NOPTS_VALUE && pcr - ts->last_sdt_ts >= ts->sdt_period) ||
1155         force_sdt
1156     ) {
1157         if (pcr != AV_NOPTS_VALUE)
1158             ts->last_sdt_ts = FFMAX(pcr, ts->last_sdt_ts);
1159         mpegts_write_sdt(s);
1160     }
1161     if ((pcr != AV_NOPTS_VALUE && ts->last_pat_ts == AV_NOPTS_VALUE) ||
1162         (pcr != AV_NOPTS_VALUE && pcr - ts->last_pat_ts >= ts->pat_period) ||
1163         force_pat) {
1164         if (pcr != AV_NOPTS_VALUE)
1165             ts->last_pat_ts = FFMAX(pcr, ts->last_pat_ts);
1166         mpegts_write_pat(s);
1167         for (i = 0; i < ts->nb_services; i++)
1168             mpegts_write_pmt(s, ts->services[i]);
1169     }
1170 }
1171
1172 static int write_pcr_bits(uint8_t *buf, int64_t pcr)
1173 {
1174     int64_t pcr_low = pcr % 300, pcr_high = pcr / 300;
1175
1176     *buf++ = pcr_high >> 25;
1177     *buf++ = pcr_high >> 17;
1178     *buf++ = pcr_high >>  9;
1179     *buf++ = pcr_high >>  1;
1180     *buf++ = pcr_high <<  7 | pcr_low >> 8 | 0x7e;
1181     *buf++ = pcr_low;
1182
1183     return 6;
1184 }
1185
1186 /* Write a single null transport stream packet */
1187 static void mpegts_insert_null_packet(AVFormatContext *s)
1188 {
1189     uint8_t *q;
1190     uint8_t buf[TS_PACKET_SIZE];
1191
1192     q    = buf;
1193     *q++ = 0x47;
1194     *q++ = 0x00 | 0x1f;
1195     *q++ = 0xff;
1196     *q++ = 0x10;
1197     memset(q, 0x0FF, TS_PACKET_SIZE - (q - buf));
1198     write_packet(s, buf);
1199 }
1200
1201 /* Write a single transport stream packet with a PCR and no payload */
1202 static void mpegts_insert_pcr_only(AVFormatContext *s, AVStream *st)
1203 {
1204     MpegTSWrite *ts = s->priv_data;
1205     MpegTSWriteStream *ts_st = st->priv_data;
1206     uint8_t *q;
1207     uint8_t buf[TS_PACKET_SIZE];
1208
1209     q    = buf;
1210     *q++ = 0x47;
1211     *q++ = ts_st->pid >> 8;
1212     *q++ = ts_st->pid;
1213     *q++ = 0x20 | ts_st->cc;   /* Adaptation only */
1214     /* Continuity Count field does not increment (see 13818-1 section 2.4.3.3) */
1215     *q++ = TS_PACKET_SIZE - 5; /* Adaptation Field Length */
1216     *q++ = 0x10;               /* Adaptation flags: PCR present */
1217     if (ts_st->discontinuity) {
1218         q[-1] |= 0x80;
1219         ts_st->discontinuity = 0;
1220     }
1221
1222     /* PCR coded into 6 bytes */
1223     q += write_pcr_bits(q, get_pcr(ts, s->pb));
1224
1225     /* stuffing bytes */
1226     memset(q, 0xFF, TS_PACKET_SIZE - (q - buf));
1227     write_packet(s, buf);
1228 }
1229
1230 static void write_pts(uint8_t *q, int fourbits, int64_t pts)
1231 {
1232     int val;
1233
1234     val  = fourbits << 4 | (((pts >> 30) & 0x07) << 1) | 1;
1235     *q++ = val;
1236     val  = (((pts >> 15) & 0x7fff) << 1) | 1;
1237     *q++ = val >> 8;
1238     *q++ = val;
1239     val  = (((pts) & 0x7fff) << 1) | 1;
1240     *q++ = val >> 8;
1241     *q++ = val;
1242 }
1243
1244 /* Set an adaptation field flag in an MPEG-TS packet*/
1245 static void set_af_flag(uint8_t *pkt, int flag)
1246 {
1247     // expect at least one flag to set
1248     av_assert0(flag);
1249
1250     if ((pkt[3] & 0x20) == 0) {
1251         // no AF yet, set adaptation field flag
1252         pkt[3] |= 0x20;
1253         // 1 byte length, no flags
1254         pkt[4] = 1;
1255         pkt[5] = 0;
1256     }
1257     pkt[5] |= flag;
1258 }
1259
1260 /* Extend the adaptation field by size bytes */
1261 static void extend_af(uint8_t *pkt, int size)
1262 {
1263     // expect already existing adaptation field
1264     av_assert0(pkt[3] & 0x20);
1265     pkt[4] += size;
1266 }
1267
1268 /* Get a pointer to MPEG-TS payload (right after TS packet header) */
1269 static uint8_t *get_ts_payload_start(uint8_t *pkt)
1270 {
1271     if (pkt[3] & 0x20)
1272         return pkt + 5 + pkt[4];
1273     else
1274         return pkt + 4;
1275 }
1276
1277 /* Add a PES header to the front of the payload, and segment into an integer
1278  * number of TS packets. The final TS packet is padded using an oversized
1279  * adaptation header to exactly fill the last TS packet.
1280  * NOTE: 'payload' contains a complete PES payload. */
1281 static void mpegts_write_pes(AVFormatContext *s, AVStream *st,
1282                              const uint8_t *payload, int payload_size,
1283                              int64_t pts, int64_t dts, int key, int stream_id)
1284 {
1285     MpegTSWriteStream *ts_st = st->priv_data;
1286     MpegTSWrite *ts = s->priv_data;
1287     uint8_t buf[TS_PACKET_SIZE];
1288     uint8_t *q;
1289     int val, is_start, len, header_len, write_pcr, is_dvb_subtitle, is_dvb_teletext, flags;
1290     int afc_len, stuffing_len;
1291     int64_t delay = av_rescale(s->max_delay, 90000, AV_TIME_BASE);
1292     int force_pat = st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO && key && !ts_st->prev_payload_key;
1293     int force_sdt = 0;
1294
1295     av_assert0(ts_st->payload != buf || st->codecpar->codec_type != AVMEDIA_TYPE_VIDEO);
1296     if (ts->flags & MPEGTS_FLAG_PAT_PMT_AT_FRAMES && st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO) {
1297         force_pat = 1;
1298     }
1299
1300     if (ts->flags & MPEGTS_FLAG_REEMIT_PAT_PMT) {
1301         force_pat = 1;
1302         force_sdt = 1;
1303         ts->flags &= ~MPEGTS_FLAG_REEMIT_PAT_PMT;
1304     }
1305
1306     is_start = 1;
1307     while (payload_size > 0) {
1308         int64_t pcr = AV_NOPTS_VALUE;
1309         if (ts->mux_rate > 1)
1310             pcr = get_pcr(ts, s->pb);
1311         else if (dts != AV_NOPTS_VALUE)
1312             pcr = (dts - delay) * 300;
1313
1314         retransmit_si_info(s, force_pat, force_sdt, pcr);
1315         force_pat = 0;
1316         force_sdt = 0;
1317
1318         write_pcr = 0;
1319         if (ts->mux_rate > 1) {
1320             /* Send PCR packets for all PCR streams if needed */
1321             pcr = get_pcr(ts, s->pb);
1322             if (pcr >= ts->next_pcr) {
1323                 int64_t next_pcr = INT64_MAX;
1324                 for (int i = 0; i < s->nb_streams; i++) {
1325                     /* Make the current stream the last, because for that we
1326                      * can insert the pcr into the payload later */
1327                     int st2_index = i < st->index ? i : (i + 1 == s->nb_streams ? st->index : i + 1);
1328                     AVStream *st2 = s->streams[st2_index];
1329                     MpegTSWriteStream *ts_st2 = st2->priv_data;
1330                     if (ts_st2->pcr_period) {
1331                         if (pcr - ts_st2->last_pcr >= ts_st2->pcr_period) {
1332                             ts_st2->last_pcr = FFMAX(pcr - ts_st2->pcr_period, ts_st2->last_pcr + ts_st2->pcr_period);
1333                             if (st2 != st) {
1334                                 mpegts_insert_pcr_only(s, st2);
1335                                 pcr = get_pcr(ts, s->pb);
1336                             } else {
1337                                 write_pcr = 1;
1338                             }
1339                         }
1340                         next_pcr = FFMIN(next_pcr, ts_st2->last_pcr + ts_st2->pcr_period);
1341                     }
1342                 }
1343                 ts->next_pcr = next_pcr;
1344             }
1345             if (dts != AV_NOPTS_VALUE && (dts - pcr / 300) > delay) {
1346                 /* pcr insert gets priority over null packet insert */
1347                 if (write_pcr)
1348                     mpegts_insert_pcr_only(s, st);
1349                 else
1350                     mpegts_insert_null_packet(s);
1351                 /* recalculate write_pcr and possibly retransmit si_info */
1352                 continue;
1353             }
1354         } else if (ts_st->pcr_period && pcr != AV_NOPTS_VALUE) {
1355             if (pcr - ts_st->last_pcr >= ts_st->pcr_period && is_start) {
1356                 ts_st->last_pcr = FFMAX(pcr - ts_st->pcr_period, ts_st->last_pcr + ts_st->pcr_period);
1357                 write_pcr = 1;
1358             }
1359         }
1360
1361         /* prepare packet header */
1362         q    = buf;
1363         *q++ = 0x47;
1364         val  = ts_st->pid >> 8;
1365         if (ts->m2ts_mode && st->codecpar->codec_id == AV_CODEC_ID_AC3)
1366             val |= 0x20;
1367         if (is_start)
1368             val |= 0x40;
1369         *q++      = val;
1370         *q++      = ts_st->pid;
1371         ts_st->cc = ts_st->cc + 1 & 0xf;
1372         *q++      = 0x10 | ts_st->cc; // payload indicator + CC
1373         if (ts_st->discontinuity) {
1374             set_af_flag(buf, 0x80);
1375             q = get_ts_payload_start(buf);
1376             ts_st->discontinuity = 0;
1377         }
1378         if (key && is_start && pts != AV_NOPTS_VALUE) {
1379             // set Random Access for key frames
1380             if (ts_st->pcr_period)
1381                 write_pcr = 1;
1382             set_af_flag(buf, 0x40);
1383             q = get_ts_payload_start(buf);
1384         }
1385         if (write_pcr) {
1386             set_af_flag(buf, 0x10);
1387             q = get_ts_payload_start(buf);
1388             // add 11, pcr references the last byte of program clock reference base
1389             if (dts != AV_NOPTS_VALUE && dts < pcr / 300)
1390                 av_log(s, AV_LOG_WARNING, "dts < pcr, TS is invalid\n");
1391             extend_af(buf, write_pcr_bits(q, pcr));
1392             q = get_ts_payload_start(buf);
1393         }
1394         if (is_start) {
1395             int pes_extension = 0;
1396             int pes_header_stuffing_bytes = 0;
1397             /* write PES header */
1398             *q++ = 0x00;
1399             *q++ = 0x00;
1400             *q++ = 0x01;
1401             is_dvb_subtitle = 0;
1402             is_dvb_teletext = 0;
1403             if (st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO) {
1404                 if (st->codecpar->codec_id == AV_CODEC_ID_DIRAC)
1405                     *q++ = 0xfd;
1406                 else
1407                     *q++ = 0xe0;
1408             } else if (st->codecpar->codec_type == AVMEDIA_TYPE_AUDIO &&
1409                        (st->codecpar->codec_id == AV_CODEC_ID_MP2 ||
1410                         st->codecpar->codec_id == AV_CODEC_ID_MP3 ||
1411                         st->codecpar->codec_id == AV_CODEC_ID_AAC)) {
1412                 *q++ = 0xc0;
1413             } else if (st->codecpar->codec_type == AVMEDIA_TYPE_AUDIO &&
1414                         st->codecpar->codec_id == AV_CODEC_ID_AC3 &&
1415                         ts->m2ts_mode) {
1416                 *q++ = 0xfd;
1417             } else if (st->codecpar->codec_type == AVMEDIA_TYPE_DATA &&
1418                        st->codecpar->codec_id == AV_CODEC_ID_TIMED_ID3) {
1419                 *q++ = 0xbd;
1420             } else if (st->codecpar->codec_type == AVMEDIA_TYPE_DATA) {
1421                 *q++ = stream_id != -1 ? stream_id : 0xfc;
1422
1423                 if (stream_id == 0xbd) /* asynchronous KLV */
1424                     pts = dts = AV_NOPTS_VALUE;
1425             } else {
1426                 *q++ = 0xbd;
1427                 if (st->codecpar->codec_type == AVMEDIA_TYPE_SUBTITLE) {
1428                     if (st->codecpar->codec_id == AV_CODEC_ID_DVB_SUBTITLE) {
1429                         is_dvb_subtitle = 1;
1430                     } else if (st->codecpar->codec_id == AV_CODEC_ID_DVB_TELETEXT) {
1431                         is_dvb_teletext = 1;
1432                     }
1433                 }
1434             }
1435             header_len = 0;
1436             flags      = 0;
1437             if (pts != AV_NOPTS_VALUE) {
1438                 header_len += 5;
1439                 flags      |= 0x80;
1440             }
1441             if (dts != AV_NOPTS_VALUE && pts != AV_NOPTS_VALUE && dts != pts) {
1442                 header_len += 5;
1443                 flags      |= 0x40;
1444             }
1445             if (st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO &&
1446                 st->codecpar->codec_id == AV_CODEC_ID_DIRAC) {
1447                 /* set PES_extension_flag */
1448                 pes_extension = 1;
1449                 flags        |= 0x01;
1450
1451                 /* One byte for PES2 extension flag +
1452                  * one byte for extension length +
1453                  * one byte for extension id */
1454                 header_len += 3;
1455             }
1456             /* for Blu-ray AC3 Audio the PES Extension flag should be as follow
1457              * otherwise it will not play sound on blu-ray
1458              */
1459             if (ts->m2ts_mode &&
1460                 st->codecpar->codec_type == AVMEDIA_TYPE_AUDIO &&
1461                 st->codecpar->codec_id == AV_CODEC_ID_AC3) {
1462                         /* set PES_extension_flag */
1463                         pes_extension = 1;
1464                         flags |= 0x01;
1465                         header_len += 3;
1466             }
1467             if (is_dvb_teletext) {
1468                 pes_header_stuffing_bytes = 0x24 - header_len;
1469                 header_len = 0x24;
1470             }
1471             len = payload_size + header_len + 3;
1472             /* 3 extra bytes should be added to DVB subtitle payload: 0x20 0x00 at the beginning and trailing 0xff */
1473             if (is_dvb_subtitle) {
1474                 len += 3;
1475                 payload_size++;
1476             }
1477             if (len > 0xffff)
1478                 len = 0;
1479             if (ts->omit_video_pes_length && st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO) {
1480                 len = 0;
1481             }
1482             *q++ = len >> 8;
1483             *q++ = len;
1484             val  = 0x80;
1485             /* data alignment indicator is required for subtitle and data streams */
1486             if (st->codecpar->codec_type == AVMEDIA_TYPE_SUBTITLE || st->codecpar->codec_type == AVMEDIA_TYPE_DATA)
1487                 val |= 0x04;
1488             *q++ = val;
1489             *q++ = flags;
1490             *q++ = header_len;
1491             if (pts != AV_NOPTS_VALUE) {
1492                 write_pts(q, flags >> 6, pts);
1493                 q += 5;
1494             }
1495             if (dts != AV_NOPTS_VALUE && pts != AV_NOPTS_VALUE && dts != pts) {
1496                 write_pts(q, 1, dts);
1497                 q += 5;
1498             }
1499             if (pes_extension && st->codecpar->codec_id == AV_CODEC_ID_DIRAC) {
1500                 flags = 0x01;  /* set PES_extension_flag_2 */
1501                 *q++  = flags;
1502                 *q++  = 0x80 | 0x01; /* marker bit + extension length */
1503                 /* Set the stream ID extension flag bit to 0 and
1504                  * write the extended stream ID. */
1505                 *q++ = 0x00 | 0x60;
1506             }
1507             /* For Blu-ray AC3 Audio Setting extended flags */
1508           if (ts->m2ts_mode &&
1509               pes_extension &&
1510               st->codecpar->codec_id == AV_CODEC_ID_AC3) {
1511                       flags = 0x01; /* set PES_extension_flag_2 */
1512                       *q++ = flags;
1513                       *q++ = 0x80 | 0x01; /* marker bit + extension length */
1514                       *q++ = 0x00 | 0x71; /* for AC3 Audio (specifically on blue-rays) */
1515               }
1516
1517
1518             if (is_dvb_subtitle) {
1519                 /* First two fields of DVB subtitles PES data:
1520                  * data_identifier: for DVB subtitle streams shall be coded with the value 0x20
1521                  * subtitle_stream_id: for DVB subtitle stream shall be identified by the value 0x00 */
1522                 *q++ = 0x20;
1523                 *q++ = 0x00;
1524             }
1525             if (is_dvb_teletext) {
1526                 memset(q, 0xff, pes_header_stuffing_bytes);
1527                 q += pes_header_stuffing_bytes;
1528             }
1529             is_start = 0;
1530         }
1531         /* header size */
1532         header_len = q - buf;
1533         /* data len */
1534         len = TS_PACKET_SIZE - header_len;
1535         if (len > payload_size)
1536             len = payload_size;
1537         stuffing_len = TS_PACKET_SIZE - header_len - len;
1538         if (stuffing_len > 0) {
1539             /* add stuffing with AFC */
1540             if (buf[3] & 0x20) {
1541                 /* stuffing already present: increase its size */
1542                 afc_len = buf[4] + 1;
1543                 memmove(buf + 4 + afc_len + stuffing_len,
1544                         buf + 4 + afc_len,
1545                         header_len - (4 + afc_len));
1546                 buf[4] += stuffing_len;
1547                 memset(buf + 4 + afc_len, 0xff, stuffing_len);
1548             } else {
1549                 /* add stuffing */
1550                 memmove(buf + 4 + stuffing_len, buf + 4, header_len - 4);
1551                 buf[3] |= 0x20;
1552                 buf[4]  = stuffing_len - 1;
1553                 if (stuffing_len >= 2) {
1554                     buf[5] = 0x00;
1555                     memset(buf + 6, 0xff, stuffing_len - 2);
1556                 }
1557             }
1558         }
1559
1560         if (is_dvb_subtitle && payload_size == len) {
1561             memcpy(buf + TS_PACKET_SIZE - len, payload, len - 1);
1562             buf[TS_PACKET_SIZE - 1] = 0xff; /* end_of_PES_data_field_marker: an 8-bit field with fixed contents 0xff for DVB subtitle */
1563         } else {
1564             memcpy(buf + TS_PACKET_SIZE - len, payload, len);
1565         }
1566
1567         payload      += len;
1568         payload_size -= len;
1569         write_packet(s, buf);
1570     }
1571     ts_st->prev_payload_key = key;
1572 }
1573
1574 int ff_check_h264_startcode(AVFormatContext *s, const AVStream *st, const AVPacket *pkt)
1575 {
1576     if (pkt->size < 5 || AV_RB32(pkt->data) != 0x0000001 && AV_RB24(pkt->data) != 0x000001) {
1577         if (!st->nb_frames) {
1578             av_log(s, AV_LOG_ERROR, "H.264 bitstream malformed, "
1579                    "no startcode found, use the video bitstream filter 'h264_mp4toannexb' to fix it "
1580                    "('-bsf:v h264_mp4toannexb' option with ffmpeg)\n");
1581             return AVERROR_INVALIDDATA;
1582         }
1583         av_log(s, AV_LOG_WARNING, "H.264 bitstream error, startcode missing, size %d", pkt->size);
1584         if (pkt->size)
1585             av_log(s, AV_LOG_WARNING, " data %08"PRIX32, AV_RB32(pkt->data));
1586         av_log(s, AV_LOG_WARNING, "\n");
1587     }
1588     return 0;
1589 }
1590
1591 static int check_hevc_startcode(AVFormatContext *s, const AVStream *st, const AVPacket *pkt)
1592 {
1593     if (pkt->size < 5 || AV_RB32(pkt->data) != 0x0000001 && AV_RB24(pkt->data) != 0x000001) {
1594         if (!st->nb_frames) {
1595             av_log(s, AV_LOG_ERROR, "HEVC bitstream malformed, no startcode found\n");
1596             return AVERROR_PATCHWELCOME;
1597         }
1598         av_log(s, AV_LOG_WARNING, "HEVC bitstream error, startcode missing, size %d", pkt->size);
1599         if (pkt->size)
1600             av_log(s, AV_LOG_WARNING, " data %08"PRIX32, AV_RB32(pkt->data));
1601         av_log(s, AV_LOG_WARNING, "\n");
1602     }
1603     return 0;
1604 }
1605
1606 /* Based on GStreamer's gst-plugins-base/ext/ogg/gstoggstream.c
1607  * Released under the LGPL v2.1+, written by
1608  * Vincent Penquerc'h <vincent.penquerch@collabora.co.uk>
1609  */
1610 static int opus_get_packet_samples(AVFormatContext *s, AVPacket *pkt)
1611 {
1612     static const int durations[32] = {
1613       480, 960, 1920, 2880,       /* Silk NB */
1614       480, 960, 1920, 2880,       /* Silk MB */
1615       480, 960, 1920, 2880,       /* Silk WB */
1616       480, 960,                   /* Hybrid SWB */
1617       480, 960,                   /* Hybrid FB */
1618       120, 240, 480, 960,         /* CELT NB */
1619       120, 240, 480, 960,         /* CELT NB */
1620       120, 240, 480, 960,         /* CELT NB */
1621       120, 240, 480, 960,         /* CELT NB */
1622     };
1623     int toc, frame_duration, nframes, duration;
1624
1625     if (pkt->size < 1)
1626         return 0;
1627
1628     toc = pkt->data[0];
1629
1630     frame_duration = durations[toc >> 3];
1631     switch (toc & 3) {
1632     case 0:
1633         nframes = 1;
1634         break;
1635     case 1:
1636         nframes = 2;
1637         break;
1638     case 2:
1639         nframes = 2;
1640         break;
1641     case 3:
1642         if (pkt->size < 2)
1643             return 0;
1644         nframes = pkt->data[1] & 63;
1645         break;
1646     }
1647
1648     duration = nframes * frame_duration;
1649     if (duration > 5760) {
1650         av_log(s, AV_LOG_WARNING,
1651                "Opus packet duration > 120 ms, invalid");
1652         return 0;
1653     }
1654
1655     return duration;
1656 }
1657
1658 static int mpegts_write_packet_internal(AVFormatContext *s, AVPacket *pkt)
1659 {
1660     AVStream *st = s->streams[pkt->stream_index];
1661     int size = pkt->size;
1662     uint8_t *buf = pkt->data;
1663     uint8_t *data = NULL;
1664     MpegTSWrite *ts = s->priv_data;
1665     MpegTSWriteStream *ts_st = st->priv_data;
1666     const int64_t delay = av_rescale(s->max_delay, 90000, AV_TIME_BASE) * 2;
1667     const int64_t max_audio_delay = av_rescale(s->max_delay, 90000, AV_TIME_BASE) / 2;
1668     int64_t dts = pkt->dts, pts = pkt->pts;
1669     int opus_samples = 0;
1670     int side_data_size;
1671     uint8_t *side_data = NULL;
1672     int stream_id = -1;
1673
1674     side_data = av_packet_get_side_data(pkt,
1675                                         AV_PKT_DATA_MPEGTS_STREAM_ID,
1676                                         &side_data_size);
1677     if (side_data)
1678         stream_id = side_data[0];
1679
1680     if (ts->copyts < 1) {
1681         if (pts != AV_NOPTS_VALUE)
1682             pts += delay;
1683         if (dts != AV_NOPTS_VALUE)
1684             dts += delay;
1685     }
1686
1687     if (ts_st->first_pts_check && pts == AV_NOPTS_VALUE) {
1688         av_log(s, AV_LOG_ERROR, "first pts value must be set\n");
1689         return AVERROR_INVALIDDATA;
1690     }
1691     ts_st->first_pts_check = 0;
1692
1693     if (st->codecpar->codec_id == AV_CODEC_ID_H264) {
1694         const uint8_t *p = buf, *buf_end = p + size;
1695         uint32_t state = -1;
1696         int extradd = (pkt->flags & AV_PKT_FLAG_KEY) ? st->codecpar->extradata_size : 0;
1697         int ret = ff_check_h264_startcode(s, st, pkt);
1698         if (ret < 0)
1699             return ret;
1700
1701         if (extradd && AV_RB24(st->codecpar->extradata) > 1)
1702             extradd = 0;
1703
1704         do {
1705             p = avpriv_find_start_code(p, buf_end, &state);
1706             av_log(s, AV_LOG_TRACE, "nal %"PRId32"\n", state & 0x1f);
1707             if ((state & 0x1f) == 7)
1708                 extradd = 0;
1709         } while (p < buf_end && (state & 0x1f) != 9 &&
1710                  (state & 0x1f) != 5 && (state & 0x1f) != 1);
1711
1712         if ((state & 0x1f) != 5)
1713             extradd = 0;
1714         if ((state & 0x1f) != 9) { // AUD NAL
1715             data = av_malloc(pkt->size + 6 + extradd);
1716             if (!data)
1717                 return AVERROR(ENOMEM);
1718             memcpy(data + 6, st->codecpar->extradata, extradd);
1719             memcpy(data + 6 + extradd, pkt->data, pkt->size);
1720             AV_WB32(data, 0x00000001);
1721             data[4] = 0x09;
1722             data[5] = 0xf0; // any slice type (0xe) + rbsp stop one bit
1723             buf     = data;
1724             size    = pkt->size + 6 + extradd;
1725         }
1726     } else if (st->codecpar->codec_id == AV_CODEC_ID_AAC) {
1727         if (pkt->size < 2) {
1728             av_log(s, AV_LOG_ERROR, "AAC packet too short\n");
1729             return AVERROR_INVALIDDATA;
1730         }
1731         if ((AV_RB16(pkt->data) & 0xfff0) != 0xfff0) {
1732             int ret;
1733             AVPacket pkt2;
1734
1735             if (!ts_st->amux) {
1736                 av_log(s, AV_LOG_ERROR, "AAC bitstream not in ADTS format "
1737                                         "and extradata missing\n");
1738             } else {
1739             av_init_packet(&pkt2);
1740             pkt2.data = pkt->data;
1741             pkt2.size = pkt->size;
1742             av_assert0(pkt->dts != AV_NOPTS_VALUE);
1743             pkt2.dts = av_rescale_q(pkt->dts, st->time_base, ts_st->amux->streams[0]->time_base);
1744
1745             ret = avio_open_dyn_buf(&ts_st->amux->pb);
1746             if (ret < 0)
1747                 return ret;
1748
1749             ret = av_write_frame(ts_st->amux, &pkt2);
1750             if (ret < 0) {
1751                 ffio_free_dyn_buf(&ts_st->amux->pb);
1752                 return ret;
1753             }
1754             size            = avio_close_dyn_buf(ts_st->amux->pb, &data);
1755             ts_st->amux->pb = NULL;
1756             buf             = data;
1757             }
1758         }
1759     } else if (st->codecpar->codec_id == AV_CODEC_ID_HEVC) {
1760         const uint8_t *p = buf, *buf_end = p + size;
1761         uint32_t state = -1;
1762         int extradd = (pkt->flags & AV_PKT_FLAG_KEY) ? st->codecpar->extradata_size : 0;
1763         int ret = check_hevc_startcode(s, st, pkt);
1764         if (ret < 0)
1765             return ret;
1766
1767         if (extradd && AV_RB24(st->codecpar->extradata) > 1)
1768             extradd = 0;
1769
1770         do {
1771             p = avpriv_find_start_code(p, buf_end, &state);
1772             av_log(s, AV_LOG_TRACE, "nal %"PRId32"\n", (state & 0x7e)>>1);
1773             if ((state & 0x7e) == 2*32)
1774                 extradd = 0;
1775         } while (p < buf_end && (state & 0x7e) != 2*35 &&
1776                  (state & 0x7e) >= 2*32);
1777
1778         if ((state & 0x7e) < 2*16 || (state & 0x7e) >= 2*24)
1779             extradd = 0;
1780         if ((state & 0x7e) != 2*35) { // AUD NAL
1781             data = av_malloc(pkt->size + 7 + extradd);
1782             if (!data)
1783                 return AVERROR(ENOMEM);
1784             memcpy(data + 7, st->codecpar->extradata, extradd);
1785             memcpy(data + 7 + extradd, pkt->data, pkt->size);
1786             AV_WB32(data, 0x00000001);
1787             data[4] = 2*35;
1788             data[5] = 1;
1789             data[6] = 0x50; // any slice type (0x4) + rbsp stop one bit
1790             buf     = data;
1791             size    = pkt->size + 7 + extradd;
1792         }
1793     } else if (st->codecpar->codec_id == AV_CODEC_ID_OPUS) {
1794         if (pkt->size < 2) {
1795             av_log(s, AV_LOG_ERROR, "Opus packet too short\n");
1796             return AVERROR_INVALIDDATA;
1797         }
1798
1799         /* Add Opus control header */
1800         if ((AV_RB16(pkt->data) >> 5) != 0x3ff) {
1801             uint8_t *side_data;
1802             int side_data_size;
1803             int i, n;
1804             int ctrl_header_size;
1805             int trim_start = 0, trim_end = 0;
1806
1807             opus_samples = opus_get_packet_samples(s, pkt);
1808
1809             side_data = av_packet_get_side_data(pkt,
1810                                                 AV_PKT_DATA_SKIP_SAMPLES,
1811                                                 &side_data_size);
1812
1813             if (side_data && side_data_size >= 10) {
1814                 trim_end = AV_RL32(side_data + 4) * 48000 / st->codecpar->sample_rate;
1815             }
1816
1817             ctrl_header_size = pkt->size + 2 + pkt->size / 255 + 1;
1818             if (ts_st->opus_pending_trim_start)
1819               ctrl_header_size += 2;
1820             if (trim_end)
1821               ctrl_header_size += 2;
1822
1823             data = av_malloc(ctrl_header_size);
1824             if (!data)
1825                 return AVERROR(ENOMEM);
1826
1827             data[0] = 0x7f;
1828             data[1] = 0xe0;
1829             if (ts_st->opus_pending_trim_start)
1830                 data[1] |= 0x10;
1831             if (trim_end)
1832                 data[1] |= 0x08;
1833
1834             n = pkt->size;
1835             i = 2;
1836             do {
1837                 data[i] = FFMIN(n, 255);
1838                 n -= 255;
1839                 i++;
1840             } while (n >= 0);
1841
1842             av_assert0(2 + pkt->size / 255 + 1 == i);
1843
1844             if (ts_st->opus_pending_trim_start) {
1845                 trim_start = FFMIN(ts_st->opus_pending_trim_start, opus_samples);
1846                 AV_WB16(data + i, trim_start);
1847                 i += 2;
1848                 ts_st->opus_pending_trim_start -= trim_start;
1849             }
1850             if (trim_end) {
1851                 trim_end = FFMIN(trim_end, opus_samples - trim_start);
1852                 AV_WB16(data + i, trim_end);
1853                 i += 2;
1854             }
1855
1856             memcpy(data + i, pkt->data, pkt->size);
1857             buf     = data;
1858             size    = ctrl_header_size;
1859         } else {
1860             /* TODO: Can we get TS formatted data here? If so we will
1861              * need to count the samples of that too! */
1862             av_log(s, AV_LOG_WARNING, "Got MPEG-TS formatted Opus data, unhandled");
1863         }
1864     }
1865
1866     if (ts_st->payload_size && (ts_st->payload_size + size > ts->pes_payload_size ||
1867         (dts != AV_NOPTS_VALUE && ts_st->payload_dts != AV_NOPTS_VALUE &&
1868          dts - ts_st->payload_dts >= max_audio_delay) ||
1869         ts_st->opus_queued_samples + opus_samples >= 5760 /* 120ms */)) {
1870         mpegts_write_pes(s, st, ts_st->payload, ts_st->payload_size,
1871                          ts_st->payload_pts, ts_st->payload_dts,
1872                          ts_st->payload_flags & AV_PKT_FLAG_KEY, stream_id);
1873         ts_st->payload_size = 0;
1874         ts_st->opus_queued_samples = 0;
1875     }
1876
1877     if (st->codecpar->codec_type != AVMEDIA_TYPE_AUDIO || size > ts->pes_payload_size) {
1878         av_assert0(!ts_st->payload_size);
1879         // for video and subtitle, write a single pes packet
1880         mpegts_write_pes(s, st, buf, size, pts, dts,
1881                          pkt->flags & AV_PKT_FLAG_KEY, stream_id);
1882         ts_st->opus_queued_samples = 0;
1883         av_free(data);
1884         return 0;
1885     }
1886
1887     if (!ts_st->payload_size) {
1888         ts_st->payload_pts   = pts;
1889         ts_st->payload_dts   = dts;
1890         ts_st->payload_flags = pkt->flags;
1891     }
1892
1893     memcpy(ts_st->payload + ts_st->payload_size, buf, size);
1894     ts_st->payload_size += size;
1895     ts_st->opus_queued_samples += opus_samples;
1896
1897     av_free(data);
1898
1899     return 0;
1900 }
1901
1902 static void mpegts_write_flush(AVFormatContext *s)
1903 {
1904     MpegTSWrite *ts = s->priv_data;
1905     int i;
1906
1907     /* flush current packets */
1908     for (i = 0; i < s->nb_streams; i++) {
1909         AVStream *st = s->streams[i];
1910         MpegTSWriteStream *ts_st = st->priv_data;
1911         if (ts_st->payload_size > 0) {
1912             mpegts_write_pes(s, st, ts_st->payload, ts_st->payload_size,
1913                              ts_st->payload_pts, ts_st->payload_dts,
1914                              ts_st->payload_flags & AV_PKT_FLAG_KEY, -1);
1915             ts_st->payload_size = 0;
1916             ts_st->opus_queued_samples = 0;
1917         }
1918     }
1919
1920     if (ts->m2ts_mode) {
1921         int packets = (avio_tell(s->pb) / (TS_PACKET_SIZE + 4)) % 32;
1922         while (packets++ < 32)
1923             mpegts_insert_null_packet(s);
1924     }
1925 }
1926
1927 static int mpegts_write_packet(AVFormatContext *s, AVPacket *pkt)
1928 {
1929     if (!pkt) {
1930         mpegts_write_flush(s);
1931         return 1;
1932     } else {
1933         return mpegts_write_packet_internal(s, pkt);
1934     }
1935 }
1936
1937 static int mpegts_write_end(AVFormatContext *s)
1938 {
1939     if (s->pb)
1940         mpegts_write_flush(s);
1941
1942     return 0;
1943 }
1944
1945 static void mpegts_deinit(AVFormatContext *s)
1946 {
1947     MpegTSWrite *ts = s->priv_data;
1948     MpegTSService *service;
1949     int i;
1950
1951     for (i = 0; i < s->nb_streams; i++) {
1952         AVStream *st = s->streams[i];
1953         MpegTSWriteStream *ts_st = st->priv_data;
1954         if (ts_st) {
1955             av_freep(&ts_st->payload);
1956             if (ts_st->amux) {
1957                 avformat_free_context(ts_st->amux);
1958                 ts_st->amux = NULL;
1959             }
1960         }
1961     }
1962
1963     for (i = 0; i < ts->nb_services; i++) {
1964         service = ts->services[i];
1965         av_freep(&service);
1966     }
1967     av_freep(&ts->services);
1968 }
1969
1970 static int mpegts_check_bitstream(struct AVFormatContext *s, const AVPacket *pkt)
1971 {
1972     int ret = 1;
1973     AVStream *st = s->streams[pkt->stream_index];
1974
1975     if (st->codecpar->codec_id == AV_CODEC_ID_H264) {
1976         if (pkt->size >= 5 && AV_RB32(pkt->data) != 0x0000001 &&
1977                              (AV_RB24(pkt->data) != 0x000001 ||
1978                               (st->codecpar->extradata_size > 0 &&
1979                                st->codecpar->extradata[0] == 1)))
1980             ret = ff_stream_add_bitstream_filter(st, "h264_mp4toannexb", NULL);
1981     } else if (st->codecpar->codec_id == AV_CODEC_ID_HEVC) {
1982         if (pkt->size >= 5 && AV_RB32(pkt->data) != 0x0000001 &&
1983                              (AV_RB24(pkt->data) != 0x000001 ||
1984                               (st->codecpar->extradata_size > 0 &&
1985                                st->codecpar->extradata[0] == 1)))
1986             ret = ff_stream_add_bitstream_filter(st, "hevc_mp4toannexb", NULL);
1987     }
1988
1989     return ret;
1990 }
1991
1992 static const AVOption options[] = {
1993     { "mpegts_transport_stream_id", "Set transport_stream_id field.",
1994       offsetof(MpegTSWrite, transport_stream_id), AV_OPT_TYPE_INT,
1995       { .i64 = 0x0001 }, 0x0001, 0xffff, AV_OPT_FLAG_ENCODING_PARAM },
1996     { "mpegts_original_network_id", "Set original_network_id field.",
1997       offsetof(MpegTSWrite, original_network_id), AV_OPT_TYPE_INT,
1998       { .i64 = DVB_PRIVATE_NETWORK_START }, 0x0001, 0xffff, AV_OPT_FLAG_ENCODING_PARAM },
1999     { "mpegts_service_id", "Set service_id field.",
2000       offsetof(MpegTSWrite, service_id), AV_OPT_TYPE_INT,
2001       { .i64 = 0x0001 }, 0x0001, 0xffff, AV_OPT_FLAG_ENCODING_PARAM },
2002     { "mpegts_service_type", "Set service_type field.",
2003       offsetof(MpegTSWrite, service_type), AV_OPT_TYPE_INT,
2004       { .i64 = 0x01 }, 0x01, 0xff, AV_OPT_FLAG_ENCODING_PARAM, "mpegts_service_type" },
2005     { "digital_tv", "Digital Television.",
2006       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_SERVICE_TYPE_DIGITAL_TV }, 0x01, 0xff,
2007       AV_OPT_FLAG_ENCODING_PARAM, "mpegts_service_type" },
2008     { "digital_radio", "Digital Radio.",
2009       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_SERVICE_TYPE_DIGITAL_RADIO }, 0x01, 0xff,
2010       AV_OPT_FLAG_ENCODING_PARAM, "mpegts_service_type" },
2011     { "teletext", "Teletext.",
2012       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_SERVICE_TYPE_TELETEXT }, 0x01, 0xff,
2013       AV_OPT_FLAG_ENCODING_PARAM, "mpegts_service_type" },
2014     { "advanced_codec_digital_radio", "Advanced Codec Digital Radio.",
2015       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_SERVICE_TYPE_ADVANCED_CODEC_DIGITAL_RADIO }, 0x01, 0xff,
2016       AV_OPT_FLAG_ENCODING_PARAM, "mpegts_service_type" },
2017     { "mpeg2_digital_hdtv", "MPEG2 Digital HDTV.",
2018       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_SERVICE_TYPE_MPEG2_DIGITAL_HDTV }, 0x01, 0xff,
2019       AV_OPT_FLAG_ENCODING_PARAM, "mpegts_service_type" },
2020     { "advanced_codec_digital_sdtv", "Advanced Codec Digital SDTV.",
2021       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_SERVICE_TYPE_ADVANCED_CODEC_DIGITAL_SDTV }, 0x01, 0xff,
2022       AV_OPT_FLAG_ENCODING_PARAM, "mpegts_service_type" },
2023     { "advanced_codec_digital_hdtv", "Advanced Codec Digital HDTV.",
2024       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_SERVICE_TYPE_ADVANCED_CODEC_DIGITAL_HDTV }, 0x01, 0xff,
2025       AV_OPT_FLAG_ENCODING_PARAM, "mpegts_service_type" },
2026     { "hevc_digital_hdtv", "HEVC Digital Television Service.",
2027       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_SERVICE_TYPE_HEVC_DIGITAL_HDTV }, 0x01, 0xff,
2028       AV_OPT_FLAG_ENCODING_PARAM, "mpegts_service_type" },
2029     { "mpegts_pmt_start_pid", "Set the first pid of the PMT.",
2030       offsetof(MpegTSWrite, pmt_start_pid), AV_OPT_TYPE_INT,
2031       { .i64 = 0x1000 }, FIRST_OTHER_PID, LAST_OTHER_PID, AV_OPT_FLAG_ENCODING_PARAM },
2032     { "mpegts_start_pid", "Set the first pid.",
2033       offsetof(MpegTSWrite, start_pid), AV_OPT_TYPE_INT,
2034       { .i64 = 0x0100 }, FIRST_OTHER_PID, LAST_OTHER_PID, AV_OPT_FLAG_ENCODING_PARAM },
2035     { "mpegts_m2ts_mode", "Enable m2ts mode.",
2036       offsetof(MpegTSWrite, m2ts_mode), AV_OPT_TYPE_BOOL,
2037       { .i64 = -1 }, -1, 1, AV_OPT_FLAG_ENCODING_PARAM },
2038     { "muxrate", NULL,
2039       offsetof(MpegTSWrite, mux_rate), AV_OPT_TYPE_INT,
2040       { .i64 = 1 }, 0, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM },
2041     { "pes_payload_size", "Minimum PES packet payload in bytes",
2042       offsetof(MpegTSWrite, pes_payload_size), AV_OPT_TYPE_INT,
2043       { .i64 = DEFAULT_PES_PAYLOAD_SIZE }, 0, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM },
2044     { "mpegts_flags", "MPEG-TS muxing flags",
2045       offsetof(MpegTSWrite, flags), AV_OPT_TYPE_FLAGS, { .i64 = 0 }, 0, INT_MAX,
2046       AV_OPT_FLAG_ENCODING_PARAM, "mpegts_flags" },
2047     { "resend_headers", "Reemit PAT/PMT before writing the next packet",
2048       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_FLAG_REEMIT_PAT_PMT }, 0, INT_MAX,
2049       AV_OPT_FLAG_ENCODING_PARAM, "mpegts_flags" },
2050     { "latm", "Use LATM packetization for AAC",
2051       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_FLAG_AAC_LATM }, 0, INT_MAX,
2052       AV_OPT_FLAG_ENCODING_PARAM, "mpegts_flags" },
2053     { "pat_pmt_at_frames", "Reemit PAT and PMT at each video frame",
2054       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_FLAG_PAT_PMT_AT_FRAMES}, 0, INT_MAX,
2055       AV_OPT_FLAG_ENCODING_PARAM, "mpegts_flags" },
2056     { "system_b", "Conform to System B (DVB) instead of System A (ATSC)",
2057       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_FLAG_SYSTEM_B }, 0, INT_MAX,
2058       AV_OPT_FLAG_ENCODING_PARAM, "mpegts_flags" },
2059     { "initial_discontinuity", "Mark initial packets as discontinuous",
2060       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_FLAG_DISCONT }, 0, INT_MAX,
2061       AV_OPT_FLAG_ENCODING_PARAM, "mpegts_flags" },
2062     { "mpegts_copyts", "don't offset dts/pts",
2063       offsetof(MpegTSWrite, copyts), AV_OPT_TYPE_BOOL,
2064       { .i64 = -1 }, -1, 1, AV_OPT_FLAG_ENCODING_PARAM },
2065     { "tables_version", "set PAT, PMT and SDT version",
2066       offsetof(MpegTSWrite, tables_version), AV_OPT_TYPE_INT,
2067       { .i64 = 0 }, 0, 31, AV_OPT_FLAG_ENCODING_PARAM },
2068     { "omit_video_pes_length", "Omit the PES packet length for video packets",
2069       offsetof(MpegTSWrite, omit_video_pes_length), AV_OPT_TYPE_BOOL,
2070       { .i64 = 1 }, 0, 1, AV_OPT_FLAG_ENCODING_PARAM },
2071     { "pcr_period", "PCR retransmission time in milliseconds",
2072       offsetof(MpegTSWrite, pcr_period_ms), AV_OPT_TYPE_INT,
2073       { .i64 = -1 }, -1, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM },
2074     { "pat_period", "PAT/PMT retransmission time limit in seconds",
2075       offsetof(MpegTSWrite, pat_period_us), AV_OPT_TYPE_DURATION,
2076       { .i64 = PAT_RETRANS_TIME * 1000LL }, 0, INT64_MAX, AV_OPT_FLAG_ENCODING_PARAM },
2077     { "sdt_period", "SDT retransmission time limit in seconds",
2078       offsetof(MpegTSWrite, sdt_period_us), AV_OPT_TYPE_DURATION,
2079       { .i64 = SDT_RETRANS_TIME * 1000LL }, 0, INT64_MAX, AV_OPT_FLAG_ENCODING_PARAM },
2080     { NULL },
2081 };
2082
2083 static const AVClass mpegts_muxer_class = {
2084     .class_name = "MPEGTS muxer",
2085     .item_name  = av_default_item_name,
2086     .option     = options,
2087     .version    = LIBAVUTIL_VERSION_INT,
2088 };
2089
2090 AVOutputFormat ff_mpegts_muxer = {
2091     .name           = "mpegts",
2092     .long_name      = NULL_IF_CONFIG_SMALL("MPEG-TS (MPEG-2 Transport Stream)"),
2093     .mime_type      = "video/MP2T",
2094     .extensions     = "ts,m2t,m2ts,mts",
2095     .priv_data_size = sizeof(MpegTSWrite),
2096     .audio_codec    = AV_CODEC_ID_MP2,
2097     .video_codec    = AV_CODEC_ID_MPEG2VIDEO,
2098     .init           = mpegts_init,
2099     .write_packet   = mpegts_write_packet,
2100     .write_trailer  = mpegts_write_end,
2101     .deinit         = mpegts_deinit,
2102     .check_bitstream = mpegts_check_bitstream,
2103     .flags          = AVFMT_ALLOW_FLUSH | AVFMT_VARIABLE_FPS | AVFMT_NODIMENSIONS,
2104     .priv_class     = &mpegts_muxer_class,
2105 };