git.sesse.net Git - ffmpeg/blob - libavformat/mpegtsenc.c

   1 /*
   2  * MPEG-2 transport stream (aka DVB) muxer
   3  * Copyright (c) 2003 Fabrice Bellard
   4  *
   5  * This file is part of FFmpeg.
   6  *
   7  * FFmpeg is free software; you can redistribute it and/or
   8  * modify it under the terms of the GNU Lesser General Public
   9  * License as published by the Free Software Foundation; either
  10  * version 2.1 of the License, or (at your option) any later version.
  11  *
  12  * FFmpeg is distributed in the hope that it will be useful,
  13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  15  * Lesser General Public License for more details.
  16  *
  17  * You should have received a copy of the GNU Lesser General Public
  18  * License along with FFmpeg; if not, write to the Free Software
  19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
  20  */
  21
  22 #include "libavutil/avassert.h"
  23 #include "libavutil/bswap.h"
  24 #include "libavutil/crc.h"
  25 #include "libavutil/dict.h"
  26 #include "libavutil/intreadwrite.h"
  27 #include "libavutil/mathematics.h"
  28 #include "libavutil/opt.h"
  29
  30 #include "libavcodec/internal.h"
  31
  32 #include "avformat.h"
  33 #include "avio_internal.h"
  34 #include "internal.h"
  35 #include "mpegts.h"
  36
  37 #define PCR_TIME_BASE 27000000
  38
  39 /* write DVB SI sections */
  40
  41 #define DVB_PRIVATE_NETWORK_START 0xff01
  42
  43 /*********************************************/
  44 /* mpegts section writer */
  45
  46 typedef struct MpegTSSection {
  47     int pid;
  48     int cc;
  49     int discontinuity;
  50     void (*write_packet)(struct MpegTSSection *s, const uint8_t *packet);
  51     void *opaque;
  52 } MpegTSSection;
  53
  54 typedef struct MpegTSService {
  55     MpegTSSection pmt; /* MPEG-2 PMT table context */
  56     int sid;           /* service ID */
  57     uint8_t name[256];
  58     uint8_t provider_name[256];
  59     int pcr_pid;
  60     AVProgram *program;
  61 } MpegTSService;
  62
  63 // service_type values as defined in ETSI 300 468
  64 enum {
  65     MPEGTS_SERVICE_TYPE_DIGITAL_TV                   = 0x01,
  66     MPEGTS_SERVICE_TYPE_DIGITAL_RADIO                = 0x02,
  67     MPEGTS_SERVICE_TYPE_TELETEXT                     = 0x03,
  68     MPEGTS_SERVICE_TYPE_ADVANCED_CODEC_DIGITAL_RADIO = 0x0A,
  69     MPEGTS_SERVICE_TYPE_MPEG2_DIGITAL_HDTV           = 0x11,
  70     MPEGTS_SERVICE_TYPE_ADVANCED_CODEC_DIGITAL_SDTV  = 0x16,
  71     MPEGTS_SERVICE_TYPE_ADVANCED_CODEC_DIGITAL_HDTV  = 0x19,
  72     MPEGTS_SERVICE_TYPE_HEVC_DIGITAL_HDTV            = 0x1F,
  73 };
  74 typedef struct MpegTSWrite {
  75     const AVClass *av_class;
  76     MpegTSSection pat; /* MPEG-2 PAT table */
  77     MpegTSSection sdt; /* MPEG-2 SDT table context */
  78     MpegTSService **services;
  79     int64_t sdt_period; /* SDT period in PCR time base */
  80     int64_t pat_period; /* PAT/PMT period in PCR time base */
  81     int nb_services;
  82     int64_t first_pcr;
  83     int64_t next_pcr;
  84     int mux_rate; ///< set to 1 when VBR
  85     int pes_payload_size;
  86
  87     int transport_stream_id;
  88     int original_network_id;
  89     int service_id;
  90     int service_type;
  91
  92     int pmt_start_pid;
  93     int start_pid;
  94     int m2ts_mode;
  95     int m2ts_video_pid;
  96     int m2ts_audio_pid;
  97     int m2ts_pgssub_pid;
  98     int m2ts_textsub_pid;
  99
 100     int pcr_period_ms;
 101 #define MPEGTS_FLAG_REEMIT_PAT_PMT  0x01
 102 #define MPEGTS_FLAG_AAC_LATM        0x02
 103 #define MPEGTS_FLAG_PAT_PMT_AT_FRAMES           0x04
 104 #define MPEGTS_FLAG_SYSTEM_B        0x08
 105 #define MPEGTS_FLAG_DISCONT         0x10
 106     int flags;
 107     int copyts;
 108     int tables_version;
 109     int64_t pat_period_us;
 110     int64_t sdt_period_us;
 111     int64_t last_pat_ts;
 112     int64_t last_sdt_ts;
 113
 114     int omit_video_pes_length;
 115 } MpegTSWrite;
 116
 117 /* a PES packet header is generated every DEFAULT_PES_HEADER_FREQ packets */
 118 #define DEFAULT_PES_HEADER_FREQ  16
 119 #define DEFAULT_PES_PAYLOAD_SIZE ((DEFAULT_PES_HEADER_FREQ - 1) * 184 + 170)
 120
 121 /* The section length is 12 bits. The first 2 are set to 0, the remaining
 122  * 10 bits should not exceed 1021. */
 123 #define SECTION_LENGTH 1020
 124
 125 /* NOTE: 4 bytes must be left at the end for the crc32 */
 126 static void mpegts_write_section(MpegTSSection *s, uint8_t *buf, int len)
 127 {
 128     unsigned int crc;
 129     unsigned char packet[TS_PACKET_SIZE];
 130     const unsigned char *buf_ptr;
 131     unsigned char *q;
 132     int first, b, len1, left;
 133
 134     crc = av_bswap32(av_crc(av_crc_get_table(AV_CRC_32_IEEE),
 135                             -1, buf, len - 4));
 136
 137     buf[len - 4] = (crc >> 24) & 0xff;
 138     buf[len - 3] = (crc >> 16) & 0xff;
 139     buf[len - 2] = (crc >>  8) & 0xff;
 140     buf[len - 1] =  crc        & 0xff;
 141
 142     /* send each packet */
 143     buf_ptr = buf;
 144     while (len > 0) {
 145         first = buf == buf_ptr;
 146         q     = packet;
 147         *q++  = 0x47;
 148         b     = s->pid >> 8;
 149         if (first)
 150             b |= 0x40;
 151         *q++  = b;
 152         *q++  = s->pid;
 153         s->cc = s->cc + 1 & 0xf;
 154         *q++  = 0x10 | s->cc;
 155         if (s->discontinuity) {
 156             q[-1] |= 0x20;
 157             *q++ = 1;
 158             *q++ = 0x80;
 159             s->discontinuity = 0;
 160         }
 161         if (first)
 162             *q++ = 0; /* 0 offset */
 163         len1 = TS_PACKET_SIZE - (q - packet);
 164         if (len1 > len)
 165             len1 = len;
 166         memcpy(q, buf_ptr, len1);
 167         q += len1;
 168         /* add known padding data */
 169         left = TS_PACKET_SIZE - (q - packet);
 170         if (left > 0)
 171             memset(q, 0xff, left);
 172
 173         s->write_packet(s, packet);
 174
 175         buf_ptr += len1;
 176         len     -= len1;
 177     }
 178 }
 179
 180 static inline void put16(uint8_t **q_ptr, int val)
 181 {
 182     uint8_t *q;
 183     q      = *q_ptr;
 184     *q++   = val >> 8;
 185     *q++   = val;
 186     *q_ptr = q;
 187 }
 188
 189 static int mpegts_write_section1(MpegTSSection *s, int tid, int id,
 190                                  int version, int sec_num, int last_sec_num,
 191                                  uint8_t *buf, int len)
 192 {
 193     uint8_t section[1024], *q;
 194     unsigned int tot_len;
 195     /* reserved_future_use field must be set to 1 for SDT */
 196     unsigned int flags = tid == SDT_TID ? 0xf000 : 0xb000;
 197
 198     tot_len = 3 + 5 + len + 4;
 199     /* check if not too big */
 200     if (tot_len > 1024)
 201         return AVERROR_INVALIDDATA;
 202
 203     q    = section;
 204     *q++ = tid;
 205     put16(&q, flags | (len + 5 + 4)); /* 5 byte header + 4 byte CRC */
 206     put16(&q, id);
 207     *q++ = 0xc1 | (version << 1); /* current_next_indicator = 1 */
 208     *q++ = sec_num;
 209     *q++ = last_sec_num;
 210     memcpy(q, buf, len);
 211
 212     mpegts_write_section(s, section, tot_len);
 213     return 0;
 214 }
 215
 216 /*********************************************/
 217 /* mpegts writer */
 218
 219 #define DEFAULT_PROVIDER_NAME   "FFmpeg"
 220 #define DEFAULT_SERVICE_NAME    "Service"
 221
 222 /* we retransmit the SI info at this rate */
 223 #define SDT_RETRANS_TIME 500
 224 #define PAT_RETRANS_TIME 100
 225 #define PCR_RETRANS_TIME 20
 226
 227 typedef struct MpegTSWriteStream {
 228     int pid; /* stream associated pid */
 229     int cc;
 230     int discontinuity;
 231     int payload_size;
 232     int first_pts_check; ///< first pts check needed
 233     int prev_payload_key;
 234     int64_t payload_pts;
 235     int64_t payload_dts;
 236     int payload_flags;
 237     uint8_t *payload;
 238     AVFormatContext *amux;
 239     int data_st_warning;
 240
 241     int64_t pcr_period; /* PCR period in PCR time base */
 242     int64_t last_pcr;
 243
 244     /* For Opus */
 245     int opus_queued_samples;
 246     int opus_pending_trim_start;
 247 } MpegTSWriteStream;
 248
 249 static void mpegts_write_pat(AVFormatContext *s)
 250 {
 251     MpegTSWrite *ts = s->priv_data;
 252     MpegTSService *service;
 253     uint8_t data[SECTION_LENGTH], *q;
 254     int i;
 255
 256     q = data;
 257     for (i = 0; i < ts->nb_services; i++) {
 258         service = ts->services[i];
 259         put16(&q, service->sid);
 260         put16(&q, 0xe000 | service->pmt.pid);
 261     }
 262     mpegts_write_section1(&ts->pat, PAT_TID, ts->transport_stream_id, ts->tables_version, 0, 0,
 263                           data, q - data);
 264 }
 265
 266 static void putbuf(uint8_t **q_ptr, const uint8_t *buf, size_t len)
 267 {
 268     memcpy(*q_ptr, buf, len);
 269     *q_ptr += len;
 270 }
 271
 272 static void put_registration_descriptor(uint8_t **q_ptr, uint32_t tag)
 273 {
 274     uint8_t *q = *q_ptr;
 275     *q++ = 0x05; /* MPEG-2 registration descriptor*/
 276     *q++ = 4;
 277     *q++ = tag;
 278     *q++ = tag >> 8;
 279     *q++ = tag >> 16;
 280     *q++ = tag >> 24;
 281     *q_ptr = q;
 282 }
 283
 284 static int get_dvb_stream_type(AVFormatContext *s, AVStream *st)
 285 {
 286     MpegTSWrite *ts = s->priv_data;
 287     MpegTSWriteStream *ts_st = st->priv_data;
 288     int stream_type;
 289
 290     switch (st->codecpar->codec_id) {
 291     case AV_CODEC_ID_MPEG1VIDEO:
 292     case AV_CODEC_ID_MPEG2VIDEO:
 293         stream_type = STREAM_TYPE_VIDEO_MPEG2;
 294         break;
 295     case AV_CODEC_ID_MPEG4:
 296         stream_type = STREAM_TYPE_VIDEO_MPEG4;
 297         break;
 298     case AV_CODEC_ID_H264:
 299         stream_type = STREAM_TYPE_VIDEO_H264;
 300         break;
 301     case AV_CODEC_ID_HEVC:
 302         stream_type = STREAM_TYPE_VIDEO_HEVC;
 303         break;
 304     case AV_CODEC_ID_CAVS:
 305         stream_type = STREAM_TYPE_VIDEO_CAVS;
 306         break;
 307     case AV_CODEC_ID_DIRAC:
 308         stream_type = STREAM_TYPE_VIDEO_DIRAC;
 309         break;
 310     case AV_CODEC_ID_VC1:
 311         stream_type = STREAM_TYPE_VIDEO_VC1;
 312         break;
 313     case AV_CODEC_ID_MP2:
 314     case AV_CODEC_ID_MP3:
 315         if (   st->codecpar->sample_rate > 0
 316             && st->codecpar->sample_rate < 32000) {
 317             stream_type = STREAM_TYPE_AUDIO_MPEG2;
 318         } else {
 319             stream_type = STREAM_TYPE_AUDIO_MPEG1;
 320         }
 321         break;
 322     case AV_CODEC_ID_AAC:
 323         stream_type = (ts->flags & MPEGTS_FLAG_AAC_LATM)
 324                       ? STREAM_TYPE_AUDIO_AAC_LATM
 325                       : STREAM_TYPE_AUDIO_AAC;
 326         break;
 327     case AV_CODEC_ID_AAC_LATM:
 328         stream_type = STREAM_TYPE_AUDIO_AAC_LATM;
 329         break;
 330     case AV_CODEC_ID_AC3:
 331         stream_type = (ts->flags & MPEGTS_FLAG_SYSTEM_B)
 332                       ? STREAM_TYPE_PRIVATE_DATA
 333                       : STREAM_TYPE_AUDIO_AC3;
 334         break;
 335     case AV_CODEC_ID_EAC3:
 336         stream_type = (ts->flags & MPEGTS_FLAG_SYSTEM_B)
 337                       ? STREAM_TYPE_PRIVATE_DATA
 338                       : STREAM_TYPE_AUDIO_EAC3;
 339         break;
 340     case AV_CODEC_ID_DTS:
 341         stream_type = STREAM_TYPE_AUDIO_DTS;
 342         break;
 343     case AV_CODEC_ID_TRUEHD:
 344         stream_type = STREAM_TYPE_AUDIO_TRUEHD;
 345         break;
 346     case AV_CODEC_ID_OPUS:
 347         stream_type = STREAM_TYPE_PRIVATE_DATA;
 348         break;
 349     case AV_CODEC_ID_TIMED_ID3:
 350         stream_type = STREAM_TYPE_METADATA;
 351         break;
 352     case AV_CODEC_ID_DVB_SUBTITLE:
 353     case AV_CODEC_ID_DVB_TELETEXT:
 354         stream_type = STREAM_TYPE_PRIVATE_DATA;
 355         break;
 356     case AV_CODEC_ID_SMPTE_KLV:
 357         if (st->codecpar->profile == FF_PROFILE_KLVA_SYNC) {
 358             stream_type = STREAM_TYPE_METADATA;
 359         } else {
 360             stream_type = STREAM_TYPE_PRIVATE_DATA;
 361         }
 362         break;
 363     default:
 364         av_log_once(s, AV_LOG_WARNING, AV_LOG_DEBUG, &ts_st->data_st_warning,
 365                     "Stream %d, codec %s, is muxed as a private data stream "
 366                     "and may not be recognized upon reading.\n", st->index,
 367                     avcodec_get_name(st->codecpar->codec_id));
 368         stream_type = STREAM_TYPE_PRIVATE_DATA;
 369         break;
 370     }
 371
 372     return stream_type;
 373 }
 374
 375 static int get_m2ts_stream_type(AVFormatContext *s, AVStream *st)
 376 {
 377     int stream_type;
 378     MpegTSWriteStream *ts_st = st->priv_data;
 379
 380     switch (st->codecpar->codec_id) {
 381     case AV_CODEC_ID_MPEG2VIDEO:
 382         stream_type = STREAM_TYPE_VIDEO_MPEG2;
 383         break;
 384     case AV_CODEC_ID_H264:
 385         stream_type = STREAM_TYPE_VIDEO_H264;
 386         break;
 387     case AV_CODEC_ID_VC1:
 388         stream_type = STREAM_TYPE_VIDEO_VC1;
 389         break;
 390     case AV_CODEC_ID_HEVC:
 391         stream_type = STREAM_TYPE_VIDEO_HEVC;
 392         break;
 393     case AV_CODEC_ID_PCM_BLURAY:
 394         stream_type = 0x80;
 395         break;
 396     case AV_CODEC_ID_AC3:
 397         stream_type = 0x81;
 398         break;
 399     case AV_CODEC_ID_DTS:
 400         stream_type = (st->codecpar->channels > 6) ? 0x85 : 0x82;
 401         break;
 402     case AV_CODEC_ID_TRUEHD:
 403         stream_type = 0x83;
 404         break;
 405     case AV_CODEC_ID_EAC3:
 406         stream_type = 0x84;
 407         break;
 408     case AV_CODEC_ID_HDMV_PGS_SUBTITLE:
 409         stream_type = 0x90;
 410         break;
 411     case AV_CODEC_ID_HDMV_TEXT_SUBTITLE:
 412         stream_type = 0x92;
 413         break;
 414     default:
 415         av_log_once(s, AV_LOG_WARNING, AV_LOG_DEBUG, &ts_st->data_st_warning,
 416                     "Stream %d, codec %s, is muxed as a private data stream "
 417                     "and may not be recognized upon reading.\n", st->index,
 418                     avcodec_get_name(st->codecpar->codec_id));
 419         stream_type = STREAM_TYPE_PRIVATE_DATA;
 420         break;
 421     }
 422
 423     return stream_type;
 424 }
 425
 426 static int mpegts_write_pmt(AVFormatContext *s, MpegTSService *service)
 427 {
 428     MpegTSWrite *ts = s->priv_data;
 429     uint8_t data[SECTION_LENGTH], *q, *desc_length_ptr, *program_info_length_ptr;
 430     int val, stream_type, i, err = 0;
 431
 432     q = data;
 433     put16(&q, 0xe000 | service->pcr_pid);
 434
 435     program_info_length_ptr = q;
 436     q += 2; /* patched after */
 437
 438     /* put program info here */
 439     if (ts->m2ts_mode) {
 440         put_registration_descriptor(&q, MKTAG('H', 'D', 'M', 'V'));
 441         *q++ = 0x88;        // descriptor_tag - hdmv_copy_control_descriptor
 442         *q++ = 0x04;        // descriptor_length
 443         put16(&q, 0x0fff);  // CA_System_ID
 444         *q++ = 0xfc;        // private_data_byte
 445         *q++ = 0xfc;        // private_data_byte
 446     }
 447
 448     val = 0xf000 | (q - program_info_length_ptr - 2);
 449     program_info_length_ptr[0] = val >> 8;
 450     program_info_length_ptr[1] = val;
 451
 452     for (i = 0; i < s->nb_streams; i++) {
 453         AVStream *st = s->streams[i];
 454         MpegTSWriteStream *ts_st = st->priv_data;
 455         AVDictionaryEntry *lang = av_dict_get(st->metadata, "language", NULL, 0);
 456
 457         if (s->nb_programs) {
 458             int k, found = 0;
 459             AVProgram *program = service->program;
 460
 461             for (k = 0; k < program->nb_stream_indexes; k++)
 462                 if (program->stream_index[k] == i) {
 463                     found = 1;
 464                     break;
 465                 }
 466
 467             if (!found)
 468                 continue;
 469         }
 470
 471         if (q - data > SECTION_LENGTH - 32) {
 472             err = 1;
 473             break;
 474         }
 475
 476         stream_type = ts->m2ts_mode ? get_m2ts_stream_type(s, st) : get_dvb_stream_type(s, st);
 477
 478         *q++ = stream_type;
 479         put16(&q, 0xe000 | ts_st->pid);
 480         desc_length_ptr = q;
 481         q += 2; /* patched after */
 482
 483         /* write optional descriptors here */
 484         switch (st->codecpar->codec_type) {
 485         case AVMEDIA_TYPE_AUDIO:
 486             if (ts->flags & MPEGTS_FLAG_SYSTEM_B) {
 487                 if (st->codecpar->codec_id==AV_CODEC_ID_AC3) {
 488                     *q++=0x6a; // AC3 descriptor see A038 DVB SI
 489                     *q++=1; // 1 byte, all flags sets to 0
 490                     *q++=0; // omit all fields...
 491                 } else if (st->codecpar->codec_id==AV_CODEC_ID_EAC3) {
 492                     *q++=0x7a; // EAC3 descriptor see A038 DVB SI
 493                     *q++=1; // 1 byte, all flags sets to 0
 494                     *q++=0; // omit all fields...
 495                 }
 496             }
 497             if (st->codecpar->codec_id==AV_CODEC_ID_S302M)
 498                 put_registration_descriptor(&q, MKTAG('B', 'S', 'S', 'D'));
 499             if (st->codecpar->codec_id==AV_CODEC_ID_OPUS) {
 500                 /* 6 bytes registration descriptor, 4 bytes Opus audio descriptor */
 501                 if (q - data > SECTION_LENGTH - 6 - 4) {
 502                     err = 1;
 503                     break;
 504                 }
 505
 506                 put_registration_descriptor(&q, MKTAG('O', 'p', 'u', 's'));
 507
 508                 *q++ = 0x7f; /* DVB extension descriptor */
 509                 *q++ = 2;
 510                 *q++ = 0x80;
 511
 512                 if (st->codecpar->extradata && st->codecpar->extradata_size >= 19) {
 513                     if (st->codecpar->extradata[18] == 0 && st->codecpar->channels <= 2) {
 514                         /* RTP mapping family */
 515                         *q++ = st->codecpar->channels;
 516                     } else if (st->codecpar->extradata[18] == 1 && st->codecpar->channels <= 8 &&
 517                                st->codecpar->extradata_size >= 21 + st->codecpar->channels) {
 518                         static const uint8_t coupled_stream_counts[9] = {
 519                             1, 0, 1, 1, 2, 2, 2, 3, 3
 520                         };
 521                         static const uint8_t channel_map_a[8][8] = {
 522                             {0},
 523                             {0, 1},
 524                             {0, 2, 1},
 525                             {0, 1, 2, 3},
 526                             {0, 4, 1, 2, 3},
 527                             {0, 4, 1, 2, 3, 5},
 528                             {0, 4, 1, 2, 3, 5, 6},
 529                             {0, 6, 1, 2, 3, 4, 5, 7},
 530                         };
 531                         static const uint8_t channel_map_b[8][8] = {
 532                             {0},
 533                             {0, 1},
 534                             {0, 1, 2},
 535                             {0, 1, 2, 3},
 536                             {0, 1, 2, 3, 4},
 537                             {0, 1, 2, 3, 4, 5},
 538                             {0, 1, 2, 3, 4, 5, 6},
 539                             {0, 1, 2, 3, 4, 5, 6, 7},
 540                         };
 541                         /* Vorbis mapping family */
 542
 543                         if (st->codecpar->extradata[19] == st->codecpar->channels - coupled_stream_counts[st->codecpar->channels] &&
 544                             st->codecpar->extradata[20] == coupled_stream_counts[st->codecpar->channels] &&
 545                             memcmp(&st->codecpar->extradata[21], channel_map_a[st->codecpar->channels-1], st->codecpar->channels) == 0) {
 546                             *q++ = st->codecpar->channels;
 547                         } else if (st->codecpar->channels >= 2 && st->codecpar->extradata[19] == st->codecpar->channels &&
 548                                    st->codecpar->extradata[20] == 0 &&
 549                                    memcmp(&st->codecpar->extradata[21], channel_map_b[st->codecpar->channels-1], st->codecpar->channels) == 0) {
 550                             *q++ = st->codecpar->channels | 0x80;
 551                         } else {
 552                             /* Unsupported, could write an extended descriptor here */
 553                             av_log(s, AV_LOG_ERROR, "Unsupported Opus Vorbis-style channel mapping");
 554                             *q++ = 0xff;
 555                         }
 556                     } else {
 557                         /* Unsupported */
 558                         av_log(s, AV_LOG_ERROR, "Unsupported Opus channel mapping for family %d", st->codecpar->extradata[18]);
 559                         *q++ = 0xff;
 560                     }
 561                 } else if (st->codecpar->channels <= 2) {
 562                     /* Assume RTP mapping family */
 563                     *q++ = st->codecpar->channels;
 564                 } else {
 565                     /* Unsupported */
 566                     av_log(s, AV_LOG_ERROR, "Unsupported Opus channel mapping");
 567                     *q++ = 0xff;
 568                 }
 569             }
 570
 571             if (lang) {
 572                 char *p;
 573                 char *next = lang->value;
 574                 uint8_t *len_ptr;
 575
 576                 *q++     = 0x0a; /* ISO 639 language descriptor */
 577                 len_ptr  = q++;
 578                 *len_ptr = 0;
 579
 580                 for (p = lang->value; next && *len_ptr < 255 / 4 * 4; p = next + 1) {
 581                     if (q - data > SECTION_LENGTH - 4) {
 582                         err = 1;
 583                         break;
 584                     }
 585                     next = strchr(p, ',');
 586                     if (strlen(p) != 3 && (!next || next != p + 3))
 587                         continue; /* not a 3-letter code */
 588
 589                     *q++ = *p++;
 590                     *q++ = *p++;
 591                     *q++ = *p++;
 592
 593                     if (st->disposition & AV_DISPOSITION_CLEAN_EFFECTS)
 594                         *q++ = 0x01;
 595                     else if (st->disposition & AV_DISPOSITION_HEARING_IMPAIRED)
 596                         *q++ = 0x02;
 597                     else if (st->disposition & AV_DISPOSITION_VISUAL_IMPAIRED)
 598                         *q++ = 0x03;
 599                     else
 600                         *q++ = 0; /* undefined type */
 601
 602                     *len_ptr += 4;
 603                 }
 604
 605                 if (*len_ptr == 0)
 606                     q -= 2; /* no language codes were written */
 607             }
 608             break;
 609         case AVMEDIA_TYPE_SUBTITLE:
 610         {
 611            const char default_language[] = "und";
 612            const char *language = lang && strlen(lang->value) >= 3 ? lang->value : default_language;
 613
 614            if (st->codecpar->codec_id == AV_CODEC_ID_DVB_SUBTITLE) {
 615                uint8_t *len_ptr;
 616                int extradata_copied = 0;
 617
 618                *q++ = 0x59; /* subtitling_descriptor */
 619                len_ptr = q++;
 620
 621                while (strlen(language) >= 3) {
 622                    if (sizeof(data) - (q - data) < 8) { /* 8 bytes per DVB subtitle substream data */
 623                        err = 1;
 624                        break;
 625                    }
 626                    *q++ = *language++;
 627                    *q++ = *language++;
 628                    *q++ = *language++;
 629                    /* Skip comma */
 630                    if (*language != '\0')
 631                        language++;
 632
 633                    if (st->codecpar->extradata_size - extradata_copied >= 5) {
 634                        *q++ = st->codecpar->extradata[extradata_copied + 4]; /* subtitling_type */
 635                        memcpy(q, st->codecpar->extradata + extradata_copied, 4); /* composition_page_id and ancillary_page_id */
 636                        extradata_copied += 5;
 637                        q += 4;
 638                    } else {
 639                        /* subtitling_type:
 640                         * 0x10 - normal with no monitor aspect ratio criticality
 641                         * 0x20 - for the hard of hearing with no monitor aspect ratio criticality */
 642                        *q++ = (st->disposition & AV_DISPOSITION_HEARING_IMPAIRED) ? 0x20 : 0x10;
 643                        if ((st->codecpar->extradata_size == 4) && (extradata_copied == 0)) {
 644                            /* support of old 4-byte extradata format */
 645                            memcpy(q, st->codecpar->extradata, 4); /* composition_page_id and ancillary_page_id */
 646                            extradata_copied += 4;
 647                            q += 4;
 648                        } else {
 649                            put16(&q, 1); /* composition_page_id */
 650                            put16(&q, 1); /* ancillary_page_id */
 651                        }
 652                    }
 653                }
 654
 655                *len_ptr = q - len_ptr - 1;
 656            } else if (st->codecpar->codec_id == AV_CODEC_ID_DVB_TELETEXT) {
 657                uint8_t *len_ptr = NULL;
 658                int extradata_copied = 0;
 659
 660                /* The descriptor tag. teletext_descriptor */
 661                *q++ = 0x56;
 662                len_ptr = q++;
 663
 664                while (strlen(language) >= 3 && q - data < sizeof(data) - 6) {
 665                    *q++ = *language++;
 666                    *q++ = *language++;
 667                    *q++ = *language++;
 668                    /* Skip comma */
 669                    if (*language != '\0')
 670                        language++;
 671
 672                    if (st->codecpar->extradata_size - 1 > extradata_copied) {
 673                        memcpy(q, st->codecpar->extradata + extradata_copied, 2);
 674                        extradata_copied += 2;
 675                        q += 2;
 676                    } else {
 677                        /* The Teletext descriptor:
 678                         * teletext_type: This 5-bit field indicates the type of Teletext page indicated. (0x01 Initial Teletext page)
 679                         * teletext_magazine_number: This is a 3-bit field which identifies the magazine number.
 680                         * teletext_page_number: This is an 8-bit field giving two 4-bit hex digits identifying the page number. */
 681                        *q++ = 0x08;
 682                        *q++ = 0x00;
 683                    }
 684                }
 685
 686                *len_ptr = q - len_ptr - 1;
 687             }
 688         }
 689         break;
 690         case AVMEDIA_TYPE_VIDEO:
 691             if (stream_type == STREAM_TYPE_VIDEO_DIRAC) {
 692                 put_registration_descriptor(&q, MKTAG('d', 'r', 'a', 'c'));
 693             } else if (stream_type == STREAM_TYPE_VIDEO_VC1) {
 694                 put_registration_descriptor(&q, MKTAG('V', 'C', '-', '1'));
 695             } else if (stream_type == STREAM_TYPE_VIDEO_HEVC && s->strict_std_compliance <= FF_COMPLIANCE_NORMAL) {
 696                 put_registration_descriptor(&q, MKTAG('H', 'E', 'V', 'C'));
 697             }
 698             break;
 699         case AVMEDIA_TYPE_DATA:
 700             if (st->codecpar->codec_id == AV_CODEC_ID_SMPTE_KLV) {
 701                 put_registration_descriptor(&q, MKTAG('K', 'L', 'V', 'A'));
 702             } else if (st->codecpar->codec_id == AV_CODEC_ID_TIMED_ID3) {
 703                 const char *tag = "ID3 ";
 704                 *q++ = 0x26; /* metadata descriptor */
 705                 *q++ = 13;
 706                 put16(&q, 0xffff);    /* metadata application format */
 707                 putbuf(&q, tag, strlen(tag));
 708                 *q++ = 0xff;        /* metadata format */
 709                 putbuf(&q, tag, strlen(tag));
 710                 *q++ = 0;            /* metadata service ID */
 711                 *q++ = 0xF;          /* metadata_locator_record_flag|MPEG_carriage_flags|reserved */
 712             }
 713             break;
 714         }
 715
 716         val = 0xf000 | (q - desc_length_ptr - 2);
 717         desc_length_ptr[0] = val >> 8;
 718         desc_length_ptr[1] = val;
 719     }
 720
 721     if (err)
 722         av_log(s, AV_LOG_ERROR,
 723                "The PMT section cannot fit stream %d and all following streams.\n"
 724                "Try reducing the number of languages in the audio streams "
 725                "or the total number of streams.\n", i);
 726
 727     mpegts_write_section1(&service->pmt, PMT_TID, service->sid, ts->tables_version, 0, 0,
 728                           data, q - data);
 729     return 0;
 730 }
 731
 732 static void mpegts_write_sdt(AVFormatContext *s)
 733 {
 734     MpegTSWrite *ts = s->priv_data;
 735     MpegTSService *service;
 736     uint8_t data[SECTION_LENGTH], *q, *desc_list_len_ptr, *desc_len_ptr;
 737     int i, running_status, free_ca_mode, val;
 738
 739     q = data;
 740     put16(&q, ts->original_network_id);
 741     *q++ = 0xff;
 742     for (i = 0; i < ts->nb_services; i++) {
 743         service = ts->services[i];
 744         put16(&q, service->sid);
 745         *q++              = 0xfc | 0x00; /* currently no EIT info */
 746         desc_list_len_ptr = q;
 747         q                += 2;
 748         running_status    = 4; /* running */
 749         free_ca_mode      = 0;
 750
 751         /* write only one descriptor for the service name and provider */
 752         *q++         = 0x48;
 753         desc_len_ptr = q;
 754         q++;
 755         *q++         = ts->service_type;
 756         putbuf(&q, service->provider_name, service->provider_name[0] + 1);
 757         putbuf(&q, service->name, service->name[0] + 1);
 758         desc_len_ptr[0] = q - desc_len_ptr - 1;
 759
 760         /* fill descriptor length */
 761         val = (running_status << 13) | (free_ca_mode << 12) |
 762               (q - desc_list_len_ptr - 2);
 763         desc_list_len_ptr[0] = val >> 8;
 764         desc_list_len_ptr[1] = val;
 765     }
 766     mpegts_write_section1(&ts->sdt, SDT_TID, ts->transport_stream_id, ts->tables_version, 0, 0,
 767                           data, q - data);
 768 }
 769
 770 /* This stores a string in buf with the correct encoding and also sets the
 771  * first byte as the length. !str is accepted for an empty string.
 772  * If the string is already encoded, invalid UTF-8 or has no multibyte sequence
 773  * then we keep it as is, otherwise we signal UTF-8 encoding. */
 774 static int encode_str8(uint8_t *buf, const char *str)
 775 {
 776     size_t str_len;
 777     if (!str)
 778         str = "";
 779     str_len = strlen(str);
 780     if (str[0] && (unsigned)str[0] >= 0x20) {   /* Make sure the string is not already encoded. */
 781         const uint8_t *q = str;
 782         int has_multibyte = 0;
 783         while (*q) {
 784             uint32_t code;
 785             GET_UTF8(code, *q++, goto invalid;) /* Is it valid UTF-8? */
 786             has_multibyte |= (code > 127);      /* Does it have multibyte UTF-8 chars in it? */
 787         }
 788         if (has_multibyte) {                    /* If we have multibyte chars and valid UTF-8, then encode as such! */
 789             if (str_len > 254)
 790                 return AVERROR(EINVAL);
 791             buf[0] = str_len + 1;
 792             buf[1] = 0x15;
 793             memcpy(&buf[2], str, str_len);
 794             return 0;
 795         }
 796     }
 797 invalid:
 798     /* Otherwise let's just encode the string as is! */
 799     if (str_len > 255)
 800         return AVERROR(EINVAL);
 801     buf[0] = str_len;
 802     memcpy(&buf[1], str, str_len);
 803     return 0;
 804 }
 805
 806 static int64_t get_pcr(const MpegTSWrite *ts, AVIOContext *pb)
 807 {
 808     return av_rescale(avio_tell(pb) + 11, 8 * PCR_TIME_BASE, ts->mux_rate) +
 809            ts->first_pcr;
 810 }
 811
 812 static void write_packet(AVFormatContext *s, const uint8_t *packet)
 813 {
 814     MpegTSWrite *ts = s->priv_data;
 815     if (ts->m2ts_mode) {
 816         int64_t pcr = get_pcr(s->priv_data, s->pb);
 817         uint32_t tp_extra_header = pcr % 0x3fffffff;
 818         tp_extra_header = AV_RB32(&tp_extra_header);
 819         avio_write(s->pb, (unsigned char *) &tp_extra_header,
 820                    sizeof(tp_extra_header));
 821     }
 822     avio_write(s->pb, packet, TS_PACKET_SIZE);
 823 }
 824
 825 static void section_write_packet(MpegTSSection *s, const uint8_t *packet)
 826 {
 827     AVFormatContext *ctx = s->opaque;
 828     write_packet(ctx, packet);
 829 }
 830
 831 static MpegTSService *mpegts_add_service(AVFormatContext *s, int sid,
 832                                          const AVDictionary *metadata,
 833                                          AVProgram *program)
 834 {
 835     MpegTSWrite *ts = s->priv_data;
 836     MpegTSService *service;
 837     AVDictionaryEntry *title, *provider;
 838     char default_service_name[32];
 839     const char *service_name;
 840     const char *provider_name;
 841
 842     title = av_dict_get(metadata, "service_name", NULL, 0);
 843     if (!title)
 844         title = av_dict_get(metadata, "title", NULL, 0);
 845     snprintf(default_service_name, sizeof(default_service_name), "%s%02d", DEFAULT_SERVICE_NAME, ts->nb_services + 1);
 846     service_name  = title ? title->value : default_service_name;
 847     provider      = av_dict_get(metadata, "service_provider", NULL, 0);
 848     provider_name = provider ? provider->value : DEFAULT_PROVIDER_NAME;
 849
 850     service = av_mallocz(sizeof(MpegTSService));
 851     if (!service)
 852         return NULL;
 853     service->pmt.pid       = ts->pmt_start_pid + ts->nb_services;
 854     service->sid           = sid;
 855     service->pcr_pid       = 0x1fff;
 856     if (encode_str8(service->provider_name, provider_name) < 0 ||
 857         encode_str8(service->name, service_name) < 0) {
 858         av_log(s, AV_LOG_ERROR, "Too long service or provider name\n");
 859         goto fail;
 860     }
 861     if (av_dynarray_add_nofree(&ts->services, &ts->nb_services, service) < 0)
 862         goto fail;
 863
 864     service->pmt.write_packet = section_write_packet;
 865     service->pmt.opaque       = s;
 866     service->pmt.cc           = 15;
 867     service->pmt.discontinuity= ts->flags & MPEGTS_FLAG_DISCONT;
 868     service->program          = program;
 869
 870     return service;
 871 fail:
 872     av_free(service);
 873     return NULL;
 874 }
 875
 876 static void enable_pcr_generation_for_stream(AVFormatContext *s, AVStream *pcr_st)
 877 {
 878     MpegTSWrite *ts = s->priv_data;
 879     MpegTSWriteStream *ts_st = pcr_st->priv_data;
 880
 881     if (ts->mux_rate > 1 || ts->pcr_period_ms >= 0) {
 882         int pcr_period_ms = ts->pcr_period_ms == -1 ? PCR_RETRANS_TIME : ts->pcr_period_ms;
 883         ts_st->pcr_period = av_rescale(pcr_period_ms, PCR_TIME_BASE, 1000);
 884     } else {
 885         /* By default, for VBR we select the highest multiple of frame duration which is less than 100 ms. */
 886         int64_t frame_period = 0;
 887         if (pcr_st->codecpar->codec_type == AVMEDIA_TYPE_AUDIO) {
 888             int frame_size = av_get_audio_frame_duration2(pcr_st->codecpar, 0);
 889             if (!frame_size) {
 890                av_log(s, AV_LOG_WARNING, "frame size not set\n");
 891                frame_size = 512;
 892             }
 893             frame_period = av_rescale_rnd(frame_size, PCR_TIME_BASE, pcr_st->codecpar->sample_rate, AV_ROUND_UP);
 894         } else if (pcr_st->avg_frame_rate.num) {
 895             frame_period = av_rescale_rnd(pcr_st->avg_frame_rate.den, PCR_TIME_BASE, pcr_st->avg_frame_rate.num, AV_ROUND_UP);
 896         }
 897         if (frame_period > 0 && frame_period <= PCR_TIME_BASE / 10)
 898             ts_st->pcr_period = frame_period * (PCR_TIME_BASE / 10 / frame_period);
 899         else
 900             ts_st->pcr_period = 1;
 901     }
 902
 903     // output a PCR as soon as possible
 904     ts_st->last_pcr   = ts->first_pcr - ts_st->pcr_period;
 905 }
 906
 907 static void select_pcr_streams(AVFormatContext *s)
 908 {
 909     MpegTSWrite *ts = s->priv_data;
 910
 911     for (int i = 0; i < ts->nb_services; i++) {
 912         MpegTSService *service = ts->services[i];
 913         AVStream *pcr_st = NULL;
 914         AVProgram *program = service->program;
 915         int nb_streams = program ? program->nb_stream_indexes : s->nb_streams;
 916
 917         for (int j = 0; j < nb_streams; j++) {
 918             AVStream *st = s->streams[program ? program->stream_index[j] : j];
 919             if (!pcr_st ||
 920                 pcr_st->codecpar->codec_type != AVMEDIA_TYPE_VIDEO && st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO)
 921             {
 922                 pcr_st = st;
 923             }
 924         }
 925
 926         if (pcr_st) {
 927             MpegTSWriteStream *ts_st = pcr_st->priv_data;
 928             service->pcr_pid = ts_st->pid;
 929             enable_pcr_generation_for_stream(s, pcr_st);
 930             av_log(s, AV_LOG_VERBOSE, "service %i using PCR in pid=%i, pcr_period=%"PRId64"ms\n",
 931                 service->sid, service->pcr_pid, av_rescale(ts_st->pcr_period, 1000, PCR_TIME_BASE));
 932         }
 933     }
 934 }
 935
 936 static int mpegts_init(AVFormatContext *s)
 937 {
 938     MpegTSWrite *ts = s->priv_data;
 939     int i, j;
 940     int ret;
 941
 942     if (ts->m2ts_mode == -1) {
 943         if (av_match_ext(s->url, "m2ts")) {
 944             ts->m2ts_mode = 1;
 945         } else {
 946             ts->m2ts_mode = 0;
 947         }
 948     }
 949
 950     ts->m2ts_video_pid   = M2TS_VIDEO_PID;
 951     ts->m2ts_audio_pid   = M2TS_AUDIO_START_PID;
 952     ts->m2ts_pgssub_pid  = M2TS_PGSSUB_START_PID;
 953     ts->m2ts_textsub_pid = M2TS_TEXTSUB_PID;
 954
 955     if (ts->m2ts_mode) {
 956         ts->pmt_start_pid = M2TS_PMT_PID;
 957         if (s->nb_programs > 1) {
 958             av_log(s, AV_LOG_ERROR, "Only one program is allowed in m2ts mode!\n");
 959             return AVERROR(EINVAL);
 960         }
 961     }
 962
 963     if (s->max_delay < 0) /* Not set by the caller */
 964         s->max_delay = 0;
 965
 966     // round up to a whole number of TS packets
 967     ts->pes_payload_size = (ts->pes_payload_size + 14 + 183) / 184 * 184 - 14;
 968
 969     if (!s->nb_programs) {
 970         /* allocate a single DVB service */
 971         if (!mpegts_add_service(s, ts->service_id, s->metadata, NULL))
 972             return AVERROR(ENOMEM);
 973     } else {
 974         for (i = 0; i < s->nb_programs; i++) {
 975             AVProgram *program = s->programs[i];
 976             if (!mpegts_add_service(s, program->id, program->metadata, program))
 977                 return AVERROR(ENOMEM);
 978         }
 979     }
 980
 981     ts->pat.pid          = PAT_PID;
 982     /* Initialize at 15 so that it wraps and is equal to 0 for the
 983      * first packet we write. */
 984     ts->pat.cc           = 15;
 985     ts->pat.discontinuity= ts->flags & MPEGTS_FLAG_DISCONT;
 986     ts->pat.write_packet = section_write_packet;
 987     ts->pat.opaque       = s;
 988
 989     ts->sdt.pid          = SDT_PID;
 990     ts->sdt.cc           = 15;
 991     ts->sdt.discontinuity= ts->flags & MPEGTS_FLAG_DISCONT;
 992     ts->sdt.write_packet = section_write_packet;
 993     ts->sdt.opaque       = s;
 994
 995     /* assign pids to each stream */
 996     for (i = 0; i < s->nb_streams; i++) {
 997         AVStream *st = s->streams[i];
 998         MpegTSWriteStream *ts_st;
 999
1000         ts_st = av_mallocz(sizeof(MpegTSWriteStream));
1001         if (!ts_st) {
1002             return AVERROR(ENOMEM);
1003         }
1004         st->priv_data = ts_st;
1005
1006         avpriv_set_pts_info(st, 33, 1, 90000);
1007
1008         ts_st->payload = av_mallocz(ts->pes_payload_size);
1009         if (!ts_st->payload) {
1010             return AVERROR(ENOMEM);
1011         }
1012
1013         /* MPEG pid values < 16 are reserved. Applications which set st->id in
1014          * this range are assigned a calculated pid. */
1015         if (st->id < 16) {
1016             if (ts->m2ts_mode) {
1017                 switch (st->codecpar->codec_type) {
1018                 case AVMEDIA_TYPE_VIDEO:
1019                     ts_st->pid = ts->m2ts_video_pid++;
1020                     break;
1021                 case AVMEDIA_TYPE_AUDIO:
1022                     ts_st->pid = ts->m2ts_audio_pid++;
1023                     break;
1024                 case AVMEDIA_TYPE_SUBTITLE:
1025                     switch (st->codecpar->codec_id) {
1026                     case AV_CODEC_ID_HDMV_PGS_SUBTITLE:
1027                         ts_st->pid = ts->m2ts_pgssub_pid++;
1028                         break;
1029                     case AV_CODEC_ID_HDMV_TEXT_SUBTITLE:
1030                         ts_st->pid = ts->m2ts_textsub_pid++;
1031                         break;
1032                     }
1033                     break;
1034                 }
1035                 if (ts->m2ts_video_pid   > M2TS_VIDEO_PID + 1          ||
1036                     ts->m2ts_audio_pid   > M2TS_AUDIO_START_PID + 32   ||
1037                     ts->m2ts_pgssub_pid  > M2TS_PGSSUB_START_PID + 32  ||
1038                     ts->m2ts_textsub_pid > M2TS_TEXTSUB_PID + 1        ||
1039                     ts_st->pid < 16) {
1040                     av_log(s, AV_LOG_ERROR, "Cannot automatically assign PID for stream %d\n", st->index);
1041                     return AVERROR(EINVAL);
1042                 }
1043             } else {
1044                 ts_st->pid = ts->start_pid + i;
1045             }
1046         } else {
1047             ts_st->pid = st->id;
1048         }
1049         if (ts_st->pid >= 0x1FFF) {
1050             av_log(s, AV_LOG_ERROR,
1051                    "Invalid stream id %d, must be less than 8191\n", st->id);
1052             return AVERROR(EINVAL);
1053         }
1054         for (j = 0; j < ts->nb_services; j++) {
1055             if (ts->services[j]->pmt.pid > LAST_OTHER_PID) {
1056                 av_log(s, AV_LOG_ERROR,
1057                        "Invalid PMT PID %d, must be less than %d\n", ts->services[j]->pmt.pid, LAST_OTHER_PID + 1);
1058                 return AVERROR(EINVAL);
1059             }
1060             if (ts_st->pid == ts->services[j]->pmt.pid) {
1061                 av_log(s, AV_LOG_ERROR, "PID %d cannot be both elementary and PMT PID\n", ts_st->pid);
1062                 return AVERROR(EINVAL);
1063             }
1064         }
1065         for (j = 0; j < i; j++) {
1066             MpegTSWriteStream *ts_st_prev = s->streams[j]->priv_data;
1067             if (ts_st_prev->pid == ts_st->pid) {
1068                 av_log(s, AV_LOG_ERROR, "Duplicate stream id %d\n", ts_st->pid);
1069                 return AVERROR(EINVAL);
1070             }
1071         }
1072         ts_st->payload_pts     = AV_NOPTS_VALUE;
1073         ts_st->payload_dts     = AV_NOPTS_VALUE;
1074         ts_st->first_pts_check = 1;
1075         ts_st->cc              = 15;
1076         ts_st->discontinuity   = ts->flags & MPEGTS_FLAG_DISCONT;
1077         if (st->codecpar->codec_id == AV_CODEC_ID_AAC &&
1078             st->codecpar->extradata_size > 0) {
1079             AVStream *ast;
1080             ts_st->amux = avformat_alloc_context();
1081             if (!ts_st->amux) {
1082                 return AVERROR(ENOMEM);
1083             }
1084             ts_st->amux->oformat =
1085                 av_guess_format((ts->flags & MPEGTS_FLAG_AAC_LATM) ? "latm" : "adts",
1086                                 NULL, NULL);
1087             if (!ts_st->amux->oformat) {
1088                 return AVERROR(EINVAL);
1089             }
1090             if (!(ast = avformat_new_stream(ts_st->amux, NULL))) {
1091                 return AVERROR(ENOMEM);
1092             }
1093             ret = avcodec_parameters_copy(ast->codecpar, st->codecpar);
1094             if (ret != 0)
1095                 return ret;
1096             ast->time_base = st->time_base;
1097             ret = avformat_write_header(ts_st->amux, NULL);
1098             if (ret < 0)
1099                 return ret;
1100         }
1101         if (st->codecpar->codec_id == AV_CODEC_ID_OPUS) {
1102             ts_st->opus_pending_trim_start = st->codecpar->initial_padding * 48000 / st->codecpar->sample_rate;
1103         }
1104     }
1105
1106     if (ts->copyts < 1)
1107         ts->first_pcr = av_rescale(s->max_delay, PCR_TIME_BASE, AV_TIME_BASE);
1108
1109     select_pcr_streams(s);
1110
1111     ts->last_pat_ts = AV_NOPTS_VALUE;
1112     ts->last_sdt_ts = AV_NOPTS_VALUE;
1113     ts->pat_period = av_rescale(ts->pat_period_us, PCR_TIME_BASE, AV_TIME_BASE);
1114     ts->sdt_period = av_rescale(ts->sdt_period_us, PCR_TIME_BASE, AV_TIME_BASE);
1115
1116     if (ts->mux_rate == 1)
1117         av_log(s, AV_LOG_VERBOSE, "muxrate VBR, ");
1118     else
1119         av_log(s, AV_LOG_VERBOSE, "muxrate %d, ", ts->mux_rate);
1120     av_log(s, AV_LOG_VERBOSE,
1121            "sdt every %"PRId64" ms, pat/pmt every %"PRId64" ms\n",
1122            av_rescale(ts->sdt_period, 1000, PCR_TIME_BASE),
1123            av_rescale(ts->pat_period, 1000, PCR_TIME_BASE));
1124
1125     return 0;
1126 }
1127
1128 /* send SDT, PAT and PMT tables regularly */
1129 static void retransmit_si_info(AVFormatContext *s, int force_pat, int force_sdt, int64_t pcr)
1130 {
1131     MpegTSWrite *ts = s->priv_data;
1132     int i;
1133
1134     if ((pcr != AV_NOPTS_VALUE && ts->last_sdt_ts == AV_NOPTS_VALUE) ||
1135         (pcr != AV_NOPTS_VALUE && pcr - ts->last_sdt_ts >= ts->sdt_period) ||
1136         force_sdt
1137     ) {
1138         if (pcr != AV_NOPTS_VALUE)
1139             ts->last_sdt_ts = FFMAX(pcr, ts->last_sdt_ts);
1140         mpegts_write_sdt(s);
1141     }
1142     if ((pcr != AV_NOPTS_VALUE && ts->last_pat_ts == AV_NOPTS_VALUE) ||
1143         (pcr != AV_NOPTS_VALUE && pcr - ts->last_pat_ts >= ts->pat_period) ||
1144         force_pat) {
1145         if (pcr != AV_NOPTS_VALUE)
1146             ts->last_pat_ts = FFMAX(pcr, ts->last_pat_ts);
1147         mpegts_write_pat(s);
1148         for (i = 0; i < ts->nb_services; i++)
1149             mpegts_write_pmt(s, ts->services[i]);
1150     }
1151 }
1152
1153 static int write_pcr_bits(uint8_t *buf, int64_t pcr)
1154 {
1155     int64_t pcr_low = pcr % 300, pcr_high = pcr / 300;
1156
1157     *buf++ = pcr_high >> 25;
1158     *buf++ = pcr_high >> 17;
1159     *buf++ = pcr_high >>  9;
1160     *buf++ = pcr_high >>  1;
1161     *buf++ = pcr_high <<  7 | pcr_low >> 8 | 0x7e;
1162     *buf++ = pcr_low;
1163
1164     return 6;
1165 }
1166
1167 /* Write a single null transport stream packet */
1168 static void mpegts_insert_null_packet(AVFormatContext *s)
1169 {
1170     uint8_t *q;
1171     uint8_t buf[TS_PACKET_SIZE];
1172
1173     q    = buf;
1174     *q++ = 0x47;
1175     *q++ = 0x00 | 0x1f;
1176     *q++ = 0xff;
1177     *q++ = 0x10;
1178     memset(q, 0x0FF, TS_PACKET_SIZE - (q - buf));
1179     write_packet(s, buf);
1180 }
1181
1182 /* Write a single transport stream packet with a PCR and no payload */
1183 static void mpegts_insert_pcr_only(AVFormatContext *s, AVStream *st)
1184 {
1185     MpegTSWrite *ts = s->priv_data;
1186     MpegTSWriteStream *ts_st = st->priv_data;
1187     uint8_t *q;
1188     uint8_t buf[TS_PACKET_SIZE];
1189
1190     q    = buf;
1191     *q++ = 0x47;
1192     *q++ = ts_st->pid >> 8;
1193     *q++ = ts_st->pid;
1194     *q++ = 0x20 | ts_st->cc;   /* Adaptation only */
1195     /* Continuity Count field does not increment (see 13818-1 section 2.4.3.3) */
1196     *q++ = TS_PACKET_SIZE - 5; /* Adaptation Field Length */
1197     *q++ = 0x10;               /* Adaptation flags: PCR present */
1198     if (ts_st->discontinuity) {
1199         q[-1] |= 0x80;
1200         ts_st->discontinuity = 0;
1201     }
1202
1203     /* PCR coded into 6 bytes */
1204     q += write_pcr_bits(q, get_pcr(ts, s->pb));
1205
1206     /* stuffing bytes */
1207     memset(q, 0xFF, TS_PACKET_SIZE - (q - buf));
1208     write_packet(s, buf);
1209 }
1210
1211 static void write_pts(uint8_t *q, int fourbits, int64_t pts)
1212 {
1213     int val;
1214
1215     val  = fourbits << 4 | (((pts >> 30) & 0x07) << 1) | 1;
1216     *q++ = val;
1217     val  = (((pts >> 15) & 0x7fff) << 1) | 1;
1218     *q++ = val >> 8;
1219     *q++ = val;
1220     val  = (((pts) & 0x7fff) << 1) | 1;
1221     *q++ = val >> 8;
1222     *q++ = val;
1223 }
1224
1225 /* Set an adaptation field flag in an MPEG-TS packet*/
1226 static void set_af_flag(uint8_t *pkt, int flag)
1227 {
1228     // expect at least one flag to set
1229     av_assert0(flag);
1230
1231     if ((pkt[3] & 0x20) == 0) {
1232         // no AF yet, set adaptation field flag
1233         pkt[3] |= 0x20;
1234         // 1 byte length, no flags
1235         pkt[4] = 1;
1236         pkt[5] = 0;
1237     }
1238     pkt[5] |= flag;
1239 }
1240
1241 /* Extend the adaptation field by size bytes */
1242 static void extend_af(uint8_t *pkt, int size)
1243 {
1244     // expect already existing adaptation field
1245     av_assert0(pkt[3] & 0x20);
1246     pkt[4] += size;
1247 }
1248
1249 /* Get a pointer to MPEG-TS payload (right after TS packet header) */
1250 static uint8_t *get_ts_payload_start(uint8_t *pkt)
1251 {
1252     if (pkt[3] & 0x20)
1253         return pkt + 5 + pkt[4];
1254     else
1255         return pkt + 4;
1256 }
1257
1258 /* Add a PES header to the front of the payload, and segment into an integer
1259  * number of TS packets. The final TS packet is padded using an oversized
1260  * adaptation header to exactly fill the last TS packet.
1261  * NOTE: 'payload' contains a complete PES payload. */
1262 static void mpegts_write_pes(AVFormatContext *s, AVStream *st,
1263                              const uint8_t *payload, int payload_size,
1264                              int64_t pts, int64_t dts, int key, int stream_id)
1265 {
1266     MpegTSWriteStream *ts_st = st->priv_data;
1267     MpegTSWrite *ts = s->priv_data;
1268     uint8_t buf[TS_PACKET_SIZE];
1269     uint8_t *q;
1270     int val, is_start, len, header_len, write_pcr, is_dvb_subtitle, is_dvb_teletext, flags;
1271     int afc_len, stuffing_len;
1272     int64_t delay = av_rescale(s->max_delay, 90000, AV_TIME_BASE);
1273     int force_pat = st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO && key && !ts_st->prev_payload_key;
1274     int force_sdt = 0;
1275
1276     av_assert0(ts_st->payload != buf || st->codecpar->codec_type != AVMEDIA_TYPE_VIDEO);
1277     if (ts->flags & MPEGTS_FLAG_PAT_PMT_AT_FRAMES && st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO) {
1278         force_pat = 1;
1279     }
1280
1281     if (ts->flags & MPEGTS_FLAG_REEMIT_PAT_PMT) {
1282         force_pat = 1;
1283         force_sdt = 1;
1284         ts->flags &= ~MPEGTS_FLAG_REEMIT_PAT_PMT;
1285     }
1286
1287     is_start = 1;
1288     while (payload_size > 0) {
1289         int64_t pcr = AV_NOPTS_VALUE;
1290         if (ts->mux_rate > 1)
1291             pcr = get_pcr(ts, s->pb);
1292         else if (dts != AV_NOPTS_VALUE)
1293             pcr = (dts - delay) * 300;
1294
1295         retransmit_si_info(s, force_pat, force_sdt, pcr);
1296         force_pat = 0;
1297         force_sdt = 0;
1298
1299         write_pcr = 0;
1300         if (ts->mux_rate > 1) {
1301             /* Send PCR packets for all PCR streams if needed */
1302             pcr = get_pcr(ts, s->pb);
1303             if (pcr >= ts->next_pcr) {
1304                 int64_t next_pcr = INT64_MAX;
1305                 for (int i = 0; i < s->nb_streams; i++) {
1306                     /* Make the current stream the last, because for that we
1307                      * can insert the pcr into the payload later */
1308                     int st2_index = i < st->index ? i : (i + 1 == s->nb_streams ? st->index : i + 1);
1309                     AVStream *st2 = s->streams[st2_index];
1310                     MpegTSWriteStream *ts_st2 = st2->priv_data;
1311                     if (ts_st2->pcr_period) {
1312                         if (pcr - ts_st2->last_pcr >= ts_st2->pcr_period) {
1313                             ts_st2->last_pcr = FFMAX(pcr - ts_st2->pcr_period, ts_st2->last_pcr + ts_st2->pcr_period);
1314                             if (st2 != st) {
1315                                 mpegts_insert_pcr_only(s, st2);
1316                                 pcr = get_pcr(ts, s->pb);
1317                             } else {
1318                                 write_pcr = 1;
1319                             }
1320                         }
1321                         next_pcr = FFMIN(next_pcr, ts_st2->last_pcr + ts_st2->pcr_period);
1322                     }
1323                 }
1324                 ts->next_pcr = next_pcr;
1325             }
1326             if (dts != AV_NOPTS_VALUE && (dts - pcr / 300) > delay) {
1327                 /* pcr insert gets priority over null packet insert */
1328                 if (write_pcr)
1329                     mpegts_insert_pcr_only(s, st);
1330                 else
1331                     mpegts_insert_null_packet(s);
1332                 /* recalculate write_pcr and possibly retransmit si_info */
1333                 continue;
1334             }
1335         } else if (ts_st->pcr_period && pcr != AV_NOPTS_VALUE) {
1336             if (pcr - ts_st->last_pcr >= ts_st->pcr_period && is_start) {
1337                 ts_st->last_pcr = FFMAX(pcr - ts_st->pcr_period, ts_st->last_pcr + ts_st->pcr_period);
1338                 write_pcr = 1;
1339             }
1340         }
1341
1342         /* prepare packet header */
1343         q    = buf;
1344         *q++ = 0x47;
1345         val  = ts_st->pid >> 8;
1346         if (ts->m2ts_mode && st->codecpar->codec_id == AV_CODEC_ID_AC3)
1347             val |= 0x20;
1348         if (is_start)
1349             val |= 0x40;
1350         *q++      = val;
1351         *q++      = ts_st->pid;
1352         ts_st->cc = ts_st->cc + 1 & 0xf;
1353         *q++      = 0x10 | ts_st->cc; // payload indicator + CC
1354         if (ts_st->discontinuity) {
1355             set_af_flag(buf, 0x80);
1356             q = get_ts_payload_start(buf);
1357             ts_st->discontinuity = 0;
1358         }
1359         if (key && is_start && pts != AV_NOPTS_VALUE) {
1360             // set Random Access for key frames
1361             if (ts_st->pcr_period)
1362                 write_pcr = 1;
1363             set_af_flag(buf, 0x40);
1364             q = get_ts_payload_start(buf);
1365         }
1366         if (write_pcr) {
1367             set_af_flag(buf, 0x10);
1368             q = get_ts_payload_start(buf);
1369             // add 11, pcr references the last byte of program clock reference base
1370             if (dts != AV_NOPTS_VALUE && dts < pcr / 300)
1371                 av_log(s, AV_LOG_WARNING, "dts < pcr, TS is invalid\n");
1372             extend_af(buf, write_pcr_bits(q, pcr));
1373             q = get_ts_payload_start(buf);
1374         }
1375         if (is_start) {
1376             int pes_extension = 0;
1377             int pes_header_stuffing_bytes = 0;
1378             /* write PES header */
1379             *q++ = 0x00;
1380             *q++ = 0x00;
1381             *q++ = 0x01;
1382             is_dvb_subtitle = 0;
1383             is_dvb_teletext = 0;
1384             if (st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO) {
1385                 if (st->codecpar->codec_id == AV_CODEC_ID_DIRAC)
1386                     *q++ = STREAM_ID_EXTENDED_STREAM_ID;
1387                 else
1388                     *q++ = STREAM_ID_VIDEO_STREAM_0;
1389             } else if (st->codecpar->codec_type == AVMEDIA_TYPE_AUDIO &&
1390                        (st->codecpar->codec_id == AV_CODEC_ID_MP2 ||
1391                         st->codecpar->codec_id == AV_CODEC_ID_MP3 ||
1392                         st->codecpar->codec_id == AV_CODEC_ID_AAC)) {
1393                 *q++ = STREAM_ID_AUDIO_STREAM_0;
1394             } else if (st->codecpar->codec_type == AVMEDIA_TYPE_AUDIO &&
1395                         st->codecpar->codec_id == AV_CODEC_ID_AC3 &&
1396                         ts->m2ts_mode) {
1397                 *q++ = STREAM_ID_EXTENDED_STREAM_ID;
1398             } else if (st->codecpar->codec_type == AVMEDIA_TYPE_DATA &&
1399                        st->codecpar->codec_id == AV_CODEC_ID_TIMED_ID3) {
1400                 *q++ = STREAM_ID_PRIVATE_STREAM_1;
1401             } else if (st->codecpar->codec_type == AVMEDIA_TYPE_DATA) {
1402                 *q++ = stream_id != -1 ? stream_id : STREAM_ID_METADATA_STREAM;
1403
1404                 if (stream_id == STREAM_ID_PRIVATE_STREAM_1) /* asynchronous KLV */
1405                     pts = dts = AV_NOPTS_VALUE;
1406             } else {
1407                 *q++ = STREAM_ID_PRIVATE_STREAM_1;
1408                 if (st->codecpar->codec_type == AVMEDIA_TYPE_SUBTITLE) {
1409                     if (st->codecpar->codec_id == AV_CODEC_ID_DVB_SUBTITLE) {
1410                         is_dvb_subtitle = 1;
1411                     } else if (st->codecpar->codec_id == AV_CODEC_ID_DVB_TELETEXT) {
1412                         is_dvb_teletext = 1;
1413                     }
1414                 }
1415             }
1416             header_len = 0;
1417             flags      = 0;
1418             if (pts != AV_NOPTS_VALUE) {
1419                 header_len += 5;
1420                 flags      |= 0x80;
1421             }
1422             if (dts != AV_NOPTS_VALUE && pts != AV_NOPTS_VALUE && dts != pts) {
1423                 header_len += 5;
1424                 flags      |= 0x40;
1425             }
1426             if (st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO &&
1427                 st->codecpar->codec_id == AV_CODEC_ID_DIRAC) {
1428                 /* set PES_extension_flag */
1429                 pes_extension = 1;
1430                 flags        |= 0x01;
1431
1432                 /* One byte for PES2 extension flag +
1433                  * one byte for extension length +
1434                  * one byte for extension id */
1435                 header_len += 3;
1436             }
1437             /* for Blu-ray AC3 Audio the PES Extension flag should be as follow
1438              * otherwise it will not play sound on blu-ray
1439              */
1440             if (ts->m2ts_mode &&
1441                 st->codecpar->codec_type == AVMEDIA_TYPE_AUDIO &&
1442                 st->codecpar->codec_id == AV_CODEC_ID_AC3) {
1443                 /* set PES_extension_flag */
1444                 pes_extension = 1;
1445                 flags |= 0x01;
1446                 header_len += 3;
1447             }
1448             if (is_dvb_teletext) {
1449                 pes_header_stuffing_bytes = 0x24 - header_len;
1450                 header_len = 0x24;
1451             }
1452             len = payload_size + header_len + 3;
1453             /* 3 extra bytes should be added to DVB subtitle payload: 0x20 0x00 at the beginning and trailing 0xff */
1454             if (is_dvb_subtitle) {
1455                 len += 3;
1456                 payload_size++;
1457             }
1458             if (len > 0xffff)
1459                 len = 0;
1460             if (ts->omit_video_pes_length && st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO) {
1461                 len = 0;
1462             }
1463             *q++ = len >> 8;
1464             *q++ = len;
1465             val  = 0x80;
1466             /* data alignment indicator is required for subtitle and data streams */
1467             if (st->codecpar->codec_type == AVMEDIA_TYPE_SUBTITLE || st->codecpar->codec_type == AVMEDIA_TYPE_DATA)
1468                 val |= 0x04;
1469             *q++ = val;
1470             *q++ = flags;
1471             *q++ = header_len;
1472             if (pts != AV_NOPTS_VALUE) {
1473                 write_pts(q, flags >> 6, pts);
1474                 q += 5;
1475             }
1476             if (dts != AV_NOPTS_VALUE && pts != AV_NOPTS_VALUE && dts != pts) {
1477                 write_pts(q, 1, dts);
1478                 q += 5;
1479             }
1480             if (pes_extension && st->codecpar->codec_id == AV_CODEC_ID_DIRAC) {
1481                 flags = 0x01;  /* set PES_extension_flag_2 */
1482                 *q++  = flags;
1483                 *q++  = 0x80 | 0x01; /* marker bit + extension length */
1484                 /* Set the stream ID extension flag bit to 0 and
1485                  * write the extended stream ID. */
1486                 *q++ = 0x00 | 0x60;
1487             }
1488             /* For Blu-ray AC3 Audio Setting extended flags */
1489             if (ts->m2ts_mode &&
1490                 pes_extension &&
1491                 st->codecpar->codec_id == AV_CODEC_ID_AC3) {
1492                 flags = 0x01; /* set PES_extension_flag_2 */
1493                 *q++ = flags;
1494                 *q++ = 0x80 | 0x01; /* marker bit + extension length */
1495                 *q++ = 0x00 | 0x71; /* for AC3 Audio (specifically on blue-rays) */
1496             }
1497
1498
1499             if (is_dvb_subtitle) {
1500                 /* First two fields of DVB subtitles PES data:
1501                  * data_identifier: for DVB subtitle streams shall be coded with the value 0x20
1502                  * subtitle_stream_id: for DVB subtitle stream shall be identified by the value 0x00 */
1503                 *q++ = 0x20;
1504                 *q++ = 0x00;
1505             }
1506             if (is_dvb_teletext) {
1507                 memset(q, 0xff, pes_header_stuffing_bytes);
1508                 q += pes_header_stuffing_bytes;
1509             }
1510             is_start = 0;
1511         }
1512         /* header size */
1513         header_len = q - buf;
1514         /* data len */
1515         len = TS_PACKET_SIZE - header_len;
1516         if (len > payload_size)
1517             len = payload_size;
1518         stuffing_len = TS_PACKET_SIZE - header_len - len;
1519         if (stuffing_len > 0) {
1520             /* add stuffing with AFC */
1521             if (buf[3] & 0x20) {
1522                 /* stuffing already present: increase its size */
1523                 afc_len = buf[4] + 1;
1524                 memmove(buf + 4 + afc_len + stuffing_len,
1525                         buf + 4 + afc_len,
1526                         header_len - (4 + afc_len));
1527                 buf[4] += stuffing_len;
1528                 memset(buf + 4 + afc_len, 0xff, stuffing_len);
1529             } else {
1530                 /* add stuffing */
1531                 memmove(buf + 4 + stuffing_len, buf + 4, header_len - 4);
1532                 buf[3] |= 0x20;
1533                 buf[4]  = stuffing_len - 1;
1534                 if (stuffing_len >= 2) {
1535                     buf[5] = 0x00;
1536                     memset(buf + 6, 0xff, stuffing_len - 2);
1537                 }
1538             }
1539         }
1540
1541         if (is_dvb_subtitle && payload_size == len) {
1542             memcpy(buf + TS_PACKET_SIZE - len, payload, len - 1);
1543             buf[TS_PACKET_SIZE - 1] = 0xff; /* end_of_PES_data_field_marker: an 8-bit field with fixed contents 0xff for DVB subtitle */
1544         } else {
1545             memcpy(buf + TS_PACKET_SIZE - len, payload, len);
1546         }
1547
1548         payload      += len;
1549         payload_size -= len;
1550         write_packet(s, buf);
1551     }
1552     ts_st->prev_payload_key = key;
1553 }
1554
1555 int ff_check_h264_startcode(AVFormatContext *s, const AVStream *st, const AVPacket *pkt)
1556 {
1557     if (pkt->size < 5 || AV_RB32(pkt->data) != 0x0000001 && AV_RB24(pkt->data) != 0x000001) {
1558         if (!st->nb_frames) {
1559             av_log(s, AV_LOG_ERROR, "H.264 bitstream malformed, "
1560                    "no startcode found, use the video bitstream filter 'h264_mp4toannexb' to fix it "
1561                    "('-bsf:v h264_mp4toannexb' option with ffmpeg)\n");
1562             return AVERROR_INVALIDDATA;
1563         }
1564         av_log(s, AV_LOG_WARNING, "H.264 bitstream error, startcode missing, size %d", pkt->size);
1565         if (pkt->size)
1566             av_log(s, AV_LOG_WARNING, " data %08"PRIX32, AV_RB32(pkt->data));
1567         av_log(s, AV_LOG_WARNING, "\n");
1568     }
1569     return 0;
1570 }
1571
1572 static int check_hevc_startcode(AVFormatContext *s, const AVStream *st, const AVPacket *pkt)
1573 {
1574     if (pkt->size < 5 || AV_RB32(pkt->data) != 0x0000001 && AV_RB24(pkt->data) != 0x000001) {
1575         if (!st->nb_frames) {
1576             av_log(s, AV_LOG_ERROR, "HEVC bitstream malformed, no startcode found\n");
1577             return AVERROR_PATCHWELCOME;
1578         }
1579         av_log(s, AV_LOG_WARNING, "HEVC bitstream error, startcode missing, size %d", pkt->size);
1580         if (pkt->size)
1581             av_log(s, AV_LOG_WARNING, " data %08"PRIX32, AV_RB32(pkt->data));
1582         av_log(s, AV_LOG_WARNING, "\n");
1583     }
1584     return 0;
1585 }
1586
1587 /* Based on GStreamer's gst-plugins-base/ext/ogg/gstoggstream.c
1588  * Released under the LGPL v2.1+, written by
1589  * Vincent Penquerc'h <vincent.penquerch@collabora.co.uk>
1590  */
1591 static int opus_get_packet_samples(AVFormatContext *s, AVPacket *pkt)
1592 {
1593     static const int durations[32] = {
1594       480, 960, 1920, 2880,       /* Silk NB */
1595       480, 960, 1920, 2880,       /* Silk MB */
1596       480, 960, 1920, 2880,       /* Silk WB */
1597       480, 960,                   /* Hybrid SWB */
1598       480, 960,                   /* Hybrid FB */
1599       120, 240, 480, 960,         /* CELT NB */
1600       120, 240, 480, 960,         /* CELT NB */
1601       120, 240, 480, 960,         /* CELT NB */
1602       120, 240, 480, 960,         /* CELT NB */
1603     };
1604     int toc, frame_duration, nframes, duration;
1605
1606     if (pkt->size < 1)
1607         return 0;
1608
1609     toc = pkt->data[0];
1610
1611     frame_duration = durations[toc >> 3];
1612     switch (toc & 3) {
1613     case 0:
1614         nframes = 1;
1615         break;
1616     case 1:
1617         nframes = 2;
1618         break;
1619     case 2:
1620         nframes = 2;
1621         break;
1622     case 3:
1623         if (pkt->size < 2)
1624             return 0;
1625         nframes = pkt->data[1] & 63;
1626         break;
1627     }
1628
1629     duration = nframes * frame_duration;
1630     if (duration > 5760) {
1631         av_log(s, AV_LOG_WARNING,
1632                "Opus packet duration > 120 ms, invalid");
1633         return 0;
1634     }
1635
1636     return duration;
1637 }
1638
1639 static int mpegts_write_packet_internal(AVFormatContext *s, AVPacket *pkt)
1640 {
1641     AVStream *st = s->streams[pkt->stream_index];
1642     int size = pkt->size;
1643     uint8_t *buf = pkt->data;
1644     uint8_t *data = NULL;
1645     MpegTSWrite *ts = s->priv_data;
1646     MpegTSWriteStream *ts_st = st->priv_data;
1647     const int64_t delay = av_rescale(s->max_delay, 90000, AV_TIME_BASE) * 2;
1648     const int64_t max_audio_delay = av_rescale(s->max_delay, 90000, AV_TIME_BASE) / 2;
1649     int64_t dts = pkt->dts, pts = pkt->pts;
1650     int opus_samples = 0;
1651     int side_data_size;
1652     uint8_t *side_data = NULL;
1653     int stream_id = -1;
1654
1655     side_data = av_packet_get_side_data(pkt,
1656                                         AV_PKT_DATA_MPEGTS_STREAM_ID,
1657                                         &side_data_size);
1658     if (side_data)
1659         stream_id = side_data[0];
1660
1661     if (ts->copyts < 1) {
1662         if (pts != AV_NOPTS_VALUE)
1663             pts += delay;
1664         if (dts != AV_NOPTS_VALUE)
1665             dts += delay;
1666     }
1667
1668     if (ts_st->first_pts_check && pts == AV_NOPTS_VALUE) {
1669         av_log(s, AV_LOG_ERROR, "first pts value must be set\n");
1670         return AVERROR_INVALIDDATA;
1671     }
1672     ts_st->first_pts_check = 0;
1673
1674     if (st->codecpar->codec_id == AV_CODEC_ID_H264) {
1675         const uint8_t *p = buf, *buf_end = p + size;
1676         uint32_t state = -1;
1677         int extradd = (pkt->flags & AV_PKT_FLAG_KEY) ? st->codecpar->extradata_size : 0;
1678         int ret = ff_check_h264_startcode(s, st, pkt);
1679         if (ret < 0)
1680             return ret;
1681
1682         if (extradd && AV_RB24(st->codecpar->extradata) > 1)
1683             extradd = 0;
1684
1685         do {
1686             p = avpriv_find_start_code(p, buf_end, &state);
1687             av_log(s, AV_LOG_TRACE, "nal %"PRId32"\n", state & 0x1f);
1688             if ((state & 0x1f) == 7)
1689                 extradd = 0;
1690         } while (p < buf_end && (state & 0x1f) != 9 &&
1691                  (state & 0x1f) != 5 && (state & 0x1f) != 1);
1692
1693         if ((state & 0x1f) != 5)
1694             extradd = 0;
1695         if ((state & 0x1f) != 9) { // AUD NAL
1696             data = av_malloc(pkt->size + 6 + extradd);
1697             if (!data)
1698                 return AVERROR(ENOMEM);
1699             memcpy(data + 6, st->codecpar->extradata, extradd);
1700             memcpy(data + 6 + extradd, pkt->data, pkt->size);
1701             AV_WB32(data, 0x00000001);
1702             data[4] = 0x09;
1703             data[5] = 0xf0; // any slice type (0xe) + rbsp stop one bit
1704             buf     = data;
1705             size    = pkt->size + 6 + extradd;
1706         }
1707     } else if (st->codecpar->codec_id == AV_CODEC_ID_AAC) {
1708         if (pkt->size < 2) {
1709             av_log(s, AV_LOG_ERROR, "AAC packet too short\n");
1710             return AVERROR_INVALIDDATA;
1711         }
1712         if ((AV_RB16(pkt->data) & 0xfff0) != 0xfff0) {
1713             int ret;
1714             AVPacket pkt2;
1715
1716             if (!ts_st->amux) {
1717                 av_log(s, AV_LOG_ERROR, "AAC bitstream not in ADTS format "
1718                                         "and extradata missing\n");
1719             } else {
1720             av_init_packet(&pkt2);
1721             pkt2.data = pkt->data;
1722             pkt2.size = pkt->size;
1723             av_assert0(pkt->dts != AV_NOPTS_VALUE);
1724             pkt2.dts = av_rescale_q(pkt->dts, st->time_base, ts_st->amux->streams[0]->time_base);
1725
1726             ret = avio_open_dyn_buf(&ts_st->amux->pb);
1727             if (ret < 0)
1728                 return ret;
1729
1730             ret = av_write_frame(ts_st->amux, &pkt2);
1731             if (ret < 0) {
1732                 ffio_free_dyn_buf(&ts_st->amux->pb);
1733                 return ret;
1734             }
1735             size            = avio_close_dyn_buf(ts_st->amux->pb, &data);
1736             ts_st->amux->pb = NULL;
1737             buf             = data;
1738             }
1739         }
1740     } else if (st->codecpar->codec_id == AV_CODEC_ID_HEVC) {
1741         const uint8_t *p = buf, *buf_end = p + size;
1742         uint32_t state = -1;
1743         int extradd = (pkt->flags & AV_PKT_FLAG_KEY) ? st->codecpar->extradata_size : 0;
1744         int ret = check_hevc_startcode(s, st, pkt);
1745         if (ret < 0)
1746             return ret;
1747
1748         if (extradd && AV_RB24(st->codecpar->extradata) > 1)
1749             extradd = 0;
1750
1751         do {
1752             p = avpriv_find_start_code(p, buf_end, &state);
1753             av_log(s, AV_LOG_TRACE, "nal %"PRId32"\n", (state & 0x7e)>>1);
1754             if ((state & 0x7e) == 2*32)
1755                 extradd = 0;
1756         } while (p < buf_end && (state & 0x7e) != 2*35 &&
1757                  (state & 0x7e) >= 2*32);
1758
1759         if ((state & 0x7e) < 2*16 || (state & 0x7e) >= 2*24)
1760             extradd = 0;
1761         if ((state & 0x7e) != 2*35) { // AUD NAL
1762             data = av_malloc(pkt->size + 7 + extradd);
1763             if (!data)
1764                 return AVERROR(ENOMEM);
1765             memcpy(data + 7, st->codecpar->extradata, extradd);
1766             memcpy(data + 7 + extradd, pkt->data, pkt->size);
1767             AV_WB32(data, 0x00000001);
1768             data[4] = 2*35;
1769             data[5] = 1;
1770             data[6] = 0x50; // any slice type (0x4) + rbsp stop one bit
1771             buf     = data;
1772             size    = pkt->size + 7 + extradd;
1773         }
1774     } else if (st->codecpar->codec_id == AV_CODEC_ID_OPUS) {
1775         if (pkt->size < 2) {
1776             av_log(s, AV_LOG_ERROR, "Opus packet too short\n");
1777             return AVERROR_INVALIDDATA;
1778         }
1779
1780         /* Add Opus control header */
1781         if ((AV_RB16(pkt->data) >> 5) != 0x3ff) {
1782             uint8_t *side_data;
1783             int side_data_size;
1784             int i, n;
1785             int ctrl_header_size;
1786             int trim_start = 0, trim_end = 0;
1787
1788             opus_samples = opus_get_packet_samples(s, pkt);
1789
1790             side_data = av_packet_get_side_data(pkt,
1791                                                 AV_PKT_DATA_SKIP_SAMPLES,
1792                                                 &side_data_size);
1793
1794             if (side_data && side_data_size >= 10) {
1795                 trim_end = AV_RL32(side_data + 4) * 48000 / st->codecpar->sample_rate;
1796             }
1797
1798             ctrl_header_size = pkt->size + 2 + pkt->size / 255 + 1;
1799             if (ts_st->opus_pending_trim_start)
1800               ctrl_header_size += 2;
1801             if (trim_end)
1802               ctrl_header_size += 2;
1803
1804             data = av_malloc(ctrl_header_size);
1805             if (!data)
1806                 return AVERROR(ENOMEM);
1807
1808             data[0] = 0x7f;
1809             data[1] = 0xe0;
1810             if (ts_st->opus_pending_trim_start)
1811                 data[1] |= 0x10;
1812             if (trim_end)
1813                 data[1] |= 0x08;
1814
1815             n = pkt->size;
1816             i = 2;
1817             do {
1818                 data[i] = FFMIN(n, 255);
1819                 n -= 255;
1820                 i++;
1821             } while (n >= 0);
1822
1823             av_assert0(2 + pkt->size / 255 + 1 == i);
1824
1825             if (ts_st->opus_pending_trim_start) {
1826                 trim_start = FFMIN(ts_st->opus_pending_trim_start, opus_samples);
1827                 AV_WB16(data + i, trim_start);
1828                 i += 2;
1829                 ts_st->opus_pending_trim_start -= trim_start;
1830             }
1831             if (trim_end) {
1832                 trim_end = FFMIN(trim_end, opus_samples - trim_start);
1833                 AV_WB16(data + i, trim_end);
1834                 i += 2;
1835             }
1836
1837             memcpy(data + i, pkt->data, pkt->size);
1838             buf     = data;
1839             size    = ctrl_header_size;
1840         } else {
1841             /* TODO: Can we get TS formatted data here? If so we will
1842              * need to count the samples of that too! */
1843             av_log(s, AV_LOG_WARNING, "Got MPEG-TS formatted Opus data, unhandled");
1844         }
1845     }
1846
1847     if (ts_st->payload_size && (ts_st->payload_size + size > ts->pes_payload_size ||
1848         (dts != AV_NOPTS_VALUE && ts_st->payload_dts != AV_NOPTS_VALUE &&
1849          dts - ts_st->payload_dts >= max_audio_delay) ||
1850         ts_st->opus_queued_samples + opus_samples >= 5760 /* 120ms */)) {
1851         mpegts_write_pes(s, st, ts_st->payload, ts_st->payload_size,
1852                          ts_st->payload_pts, ts_st->payload_dts,
1853                          ts_st->payload_flags & AV_PKT_FLAG_KEY, stream_id);
1854         ts_st->payload_size = 0;
1855         ts_st->opus_queued_samples = 0;
1856     }
1857
1858     if (st->codecpar->codec_type != AVMEDIA_TYPE_AUDIO || size > ts->pes_payload_size) {
1859         av_assert0(!ts_st->payload_size);
1860         // for video and subtitle, write a single pes packet
1861         mpegts_write_pes(s, st, buf, size, pts, dts,
1862                          pkt->flags & AV_PKT_FLAG_KEY, stream_id);
1863         ts_st->opus_queued_samples = 0;
1864         av_free(data);
1865         return 0;
1866     }
1867
1868     if (!ts_st->payload_size) {
1869         ts_st->payload_pts   = pts;
1870         ts_st->payload_dts   = dts;
1871         ts_st->payload_flags = pkt->flags;
1872     }
1873
1874     memcpy(ts_st->payload + ts_st->payload_size, buf, size);
1875     ts_st->payload_size += size;
1876     ts_st->opus_queued_samples += opus_samples;
1877
1878     av_free(data);
1879
1880     return 0;
1881 }
1882
1883 static void mpegts_write_flush(AVFormatContext *s)
1884 {
1885     MpegTSWrite *ts = s->priv_data;
1886     int i;
1887
1888     /* flush current packets */
1889     for (i = 0; i < s->nb_streams; i++) {
1890         AVStream *st = s->streams[i];
1891         MpegTSWriteStream *ts_st = st->priv_data;
1892         if (ts_st->payload_size > 0) {
1893             mpegts_write_pes(s, st, ts_st->payload, ts_st->payload_size,
1894                              ts_st->payload_pts, ts_st->payload_dts,
1895                              ts_st->payload_flags & AV_PKT_FLAG_KEY, -1);
1896             ts_st->payload_size = 0;
1897             ts_st->opus_queued_samples = 0;
1898         }
1899     }
1900
1901     if (ts->m2ts_mode) {
1902         int packets = (avio_tell(s->pb) / (TS_PACKET_SIZE + 4)) % 32;
1903         while (packets++ < 32)
1904             mpegts_insert_null_packet(s);
1905     }
1906 }
1907
1908 static int mpegts_write_packet(AVFormatContext *s, AVPacket *pkt)
1909 {
1910     if (!pkt) {
1911         mpegts_write_flush(s);
1912         return 1;
1913     } else {
1914         return mpegts_write_packet_internal(s, pkt);
1915     }
1916 }
1917
1918 static int mpegts_write_end(AVFormatContext *s)
1919 {
1920     if (s->pb)
1921         mpegts_write_flush(s);
1922
1923     return 0;
1924 }
1925
1926 static void mpegts_deinit(AVFormatContext *s)
1927 {
1928     MpegTSWrite *ts = s->priv_data;
1929     MpegTSService *service;
1930     int i;
1931
1932     for (i = 0; i < s->nb_streams; i++) {
1933         AVStream *st = s->streams[i];
1934         MpegTSWriteStream *ts_st = st->priv_data;
1935         if (ts_st) {
1936             av_freep(&ts_st->payload);
1937             if (ts_st->amux) {
1938                 avformat_free_context(ts_st->amux);
1939                 ts_st->amux = NULL;
1940             }
1941         }
1942     }
1943
1944     for (i = 0; i < ts->nb_services; i++) {
1945         service = ts->services[i];
1946         av_freep(&service);
1947     }
1948     av_freep(&ts->services);
1949 }
1950
1951 static int mpegts_check_bitstream(struct AVFormatContext *s, const AVPacket *pkt)
1952 {
1953     int ret = 1;
1954     AVStream *st = s->streams[pkt->stream_index];
1955
1956     if (st->codecpar->codec_id == AV_CODEC_ID_H264) {
1957         if (pkt->size >= 5 && AV_RB32(pkt->data) != 0x0000001 &&
1958                              (AV_RB24(pkt->data) != 0x000001 ||
1959                               (st->codecpar->extradata_size > 0 &&
1960                                st->codecpar->extradata[0] == 1)))
1961             ret = ff_stream_add_bitstream_filter(st, "h264_mp4toannexb", NULL);
1962     } else if (st->codecpar->codec_id == AV_CODEC_ID_HEVC) {
1963         if (pkt->size >= 5 && AV_RB32(pkt->data) != 0x0000001 &&
1964                              (AV_RB24(pkt->data) != 0x000001 ||
1965                               (st->codecpar->extradata_size > 0 &&
1966                                st->codecpar->extradata[0] == 1)))
1967             ret = ff_stream_add_bitstream_filter(st, "hevc_mp4toannexb", NULL);
1968     }
1969
1970     return ret;
1971 }
1972
1973 #define OFFSET(x) offsetof(MpegTSWrite, x)
1974 #define ENC AV_OPT_FLAG_ENCODING_PARAM
1975 static const AVOption options[] = {
1976     { "mpegts_transport_stream_id", "Set transport_stream_id field.",
1977       OFFSET(transport_stream_id), AV_OPT_TYPE_INT, { .i64 = 0x0001 }, 0x0001, 0xffff, ENC },
1978     { "mpegts_original_network_id", "Set original_network_id field.",
1979       OFFSET(original_network_id), AV_OPT_TYPE_INT, { .i64 = DVB_PRIVATE_NETWORK_START }, 0x0001, 0xffff, ENC },
1980     { "mpegts_service_id", "Set service_id field.",
1981       OFFSET(service_id), AV_OPT_TYPE_INT, { .i64 = 0x0001 }, 0x0001, 0xffff, ENC },
1982     { "mpegts_service_type", "Set service_type field.",
1983       OFFSET(service_type), AV_OPT_TYPE_INT, { .i64 = 0x01 }, 0x01, 0xff, ENC, "mpegts_service_type" },
1984     { "digital_tv", "Digital Television.",
1985       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_SERVICE_TYPE_DIGITAL_TV }, 0x01, 0xff, ENC, "mpegts_service_type" },
1986     { "digital_radio", "Digital Radio.",
1987       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_SERVICE_TYPE_DIGITAL_RADIO }, 0x01, 0xff, ENC, "mpegts_service_type" },
1988     { "teletext", "Teletext.",
1989       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_SERVICE_TYPE_TELETEXT }, 0x01, 0xff, ENC, "mpegts_service_type" },
1990     { "advanced_codec_digital_radio", "Advanced Codec Digital Radio.",
1991       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_SERVICE_TYPE_ADVANCED_CODEC_DIGITAL_RADIO }, 0x01, 0xff, ENC, "mpegts_service_type" },
1992     { "mpeg2_digital_hdtv", "MPEG2 Digital HDTV.",
1993       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_SERVICE_TYPE_MPEG2_DIGITAL_HDTV }, 0x01, 0xff, ENC, "mpegts_service_type" },
1994     { "advanced_codec_digital_sdtv", "Advanced Codec Digital SDTV.",
1995       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_SERVICE_TYPE_ADVANCED_CODEC_DIGITAL_SDTV }, 0x01, 0xff, ENC, "mpegts_service_type" },
1996     { "advanced_codec_digital_hdtv", "Advanced Codec Digital HDTV.",
1997       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_SERVICE_TYPE_ADVANCED_CODEC_DIGITAL_HDTV }, 0x01, 0xff, ENC, "mpegts_service_type" },
1998     { "hevc_digital_hdtv", "HEVC Digital Television Service.",
1999       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_SERVICE_TYPE_HEVC_DIGITAL_HDTV }, 0x01, 0xff, ENC, "mpegts_service_type" },
2000     { "mpegts_pmt_start_pid", "Set the first pid of the PMT.",
2001       OFFSET(pmt_start_pid), AV_OPT_TYPE_INT, { .i64 = 0x1000 }, FIRST_OTHER_PID, LAST_OTHER_PID, ENC },
2002     { "mpegts_start_pid", "Set the first pid.",
2003       OFFSET(start_pid), AV_OPT_TYPE_INT, { .i64 = 0x0100 }, FIRST_OTHER_PID, LAST_OTHER_PID, ENC },
2004     { "mpegts_m2ts_mode", "Enable m2ts mode.", OFFSET(m2ts_mode), AV_OPT_TYPE_BOOL, { .i64 = -1 }, -1, 1, ENC },
2005     { "muxrate", NULL, OFFSET(mux_rate), AV_OPT_TYPE_INT, { .i64 = 1 }, 0, INT_MAX, ENC },
2006     { "pes_payload_size", "Minimum PES packet payload in bytes",
2007       OFFSET(pes_payload_size), AV_OPT_TYPE_INT, { .i64 = DEFAULT_PES_PAYLOAD_SIZE }, 0, INT_MAX, ENC },
2008     { "mpegts_flags", "MPEG-TS muxing flags", OFFSET(flags), AV_OPT_TYPE_FLAGS, { .i64 = 0 }, 0, INT_MAX, ENC, "mpegts_flags" },
2009     { "resend_headers", "Reemit PAT/PMT before writing the next packet",
2010       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_FLAG_REEMIT_PAT_PMT }, 0, INT_MAX, ENC, "mpegts_flags" },
2011     { "latm", "Use LATM packetization for AAC",
2012       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_FLAG_AAC_LATM }, 0, INT_MAX, ENC, "mpegts_flags" },
2013     { "pat_pmt_at_frames", "Reemit PAT and PMT at each video frame",
2014       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_FLAG_PAT_PMT_AT_FRAMES}, 0, INT_MAX, ENC, "mpegts_flags" },
2015     { "system_b", "Conform to System B (DVB) instead of System A (ATSC)",
2016       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_FLAG_SYSTEM_B }, 0, INT_MAX, ENC, "mpegts_flags" },
2017     { "initial_discontinuity", "Mark initial packets as discontinuous",
2018       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_FLAG_DISCONT }, 0, INT_MAX, ENC, "mpegts_flags" },
2019     { "mpegts_copyts", "don't offset dts/pts", OFFSET(copyts), AV_OPT_TYPE_BOOL, { .i64 = -1 }, -1, 1, ENC },
2020     { "tables_version", "set PAT, PMT and SDT version", OFFSET(tables_version), AV_OPT_TYPE_INT, { .i64 = 0 }, 0, 31, ENC },
2021     { "omit_video_pes_length", "Omit the PES packet length for video packets",
2022       OFFSET(omit_video_pes_length), AV_OPT_TYPE_BOOL, { .i64 = 1 }, 0, 1, ENC },
2023     { "pcr_period", "PCR retransmission time in milliseconds",
2024       OFFSET(pcr_period_ms), AV_OPT_TYPE_INT, { .i64 = -1 }, -1, INT_MAX, ENC },
2025     { "pat_period", "PAT/PMT retransmission time limit in seconds",
2026       OFFSET(pat_period_us), AV_OPT_TYPE_DURATION, { .i64 = PAT_RETRANS_TIME * 1000LL }, 0, INT64_MAX, ENC },
2027     { "sdt_period", "SDT retransmission time limit in seconds",
2028       OFFSET(sdt_period_us), AV_OPT_TYPE_DURATION, { .i64 = SDT_RETRANS_TIME * 1000LL }, 0, INT64_MAX, ENC },
2029     { NULL },
2030 };
2031
2032 static const AVClass mpegts_muxer_class = {
2033     .class_name = "MPEGTS muxer",
2034     .item_name  = av_default_item_name,
2035     .option     = options,
2036     .version    = LIBAVUTIL_VERSION_INT,
2037 };
2038
2039 AVOutputFormat ff_mpegts_muxer = {
2040     .name           = "mpegts",
2041     .long_name      = NULL_IF_CONFIG_SMALL("MPEG-TS (MPEG-2 Transport Stream)"),
2042     .mime_type      = "video/MP2T",
2043     .extensions     = "ts,m2t,m2ts,mts",
2044     .priv_data_size = sizeof(MpegTSWrite),
2045     .audio_codec    = AV_CODEC_ID_MP2,
2046     .video_codec    = AV_CODEC_ID_MPEG2VIDEO,
2047     .init           = mpegts_init,
2048     .write_packet   = mpegts_write_packet,
2049     .write_trailer  = mpegts_write_end,
2050     .deinit         = mpegts_deinit,
2051     .check_bitstream = mpegts_check_bitstream,
2052     .flags          = AVFMT_ALLOW_FLUSH | AVFMT_VARIABLE_FPS | AVFMT_NODIMENSIONS,
2053     .priv_class     = &mpegts_muxer_class,
2054 };