]> git.sesse.net Git - ffmpeg/blob - libavformat/mpegtsenc.c
61fdd09f7a8363b31769ca99ba2dd8920d7a0715
[ffmpeg] / libavformat / mpegtsenc.c
1 /*
2  * MPEG-2 transport stream (aka DVB) muxer
3  * Copyright (c) 2003 Fabrice Bellard
4  *
5  * This file is part of FFmpeg.
6  *
7  * FFmpeg is free software; you can redistribute it and/or
8  * modify it under the terms of the GNU Lesser General Public
9  * License as published by the Free Software Foundation; either
10  * version 2.1 of the License, or (at your option) any later version.
11  *
12  * FFmpeg is distributed in the hope that it will be useful,
13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
15  * Lesser General Public License for more details.
16  *
17  * You should have received a copy of the GNU Lesser General Public
18  * License along with FFmpeg; if not, write to the Free Software
19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
20  */
21
22 #include "libavutil/avassert.h"
23 #include "libavutil/bswap.h"
24 #include "libavutil/crc.h"
25 #include "libavutil/dict.h"
26 #include "libavutil/intreadwrite.h"
27 #include "libavutil/mathematics.h"
28 #include "libavutil/opt.h"
29
30 #include "libavcodec/ac3_parser_internal.h"
31 #include "libavcodec/internal.h"
32
33 #include "avformat.h"
34 #include "avio_internal.h"
35 #include "internal.h"
36 #include "mpegts.h"
37
38 #define PCR_TIME_BASE 27000000
39
40 /* write DVB SI sections */
41
42 #define DVB_PRIVATE_NETWORK_START 0xff01
43
44 /*********************************************/
45 /* mpegts section writer */
46
47 typedef struct MpegTSSection {
48     int pid;
49     int cc;
50     int discontinuity;
51     void (*write_packet)(struct MpegTSSection *s, const uint8_t *packet);
52     void *opaque;
53 } MpegTSSection;
54
55 typedef struct MpegTSService {
56     MpegTSSection pmt; /* MPEG-2 PMT table context */
57     int sid;           /* service ID */
58     uint8_t name[256];
59     uint8_t provider_name[256];
60     int pcr_pid;
61     AVProgram *program;
62 } MpegTSService;
63
64 // service_type values as defined in ETSI 300 468
65 enum {
66     MPEGTS_SERVICE_TYPE_DIGITAL_TV                   = 0x01,
67     MPEGTS_SERVICE_TYPE_DIGITAL_RADIO                = 0x02,
68     MPEGTS_SERVICE_TYPE_TELETEXT                     = 0x03,
69     MPEGTS_SERVICE_TYPE_ADVANCED_CODEC_DIGITAL_RADIO = 0x0A,
70     MPEGTS_SERVICE_TYPE_MPEG2_DIGITAL_HDTV           = 0x11,
71     MPEGTS_SERVICE_TYPE_ADVANCED_CODEC_DIGITAL_SDTV  = 0x16,
72     MPEGTS_SERVICE_TYPE_ADVANCED_CODEC_DIGITAL_HDTV  = 0x19,
73     MPEGTS_SERVICE_TYPE_HEVC_DIGITAL_HDTV            = 0x1F,
74 };
75 typedef struct MpegTSWrite {
76     const AVClass *av_class;
77     MpegTSSection pat; /* MPEG-2 PAT table */
78     MpegTSSection sdt; /* MPEG-2 SDT table context */
79     MpegTSService **services;
80     int64_t sdt_period; /* SDT period in PCR time base */
81     int64_t pat_period; /* PAT/PMT period in PCR time base */
82     int nb_services;
83     int64_t first_pcr;
84     int64_t next_pcr;
85     int mux_rate; ///< set to 1 when VBR
86     int pes_payload_size;
87
88     int transport_stream_id;
89     int original_network_id;
90     int service_id;
91     int service_type;
92
93     int pmt_start_pid;
94     int start_pid;
95     int m2ts_mode;
96     int m2ts_video_pid;
97     int m2ts_audio_pid;
98     int m2ts_pgssub_pid;
99     int m2ts_textsub_pid;
100
101     int pcr_period_ms;
102 #define MPEGTS_FLAG_REEMIT_PAT_PMT  0x01
103 #define MPEGTS_FLAG_AAC_LATM        0x02
104 #define MPEGTS_FLAG_PAT_PMT_AT_FRAMES           0x04
105 #define MPEGTS_FLAG_SYSTEM_B        0x08
106 #define MPEGTS_FLAG_DISCONT         0x10
107     int flags;
108     int copyts;
109     int tables_version;
110     int64_t pat_period_us;
111     int64_t sdt_period_us;
112     int64_t last_pat_ts;
113     int64_t last_sdt_ts;
114
115     int omit_video_pes_length;
116 } MpegTSWrite;
117
118 /* a PES packet header is generated every DEFAULT_PES_HEADER_FREQ packets */
119 #define DEFAULT_PES_HEADER_FREQ  16
120 #define DEFAULT_PES_PAYLOAD_SIZE ((DEFAULT_PES_HEADER_FREQ - 1) * 184 + 170)
121
122 /* The section length is 12 bits. The first 2 are set to 0, the remaining
123  * 10 bits should not exceed 1021. */
124 #define SECTION_LENGTH 1020
125
126 /* NOTE: 4 bytes must be left at the end for the crc32 */
127 static void mpegts_write_section(MpegTSSection *s, uint8_t *buf, int len)
128 {
129     unsigned int crc;
130     unsigned char packet[TS_PACKET_SIZE];
131     const unsigned char *buf_ptr;
132     unsigned char *q;
133     int first, b, len1, left;
134
135     crc = av_bswap32(av_crc(av_crc_get_table(AV_CRC_32_IEEE),
136                             -1, buf, len - 4));
137
138     buf[len - 4] = (crc >> 24) & 0xff;
139     buf[len - 3] = (crc >> 16) & 0xff;
140     buf[len - 2] = (crc >>  8) & 0xff;
141     buf[len - 1] =  crc        & 0xff;
142
143     /* send each packet */
144     buf_ptr = buf;
145     while (len > 0) {
146         first = buf == buf_ptr;
147         q     = packet;
148         *q++  = 0x47;
149         b     = s->pid >> 8;
150         if (first)
151             b |= 0x40;
152         *q++  = b;
153         *q++  = s->pid;
154         s->cc = s->cc + 1 & 0xf;
155         *q++  = 0x10 | s->cc;
156         if (s->discontinuity) {
157             q[-1] |= 0x20;
158             *q++ = 1;
159             *q++ = 0x80;
160             s->discontinuity = 0;
161         }
162         if (first)
163             *q++ = 0; /* 0 offset */
164         len1 = TS_PACKET_SIZE - (q - packet);
165         if (len1 > len)
166             len1 = len;
167         memcpy(q, buf_ptr, len1);
168         q += len1;
169         /* add known padding data */
170         left = TS_PACKET_SIZE - (q - packet);
171         if (left > 0)
172             memset(q, 0xff, left);
173
174         s->write_packet(s, packet);
175
176         buf_ptr += len1;
177         len     -= len1;
178     }
179 }
180
181 static inline void put16(uint8_t **q_ptr, int val)
182 {
183     uint8_t *q;
184     q      = *q_ptr;
185     *q++   = val >> 8;
186     *q++   = val;
187     *q_ptr = q;
188 }
189
190 static int mpegts_write_section1(MpegTSSection *s, int tid, int id,
191                                  int version, int sec_num, int last_sec_num,
192                                  uint8_t *buf, int len)
193 {
194     uint8_t section[1024], *q;
195     unsigned int tot_len;
196     /* reserved_future_use field must be set to 1 for SDT */
197     unsigned int flags = tid == SDT_TID ? 0xf000 : 0xb000;
198
199     tot_len = 3 + 5 + len + 4;
200     /* check if not too big */
201     if (tot_len > 1024)
202         return AVERROR_INVALIDDATA;
203
204     q    = section;
205     *q++ = tid;
206     put16(&q, flags | (len + 5 + 4)); /* 5 byte header + 4 byte CRC */
207     put16(&q, id);
208     *q++ = 0xc1 | (version << 1); /* current_next_indicator = 1 */
209     *q++ = sec_num;
210     *q++ = last_sec_num;
211     memcpy(q, buf, len);
212
213     mpegts_write_section(s, section, tot_len);
214     return 0;
215 }
216
217 /*********************************************/
218 /* mpegts writer */
219
220 #define DEFAULT_PROVIDER_NAME   "FFmpeg"
221 #define DEFAULT_SERVICE_NAME    "Service"
222
223 /* we retransmit the SI info at this rate */
224 #define SDT_RETRANS_TIME 500
225 #define PAT_RETRANS_TIME 100
226 #define PCR_RETRANS_TIME 20
227
228 typedef struct MpegTSWriteStream {
229     int pid; /* stream associated pid */
230     int cc;
231     int discontinuity;
232     int payload_size;
233     int first_pts_check; ///< first pts check needed
234     int prev_payload_key;
235     int64_t payload_pts;
236     int64_t payload_dts;
237     int payload_flags;
238     uint8_t *payload;
239     AVFormatContext *amux;
240     int data_st_warning;
241
242     int64_t pcr_period; /* PCR period in PCR time base */
243     int64_t last_pcr;
244
245     /* For Opus */
246     int opus_queued_samples;
247     int opus_pending_trim_start;
248
249     DVBAC3Descriptor *dvb_ac3_desc;
250 } MpegTSWriteStream;
251
252 static void mpegts_write_pat(AVFormatContext *s)
253 {
254     MpegTSWrite *ts = s->priv_data;
255     MpegTSService *service;
256     uint8_t data[SECTION_LENGTH], *q;
257     int i;
258
259     q = data;
260     for (i = 0; i < ts->nb_services; i++) {
261         service = ts->services[i];
262         put16(&q, service->sid);
263         put16(&q, 0xe000 | service->pmt.pid);
264     }
265     mpegts_write_section1(&ts->pat, PAT_TID, ts->transport_stream_id, ts->tables_version, 0, 0,
266                           data, q - data);
267 }
268
269 static void putbuf(uint8_t **q_ptr, const uint8_t *buf, size_t len)
270 {
271     memcpy(*q_ptr, buf, len);
272     *q_ptr += len;
273 }
274
275 static void put_registration_descriptor(uint8_t **q_ptr, uint32_t tag)
276 {
277     uint8_t *q = *q_ptr;
278     *q++ = 0x05; /* MPEG-2 registration descriptor*/
279     *q++ = 4;
280     *q++ = tag;
281     *q++ = tag >> 8;
282     *q++ = tag >> 16;
283     *q++ = tag >> 24;
284     *q_ptr = q;
285 }
286
287 static int get_dvb_stream_type(AVFormatContext *s, AVStream *st)
288 {
289     MpegTSWrite *ts = s->priv_data;
290     MpegTSWriteStream *ts_st = st->priv_data;
291     int stream_type;
292
293     switch (st->codecpar->codec_id) {
294     case AV_CODEC_ID_MPEG1VIDEO:
295     case AV_CODEC_ID_MPEG2VIDEO:
296         stream_type = STREAM_TYPE_VIDEO_MPEG2;
297         break;
298     case AV_CODEC_ID_MPEG4:
299         stream_type = STREAM_TYPE_VIDEO_MPEG4;
300         break;
301     case AV_CODEC_ID_H264:
302         stream_type = STREAM_TYPE_VIDEO_H264;
303         break;
304     case AV_CODEC_ID_HEVC:
305         stream_type = STREAM_TYPE_VIDEO_HEVC;
306         break;
307     case AV_CODEC_ID_CAVS:
308         stream_type = STREAM_TYPE_VIDEO_CAVS;
309         break;
310     case AV_CODEC_ID_DIRAC:
311         stream_type = STREAM_TYPE_VIDEO_DIRAC;
312         break;
313     case AV_CODEC_ID_VC1:
314         stream_type = STREAM_TYPE_VIDEO_VC1;
315         break;
316     case AV_CODEC_ID_MP2:
317     case AV_CODEC_ID_MP3:
318         if (   st->codecpar->sample_rate > 0
319             && st->codecpar->sample_rate < 32000) {
320             stream_type = STREAM_TYPE_AUDIO_MPEG2;
321         } else {
322             stream_type = STREAM_TYPE_AUDIO_MPEG1;
323         }
324         break;
325     case AV_CODEC_ID_AAC:
326         stream_type = (ts->flags & MPEGTS_FLAG_AAC_LATM)
327                       ? STREAM_TYPE_AUDIO_AAC_LATM
328                       : STREAM_TYPE_AUDIO_AAC;
329         break;
330     case AV_CODEC_ID_AAC_LATM:
331         stream_type = STREAM_TYPE_AUDIO_AAC_LATM;
332         break;
333     case AV_CODEC_ID_AC3:
334         stream_type = (ts->flags & MPEGTS_FLAG_SYSTEM_B)
335                       ? STREAM_TYPE_PRIVATE_DATA
336                       : STREAM_TYPE_AUDIO_AC3;
337         break;
338     case AV_CODEC_ID_EAC3:
339         stream_type = (ts->flags & MPEGTS_FLAG_SYSTEM_B)
340                       ? STREAM_TYPE_PRIVATE_DATA
341                       : STREAM_TYPE_AUDIO_EAC3;
342         break;
343     case AV_CODEC_ID_DTS:
344         stream_type = STREAM_TYPE_AUDIO_DTS;
345         break;
346     case AV_CODEC_ID_TRUEHD:
347         stream_type = STREAM_TYPE_AUDIO_TRUEHD;
348         break;
349     case AV_CODEC_ID_OPUS:
350         stream_type = STREAM_TYPE_PRIVATE_DATA;
351         break;
352     case AV_CODEC_ID_TIMED_ID3:
353         stream_type = STREAM_TYPE_METADATA;
354         break;
355     case AV_CODEC_ID_DVB_SUBTITLE:
356     case AV_CODEC_ID_DVB_TELETEXT:
357         stream_type = STREAM_TYPE_PRIVATE_DATA;
358         break;
359     case AV_CODEC_ID_SMPTE_KLV:
360         if (st->codecpar->profile == FF_PROFILE_KLVA_SYNC) {
361             stream_type = STREAM_TYPE_METADATA;
362         } else {
363             stream_type = STREAM_TYPE_PRIVATE_DATA;
364         }
365         break;
366     default:
367         av_log_once(s, AV_LOG_WARNING, AV_LOG_DEBUG, &ts_st->data_st_warning,
368                     "Stream %d, codec %s, is muxed as a private data stream "
369                     "and may not be recognized upon reading.\n", st->index,
370                     avcodec_get_name(st->codecpar->codec_id));
371         stream_type = STREAM_TYPE_PRIVATE_DATA;
372         break;
373     }
374
375     return stream_type;
376 }
377
378 static int get_m2ts_stream_type(AVFormatContext *s, AVStream *st)
379 {
380     int stream_type;
381     MpegTSWriteStream *ts_st = st->priv_data;
382
383     switch (st->codecpar->codec_id) {
384     case AV_CODEC_ID_MPEG2VIDEO:
385         stream_type = STREAM_TYPE_VIDEO_MPEG2;
386         break;
387     case AV_CODEC_ID_H264:
388         stream_type = STREAM_TYPE_VIDEO_H264;
389         break;
390     case AV_CODEC_ID_VC1:
391         stream_type = STREAM_TYPE_VIDEO_VC1;
392         break;
393     case AV_CODEC_ID_HEVC:
394         stream_type = STREAM_TYPE_VIDEO_HEVC;
395         break;
396     case AV_CODEC_ID_PCM_BLURAY:
397         stream_type = 0x80;
398         break;
399     case AV_CODEC_ID_AC3:
400         stream_type = 0x81;
401         break;
402     case AV_CODEC_ID_DTS:
403         stream_type = (st->codecpar->channels > 6) ? 0x85 : 0x82;
404         break;
405     case AV_CODEC_ID_TRUEHD:
406         stream_type = 0x83;
407         break;
408     case AV_CODEC_ID_EAC3:
409         stream_type = 0x84;
410         break;
411     case AV_CODEC_ID_HDMV_PGS_SUBTITLE:
412         stream_type = 0x90;
413         break;
414     case AV_CODEC_ID_HDMV_TEXT_SUBTITLE:
415         stream_type = 0x92;
416         break;
417     default:
418         av_log_once(s, AV_LOG_WARNING, AV_LOG_DEBUG, &ts_st->data_st_warning,
419                     "Stream %d, codec %s, is muxed as a private data stream "
420                     "and may not be recognized upon reading.\n", st->index,
421                     avcodec_get_name(st->codecpar->codec_id));
422         stream_type = STREAM_TYPE_PRIVATE_DATA;
423         break;
424     }
425
426     return stream_type;
427 }
428
429 static int mpegts_write_pmt(AVFormatContext *s, MpegTSService *service)
430 {
431     MpegTSWrite *ts = s->priv_data;
432     uint8_t data[SECTION_LENGTH], *q, *desc_length_ptr, *program_info_length_ptr;
433     int val, stream_type, i, err = 0;
434
435     q = data;
436     put16(&q, 0xe000 | service->pcr_pid);
437
438     program_info_length_ptr = q;
439     q += 2; /* patched after */
440
441     /* put program info here */
442     if (ts->m2ts_mode) {
443         put_registration_descriptor(&q, MKTAG('H', 'D', 'M', 'V'));
444         *q++ = 0x88;        // descriptor_tag - hdmv_copy_control_descriptor
445         *q++ = 0x04;        // descriptor_length
446         put16(&q, 0x0fff);  // CA_System_ID
447         *q++ = 0xfc;        // private_data_byte
448         *q++ = 0xfc;        // private_data_byte
449     }
450
451     val = 0xf000 | (q - program_info_length_ptr - 2);
452     program_info_length_ptr[0] = val >> 8;
453     program_info_length_ptr[1] = val;
454
455     for (i = 0; i < s->nb_streams; i++) {
456         AVStream *st = s->streams[i];
457         MpegTSWriteStream *ts_st = st->priv_data;
458         AVDictionaryEntry *lang = av_dict_get(st->metadata, "language", NULL, 0);
459         enum AVCodecID codec_id = st->codecpar->codec_id;
460
461         if (s->nb_programs) {
462             int k, found = 0;
463             AVProgram *program = service->program;
464
465             for (k = 0; k < program->nb_stream_indexes; k++)
466                 if (program->stream_index[k] == i) {
467                     found = 1;
468                     break;
469                 }
470
471             if (!found)
472                 continue;
473         }
474
475         if (q - data > SECTION_LENGTH - 32) {
476             err = 1;
477             break;
478         }
479
480         stream_type = ts->m2ts_mode ? get_m2ts_stream_type(s, st) : get_dvb_stream_type(s, st);
481
482         *q++ = stream_type;
483         put16(&q, 0xe000 | ts_st->pid);
484         desc_length_ptr = q;
485         q += 2; /* patched after */
486
487         /* write optional descriptors here */
488         switch (st->codecpar->codec_type) {
489         case AVMEDIA_TYPE_AUDIO:
490             if (ts->flags & MPEGTS_FLAG_SYSTEM_B) {
491                 if (codec_id == AV_CODEC_ID_AC3) {
492                     DVBAC3Descriptor *dvb_ac3_desc = ts_st->dvb_ac3_desc;
493
494                     *q++=0x6a; // AC3 descriptor see A038 DVB SI
495                     if (dvb_ac3_desc) {
496                         int len = 1 +
497                                   !!(dvb_ac3_desc->component_type_flag) +
498                                   !!(dvb_ac3_desc->bsid_flag) +
499                                   !!(dvb_ac3_desc->mainid_flag) +
500                                   !!(dvb_ac3_desc->asvc_flag);
501
502                         *q++ = len;
503                         *q++ = dvb_ac3_desc->component_type_flag << 7 | dvb_ac3_desc->bsid_flag << 6 |
504                                dvb_ac3_desc->mainid_flag         << 5 | dvb_ac3_desc->asvc_flag << 4;
505
506                         if (dvb_ac3_desc->component_type_flag) *q++ = dvb_ac3_desc->component_type;
507                         if (dvb_ac3_desc->bsid_flag)           *q++ = dvb_ac3_desc->bsid;
508                         if (dvb_ac3_desc->mainid_flag)         *q++ = dvb_ac3_desc->mainid;
509                         if (dvb_ac3_desc->asvc_flag)           *q++ = dvb_ac3_desc->asvc;
510                     } else {
511                         *q++=1; // 1 byte, all flags sets to 0
512                         *q++=0; // omit all fields...
513                     }
514                 } else if (codec_id == AV_CODEC_ID_EAC3) {
515                     *q++=0x7a; // EAC3 descriptor see A038 DVB SI
516                     *q++=1; // 1 byte, all flags sets to 0
517                     *q++=0; // omit all fields...
518                 }
519             }
520             if (codec_id == AV_CODEC_ID_S302M)
521                 put_registration_descriptor(&q, MKTAG('B', 'S', 'S', 'D'));
522             if (codec_id == AV_CODEC_ID_OPUS) {
523                 /* 6 bytes registration descriptor, 4 bytes Opus audio descriptor */
524                 if (q - data > SECTION_LENGTH - 6 - 4) {
525                     err = 1;
526                     break;
527                 }
528
529                 put_registration_descriptor(&q, MKTAG('O', 'p', 'u', 's'));
530
531                 *q++ = 0x7f; /* DVB extension descriptor */
532                 *q++ = 2;
533                 *q++ = 0x80;
534
535                 if (st->codecpar->extradata && st->codecpar->extradata_size >= 19) {
536                     if (st->codecpar->extradata[18] == 0 && st->codecpar->channels <= 2) {
537                         /* RTP mapping family */
538                         *q++ = st->codecpar->channels;
539                     } else if (st->codecpar->extradata[18] == 1 && st->codecpar->channels <= 8 &&
540                                st->codecpar->extradata_size >= 21 + st->codecpar->channels) {
541                         static const uint8_t coupled_stream_counts[9] = {
542                             1, 0, 1, 1, 2, 2, 2, 3, 3
543                         };
544                         static const uint8_t channel_map_a[8][8] = {
545                             {0},
546                             {0, 1},
547                             {0, 2, 1},
548                             {0, 1, 2, 3},
549                             {0, 4, 1, 2, 3},
550                             {0, 4, 1, 2, 3, 5},
551                             {0, 4, 1, 2, 3, 5, 6},
552                             {0, 6, 1, 2, 3, 4, 5, 7},
553                         };
554                         static const uint8_t channel_map_b[8][8] = {
555                             {0},
556                             {0, 1},
557                             {0, 1, 2},
558                             {0, 1, 2, 3},
559                             {0, 1, 2, 3, 4},
560                             {0, 1, 2, 3, 4, 5},
561                             {0, 1, 2, 3, 4, 5, 6},
562                             {0, 1, 2, 3, 4, 5, 6, 7},
563                         };
564                         /* Vorbis mapping family */
565
566                         if (st->codecpar->extradata[19] == st->codecpar->channels - coupled_stream_counts[st->codecpar->channels] &&
567                             st->codecpar->extradata[20] == coupled_stream_counts[st->codecpar->channels] &&
568                             memcmp(&st->codecpar->extradata[21], channel_map_a[st->codecpar->channels-1], st->codecpar->channels) == 0) {
569                             *q++ = st->codecpar->channels;
570                         } else if (st->codecpar->channels >= 2 && st->codecpar->extradata[19] == st->codecpar->channels &&
571                                    st->codecpar->extradata[20] == 0 &&
572                                    memcmp(&st->codecpar->extradata[21], channel_map_b[st->codecpar->channels-1], st->codecpar->channels) == 0) {
573                             *q++ = st->codecpar->channels | 0x80;
574                         } else {
575                             /* Unsupported, could write an extended descriptor here */
576                             av_log(s, AV_LOG_ERROR, "Unsupported Opus Vorbis-style channel mapping");
577                             *q++ = 0xff;
578                         }
579                     } else {
580                         /* Unsupported */
581                         av_log(s, AV_LOG_ERROR, "Unsupported Opus channel mapping for family %d", st->codecpar->extradata[18]);
582                         *q++ = 0xff;
583                     }
584                 } else if (st->codecpar->channels <= 2) {
585                     /* Assume RTP mapping family */
586                     *q++ = st->codecpar->channels;
587                 } else {
588                     /* Unsupported */
589                     av_log(s, AV_LOG_ERROR, "Unsupported Opus channel mapping");
590                     *q++ = 0xff;
591                 }
592             }
593
594             if (lang) {
595                 char *p;
596                 char *next = lang->value;
597                 uint8_t *len_ptr;
598
599                 *q++     = 0x0a; /* ISO 639 language descriptor */
600                 len_ptr  = q++;
601                 *len_ptr = 0;
602
603                 for (p = lang->value; next && *len_ptr < 255 / 4 * 4; p = next + 1) {
604                     if (q - data > SECTION_LENGTH - 4) {
605                         err = 1;
606                         break;
607                     }
608                     next = strchr(p, ',');
609                     if (strlen(p) != 3 && (!next || next != p + 3))
610                         continue; /* not a 3-letter code */
611
612                     *q++ = *p++;
613                     *q++ = *p++;
614                     *q++ = *p++;
615
616                     if (st->disposition & AV_DISPOSITION_CLEAN_EFFECTS)
617                         *q++ = 0x01;
618                     else if (st->disposition & AV_DISPOSITION_HEARING_IMPAIRED)
619                         *q++ = 0x02;
620                     else if (st->disposition & AV_DISPOSITION_VISUAL_IMPAIRED)
621                         *q++ = 0x03;
622                     else
623                         *q++ = 0; /* undefined type */
624
625                     *len_ptr += 4;
626                 }
627
628                 if (*len_ptr == 0)
629                     q -= 2; /* no language codes were written */
630             }
631             break;
632         case AVMEDIA_TYPE_SUBTITLE:
633         {
634            const char default_language[] = "und";
635            const char *language = lang && strlen(lang->value) >= 3 ? lang->value : default_language;
636
637            if (codec_id == AV_CODEC_ID_DVB_SUBTITLE) {
638                uint8_t *len_ptr;
639                int extradata_copied = 0;
640
641                *q++ = 0x59; /* subtitling_descriptor */
642                len_ptr = q++;
643
644                while (strlen(language) >= 3) {
645                    if (sizeof(data) - (q - data) < 8) { /* 8 bytes per DVB subtitle substream data */
646                        err = 1;
647                        break;
648                    }
649                    *q++ = *language++;
650                    *q++ = *language++;
651                    *q++ = *language++;
652                    /* Skip comma */
653                    if (*language != '\0')
654                        language++;
655
656                    if (st->codecpar->extradata_size - extradata_copied >= 5) {
657                        *q++ = st->codecpar->extradata[extradata_copied + 4]; /* subtitling_type */
658                        memcpy(q, st->codecpar->extradata + extradata_copied, 4); /* composition_page_id and ancillary_page_id */
659                        extradata_copied += 5;
660                        q += 4;
661                    } else {
662                        /* subtitling_type:
663                         * 0x10 - normal with no monitor aspect ratio criticality
664                         * 0x20 - for the hard of hearing with no monitor aspect ratio criticality */
665                        *q++ = (st->disposition & AV_DISPOSITION_HEARING_IMPAIRED) ? 0x20 : 0x10;
666                        if ((st->codecpar->extradata_size == 4) && (extradata_copied == 0)) {
667                            /* support of old 4-byte extradata format */
668                            memcpy(q, st->codecpar->extradata, 4); /* composition_page_id and ancillary_page_id */
669                            extradata_copied += 4;
670                            q += 4;
671                        } else {
672                            put16(&q, 1); /* composition_page_id */
673                            put16(&q, 1); /* ancillary_page_id */
674                        }
675                    }
676                }
677
678                *len_ptr = q - len_ptr - 1;
679            } else if (codec_id == AV_CODEC_ID_DVB_TELETEXT) {
680                uint8_t *len_ptr = NULL;
681                int extradata_copied = 0;
682
683                /* The descriptor tag. teletext_descriptor */
684                *q++ = 0x56;
685                len_ptr = q++;
686
687                while (strlen(language) >= 3 && q - data < sizeof(data) - 6) {
688                    *q++ = *language++;
689                    *q++ = *language++;
690                    *q++ = *language++;
691                    /* Skip comma */
692                    if (*language != '\0')
693                        language++;
694
695                    if (st->codecpar->extradata_size - 1 > extradata_copied) {
696                        memcpy(q, st->codecpar->extradata + extradata_copied, 2);
697                        extradata_copied += 2;
698                        q += 2;
699                    } else {
700                        /* The Teletext descriptor:
701                         * teletext_type: This 5-bit field indicates the type of Teletext page indicated. (0x01 Initial Teletext page)
702                         * teletext_magazine_number: This is a 3-bit field which identifies the magazine number.
703                         * teletext_page_number: This is an 8-bit field giving two 4-bit hex digits identifying the page number. */
704                        *q++ = 0x08;
705                        *q++ = 0x00;
706                    }
707                }
708
709                *len_ptr = q - len_ptr - 1;
710             }
711         }
712         break;
713         case AVMEDIA_TYPE_VIDEO:
714             if (stream_type == STREAM_TYPE_VIDEO_DIRAC) {
715                 put_registration_descriptor(&q, MKTAG('d', 'r', 'a', 'c'));
716             } else if (stream_type == STREAM_TYPE_VIDEO_VC1) {
717                 put_registration_descriptor(&q, MKTAG('V', 'C', '-', '1'));
718             } else if (stream_type == STREAM_TYPE_VIDEO_HEVC && s->strict_std_compliance <= FF_COMPLIANCE_NORMAL) {
719                 put_registration_descriptor(&q, MKTAG('H', 'E', 'V', 'C'));
720             }
721             break;
722         case AVMEDIA_TYPE_DATA:
723             if (codec_id == AV_CODEC_ID_SMPTE_KLV) {
724                 put_registration_descriptor(&q, MKTAG('K', 'L', 'V', 'A'));
725             } else if (codec_id == AV_CODEC_ID_TIMED_ID3) {
726                 const char *tag = "ID3 ";
727                 *q++ = 0x26; /* metadata descriptor */
728                 *q++ = 13;
729                 put16(&q, 0xffff);    /* metadata application format */
730                 putbuf(&q, tag, strlen(tag));
731                 *q++ = 0xff;        /* metadata format */
732                 putbuf(&q, tag, strlen(tag));
733                 *q++ = 0;            /* metadata service ID */
734                 *q++ = 0xF;          /* metadata_locator_record_flag|MPEG_carriage_flags|reserved */
735             }
736             break;
737         }
738
739         val = 0xf000 | (q - desc_length_ptr - 2);
740         desc_length_ptr[0] = val >> 8;
741         desc_length_ptr[1] = val;
742     }
743
744     if (err)
745         av_log(s, AV_LOG_ERROR,
746                "The PMT section cannot fit stream %d and all following streams.\n"
747                "Try reducing the number of languages in the audio streams "
748                "or the total number of streams.\n", i);
749
750     mpegts_write_section1(&service->pmt, PMT_TID, service->sid, ts->tables_version, 0, 0,
751                           data, q - data);
752     return 0;
753 }
754
755 static void mpegts_write_sdt(AVFormatContext *s)
756 {
757     MpegTSWrite *ts = s->priv_data;
758     MpegTSService *service;
759     uint8_t data[SECTION_LENGTH], *q, *desc_list_len_ptr, *desc_len_ptr;
760     int i, running_status, free_ca_mode, val;
761
762     q = data;
763     put16(&q, ts->original_network_id);
764     *q++ = 0xff;
765     for (i = 0; i < ts->nb_services; i++) {
766         service = ts->services[i];
767         put16(&q, service->sid);
768         *q++              = 0xfc | 0x00; /* currently no EIT info */
769         desc_list_len_ptr = q;
770         q                += 2;
771         running_status    = 4; /* running */
772         free_ca_mode      = 0;
773
774         /* write only one descriptor for the service name and provider */
775         *q++         = 0x48;
776         desc_len_ptr = q;
777         q++;
778         *q++         = ts->service_type;
779         putbuf(&q, service->provider_name, service->provider_name[0] + 1);
780         putbuf(&q, service->name, service->name[0] + 1);
781         desc_len_ptr[0] = q - desc_len_ptr - 1;
782
783         /* fill descriptor length */
784         val = (running_status << 13) | (free_ca_mode << 12) |
785               (q - desc_list_len_ptr - 2);
786         desc_list_len_ptr[0] = val >> 8;
787         desc_list_len_ptr[1] = val;
788     }
789     mpegts_write_section1(&ts->sdt, SDT_TID, ts->transport_stream_id, ts->tables_version, 0, 0,
790                           data, q - data);
791 }
792
793 /* This stores a string in buf with the correct encoding and also sets the
794  * first byte as the length. !str is accepted for an empty string.
795  * If the string is already encoded, invalid UTF-8 or has no multibyte sequence
796  * then we keep it as is, otherwise we signal UTF-8 encoding. */
797 static int encode_str8(uint8_t *buf, const char *str)
798 {
799     size_t str_len;
800     if (!str)
801         str = "";
802     str_len = strlen(str);
803     if (str[0] && (unsigned)str[0] >= 0x20) {   /* Make sure the string is not already encoded. */
804         const uint8_t *q = str;
805         int has_multibyte = 0;
806         while (*q) {
807             uint32_t code;
808             GET_UTF8(code, *q++, goto invalid;) /* Is it valid UTF-8? */
809             has_multibyte |= (code > 127);      /* Does it have multibyte UTF-8 chars in it? */
810         }
811         if (has_multibyte) {                    /* If we have multibyte chars and valid UTF-8, then encode as such! */
812             if (str_len > 254)
813                 return AVERROR(EINVAL);
814             buf[0] = str_len + 1;
815             buf[1] = 0x15;
816             memcpy(&buf[2], str, str_len);
817             return 0;
818         }
819     }
820 invalid:
821     /* Otherwise let's just encode the string as is! */
822     if (str_len > 255)
823         return AVERROR(EINVAL);
824     buf[0] = str_len;
825     memcpy(&buf[1], str, str_len);
826     return 0;
827 }
828
829 static int64_t get_pcr(const MpegTSWrite *ts, AVIOContext *pb)
830 {
831     return av_rescale(avio_tell(pb) + 11, 8 * PCR_TIME_BASE, ts->mux_rate) +
832            ts->first_pcr;
833 }
834
835 static void write_packet(AVFormatContext *s, const uint8_t *packet)
836 {
837     MpegTSWrite *ts = s->priv_data;
838     if (ts->m2ts_mode) {
839         int64_t pcr = get_pcr(s->priv_data, s->pb);
840         uint32_t tp_extra_header = pcr % 0x3fffffff;
841         tp_extra_header = AV_RB32(&tp_extra_header);
842         avio_write(s->pb, (unsigned char *) &tp_extra_header,
843                    sizeof(tp_extra_header));
844     }
845     avio_write(s->pb, packet, TS_PACKET_SIZE);
846 }
847
848 static void section_write_packet(MpegTSSection *s, const uint8_t *packet)
849 {
850     AVFormatContext *ctx = s->opaque;
851     write_packet(ctx, packet);
852 }
853
854 static MpegTSService *mpegts_add_service(AVFormatContext *s, int sid,
855                                          const AVDictionary *metadata,
856                                          AVProgram *program)
857 {
858     MpegTSWrite *ts = s->priv_data;
859     MpegTSService *service;
860     AVDictionaryEntry *title, *provider;
861     char default_service_name[32];
862     const char *service_name;
863     const char *provider_name;
864
865     title = av_dict_get(metadata, "service_name", NULL, 0);
866     if (!title)
867         title = av_dict_get(metadata, "title", NULL, 0);
868     snprintf(default_service_name, sizeof(default_service_name), "%s%02d", DEFAULT_SERVICE_NAME, ts->nb_services + 1);
869     service_name  = title ? title->value : default_service_name;
870     provider      = av_dict_get(metadata, "service_provider", NULL, 0);
871     provider_name = provider ? provider->value : DEFAULT_PROVIDER_NAME;
872
873     service = av_mallocz(sizeof(MpegTSService));
874     if (!service)
875         return NULL;
876     service->pmt.pid       = ts->pmt_start_pid + ts->nb_services;
877     service->sid           = sid;
878     service->pcr_pid       = 0x1fff;
879     if (encode_str8(service->provider_name, provider_name) < 0 ||
880         encode_str8(service->name, service_name) < 0) {
881         av_log(s, AV_LOG_ERROR, "Too long service or provider name\n");
882         goto fail;
883     }
884     if (av_dynarray_add_nofree(&ts->services, &ts->nb_services, service) < 0)
885         goto fail;
886
887     service->pmt.write_packet = section_write_packet;
888     service->pmt.opaque       = s;
889     service->pmt.cc           = 15;
890     service->pmt.discontinuity= ts->flags & MPEGTS_FLAG_DISCONT;
891     service->program          = program;
892
893     return service;
894 fail:
895     av_free(service);
896     return NULL;
897 }
898
899 static void enable_pcr_generation_for_stream(AVFormatContext *s, AVStream *pcr_st)
900 {
901     MpegTSWrite *ts = s->priv_data;
902     MpegTSWriteStream *ts_st = pcr_st->priv_data;
903
904     if (ts->mux_rate > 1 || ts->pcr_period_ms >= 0) {
905         int pcr_period_ms = ts->pcr_period_ms == -1 ? PCR_RETRANS_TIME : ts->pcr_period_ms;
906         ts_st->pcr_period = av_rescale(pcr_period_ms, PCR_TIME_BASE, 1000);
907     } else {
908         /* By default, for VBR we select the highest multiple of frame duration which is less than 100 ms. */
909         int64_t frame_period = 0;
910         if (pcr_st->codecpar->codec_type == AVMEDIA_TYPE_AUDIO) {
911             int frame_size = av_get_audio_frame_duration2(pcr_st->codecpar, 0);
912             if (!frame_size) {
913                av_log(s, AV_LOG_WARNING, "frame size not set\n");
914                frame_size = 512;
915             }
916             frame_period = av_rescale_rnd(frame_size, PCR_TIME_BASE, pcr_st->codecpar->sample_rate, AV_ROUND_UP);
917         } else if (pcr_st->avg_frame_rate.num) {
918             frame_period = av_rescale_rnd(pcr_st->avg_frame_rate.den, PCR_TIME_BASE, pcr_st->avg_frame_rate.num, AV_ROUND_UP);
919         }
920         if (frame_period > 0 && frame_period <= PCR_TIME_BASE / 10)
921             ts_st->pcr_period = frame_period * (PCR_TIME_BASE / 10 / frame_period);
922         else
923             ts_st->pcr_period = 1;
924     }
925
926     // output a PCR as soon as possible
927     ts_st->last_pcr   = ts->first_pcr - ts_st->pcr_period;
928 }
929
930 static void select_pcr_streams(AVFormatContext *s)
931 {
932     MpegTSWrite *ts = s->priv_data;
933
934     for (int i = 0; i < ts->nb_services; i++) {
935         MpegTSService *service = ts->services[i];
936         AVStream *pcr_st = NULL;
937         AVProgram *program = service->program;
938         int nb_streams = program ? program->nb_stream_indexes : s->nb_streams;
939
940         for (int j = 0; j < nb_streams; j++) {
941             AVStream *st = s->streams[program ? program->stream_index[j] : j];
942             if (!pcr_st ||
943                 pcr_st->codecpar->codec_type != AVMEDIA_TYPE_VIDEO && st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO)
944             {
945                 pcr_st = st;
946             }
947         }
948
949         if (pcr_st) {
950             MpegTSWriteStream *ts_st = pcr_st->priv_data;
951             service->pcr_pid = ts_st->pid;
952             enable_pcr_generation_for_stream(s, pcr_st);
953             av_log(s, AV_LOG_VERBOSE, "service %i using PCR in pid=%i, pcr_period=%"PRId64"ms\n",
954                 service->sid, service->pcr_pid, av_rescale(ts_st->pcr_period, 1000, PCR_TIME_BASE));
955         }
956     }
957 }
958
959 static int mpegts_init(AVFormatContext *s)
960 {
961     MpegTSWrite *ts = s->priv_data;
962     int i, j;
963     int ret;
964
965     if (ts->m2ts_mode == -1) {
966         if (av_match_ext(s->url, "m2ts")) {
967             ts->m2ts_mode = 1;
968         } else {
969             ts->m2ts_mode = 0;
970         }
971     }
972
973     ts->m2ts_video_pid   = M2TS_VIDEO_PID;
974     ts->m2ts_audio_pid   = M2TS_AUDIO_START_PID;
975     ts->m2ts_pgssub_pid  = M2TS_PGSSUB_START_PID;
976     ts->m2ts_textsub_pid = M2TS_TEXTSUB_PID;
977
978     if (ts->m2ts_mode) {
979         ts->pmt_start_pid = M2TS_PMT_PID;
980         if (s->nb_programs > 1) {
981             av_log(s, AV_LOG_ERROR, "Only one program is allowed in m2ts mode!\n");
982             return AVERROR(EINVAL);
983         }
984     }
985
986     if (s->max_delay < 0) /* Not set by the caller */
987         s->max_delay = 0;
988
989     // round up to a whole number of TS packets
990     ts->pes_payload_size = (ts->pes_payload_size + 14 + 183) / 184 * 184 - 14;
991
992     if (!s->nb_programs) {
993         /* allocate a single DVB service */
994         if (!mpegts_add_service(s, ts->service_id, s->metadata, NULL))
995             return AVERROR(ENOMEM);
996     } else {
997         for (i = 0; i < s->nb_programs; i++) {
998             AVProgram *program = s->programs[i];
999             if (!mpegts_add_service(s, program->id, program->metadata, program))
1000                 return AVERROR(ENOMEM);
1001         }
1002     }
1003
1004     ts->pat.pid          = PAT_PID;
1005     /* Initialize at 15 so that it wraps and is equal to 0 for the
1006      * first packet we write. */
1007     ts->pat.cc           = 15;
1008     ts->pat.discontinuity= ts->flags & MPEGTS_FLAG_DISCONT;
1009     ts->pat.write_packet = section_write_packet;
1010     ts->pat.opaque       = s;
1011
1012     ts->sdt.pid          = SDT_PID;
1013     ts->sdt.cc           = 15;
1014     ts->sdt.discontinuity= ts->flags & MPEGTS_FLAG_DISCONT;
1015     ts->sdt.write_packet = section_write_packet;
1016     ts->sdt.opaque       = s;
1017
1018     /* assign pids to each stream */
1019     for (i = 0; i < s->nb_streams; i++) {
1020         AVStream *st = s->streams[i];
1021         MpegTSWriteStream *ts_st;
1022
1023         ts_st = av_mallocz(sizeof(MpegTSWriteStream));
1024         if (!ts_st) {
1025             return AVERROR(ENOMEM);
1026         }
1027         st->priv_data = ts_st;
1028
1029         avpriv_set_pts_info(st, 33, 1, 90000);
1030
1031         ts_st->payload = av_mallocz(ts->pes_payload_size);
1032         if (!ts_st->payload) {
1033             return AVERROR(ENOMEM);
1034         }
1035
1036         /* MPEG pid values < 16 are reserved. Applications which set st->id in
1037          * this range are assigned a calculated pid. */
1038         if (st->id < 16) {
1039             if (ts->m2ts_mode) {
1040                 switch (st->codecpar->codec_type) {
1041                 case AVMEDIA_TYPE_VIDEO:
1042                     ts_st->pid = ts->m2ts_video_pid++;
1043                     break;
1044                 case AVMEDIA_TYPE_AUDIO:
1045                     ts_st->pid = ts->m2ts_audio_pid++;
1046                     break;
1047                 case AVMEDIA_TYPE_SUBTITLE:
1048                     switch (st->codecpar->codec_id) {
1049                     case AV_CODEC_ID_HDMV_PGS_SUBTITLE:
1050                         ts_st->pid = ts->m2ts_pgssub_pid++;
1051                         break;
1052                     case AV_CODEC_ID_HDMV_TEXT_SUBTITLE:
1053                         ts_st->pid = ts->m2ts_textsub_pid++;
1054                         break;
1055                     }
1056                     break;
1057                 }
1058                 if (ts->m2ts_video_pid   > M2TS_VIDEO_PID + 1          ||
1059                     ts->m2ts_audio_pid   > M2TS_AUDIO_START_PID + 32   ||
1060                     ts->m2ts_pgssub_pid  > M2TS_PGSSUB_START_PID + 32  ||
1061                     ts->m2ts_textsub_pid > M2TS_TEXTSUB_PID + 1        ||
1062                     ts_st->pid < 16) {
1063                     av_log(s, AV_LOG_ERROR, "Cannot automatically assign PID for stream %d\n", st->index);
1064                     return AVERROR(EINVAL);
1065                 }
1066             } else {
1067                 ts_st->pid = ts->start_pid + i;
1068             }
1069         } else {
1070             ts_st->pid = st->id;
1071         }
1072         if (ts_st->pid >= 0x1FFF) {
1073             av_log(s, AV_LOG_ERROR,
1074                    "Invalid stream id %d, must be less than 8191\n", st->id);
1075             return AVERROR(EINVAL);
1076         }
1077         for (j = 0; j < ts->nb_services; j++) {
1078             if (ts->services[j]->pmt.pid > LAST_OTHER_PID) {
1079                 av_log(s, AV_LOG_ERROR,
1080                        "Invalid PMT PID %d, must be less than %d\n", ts->services[j]->pmt.pid, LAST_OTHER_PID + 1);
1081                 return AVERROR(EINVAL);
1082             }
1083             if (ts_st->pid == ts->services[j]->pmt.pid) {
1084                 av_log(s, AV_LOG_ERROR, "PID %d cannot be both elementary and PMT PID\n", ts_st->pid);
1085                 return AVERROR(EINVAL);
1086             }
1087         }
1088         for (j = 0; j < i; j++) {
1089             MpegTSWriteStream *ts_st_prev = s->streams[j]->priv_data;
1090             if (ts_st_prev->pid == ts_st->pid) {
1091                 av_log(s, AV_LOG_ERROR, "Duplicate stream id %d\n", ts_st->pid);
1092                 return AVERROR(EINVAL);
1093             }
1094         }
1095         ts_st->payload_pts     = AV_NOPTS_VALUE;
1096         ts_st->payload_dts     = AV_NOPTS_VALUE;
1097         ts_st->first_pts_check = 1;
1098         ts_st->cc              = 15;
1099         ts_st->discontinuity   = ts->flags & MPEGTS_FLAG_DISCONT;
1100         if (st->codecpar->codec_id == AV_CODEC_ID_AAC &&
1101             st->codecpar->extradata_size > 0) {
1102             AVStream *ast;
1103             ts_st->amux = avformat_alloc_context();
1104             if (!ts_st->amux) {
1105                 return AVERROR(ENOMEM);
1106             }
1107             ts_st->amux->oformat =
1108                 av_guess_format((ts->flags & MPEGTS_FLAG_AAC_LATM) ? "latm" : "adts",
1109                                 NULL, NULL);
1110             if (!ts_st->amux->oformat) {
1111                 return AVERROR(EINVAL);
1112             }
1113             if (!(ast = avformat_new_stream(ts_st->amux, NULL))) {
1114                 return AVERROR(ENOMEM);
1115             }
1116             ret = avcodec_parameters_copy(ast->codecpar, st->codecpar);
1117             if (ret != 0)
1118                 return ret;
1119             ast->time_base = st->time_base;
1120             ret = avformat_write_header(ts_st->amux, NULL);
1121             if (ret < 0)
1122                 return ret;
1123         }
1124         if (st->codecpar->codec_id == AV_CODEC_ID_OPUS) {
1125             ts_st->opus_pending_trim_start = st->codecpar->initial_padding * 48000 / st->codecpar->sample_rate;
1126         }
1127     }
1128
1129     if (ts->copyts < 1)
1130         ts->first_pcr = av_rescale(s->max_delay, PCR_TIME_BASE, AV_TIME_BASE);
1131
1132     select_pcr_streams(s);
1133
1134     ts->last_pat_ts = AV_NOPTS_VALUE;
1135     ts->last_sdt_ts = AV_NOPTS_VALUE;
1136     ts->pat_period = av_rescale(ts->pat_period_us, PCR_TIME_BASE, AV_TIME_BASE);
1137     ts->sdt_period = av_rescale(ts->sdt_period_us, PCR_TIME_BASE, AV_TIME_BASE);
1138
1139     if (ts->mux_rate == 1)
1140         av_log(s, AV_LOG_VERBOSE, "muxrate VBR, ");
1141     else
1142         av_log(s, AV_LOG_VERBOSE, "muxrate %d, ", ts->mux_rate);
1143     av_log(s, AV_LOG_VERBOSE,
1144            "sdt every %"PRId64" ms, pat/pmt every %"PRId64" ms\n",
1145            av_rescale(ts->sdt_period, 1000, PCR_TIME_BASE),
1146            av_rescale(ts->pat_period, 1000, PCR_TIME_BASE));
1147
1148     return 0;
1149 }
1150
1151 /* send SDT, PAT and PMT tables regularly */
1152 static void retransmit_si_info(AVFormatContext *s, int force_pat, int force_sdt, int64_t pcr)
1153 {
1154     MpegTSWrite *ts = s->priv_data;
1155     int i;
1156
1157     if ((pcr != AV_NOPTS_VALUE && ts->last_sdt_ts == AV_NOPTS_VALUE) ||
1158         (pcr != AV_NOPTS_VALUE && pcr - ts->last_sdt_ts >= ts->sdt_period) ||
1159         force_sdt
1160     ) {
1161         if (pcr != AV_NOPTS_VALUE)
1162             ts->last_sdt_ts = FFMAX(pcr, ts->last_sdt_ts);
1163         mpegts_write_sdt(s);
1164     }
1165     if ((pcr != AV_NOPTS_VALUE && ts->last_pat_ts == AV_NOPTS_VALUE) ||
1166         (pcr != AV_NOPTS_VALUE && pcr - ts->last_pat_ts >= ts->pat_period) ||
1167         force_pat) {
1168         if (pcr != AV_NOPTS_VALUE)
1169             ts->last_pat_ts = FFMAX(pcr, ts->last_pat_ts);
1170         mpegts_write_pat(s);
1171         for (i = 0; i < ts->nb_services; i++)
1172             mpegts_write_pmt(s, ts->services[i]);
1173     }
1174 }
1175
1176 static int write_pcr_bits(uint8_t *buf, int64_t pcr)
1177 {
1178     int64_t pcr_low = pcr % 300, pcr_high = pcr / 300;
1179
1180     *buf++ = pcr_high >> 25;
1181     *buf++ = pcr_high >> 17;
1182     *buf++ = pcr_high >>  9;
1183     *buf++ = pcr_high >>  1;
1184     *buf++ = pcr_high <<  7 | pcr_low >> 8 | 0x7e;
1185     *buf++ = pcr_low;
1186
1187     return 6;
1188 }
1189
1190 /* Write a single null transport stream packet */
1191 static void mpegts_insert_null_packet(AVFormatContext *s)
1192 {
1193     uint8_t *q;
1194     uint8_t buf[TS_PACKET_SIZE];
1195
1196     q    = buf;
1197     *q++ = 0x47;
1198     *q++ = 0x00 | 0x1f;
1199     *q++ = 0xff;
1200     *q++ = 0x10;
1201     memset(q, 0x0FF, TS_PACKET_SIZE - (q - buf));
1202     write_packet(s, buf);
1203 }
1204
1205 /* Write a single transport stream packet with a PCR and no payload */
1206 static void mpegts_insert_pcr_only(AVFormatContext *s, AVStream *st)
1207 {
1208     MpegTSWrite *ts = s->priv_data;
1209     MpegTSWriteStream *ts_st = st->priv_data;
1210     uint8_t *q;
1211     uint8_t buf[TS_PACKET_SIZE];
1212
1213     q    = buf;
1214     *q++ = 0x47;
1215     *q++ = ts_st->pid >> 8;
1216     *q++ = ts_st->pid;
1217     *q++ = 0x20 | ts_st->cc;   /* Adaptation only */
1218     /* Continuity Count field does not increment (see 13818-1 section 2.4.3.3) */
1219     *q++ = TS_PACKET_SIZE - 5; /* Adaptation Field Length */
1220     *q++ = 0x10;               /* Adaptation flags: PCR present */
1221     if (ts_st->discontinuity) {
1222         q[-1] |= 0x80;
1223         ts_st->discontinuity = 0;
1224     }
1225
1226     /* PCR coded into 6 bytes */
1227     q += write_pcr_bits(q, get_pcr(ts, s->pb));
1228
1229     /* stuffing bytes */
1230     memset(q, 0xFF, TS_PACKET_SIZE - (q - buf));
1231     write_packet(s, buf);
1232 }
1233
1234 static void write_pts(uint8_t *q, int fourbits, int64_t pts)
1235 {
1236     int val;
1237
1238     val  = fourbits << 4 | (((pts >> 30) & 0x07) << 1) | 1;
1239     *q++ = val;
1240     val  = (((pts >> 15) & 0x7fff) << 1) | 1;
1241     *q++ = val >> 8;
1242     *q++ = val;
1243     val  = (((pts) & 0x7fff) << 1) | 1;
1244     *q++ = val >> 8;
1245     *q++ = val;
1246 }
1247
1248 /* Set an adaptation field flag in an MPEG-TS packet*/
1249 static void set_af_flag(uint8_t *pkt, int flag)
1250 {
1251     // expect at least one flag to set
1252     av_assert0(flag);
1253
1254     if ((pkt[3] & 0x20) == 0) {
1255         // no AF yet, set adaptation field flag
1256         pkt[3] |= 0x20;
1257         // 1 byte length, no flags
1258         pkt[4] = 1;
1259         pkt[5] = 0;
1260     }
1261     pkt[5] |= flag;
1262 }
1263
1264 /* Extend the adaptation field by size bytes */
1265 static void extend_af(uint8_t *pkt, int size)
1266 {
1267     // expect already existing adaptation field
1268     av_assert0(pkt[3] & 0x20);
1269     pkt[4] += size;
1270 }
1271
1272 /* Get a pointer to MPEG-TS payload (right after TS packet header) */
1273 static uint8_t *get_ts_payload_start(uint8_t *pkt)
1274 {
1275     if (pkt[3] & 0x20)
1276         return pkt + 5 + pkt[4];
1277     else
1278         return pkt + 4;
1279 }
1280
1281 /* Add a PES header to the front of the payload, and segment into an integer
1282  * number of TS packets. The final TS packet is padded using an oversized
1283  * adaptation header to exactly fill the last TS packet.
1284  * NOTE: 'payload' contains a complete PES payload. */
1285 static void mpegts_write_pes(AVFormatContext *s, AVStream *st,
1286                              const uint8_t *payload, int payload_size,
1287                              int64_t pts, int64_t dts, int key, int stream_id)
1288 {
1289     MpegTSWriteStream *ts_st = st->priv_data;
1290     MpegTSWrite *ts = s->priv_data;
1291     uint8_t buf[TS_PACKET_SIZE];
1292     uint8_t *q;
1293     int val, is_start, len, header_len, write_pcr, is_dvb_subtitle, is_dvb_teletext, flags;
1294     int afc_len, stuffing_len;
1295     int64_t delay = av_rescale(s->max_delay, 90000, AV_TIME_BASE);
1296     int force_pat = st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO && key && !ts_st->prev_payload_key;
1297     int force_sdt = 0;
1298
1299     av_assert0(ts_st->payload != buf || st->codecpar->codec_type != AVMEDIA_TYPE_VIDEO);
1300     if (ts->flags & MPEGTS_FLAG_PAT_PMT_AT_FRAMES && st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO) {
1301         force_pat = 1;
1302     }
1303
1304     if (ts->flags & MPEGTS_FLAG_REEMIT_PAT_PMT) {
1305         force_pat = 1;
1306         force_sdt = 1;
1307         ts->flags &= ~MPEGTS_FLAG_REEMIT_PAT_PMT;
1308     }
1309
1310     is_start = 1;
1311     while (payload_size > 0) {
1312         int64_t pcr = AV_NOPTS_VALUE;
1313         if (ts->mux_rate > 1)
1314             pcr = get_pcr(ts, s->pb);
1315         else if (dts != AV_NOPTS_VALUE)
1316             pcr = (dts - delay) * 300;
1317
1318         retransmit_si_info(s, force_pat, force_sdt, pcr);
1319         force_pat = 0;
1320         force_sdt = 0;
1321
1322         write_pcr = 0;
1323         if (ts->mux_rate > 1) {
1324             /* Send PCR packets for all PCR streams if needed */
1325             pcr = get_pcr(ts, s->pb);
1326             if (pcr >= ts->next_pcr) {
1327                 int64_t next_pcr = INT64_MAX;
1328                 for (int i = 0; i < s->nb_streams; i++) {
1329                     /* Make the current stream the last, because for that we
1330                      * can insert the pcr into the payload later */
1331                     int st2_index = i < st->index ? i : (i + 1 == s->nb_streams ? st->index : i + 1);
1332                     AVStream *st2 = s->streams[st2_index];
1333                     MpegTSWriteStream *ts_st2 = st2->priv_data;
1334                     if (ts_st2->pcr_period) {
1335                         if (pcr - ts_st2->last_pcr >= ts_st2->pcr_period) {
1336                             ts_st2->last_pcr = FFMAX(pcr - ts_st2->pcr_period, ts_st2->last_pcr + ts_st2->pcr_period);
1337                             if (st2 != st) {
1338                                 mpegts_insert_pcr_only(s, st2);
1339                                 pcr = get_pcr(ts, s->pb);
1340                             } else {
1341                                 write_pcr = 1;
1342                             }
1343                         }
1344                         next_pcr = FFMIN(next_pcr, ts_st2->last_pcr + ts_st2->pcr_period);
1345                     }
1346                 }
1347                 ts->next_pcr = next_pcr;
1348             }
1349             if (dts != AV_NOPTS_VALUE && (dts - pcr / 300) > delay) {
1350                 /* pcr insert gets priority over null packet insert */
1351                 if (write_pcr)
1352                     mpegts_insert_pcr_only(s, st);
1353                 else
1354                     mpegts_insert_null_packet(s);
1355                 /* recalculate write_pcr and possibly retransmit si_info */
1356                 continue;
1357             }
1358         } else if (ts_st->pcr_period && pcr != AV_NOPTS_VALUE) {
1359             if (pcr - ts_st->last_pcr >= ts_st->pcr_period && is_start) {
1360                 ts_st->last_pcr = FFMAX(pcr - ts_st->pcr_period, ts_st->last_pcr + ts_st->pcr_period);
1361                 write_pcr = 1;
1362             }
1363         }
1364
1365         /* prepare packet header */
1366         q    = buf;
1367         *q++ = 0x47;
1368         val  = ts_st->pid >> 8;
1369         if (ts->m2ts_mode && st->codecpar->codec_id == AV_CODEC_ID_AC3)
1370             val |= 0x20;
1371         if (is_start)
1372             val |= 0x40;
1373         *q++      = val;
1374         *q++      = ts_st->pid;
1375         ts_st->cc = ts_st->cc + 1 & 0xf;
1376         *q++      = 0x10 | ts_st->cc; // payload indicator + CC
1377         if (ts_st->discontinuity) {
1378             set_af_flag(buf, 0x80);
1379             q = get_ts_payload_start(buf);
1380             ts_st->discontinuity = 0;
1381         }
1382         if (key && is_start && pts != AV_NOPTS_VALUE) {
1383             // set Random Access for key frames
1384             if (ts_st->pcr_period)
1385                 write_pcr = 1;
1386             set_af_flag(buf, 0x40);
1387             q = get_ts_payload_start(buf);
1388         }
1389         if (write_pcr) {
1390             set_af_flag(buf, 0x10);
1391             q = get_ts_payload_start(buf);
1392             // add 11, pcr references the last byte of program clock reference base
1393             if (dts != AV_NOPTS_VALUE && dts < pcr / 300)
1394                 av_log(s, AV_LOG_WARNING, "dts < pcr, TS is invalid\n");
1395             extend_af(buf, write_pcr_bits(q, pcr));
1396             q = get_ts_payload_start(buf);
1397         }
1398         if (is_start) {
1399             int pes_extension = 0;
1400             int pes_header_stuffing_bytes = 0;
1401             /* write PES header */
1402             *q++ = 0x00;
1403             *q++ = 0x00;
1404             *q++ = 0x01;
1405             is_dvb_subtitle = 0;
1406             is_dvb_teletext = 0;
1407             if (st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO) {
1408                 if (st->codecpar->codec_id == AV_CODEC_ID_DIRAC)
1409                     *q++ = STREAM_ID_EXTENDED_STREAM_ID;
1410                 else
1411                     *q++ = STREAM_ID_VIDEO_STREAM_0;
1412             } else if (st->codecpar->codec_type == AVMEDIA_TYPE_AUDIO &&
1413                        (st->codecpar->codec_id == AV_CODEC_ID_MP2 ||
1414                         st->codecpar->codec_id == AV_CODEC_ID_MP3 ||
1415                         st->codecpar->codec_id == AV_CODEC_ID_AAC)) {
1416                 *q++ = STREAM_ID_AUDIO_STREAM_0;
1417             } else if (st->codecpar->codec_type == AVMEDIA_TYPE_AUDIO &&
1418                         st->codecpar->codec_id == AV_CODEC_ID_AC3 &&
1419                         ts->m2ts_mode) {
1420                 *q++ = STREAM_ID_EXTENDED_STREAM_ID;
1421             } else if (st->codecpar->codec_type == AVMEDIA_TYPE_DATA &&
1422                        st->codecpar->codec_id == AV_CODEC_ID_TIMED_ID3) {
1423                 *q++ = STREAM_ID_PRIVATE_STREAM_1;
1424             } else if (st->codecpar->codec_type == AVMEDIA_TYPE_DATA) {
1425                 *q++ = stream_id != -1 ? stream_id : STREAM_ID_METADATA_STREAM;
1426
1427                 if (stream_id == STREAM_ID_PRIVATE_STREAM_1) /* asynchronous KLV */
1428                     pts = dts = AV_NOPTS_VALUE;
1429             } else {
1430                 *q++ = STREAM_ID_PRIVATE_STREAM_1;
1431                 if (st->codecpar->codec_type == AVMEDIA_TYPE_SUBTITLE) {
1432                     if (st->codecpar->codec_id == AV_CODEC_ID_DVB_SUBTITLE) {
1433                         is_dvb_subtitle = 1;
1434                     } else if (st->codecpar->codec_id == AV_CODEC_ID_DVB_TELETEXT) {
1435                         is_dvb_teletext = 1;
1436                     }
1437                 }
1438             }
1439             header_len = 0;
1440             flags      = 0;
1441             if (pts != AV_NOPTS_VALUE) {
1442                 header_len += 5;
1443                 flags      |= 0x80;
1444             }
1445             if (dts != AV_NOPTS_VALUE && pts != AV_NOPTS_VALUE && dts != pts) {
1446                 header_len += 5;
1447                 flags      |= 0x40;
1448             }
1449             if (st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO &&
1450                 st->codecpar->codec_id == AV_CODEC_ID_DIRAC) {
1451                 /* set PES_extension_flag */
1452                 pes_extension = 1;
1453                 flags        |= 0x01;
1454
1455                 /* One byte for PES2 extension flag +
1456                  * one byte for extension length +
1457                  * one byte for extension id */
1458                 header_len += 3;
1459             }
1460             /* for Blu-ray AC3 Audio the PES Extension flag should be as follow
1461              * otherwise it will not play sound on blu-ray
1462              */
1463             if (ts->m2ts_mode &&
1464                 st->codecpar->codec_type == AVMEDIA_TYPE_AUDIO &&
1465                 st->codecpar->codec_id == AV_CODEC_ID_AC3) {
1466                 /* set PES_extension_flag */
1467                 pes_extension = 1;
1468                 flags |= 0x01;
1469                 header_len += 3;
1470             }
1471             if (is_dvb_teletext) {
1472                 pes_header_stuffing_bytes = 0x24 - header_len;
1473                 header_len = 0x24;
1474             }
1475             len = payload_size + header_len + 3;
1476             /* 3 extra bytes should be added to DVB subtitle payload: 0x20 0x00 at the beginning and trailing 0xff */
1477             if (is_dvb_subtitle) {
1478                 len += 3;
1479                 payload_size++;
1480             }
1481             if (len > 0xffff)
1482                 len = 0;
1483             if (ts->omit_video_pes_length && st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO) {
1484                 len = 0;
1485             }
1486             *q++ = len >> 8;
1487             *q++ = len;
1488             val  = 0x80;
1489             /* data alignment indicator is required for subtitle and data streams */
1490             if (st->codecpar->codec_type == AVMEDIA_TYPE_SUBTITLE || st->codecpar->codec_type == AVMEDIA_TYPE_DATA)
1491                 val |= 0x04;
1492             *q++ = val;
1493             *q++ = flags;
1494             *q++ = header_len;
1495             if (pts != AV_NOPTS_VALUE) {
1496                 write_pts(q, flags >> 6, pts);
1497                 q += 5;
1498             }
1499             if (dts != AV_NOPTS_VALUE && pts != AV_NOPTS_VALUE && dts != pts) {
1500                 write_pts(q, 1, dts);
1501                 q += 5;
1502             }
1503             if (pes_extension && st->codecpar->codec_id == AV_CODEC_ID_DIRAC) {
1504                 flags = 0x01;  /* set PES_extension_flag_2 */
1505                 *q++  = flags;
1506                 *q++  = 0x80 | 0x01; /* marker bit + extension length */
1507                 /* Set the stream ID extension flag bit to 0 and
1508                  * write the extended stream ID. */
1509                 *q++ = 0x00 | 0x60;
1510             }
1511             /* For Blu-ray AC3 Audio Setting extended flags */
1512             if (ts->m2ts_mode &&
1513                 pes_extension &&
1514                 st->codecpar->codec_id == AV_CODEC_ID_AC3) {
1515                 flags = 0x01; /* set PES_extension_flag_2 */
1516                 *q++ = flags;
1517                 *q++ = 0x80 | 0x01; /* marker bit + extension length */
1518                 *q++ = 0x00 | 0x71; /* for AC3 Audio (specifically on blue-rays) */
1519             }
1520
1521
1522             if (is_dvb_subtitle) {
1523                 /* First two fields of DVB subtitles PES data:
1524                  * data_identifier: for DVB subtitle streams shall be coded with the value 0x20
1525                  * subtitle_stream_id: for DVB subtitle stream shall be identified by the value 0x00 */
1526                 *q++ = 0x20;
1527                 *q++ = 0x00;
1528             }
1529             if (is_dvb_teletext) {
1530                 memset(q, 0xff, pes_header_stuffing_bytes);
1531                 q += pes_header_stuffing_bytes;
1532             }
1533             is_start = 0;
1534         }
1535         /* header size */
1536         header_len = q - buf;
1537         /* data len */
1538         len = TS_PACKET_SIZE - header_len;
1539         if (len > payload_size)
1540             len = payload_size;
1541         stuffing_len = TS_PACKET_SIZE - header_len - len;
1542         if (stuffing_len > 0) {
1543             /* add stuffing with AFC */
1544             if (buf[3] & 0x20) {
1545                 /* stuffing already present: increase its size */
1546                 afc_len = buf[4] + 1;
1547                 memmove(buf + 4 + afc_len + stuffing_len,
1548                         buf + 4 + afc_len,
1549                         header_len - (4 + afc_len));
1550                 buf[4] += stuffing_len;
1551                 memset(buf + 4 + afc_len, 0xff, stuffing_len);
1552             } else {
1553                 /* add stuffing */
1554                 memmove(buf + 4 + stuffing_len, buf + 4, header_len - 4);
1555                 buf[3] |= 0x20;
1556                 buf[4]  = stuffing_len - 1;
1557                 if (stuffing_len >= 2) {
1558                     buf[5] = 0x00;
1559                     memset(buf + 6, 0xff, stuffing_len - 2);
1560                 }
1561             }
1562         }
1563
1564         if (is_dvb_subtitle && payload_size == len) {
1565             memcpy(buf + TS_PACKET_SIZE - len, payload, len - 1);
1566             buf[TS_PACKET_SIZE - 1] = 0xff; /* end_of_PES_data_field_marker: an 8-bit field with fixed contents 0xff for DVB subtitle */
1567         } else {
1568             memcpy(buf + TS_PACKET_SIZE - len, payload, len);
1569         }
1570
1571         payload      += len;
1572         payload_size -= len;
1573         write_packet(s, buf);
1574     }
1575     ts_st->prev_payload_key = key;
1576 }
1577
1578 int ff_check_h264_startcode(AVFormatContext *s, const AVStream *st, const AVPacket *pkt)
1579 {
1580     if (pkt->size < 5 || AV_RB32(pkt->data) != 0x0000001 && AV_RB24(pkt->data) != 0x000001) {
1581         if (!st->nb_frames) {
1582             av_log(s, AV_LOG_ERROR, "H.264 bitstream malformed, "
1583                    "no startcode found, use the video bitstream filter 'h264_mp4toannexb' to fix it "
1584                    "('-bsf:v h264_mp4toannexb' option with ffmpeg)\n");
1585             return AVERROR_INVALIDDATA;
1586         }
1587         av_log(s, AV_LOG_WARNING, "H.264 bitstream error, startcode missing, size %d", pkt->size);
1588         if (pkt->size)
1589             av_log(s, AV_LOG_WARNING, " data %08"PRIX32, AV_RB32(pkt->data));
1590         av_log(s, AV_LOG_WARNING, "\n");
1591     }
1592     return 0;
1593 }
1594
1595 static int check_hevc_startcode(AVFormatContext *s, const AVStream *st, const AVPacket *pkt)
1596 {
1597     if (pkt->size < 5 || AV_RB32(pkt->data) != 0x0000001 && AV_RB24(pkt->data) != 0x000001) {
1598         if (!st->nb_frames) {
1599             av_log(s, AV_LOG_ERROR, "HEVC bitstream malformed, no startcode found\n");
1600             return AVERROR_PATCHWELCOME;
1601         }
1602         av_log(s, AV_LOG_WARNING, "HEVC bitstream error, startcode missing, size %d", pkt->size);
1603         if (pkt->size)
1604             av_log(s, AV_LOG_WARNING, " data %08"PRIX32, AV_RB32(pkt->data));
1605         av_log(s, AV_LOG_WARNING, "\n");
1606     }
1607     return 0;
1608 }
1609
1610 /* Based on GStreamer's gst-plugins-base/ext/ogg/gstoggstream.c
1611  * Released under the LGPL v2.1+, written by
1612  * Vincent Penquerc'h <vincent.penquerch@collabora.co.uk>
1613  */
1614 static int opus_get_packet_samples(AVFormatContext *s, AVPacket *pkt)
1615 {
1616     static const int durations[32] = {
1617       480, 960, 1920, 2880,       /* Silk NB */
1618       480, 960, 1920, 2880,       /* Silk MB */
1619       480, 960, 1920, 2880,       /* Silk WB */
1620       480, 960,                   /* Hybrid SWB */
1621       480, 960,                   /* Hybrid FB */
1622       120, 240, 480, 960,         /* CELT NB */
1623       120, 240, 480, 960,         /* CELT NB */
1624       120, 240, 480, 960,         /* CELT NB */
1625       120, 240, 480, 960,         /* CELT NB */
1626     };
1627     int toc, frame_duration, nframes, duration;
1628
1629     if (pkt->size < 1)
1630         return 0;
1631
1632     toc = pkt->data[0];
1633
1634     frame_duration = durations[toc >> 3];
1635     switch (toc & 3) {
1636     case 0:
1637         nframes = 1;
1638         break;
1639     case 1:
1640         nframes = 2;
1641         break;
1642     case 2:
1643         nframes = 2;
1644         break;
1645     case 3:
1646         if (pkt->size < 2)
1647             return 0;
1648         nframes = pkt->data[1] & 63;
1649         break;
1650     }
1651
1652     duration = nframes * frame_duration;
1653     if (duration > 5760) {
1654         av_log(s, AV_LOG_WARNING,
1655                "Opus packet duration > 120 ms, invalid");
1656         return 0;
1657     }
1658
1659     return duration;
1660 }
1661
1662 static int mpegts_write_packet_internal(AVFormatContext *s, AVPacket *pkt)
1663 {
1664     AVStream *st = s->streams[pkt->stream_index];
1665     int size = pkt->size;
1666     uint8_t *buf = pkt->data;
1667     uint8_t *data = NULL;
1668     MpegTSWrite *ts = s->priv_data;
1669     MpegTSWriteStream *ts_st = st->priv_data;
1670     const int64_t delay = av_rescale(s->max_delay, 90000, AV_TIME_BASE) * 2;
1671     const int64_t max_audio_delay = av_rescale(s->max_delay, 90000, AV_TIME_BASE) / 2;
1672     int64_t dts = pkt->dts, pts = pkt->pts;
1673     int opus_samples = 0;
1674     int side_data_size;
1675     uint8_t *side_data = NULL;
1676     int stream_id = -1;
1677
1678     side_data = av_packet_get_side_data(pkt,
1679                                         AV_PKT_DATA_MPEGTS_STREAM_ID,
1680                                         &side_data_size);
1681     if (side_data)
1682         stream_id = side_data[0];
1683
1684     if (ts->copyts < 1) {
1685         if (pts != AV_NOPTS_VALUE)
1686             pts += delay;
1687         if (dts != AV_NOPTS_VALUE)
1688             dts += delay;
1689     }
1690
1691     if (ts_st->first_pts_check && pts == AV_NOPTS_VALUE) {
1692         av_log(s, AV_LOG_ERROR, "first pts value must be set\n");
1693         return AVERROR_INVALIDDATA;
1694     }
1695     ts_st->first_pts_check = 0;
1696
1697     if (st->codecpar->codec_id == AV_CODEC_ID_H264) {
1698         const uint8_t *p = buf, *buf_end = p + size;
1699         uint32_t state = -1;
1700         int extradd = (pkt->flags & AV_PKT_FLAG_KEY) ? st->codecpar->extradata_size : 0;
1701         int ret = ff_check_h264_startcode(s, st, pkt);
1702         if (ret < 0)
1703             return ret;
1704
1705         if (extradd && AV_RB24(st->codecpar->extradata) > 1)
1706             extradd = 0;
1707
1708         do {
1709             p = avpriv_find_start_code(p, buf_end, &state);
1710             av_log(s, AV_LOG_TRACE, "nal %"PRId32"\n", state & 0x1f);
1711             if ((state & 0x1f) == 7)
1712                 extradd = 0;
1713         } while (p < buf_end && (state & 0x1f) != 9 &&
1714                  (state & 0x1f) != 5 && (state & 0x1f) != 1);
1715
1716         if ((state & 0x1f) != 5)
1717             extradd = 0;
1718         if ((state & 0x1f) != 9) { // AUD NAL
1719             data = av_malloc(pkt->size + 6 + extradd);
1720             if (!data)
1721                 return AVERROR(ENOMEM);
1722             memcpy(data + 6, st->codecpar->extradata, extradd);
1723             memcpy(data + 6 + extradd, pkt->data, pkt->size);
1724             AV_WB32(data, 0x00000001);
1725             data[4] = 0x09;
1726             data[5] = 0xf0; // any slice type (0xe) + rbsp stop one bit
1727             buf     = data;
1728             size    = pkt->size + 6 + extradd;
1729         }
1730     } else if (st->codecpar->codec_id == AV_CODEC_ID_AAC) {
1731         if (pkt->size < 2) {
1732             av_log(s, AV_LOG_ERROR, "AAC packet too short\n");
1733             return AVERROR_INVALIDDATA;
1734         }
1735         if ((AV_RB16(pkt->data) & 0xfff0) != 0xfff0) {
1736             int ret;
1737             AVPacket pkt2;
1738
1739             if (!ts_st->amux) {
1740                 av_log(s, AV_LOG_ERROR, "AAC bitstream not in ADTS format "
1741                                         "and extradata missing\n");
1742             } else {
1743             av_init_packet(&pkt2);
1744             pkt2.data = pkt->data;
1745             pkt2.size = pkt->size;
1746             av_assert0(pkt->dts != AV_NOPTS_VALUE);
1747             pkt2.dts = av_rescale_q(pkt->dts, st->time_base, ts_st->amux->streams[0]->time_base);
1748
1749             ret = avio_open_dyn_buf(&ts_st->amux->pb);
1750             if (ret < 0)
1751                 return ret;
1752
1753             ret = av_write_frame(ts_st->amux, &pkt2);
1754             if (ret < 0) {
1755                 ffio_free_dyn_buf(&ts_st->amux->pb);
1756                 return ret;
1757             }
1758             size            = avio_close_dyn_buf(ts_st->amux->pb, &data);
1759             ts_st->amux->pb = NULL;
1760             buf             = data;
1761             }
1762         }
1763     } else if (st->codecpar->codec_id == AV_CODEC_ID_HEVC) {
1764         const uint8_t *p = buf, *buf_end = p + size;
1765         uint32_t state = -1;
1766         int extradd = (pkt->flags & AV_PKT_FLAG_KEY) ? st->codecpar->extradata_size : 0;
1767         int ret = check_hevc_startcode(s, st, pkt);
1768         if (ret < 0)
1769             return ret;
1770
1771         if (extradd && AV_RB24(st->codecpar->extradata) > 1)
1772             extradd = 0;
1773
1774         do {
1775             p = avpriv_find_start_code(p, buf_end, &state);
1776             av_log(s, AV_LOG_TRACE, "nal %"PRId32"\n", (state & 0x7e)>>1);
1777             if ((state & 0x7e) == 2*32)
1778                 extradd = 0;
1779         } while (p < buf_end && (state & 0x7e) != 2*35 &&
1780                  (state & 0x7e) >= 2*32);
1781
1782         if ((state & 0x7e) < 2*16 || (state & 0x7e) >= 2*24)
1783             extradd = 0;
1784         if ((state & 0x7e) != 2*35) { // AUD NAL
1785             data = av_malloc(pkt->size + 7 + extradd);
1786             if (!data)
1787                 return AVERROR(ENOMEM);
1788             memcpy(data + 7, st->codecpar->extradata, extradd);
1789             memcpy(data + 7 + extradd, pkt->data, pkt->size);
1790             AV_WB32(data, 0x00000001);
1791             data[4] = 2*35;
1792             data[5] = 1;
1793             data[6] = 0x50; // any slice type (0x4) + rbsp stop one bit
1794             buf     = data;
1795             size    = pkt->size + 7 + extradd;
1796         }
1797     } else if (st->codecpar->codec_id == AV_CODEC_ID_OPUS) {
1798         if (pkt->size < 2) {
1799             av_log(s, AV_LOG_ERROR, "Opus packet too short\n");
1800             return AVERROR_INVALIDDATA;
1801         }
1802
1803         /* Add Opus control header */
1804         if ((AV_RB16(pkt->data) >> 5) != 0x3ff) {
1805             uint8_t *side_data;
1806             int side_data_size;
1807             int i, n;
1808             int ctrl_header_size;
1809             int trim_start = 0, trim_end = 0;
1810
1811             opus_samples = opus_get_packet_samples(s, pkt);
1812
1813             side_data = av_packet_get_side_data(pkt,
1814                                                 AV_PKT_DATA_SKIP_SAMPLES,
1815                                                 &side_data_size);
1816
1817             if (side_data && side_data_size >= 10) {
1818                 trim_end = AV_RL32(side_data + 4) * 48000 / st->codecpar->sample_rate;
1819             }
1820
1821             ctrl_header_size = pkt->size + 2 + pkt->size / 255 + 1;
1822             if (ts_st->opus_pending_trim_start)
1823               ctrl_header_size += 2;
1824             if (trim_end)
1825               ctrl_header_size += 2;
1826
1827             data = av_malloc(ctrl_header_size);
1828             if (!data)
1829                 return AVERROR(ENOMEM);
1830
1831             data[0] = 0x7f;
1832             data[1] = 0xe0;
1833             if (ts_st->opus_pending_trim_start)
1834                 data[1] |= 0x10;
1835             if (trim_end)
1836                 data[1] |= 0x08;
1837
1838             n = pkt->size;
1839             i = 2;
1840             do {
1841                 data[i] = FFMIN(n, 255);
1842                 n -= 255;
1843                 i++;
1844             } while (n >= 0);
1845
1846             av_assert0(2 + pkt->size / 255 + 1 == i);
1847
1848             if (ts_st->opus_pending_trim_start) {
1849                 trim_start = FFMIN(ts_st->opus_pending_trim_start, opus_samples);
1850                 AV_WB16(data + i, trim_start);
1851                 i += 2;
1852                 ts_st->opus_pending_trim_start -= trim_start;
1853             }
1854             if (trim_end) {
1855                 trim_end = FFMIN(trim_end, opus_samples - trim_start);
1856                 AV_WB16(data + i, trim_end);
1857                 i += 2;
1858             }
1859
1860             memcpy(data + i, pkt->data, pkt->size);
1861             buf     = data;
1862             size    = ctrl_header_size;
1863         } else {
1864             /* TODO: Can we get TS formatted data here? If so we will
1865              * need to count the samples of that too! */
1866             av_log(s, AV_LOG_WARNING, "Got MPEG-TS formatted Opus data, unhandled");
1867         }
1868     } else if (st->codecpar->codec_id == AV_CODEC_ID_AC3 && !ts_st->dvb_ac3_desc) {
1869         AC3HeaderInfo *hdr = NULL;
1870
1871         if (avpriv_ac3_parse_header(&hdr, pkt->data, pkt->size) >= 0) {
1872             uint8_t number_of_channels_flag;
1873             uint8_t service_type_flag;
1874             uint8_t full_service_flag = 1;
1875             DVBAC3Descriptor *dvb_ac3_desc;
1876
1877             dvb_ac3_desc = av_mallocz(sizeof(*dvb_ac3_desc));
1878             if (!dvb_ac3_desc) {
1879                 av_free(hdr);
1880                 return AVERROR(ENOMEM);
1881             }
1882
1883             service_type_flag = hdr->bitstream_mode;
1884             switch (hdr->channel_mode) {
1885                 case AC3_CHMODE_DUALMONO:
1886                     number_of_channels_flag = 1;
1887                     break;
1888                 case AC3_CHMODE_MONO:
1889                     number_of_channels_flag = 0;
1890                     break;
1891                 case AC3_CHMODE_STEREO:
1892                     if (hdr->dolby_surround_mode == AC3_DSURMOD_ON)
1893                         number_of_channels_flag = 3;
1894                     else
1895                         number_of_channels_flag = 2;
1896                     break;
1897                 case AC3_CHMODE_3F:
1898                 case AC3_CHMODE_2F1R:
1899                 case AC3_CHMODE_3F1R:
1900                 case AC3_CHMODE_2F2R:
1901                 case AC3_CHMODE_3F2R:
1902                     number_of_channels_flag = 4;
1903                     break;
1904                 default: /* reserved */
1905                     number_of_channels_flag = 7;
1906                     break;
1907             }
1908
1909             if (service_type_flag  == 1 || service_type_flag == 4 ||
1910                 (service_type_flag == 7 && !number_of_channels_flag))
1911                 full_service_flag = 0;
1912
1913             dvb_ac3_desc->component_type_flag = 1;
1914             dvb_ac3_desc->component_type = (full_service_flag << 6)              |
1915                                            ((service_type_flag      & 0x7) << 3) |
1916                                            (number_of_channels_flag & 0x7);
1917             dvb_ac3_desc->bsid_flag   = 1;
1918             dvb_ac3_desc->bsid        = hdr->bitstream_id;
1919             dvb_ac3_desc->mainid_flag = 0;
1920             dvb_ac3_desc->asvc_flag   = 0;
1921
1922             ts_st->dvb_ac3_desc = dvb_ac3_desc;
1923         }
1924         av_free(hdr);
1925     }
1926
1927     if (ts_st->payload_size && (ts_st->payload_size + size > ts->pes_payload_size ||
1928         (dts != AV_NOPTS_VALUE && ts_st->payload_dts != AV_NOPTS_VALUE &&
1929          dts - ts_st->payload_dts >= max_audio_delay) ||
1930         ts_st->opus_queued_samples + opus_samples >= 5760 /* 120ms */)) {
1931         mpegts_write_pes(s, st, ts_st->payload, ts_st->payload_size,
1932                          ts_st->payload_pts, ts_st->payload_dts,
1933                          ts_st->payload_flags & AV_PKT_FLAG_KEY, stream_id);
1934         ts_st->payload_size = 0;
1935         ts_st->opus_queued_samples = 0;
1936     }
1937
1938     if (st->codecpar->codec_type != AVMEDIA_TYPE_AUDIO || size > ts->pes_payload_size) {
1939         av_assert0(!ts_st->payload_size);
1940         // for video and subtitle, write a single pes packet
1941         mpegts_write_pes(s, st, buf, size, pts, dts,
1942                          pkt->flags & AV_PKT_FLAG_KEY, stream_id);
1943         ts_st->opus_queued_samples = 0;
1944         av_free(data);
1945         return 0;
1946     }
1947
1948     if (!ts_st->payload_size) {
1949         ts_st->payload_pts   = pts;
1950         ts_st->payload_dts   = dts;
1951         ts_st->payload_flags = pkt->flags;
1952     }
1953
1954     memcpy(ts_st->payload + ts_st->payload_size, buf, size);
1955     ts_st->payload_size += size;
1956     ts_st->opus_queued_samples += opus_samples;
1957
1958     av_free(data);
1959
1960     return 0;
1961 }
1962
1963 static void mpegts_write_flush(AVFormatContext *s)
1964 {
1965     MpegTSWrite *ts = s->priv_data;
1966     int i;
1967
1968     /* flush current packets */
1969     for (i = 0; i < s->nb_streams; i++) {
1970         AVStream *st = s->streams[i];
1971         MpegTSWriteStream *ts_st = st->priv_data;
1972         if (ts_st->payload_size > 0) {
1973             mpegts_write_pes(s, st, ts_st->payload, ts_st->payload_size,
1974                              ts_st->payload_pts, ts_st->payload_dts,
1975                              ts_st->payload_flags & AV_PKT_FLAG_KEY, -1);
1976             ts_st->payload_size = 0;
1977             ts_st->opus_queued_samples = 0;
1978         }
1979     }
1980
1981     if (ts->m2ts_mode) {
1982         int packets = (avio_tell(s->pb) / (TS_PACKET_SIZE + 4)) % 32;
1983         while (packets++ < 32)
1984             mpegts_insert_null_packet(s);
1985     }
1986 }
1987
1988 static int mpegts_write_packet(AVFormatContext *s, AVPacket *pkt)
1989 {
1990     if (!pkt) {
1991         mpegts_write_flush(s);
1992         return 1;
1993     } else {
1994         return mpegts_write_packet_internal(s, pkt);
1995     }
1996 }
1997
1998 static int mpegts_write_end(AVFormatContext *s)
1999 {
2000     if (s->pb)
2001         mpegts_write_flush(s);
2002
2003     return 0;
2004 }
2005
2006 static void mpegts_deinit(AVFormatContext *s)
2007 {
2008     MpegTSWrite *ts = s->priv_data;
2009     MpegTSService *service;
2010     int i;
2011
2012     for (i = 0; i < s->nb_streams; i++) {
2013         AVStream *st = s->streams[i];
2014         MpegTSWriteStream *ts_st = st->priv_data;
2015         if (ts_st) {
2016             av_freep(&ts_st->dvb_ac3_desc);
2017             av_freep(&ts_st->payload);
2018             if (ts_st->amux) {
2019                 avformat_free_context(ts_st->amux);
2020                 ts_st->amux = NULL;
2021             }
2022         }
2023     }
2024
2025     for (i = 0; i < ts->nb_services; i++) {
2026         service = ts->services[i];
2027         av_freep(&service);
2028     }
2029     av_freep(&ts->services);
2030 }
2031
2032 static int mpegts_check_bitstream(struct AVFormatContext *s, const AVPacket *pkt)
2033 {
2034     int ret = 1;
2035     AVStream *st = s->streams[pkt->stream_index];
2036
2037     if (st->codecpar->codec_id == AV_CODEC_ID_H264) {
2038         if (pkt->size >= 5 && AV_RB32(pkt->data) != 0x0000001 &&
2039                              (AV_RB24(pkt->data) != 0x000001 ||
2040                               (st->codecpar->extradata_size > 0 &&
2041                                st->codecpar->extradata[0] == 1)))
2042             ret = ff_stream_add_bitstream_filter(st, "h264_mp4toannexb", NULL);
2043     } else if (st->codecpar->codec_id == AV_CODEC_ID_HEVC) {
2044         if (pkt->size >= 5 && AV_RB32(pkt->data) != 0x0000001 &&
2045                              (AV_RB24(pkt->data) != 0x000001 ||
2046                               (st->codecpar->extradata_size > 0 &&
2047                                st->codecpar->extradata[0] == 1)))
2048             ret = ff_stream_add_bitstream_filter(st, "hevc_mp4toannexb", NULL);
2049     }
2050
2051     return ret;
2052 }
2053
2054 #define OFFSET(x) offsetof(MpegTSWrite, x)
2055 #define ENC AV_OPT_FLAG_ENCODING_PARAM
2056 static const AVOption options[] = {
2057     { "mpegts_transport_stream_id", "Set transport_stream_id field.",
2058       OFFSET(transport_stream_id), AV_OPT_TYPE_INT, { .i64 = 0x0001 }, 0x0001, 0xffff, ENC },
2059     { "mpegts_original_network_id", "Set original_network_id field.",
2060       OFFSET(original_network_id), AV_OPT_TYPE_INT, { .i64 = DVB_PRIVATE_NETWORK_START }, 0x0001, 0xffff, ENC },
2061     { "mpegts_service_id", "Set service_id field.",
2062       OFFSET(service_id), AV_OPT_TYPE_INT, { .i64 = 0x0001 }, 0x0001, 0xffff, ENC },
2063     { "mpegts_service_type", "Set service_type field.",
2064       OFFSET(service_type), AV_OPT_TYPE_INT, { .i64 = 0x01 }, 0x01, 0xff, ENC, "mpegts_service_type" },
2065     { "digital_tv", "Digital Television.",
2066       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_SERVICE_TYPE_DIGITAL_TV }, 0x01, 0xff, ENC, "mpegts_service_type" },
2067     { "digital_radio", "Digital Radio.",
2068       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_SERVICE_TYPE_DIGITAL_RADIO }, 0x01, 0xff, ENC, "mpegts_service_type" },
2069     { "teletext", "Teletext.",
2070       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_SERVICE_TYPE_TELETEXT }, 0x01, 0xff, ENC, "mpegts_service_type" },
2071     { "advanced_codec_digital_radio", "Advanced Codec Digital Radio.",
2072       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_SERVICE_TYPE_ADVANCED_CODEC_DIGITAL_RADIO }, 0x01, 0xff, ENC, "mpegts_service_type" },
2073     { "mpeg2_digital_hdtv", "MPEG2 Digital HDTV.",
2074       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_SERVICE_TYPE_MPEG2_DIGITAL_HDTV }, 0x01, 0xff, ENC, "mpegts_service_type" },
2075     { "advanced_codec_digital_sdtv", "Advanced Codec Digital SDTV.",
2076       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_SERVICE_TYPE_ADVANCED_CODEC_DIGITAL_SDTV }, 0x01, 0xff, ENC, "mpegts_service_type" },
2077     { "advanced_codec_digital_hdtv", "Advanced Codec Digital HDTV.",
2078       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_SERVICE_TYPE_ADVANCED_CODEC_DIGITAL_HDTV }, 0x01, 0xff, ENC, "mpegts_service_type" },
2079     { "hevc_digital_hdtv", "HEVC Digital Television Service.",
2080       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_SERVICE_TYPE_HEVC_DIGITAL_HDTV }, 0x01, 0xff, ENC, "mpegts_service_type" },
2081     { "mpegts_pmt_start_pid", "Set the first pid of the PMT.",
2082       OFFSET(pmt_start_pid), AV_OPT_TYPE_INT, { .i64 = 0x1000 }, FIRST_OTHER_PID, LAST_OTHER_PID, ENC },
2083     { "mpegts_start_pid", "Set the first pid.",
2084       OFFSET(start_pid), AV_OPT_TYPE_INT, { .i64 = 0x0100 }, FIRST_OTHER_PID, LAST_OTHER_PID, ENC },
2085     { "mpegts_m2ts_mode", "Enable m2ts mode.", OFFSET(m2ts_mode), AV_OPT_TYPE_BOOL, { .i64 = -1 }, -1, 1, ENC },
2086     { "muxrate", NULL, OFFSET(mux_rate), AV_OPT_TYPE_INT, { .i64 = 1 }, 0, INT_MAX, ENC },
2087     { "pes_payload_size", "Minimum PES packet payload in bytes",
2088       OFFSET(pes_payload_size), AV_OPT_TYPE_INT, { .i64 = DEFAULT_PES_PAYLOAD_SIZE }, 0, INT_MAX, ENC },
2089     { "mpegts_flags", "MPEG-TS muxing flags", OFFSET(flags), AV_OPT_TYPE_FLAGS, { .i64 = 0 }, 0, INT_MAX, ENC, "mpegts_flags" },
2090     { "resend_headers", "Reemit PAT/PMT before writing the next packet",
2091       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_FLAG_REEMIT_PAT_PMT }, 0, INT_MAX, ENC, "mpegts_flags" },
2092     { "latm", "Use LATM packetization for AAC",
2093       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_FLAG_AAC_LATM }, 0, INT_MAX, ENC, "mpegts_flags" },
2094     { "pat_pmt_at_frames", "Reemit PAT and PMT at each video frame",
2095       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_FLAG_PAT_PMT_AT_FRAMES}, 0, INT_MAX, ENC, "mpegts_flags" },
2096     { "system_b", "Conform to System B (DVB) instead of System A (ATSC)",
2097       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_FLAG_SYSTEM_B }, 0, INT_MAX, ENC, "mpegts_flags" },
2098     { "initial_discontinuity", "Mark initial packets as discontinuous",
2099       0, AV_OPT_TYPE_CONST, { .i64 = MPEGTS_FLAG_DISCONT }, 0, INT_MAX, ENC, "mpegts_flags" },
2100     { "mpegts_copyts", "don't offset dts/pts", OFFSET(copyts), AV_OPT_TYPE_BOOL, { .i64 = -1 }, -1, 1, ENC },
2101     { "tables_version", "set PAT, PMT and SDT version", OFFSET(tables_version), AV_OPT_TYPE_INT, { .i64 = 0 }, 0, 31, ENC },
2102     { "omit_video_pes_length", "Omit the PES packet length for video packets",
2103       OFFSET(omit_video_pes_length), AV_OPT_TYPE_BOOL, { .i64 = 1 }, 0, 1, ENC },
2104     { "pcr_period", "PCR retransmission time in milliseconds",
2105       OFFSET(pcr_period_ms), AV_OPT_TYPE_INT, { .i64 = -1 }, -1, INT_MAX, ENC },
2106     { "pat_period", "PAT/PMT retransmission time limit in seconds",
2107       OFFSET(pat_period_us), AV_OPT_TYPE_DURATION, { .i64 = PAT_RETRANS_TIME * 1000LL }, 0, INT64_MAX, ENC },
2108     { "sdt_period", "SDT retransmission time limit in seconds",
2109       OFFSET(sdt_period_us), AV_OPT_TYPE_DURATION, { .i64 = SDT_RETRANS_TIME * 1000LL }, 0, INT64_MAX, ENC },
2110     { NULL },
2111 };
2112
2113 static const AVClass mpegts_muxer_class = {
2114     .class_name = "MPEGTS muxer",
2115     .item_name  = av_default_item_name,
2116     .option     = options,
2117     .version    = LIBAVUTIL_VERSION_INT,
2118 };
2119
2120 AVOutputFormat ff_mpegts_muxer = {
2121     .name           = "mpegts",
2122     .long_name      = NULL_IF_CONFIG_SMALL("MPEG-TS (MPEG-2 Transport Stream)"),
2123     .mime_type      = "video/MP2T",
2124     .extensions     = "ts,m2t,m2ts,mts",
2125     .priv_data_size = sizeof(MpegTSWrite),
2126     .audio_codec    = AV_CODEC_ID_MP2,
2127     .video_codec    = AV_CODEC_ID_MPEG2VIDEO,
2128     .init           = mpegts_init,
2129     .write_packet   = mpegts_write_packet,
2130     .write_trailer  = mpegts_write_end,
2131     .deinit         = mpegts_deinit,
2132     .check_bitstream = mpegts_check_bitstream,
2133     .flags          = AVFMT_ALLOW_FLUSH | AVFMT_VARIABLE_FPS | AVFMT_NODIMENSIONS,
2134     .priv_class     = &mpegts_muxer_class,
2135 };