git.sesse.net Git - ffmpeg/blob - libavformat/hlsenc.c

   1 /*
   2  * Apple HTTP Live Streaming segmenter
   3  * Copyright (c) 2012, Luca Barbato
   4  *
   5  * This file is part of FFmpeg.
   6  *
   7  * FFmpeg is free software; you can redistribute it and/or
   8  * modify it under the terms of the GNU Lesser General Public
   9  * License as published by the Free Software Foundation; either
  10  * version 2.1 of the License, or (at your option) any later version.
  11  *
  12  * FFmpeg is distributed in the hope that it will be useful,
  13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  15  * Lesser General Public License for more details.
  16  *
  17  * You should have received a copy of the GNU Lesser General Public
  18  * License along with FFmpeg; if not, write to the Free Software
  19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
  20  */
  21
  22 #include "config.h"
  23 #include <float.h>
  24 #include <stdint.h>
  25 #if HAVE_UNISTD_H
  26 #include <unistd.h>
  27 #endif
  28
  29 #include "libavutil/avassert.h"
  30 #include "libavutil/mathematics.h"
  31 #include "libavutil/parseutils.h"
  32 #include "libavutil/avstring.h"
  33 #include "libavutil/opt.h"
  34 #include "libavutil/log.h"
  35 #include "libavutil/time_internal.h"
  36
  37 #include "avformat.h"
  38 #include "avio_internal.h"
  39 #include "internal.h"
  40 #include "os_support.h"
  41
  42 typedef enum {
  43   HLS_START_SEQUENCE_AS_START_NUMBER = 0,
  44   HLS_START_SEQUENCE_AS_SECONDS_SINCE_EPOCH = 1,
  45   HLS_START_SEQUENCE_AS_FORMATTED_DATETIME = 2,  // YYYYMMDDhhmmss
  46 } StartSequenceSourceType;
  47
  48 #define KEYSIZE 16
  49 #define LINE_BUFFER_SIZE 1024
  50
  51 typedef struct HLSSegment {
  52     char filename[1024];
  53     char sub_filename[1024];
  54     double duration; /* in seconds */
  55     int discont;
  56     int64_t pos;
  57     int64_t size;
  58
  59     char key_uri[LINE_BUFFER_SIZE + 1];
  60     char iv_string[KEYSIZE*2 + 1];
  61
  62     struct HLSSegment *next;
  63 } HLSSegment;
  64
  65 typedef enum HLSFlags {
  66     // Generate a single media file and use byte ranges in the playlist.
  67     HLS_SINGLE_FILE = (1 << 0),
  68     HLS_DELETE_SEGMENTS = (1 << 1),
  69     HLS_ROUND_DURATIONS = (1 << 2),
  70     HLS_DISCONT_START = (1 << 3),
  71     HLS_OMIT_ENDLIST = (1 << 4),
  72     HLS_SPLIT_BY_TIME = (1 << 5),
  73     HLS_APPEND_LIST = (1 << 6),
  74     HLS_PROGRAM_DATE_TIME = (1 << 7),
  75     HLS_SECOND_LEVEL_SEGMENT_INDEX = (1 << 8), // include segment index in segment filenames when use_localtime  e.g.: %%03d
  76     HLS_SECOND_LEVEL_SEGMENT_DURATION = (1 << 9), // include segment duration (microsec) in segment filenames when use_localtime  e.g.: %%09t
  77     HLS_SECOND_LEVEL_SEGMENT_SIZE = (1 << 10), // include segment size (bytes) in segment filenames when use_localtime  e.g.: %%014s
  78 } HLSFlags;
  79
  80 typedef enum {
  81     PLAYLIST_TYPE_NONE,
  82     PLAYLIST_TYPE_EVENT,
  83     PLAYLIST_TYPE_VOD,
  84     PLAYLIST_TYPE_NB,
  85 } PlaylistType;
  86
  87 typedef struct HLSContext {
  88     const AVClass *class;  // Class for private options.
  89     unsigned number;
  90     int64_t sequence;
  91     int64_t start_sequence;
  92     uint32_t start_sequence_source_type;  // enum StartSequenceSourceType
  93     AVOutputFormat *oformat;
  94     AVOutputFormat *vtt_oformat;
  95
  96     AVFormatContext *avf;
  97     AVFormatContext *vtt_avf;
  98
  99     float time;            // Set by a private option.
 100     float init_time;       // Set by a private option.
 101     int max_nb_segments;   // Set by a private option.
 102     int  wrap;             // Set by a private option.
 103     uint32_t flags;        // enum HLSFlags
 104     uint32_t pl_type;      // enum PlaylistType
 105     char *segment_filename;
 106
 107     int use_localtime;      ///< flag to expand filename with localtime
 108     int use_localtime_mkdir;///< flag to mkdir dirname in timebased filename
 109     int allowcache;
 110     int64_t recording_time;
 111     int has_video;
 112     int has_subtitle;
 113     int new_start;
 114     double dpp;           // duration per packet
 115     int64_t start_pts;
 116     int64_t end_pts;
 117     double duration;      // last segment duration computed so far, in seconds
 118     int64_t start_pos;    // last segment starting position
 119     int64_t size;         // last segment size
 120     int64_t max_seg_size; // every segment file max size
 121     int nb_entries;
 122     int discontinuity_set;
 123     int discontinuity;
 124
 125     HLSSegment *segments;
 126     HLSSegment *last_segment;
 127     HLSSegment *old_segments;
 128
 129     char *basename;
 130     char *vtt_basename;
 131     char *vtt_m3u8_name;
 132     char *baseurl;
 133     char *format_options_str;
 134     char *vtt_format_options_str;
 135     char *subtitle_filename;
 136     AVDictionary *format_options;
 137
 138     char *key_info_file;
 139     char key_file[LINE_BUFFER_SIZE + 1];
 140     char key_uri[LINE_BUFFER_SIZE + 1];
 141     char key_string[KEYSIZE*2 + 1];
 142     char iv_string[KEYSIZE*2 + 1];
 143     AVDictionary *vtt_format_options;
 144
 145     char *method;
 146
 147     double initial_prog_date_time;
 148     char current_segment_final_filename_fmt[1024]; // when renaming segments
 149 } HLSContext;
 150
 151 static int get_int_from_double(double val)
 152 {
 153     return (int)((val - (int)val) >= 0.001) ? (int)(val + 1) : (int)val;
 154 }
 155
 156 static int mkdir_p(const char *path) {
 157     int ret = 0;
 158     char *temp = av_strdup(path);
 159     char *pos = temp;
 160     char tmp_ch = '\0';
 161
 162     if (!path || !temp) {
 163         return -1;
 164     }
 165
 166     if (!strncmp(temp, "/", 1) || !strncmp(temp, "\\", 1)) {
 167         pos++;
 168     } else if (!strncmp(temp, "./", 2) || !strncmp(temp, ".\\", 2)) {
 169         pos += 2;
 170     }
 171
 172     for ( ; *pos != '\0'; ++pos) {
 173         if (*pos == '/' || *pos == '\\') {
 174             tmp_ch = *pos;
 175             *pos = '\0';
 176             ret = mkdir(temp, 0755);
 177             *pos = tmp_ch;
 178         }
 179     }
 180
 181     if ((*(pos - 1) != '/') || (*(pos - 1) != '\\')) {
 182         ret = mkdir(temp, 0755);
 183     }
 184
 185     av_free(temp);
 186     return ret;
 187 }
 188
 189 static int replace_int_data_in_filename(char *buf, int buf_size, const char *filename, char placeholder, int64_t number)
 190 {
 191     const char *p;
 192     char *q, buf1[20], c;
 193     int nd, len, addchar_count;
 194     int found_count = 0;
 195
 196     q = buf;
 197     p = filename;
 198     for (;;) {
 199         c = *p;
 200         if (c == '\0')
 201             break;
 202         if (c == '%' && *(p+1) == '%')  // %%
 203             addchar_count = 2;
 204         else if (c == '%' && (av_isdigit(*(p+1)) || *(p+1) == placeholder)) {
 205             nd = 0;
 206             addchar_count = 1;
 207             while (av_isdigit(*(p + addchar_count))) {
 208                 nd = nd * 10 + *(p + addchar_count) - '0';
 209                 addchar_count++;
 210             }
 211
 212             if (*(p + addchar_count) == placeholder) {
 213                 len = snprintf(buf1, sizeof(buf1), "%0*"PRId64, (number < 0) ? nd : nd++, number);
 214                 if (len < 1)  // returned error or empty buf1
 215                     goto fail;
 216                 if ((q - buf + len) > buf_size - 1)
 217                     goto fail;
 218                 memcpy(q, buf1, len);
 219                 q += len;
 220                 p += (addchar_count + 1);
 221                 addchar_count = 0;
 222                 found_count++;
 223             }
 224
 225         } else
 226             addchar_count = 1;
 227
 228         while (addchar_count--)
 229             if ((q - buf) < buf_size - 1)
 230                 *q++ = *p++;
 231             else
 232                 goto fail;
 233     }
 234     *q = '\0';
 235     return found_count;
 236 fail:
 237     *q = '\0';
 238     return -1;
 239 }
 240
 241 static int hls_delete_old_segments(HLSContext *hls) {
 242
 243     HLSSegment *segment, *previous_segment = NULL;
 244     float playlist_duration = 0.0f;
 245     int ret = 0, path_size, sub_path_size;
 246     char *dirname = NULL, *p, *sub_path;
 247     char *path = NULL;
 248     AVDictionary *options = NULL;
 249     AVIOContext *out = NULL;
 250
 251     segment = hls->segments;
 252     while (segment) {
 253         playlist_duration += segment->duration;
 254         segment = segment->next;
 255     }
 256
 257     segment = hls->old_segments;
 258     while (segment) {
 259         playlist_duration -= segment->duration;
 260         previous_segment = segment;
 261         segment = previous_segment->next;
 262         if (playlist_duration <= -previous_segment->duration) {
 263             previous_segment->next = NULL;
 264             break;
 265         }
 266     }
 267
 268     if (segment && !hls->use_localtime_mkdir) {
 269         if (hls->segment_filename) {
 270             dirname = av_strdup(hls->segment_filename);
 271         } else {
 272             dirname = av_strdup(hls->avf->filename);
 273         }
 274         if (!dirname) {
 275             ret = AVERROR(ENOMEM);
 276             goto fail;
 277         }
 278         p = (char *)av_basename(dirname);
 279         *p = '\0';
 280     }
 281
 282     while (segment) {
 283         av_log(hls, AV_LOG_DEBUG, "deleting old segment %s\n",
 284                                   segment->filename);
 285         path_size =  (hls->use_localtime_mkdir ? 0 : strlen(dirname)) + strlen(segment->filename) + 1;
 286         path = av_malloc(path_size);
 287         if (!path) {
 288             ret = AVERROR(ENOMEM);
 289             goto fail;
 290         }
 291
 292         if (hls->use_localtime_mkdir)
 293             av_strlcpy(path, segment->filename, path_size);
 294         else { // segment->filename contains basename only
 295             av_strlcpy(path, dirname, path_size);
 296             av_strlcat(path, segment->filename, path_size);
 297         }
 298
 299         if (hls->method) {
 300             av_dict_set(&options, "method", "DELETE", 0);
 301             if ((ret = hls->avf->io_open(hls->avf, &out, path, AVIO_FLAG_WRITE, &options)) < 0)
 302                 goto fail;
 303             ff_format_io_close(hls->avf, &out);
 304         } else if (unlink(path) < 0) {
 305             av_log(hls, AV_LOG_ERROR, "failed to delete old segment %s: %s\n",
 306                                      path, strerror(errno));
 307         }
 308
 309         if ((segment->sub_filename[0] != '\0')) {
 310             sub_path_size = strlen(segment->sub_filename) + 1 + (dirname ? strlen(dirname) : 0);
 311             sub_path = av_malloc(sub_path_size);
 312             if (!sub_path) {
 313                 ret = AVERROR(ENOMEM);
 314                 goto fail;
 315             }
 316
 317             av_strlcpy(sub_path, dirname, sub_path_size);
 318             av_strlcat(sub_path, segment->sub_filename, sub_path_size);
 319
 320             if (hls->method) {
 321                 av_dict_set(&options, "method", "DELETE", 0);
 322                 if ((ret = hls->avf->io_open(hls->avf, &out, sub_path, AVIO_FLAG_WRITE, &options)) < 0) {
 323                     av_free(sub_path);
 324                     goto fail;
 325                 }
 326                 ff_format_io_close(hls->avf, &out);
 327             } else if (unlink(sub_path) < 0) {
 328                 av_log(hls, AV_LOG_ERROR, "failed to delete old segment %s: %s\n",
 329                                          sub_path, strerror(errno));
 330             }
 331             av_free(sub_path);
 332         }
 333         av_freep(&path);
 334         previous_segment = segment;
 335         segment = previous_segment->next;
 336         av_free(previous_segment);
 337     }
 338
 339 fail:
 340     av_free(path);
 341     av_free(dirname);
 342
 343     return ret;
 344 }
 345
 346 static int hls_encryption_start(AVFormatContext *s)
 347 {
 348     HLSContext *hls = s->priv_data;
 349     int ret;
 350     AVIOContext *pb;
 351     uint8_t key[KEYSIZE];
 352
 353     if ((ret = s->io_open(s, &pb, hls->key_info_file, AVIO_FLAG_READ, NULL)) < 0) {
 354         av_log(hls, AV_LOG_ERROR,
 355                 "error opening key info file %s\n", hls->key_info_file);
 356         return ret;
 357     }
 358
 359     ff_get_line(pb, hls->key_uri, sizeof(hls->key_uri));
 360     hls->key_uri[strcspn(hls->key_uri, "\r\n")] = '\0';
 361
 362     ff_get_line(pb, hls->key_file, sizeof(hls->key_file));
 363     hls->key_file[strcspn(hls->key_file, "\r\n")] = '\0';
 364
 365     ff_get_line(pb, hls->iv_string, sizeof(hls->iv_string));
 366     hls->iv_string[strcspn(hls->iv_string, "\r\n")] = '\0';
 367
 368     ff_format_io_close(s, &pb);
 369
 370     if (!*hls->key_uri) {
 371         av_log(hls, AV_LOG_ERROR, "no key URI specified in key info file\n");
 372         return AVERROR(EINVAL);
 373     }
 374
 375     if (!*hls->key_file) {
 376         av_log(hls, AV_LOG_ERROR, "no key file specified in key info file\n");
 377         return AVERROR(EINVAL);
 378     }
 379
 380     if ((ret = s->io_open(s, &pb, hls->key_file, AVIO_FLAG_READ, NULL)) < 0) {
 381         av_log(hls, AV_LOG_ERROR, "error opening key file %s\n", hls->key_file);
 382         return ret;
 383     }
 384
 385     ret = avio_read(pb, key, sizeof(key));
 386     ff_format_io_close(s, &pb);
 387     if (ret != sizeof(key)) {
 388         av_log(hls, AV_LOG_ERROR, "error reading key file %s\n", hls->key_file);
 389         if (ret >= 0 || ret == AVERROR_EOF)
 390             ret = AVERROR(EINVAL);
 391         return ret;
 392     }
 393     ff_data_to_hex(hls->key_string, key, sizeof(key), 0);
 394
 395     return 0;
 396 }
 397
 398 static int read_chomp_line(AVIOContext *s, char *buf, int maxlen)
 399 {
 400     int len = ff_get_line(s, buf, maxlen);
 401     while (len > 0 && av_isspace(buf[len - 1]))
 402         buf[--len] = '\0';
 403     return len;
 404 }
 405
 406 static int hls_mux_init(AVFormatContext *s)
 407 {
 408     HLSContext *hls = s->priv_data;
 409     AVFormatContext *oc;
 410     AVFormatContext *vtt_oc = NULL;
 411     int i, ret;
 412
 413     ret = avformat_alloc_output_context2(&hls->avf, hls->oformat, NULL, NULL);
 414     if (ret < 0)
 415         return ret;
 416     oc = hls->avf;
 417
 418     oc->oformat            = hls->oformat;
 419     oc->interrupt_callback = s->interrupt_callback;
 420     oc->max_delay          = s->max_delay;
 421     oc->opaque             = s->opaque;
 422     oc->io_open            = s->io_open;
 423     oc->io_close           = s->io_close;
 424     av_dict_copy(&oc->metadata, s->metadata, 0);
 425
 426     if(hls->vtt_oformat) {
 427         ret = avformat_alloc_output_context2(&hls->vtt_avf, hls->vtt_oformat, NULL, NULL);
 428         if (ret < 0)
 429             return ret;
 430         vtt_oc          = hls->vtt_avf;
 431         vtt_oc->oformat = hls->vtt_oformat;
 432         av_dict_copy(&vtt_oc->metadata, s->metadata, 0);
 433     }
 434
 435     for (i = 0; i < s->nb_streams; i++) {
 436         AVStream *st;
 437         AVFormatContext *loc;
 438         if (s->streams[i]->codecpar->codec_type == AVMEDIA_TYPE_SUBTITLE)
 439             loc = vtt_oc;
 440         else
 441             loc = oc;
 442
 443         if (!(st = avformat_new_stream(loc, NULL)))
 444             return AVERROR(ENOMEM);
 445         avcodec_parameters_copy(st->codecpar, s->streams[i]->codecpar);
 446         st->sample_aspect_ratio = s->streams[i]->sample_aspect_ratio;
 447         st->time_base = s->streams[i]->time_base;
 448     }
 449     hls->start_pos = 0;
 450     hls->new_start = 1;
 451
 452     return 0;
 453 }
 454
 455 static HLSSegment *find_segment_by_filename(HLSSegment *segment, const char *filename)
 456 {
 457     while (segment) {
 458         if (!av_strcasecmp(segment->filename,filename))
 459             return segment;
 460         segment = segment->next;
 461     }
 462     return (HLSSegment *) NULL;
 463 }
 464
 465 /* Create a new segment and append it to the segment list */
 466 static int hls_append_segment(struct AVFormatContext *s, HLSContext *hls, double duration,
 467                               int64_t pos, int64_t size)
 468 {
 469     HLSSegment *en = av_malloc(sizeof(*en));
 470     const char  *filename;
 471     int ret;
 472
 473     if (!en)
 474         return AVERROR(ENOMEM);
 475
 476     if ((hls->flags & (HLS_SECOND_LEVEL_SEGMENT_SIZE | HLS_SECOND_LEVEL_SEGMENT_DURATION)) &&
 477         strlen(hls->current_segment_final_filename_fmt)) {
 478         av_strlcpy(hls->avf->filename, hls->current_segment_final_filename_fmt, sizeof(hls->avf->filename));
 479         if (hls->flags & HLS_SECOND_LEVEL_SEGMENT_SIZE) {
 480             char * filename = av_strdup(hls->avf->filename);  // %%s will be %s after strftime
 481             if (!filename) {
 482                 av_free(en);
 483                 return AVERROR(ENOMEM);
 484             }
 485             if (replace_int_data_in_filename(hls->avf->filename, sizeof(hls->avf->filename),
 486                 filename, 's', pos + size) < 1) {
 487                 av_log(hls, AV_LOG_ERROR,
 488                        "Invalid second level segment filename template '%s', "
 489                         "you can try to remove second_level_segment_size flag\n",
 490                        filename);
 491                 av_free(filename);
 492                 av_free(en);
 493                 return AVERROR(EINVAL);
 494             }
 495             av_free(filename);
 496         }
 497         if (hls->flags & HLS_SECOND_LEVEL_SEGMENT_DURATION) {
 498             char * filename = av_strdup(hls->avf->filename);  // %%t will be %t after strftime
 499             if (!filename) {
 500                 av_free(en);
 501                 return AVERROR(ENOMEM);
 502             }
 503             if (replace_int_data_in_filename(hls->avf->filename, sizeof(hls->avf->filename),
 504                 filename, 't',  (int64_t)round(1000000 * duration)) < 1) {
 505                 av_log(hls, AV_LOG_ERROR,
 506                        "Invalid second level segment filename template '%s', "
 507                         "you can try to remove second_level_segment_time flag\n",
 508                        filename);
 509                 av_free(filename);
 510                 av_free(en);
 511                 return AVERROR(EINVAL);
 512             }
 513             av_free(filename);
 514         }
 515     }
 516
 517
 518     filename = av_basename(hls->avf->filename);
 519
 520     if (hls->use_localtime_mkdir) {
 521         filename = hls->avf->filename;
 522     }
 523     if (find_segment_by_filename(hls->segments, filename)
 524         || find_segment_by_filename(hls->old_segments, filename)) {
 525         av_log(hls, AV_LOG_WARNING, "Duplicated segment filename detected: %s\n", filename);
 526     }
 527     av_strlcpy(en->filename, filename, sizeof(en->filename));
 528
 529     if(hls->has_subtitle)
 530         av_strlcpy(en->sub_filename, av_basename(hls->vtt_avf->filename), sizeof(en->sub_filename));
 531     else
 532         en->sub_filename[0] = '\0';
 533
 534     en->duration = duration;
 535     en->pos      = pos;
 536     en->size     = size;
 537     en->next     = NULL;
 538     en->discont  = 0;
 539
 540     if (hls->discontinuity) {
 541         en->discont = 1;
 542         hls->discontinuity = 0;
 543     }
 544
 545     if (hls->key_info_file) {
 546         av_strlcpy(en->key_uri, hls->key_uri, sizeof(en->key_uri));
 547         av_strlcpy(en->iv_string, hls->iv_string, sizeof(en->iv_string));
 548     }
 549
 550     if (!hls->segments)
 551         hls->segments = en;
 552     else
 553         hls->last_segment->next = en;
 554
 555     hls->last_segment = en;
 556
 557     // EVENT or VOD playlists imply sliding window cannot be used
 558     if (hls->pl_type != PLAYLIST_TYPE_NONE)
 559         hls->max_nb_segments = 0;
 560
 561     if (hls->max_nb_segments && hls->nb_entries >= hls->max_nb_segments) {
 562         en = hls->segments;
 563         hls->initial_prog_date_time += en->duration;
 564         hls->segments = en->next;
 565         if (en && hls->flags & HLS_DELETE_SEGMENTS &&
 566                 !(hls->flags & HLS_SINGLE_FILE || hls->wrap)) {
 567             en->next = hls->old_segments;
 568             hls->old_segments = en;
 569             if ((ret = hls_delete_old_segments(hls)) < 0)
 570                 return ret;
 571         } else
 572             av_free(en);
 573     } else
 574         hls->nb_entries++;
 575
 576     if (hls->max_seg_size > 0) {
 577         return 0;
 578     }
 579     hls->sequence++;
 580
 581     return 0;
 582 }
 583
 584 static int parse_playlist(AVFormatContext *s, const char *url)
 585 {
 586     HLSContext *hls = s->priv_data;
 587     AVIOContext *in;
 588     int ret = 0, is_segment = 0;
 589     int64_t new_start_pos;
 590     char line[1024];
 591     const char *ptr;
 592
 593     if ((ret = ffio_open_whitelist(&in, url, AVIO_FLAG_READ,
 594                                    &s->interrupt_callback, NULL,
 595                                    s->protocol_whitelist, s->protocol_blacklist)) < 0)
 596         return ret;
 597
 598     read_chomp_line(in, line, sizeof(line));
 599     if (strcmp(line, "#EXTM3U")) {
 600         ret = AVERROR_INVALIDDATA;
 601         goto fail;
 602     }
 603
 604     hls->discontinuity = 0;
 605     while (!avio_feof(in)) {
 606         read_chomp_line(in, line, sizeof(line));
 607         if (av_strstart(line, "#EXT-X-MEDIA-SEQUENCE:", &ptr)) {
 608             int64_t tmp_sequence = strtoll(ptr, NULL, 10);
 609             if (tmp_sequence < hls->sequence)
 610               av_log(hls, AV_LOG_VERBOSE,
 611                      "Found playlist sequence number was smaller """
 612                      "than specified start sequence number: %"PRId64" < %"PRId64", "
 613                      "omitting\n", tmp_sequence, hls->start_sequence);
 614             else {
 615               av_log(hls, AV_LOG_DEBUG, "Found playlist sequence number: %"PRId64"\n", tmp_sequence);
 616               hls->sequence = tmp_sequence;
 617             }
 618         } else if (av_strstart(line, "#EXT-X-DISCONTINUITY", &ptr)) {
 619             is_segment = 1;
 620             hls->discontinuity = 1;
 621         } else if (av_strstart(line, "#EXTINF:", &ptr)) {
 622             is_segment = 1;
 623             hls->duration = atof(ptr);
 624         } else if (av_strstart(line, "#", NULL)) {
 625             continue;
 626         } else if (line[0]) {
 627             if (is_segment) {
 628                 is_segment = 0;
 629                 new_start_pos = avio_tell(hls->avf->pb);
 630                 hls->size = new_start_pos - hls->start_pos;
 631                 av_strlcpy(hls->avf->filename, line, sizeof(line));
 632                 ret = hls_append_segment(s, hls, hls->duration, hls->start_pos, hls->size);
 633                 if (ret < 0)
 634                     goto fail;
 635                 hls->start_pos = new_start_pos;
 636             }
 637         }
 638     }
 639
 640 fail:
 641     avio_close(in);
 642     return ret;
 643 }
 644
 645 static void hls_free_segments(HLSSegment *p)
 646 {
 647     HLSSegment *en;
 648
 649     while(p) {
 650         en = p;
 651         p = p->next;
 652         av_free(en);
 653     }
 654 }
 655
 656 static void set_http_options(AVDictionary **options, HLSContext *c)
 657 {
 658     if (c->method)
 659         av_dict_set(options, "method", c->method, 0);
 660 }
 661
 662 static int hls_window(AVFormatContext *s, int last)
 663 {
 664     HLSContext *hls = s->priv_data;
 665     HLSSegment *en;
 666     int target_duration = 0;
 667     int ret = 0;
 668     AVIOContext *out = NULL;
 669     AVIOContext *sub_out = NULL;
 670     char temp_filename[1024];
 671     int64_t sequence = FFMAX(hls->start_sequence, hls->sequence - hls->nb_entries);
 672     int version = 3;
 673     const char *proto = avio_find_protocol_name(s->filename);
 674     int use_rename = proto && !strcmp(proto, "file");
 675     static unsigned warned_non_file;
 676     char *key_uri = NULL;
 677     char *iv_string = NULL;
 678     AVDictionary *options = NULL;
 679     double prog_date_time = hls->initial_prog_date_time;
 680     int byterange_mode = (hls->flags & HLS_SINGLE_FILE) || (hls->max_seg_size > 0);
 681
 682     if (byterange_mode) {
 683         version = 4;
 684         sequence = 0;
 685     }
 686
 687     if (!use_rename && !warned_non_file++)
 688         av_log(s, AV_LOG_ERROR, "Cannot use rename on non file protocol, this may lead to races and temporary partial files\n");
 689
 690     set_http_options(&options, hls);
 691     snprintf(temp_filename, sizeof(temp_filename), use_rename ? "%s.tmp" : "%s", s->filename);
 692     if ((ret = s->io_open(s, &out, temp_filename, AVIO_FLAG_WRITE, &options)) < 0)
 693         goto fail;
 694
 695     for (en = hls->segments; en; en = en->next) {
 696         if (target_duration <= en->duration)
 697             target_duration = get_int_from_double(en->duration);
 698     }
 699
 700     hls->discontinuity_set = 0;
 701     avio_printf(out, "#EXTM3U\n");
 702     avio_printf(out, "#EXT-X-VERSION:%d\n", version);
 703     if (hls->allowcache == 0 || hls->allowcache == 1) {
 704         avio_printf(out, "#EXT-X-ALLOW-CACHE:%s\n", hls->allowcache == 0 ? "NO" : "YES");
 705     }
 706     avio_printf(out, "#EXT-X-TARGETDURATION:%d\n", target_duration);
 707     avio_printf(out, "#EXT-X-MEDIA-SEQUENCE:%"PRId64"\n", sequence);
 708     if (hls->pl_type == PLAYLIST_TYPE_EVENT) {
 709         avio_printf(out, "#EXT-X-PLAYLIST-TYPE:EVENT\n");
 710     } else if (hls->pl_type == PLAYLIST_TYPE_VOD) {
 711         avio_printf(out, "#EXT-X-PLAYLIST-TYPE:VOD\n");
 712     }
 713
 714     av_log(s, AV_LOG_VERBOSE, "EXT-X-MEDIA-SEQUENCE:%"PRId64"\n",
 715            sequence);
 716     if((hls->flags & HLS_DISCONT_START) && sequence==hls->start_sequence && hls->discontinuity_set==0 ){
 717         avio_printf(out, "#EXT-X-DISCONTINUITY\n");
 718         hls->discontinuity_set = 1;
 719     }
 720     for (en = hls->segments; en; en = en->next) {
 721         if (hls->key_info_file && (!key_uri || strcmp(en->key_uri, key_uri) ||
 722                                     av_strcasecmp(en->iv_string, iv_string))) {
 723             avio_printf(out, "#EXT-X-KEY:METHOD=AES-128,URI=\"%s\"", en->key_uri);
 724             if (*en->iv_string)
 725                 avio_printf(out, ",IV=0x%s", en->iv_string);
 726             avio_printf(out, "\n");
 727             key_uri = en->key_uri;
 728             iv_string = en->iv_string;
 729         }
 730
 731         if (en->discont) {
 732             avio_printf(out, "#EXT-X-DISCONTINUITY\n");
 733         }
 734
 735         if (hls->flags & HLS_ROUND_DURATIONS)
 736             avio_printf(out, "#EXTINF:%ld,\n",  lrint(en->duration));
 737         else
 738             avio_printf(out, "#EXTINF:%f,\n", en->duration);
 739         if (byterange_mode)
 740              avio_printf(out, "#EXT-X-BYTERANGE:%"PRIi64"@%"PRIi64"\n",
 741                          en->size, en->pos);
 742         if (hls->flags & HLS_PROGRAM_DATE_TIME) {
 743             time_t tt, wrongsecs;
 744             int milli;
 745             struct tm *tm, tmpbuf;
 746             char buf0[128], buf1[128];
 747             tt = (int64_t)prog_date_time;
 748             milli = av_clip(lrint(1000*(prog_date_time - tt)), 0, 999);
 749             tm = localtime_r(&tt, &tmpbuf);
 750             strftime(buf0, sizeof(buf0), "%Y-%m-%dT%H:%M:%S", tm);
 751             if (!strftime(buf1, sizeof(buf1), "%z", tm) || buf1[1]<'0' ||buf1[1]>'2') {
 752                 int tz_min, dst = tm->tm_isdst;
 753                 tm = gmtime_r(&tt, &tmpbuf);
 754                 tm->tm_isdst = dst;
 755                 wrongsecs = mktime(tm);
 756                 tz_min = (abs(wrongsecs - tt) + 30) / 60;
 757                 snprintf(buf1, sizeof(buf1),
 758                          "%c%02d%02d",
 759                          wrongsecs <= tt ? '+' : '-',
 760                          tz_min / 60,
 761                          tz_min % 60);
 762             }
 763             avio_printf(out, "#EXT-X-PROGRAM-DATE-TIME:%s.%03d%s\n", buf0, milli, buf1);
 764             prog_date_time += en->duration;
 765         }
 766         if (hls->baseurl)
 767             avio_printf(out, "%s", hls->baseurl);
 768         avio_printf(out, "%s\n", en->filename);
 769     }
 770
 771     if (last && (hls->flags & HLS_OMIT_ENDLIST)==0)
 772         avio_printf(out, "#EXT-X-ENDLIST\n");
 773
 774     if( hls->vtt_m3u8_name ) {
 775         if ((ret = s->io_open(s, &sub_out, hls->vtt_m3u8_name, AVIO_FLAG_WRITE, &options)) < 0)
 776             goto fail;
 777         avio_printf(sub_out, "#EXTM3U\n");
 778         avio_printf(sub_out, "#EXT-X-VERSION:%d\n", version);
 779         if (hls->allowcache == 0 || hls->allowcache == 1) {
 780             avio_printf(sub_out, "#EXT-X-ALLOW-CACHE:%s\n", hls->allowcache == 0 ? "NO" : "YES");
 781         }
 782         avio_printf(sub_out, "#EXT-X-TARGETDURATION:%d\n", target_duration);
 783         avio_printf(sub_out, "#EXT-X-MEDIA-SEQUENCE:%"PRId64"\n", sequence);
 784
 785         av_log(s, AV_LOG_VERBOSE, "EXT-X-MEDIA-SEQUENCE:%"PRId64"\n",
 786                sequence);
 787
 788         for (en = hls->segments; en; en = en->next) {
 789             avio_printf(sub_out, "#EXTINF:%f,\n", en->duration);
 790             if (byterange_mode)
 791                  avio_printf(sub_out, "#EXT-X-BYTERANGE:%"PRIi64"@%"PRIi64"\n",
 792                          en->size, en->pos);
 793             if (hls->baseurl)
 794                 avio_printf(sub_out, "%s", hls->baseurl);
 795             avio_printf(sub_out, "%s\n", en->sub_filename);
 796         }
 797
 798         if (last)
 799             avio_printf(sub_out, "#EXT-X-ENDLIST\n");
 800
 801     }
 802
 803 fail:
 804     av_dict_free(&options);
 805     ff_format_io_close(s, &out);
 806     ff_format_io_close(s, &sub_out);
 807     if (ret >= 0 && use_rename)
 808         ff_rename(temp_filename, s->filename, s);
 809     return ret;
 810 }
 811
 812 static int hls_start(AVFormatContext *s)
 813 {
 814     HLSContext *c = s->priv_data;
 815     AVFormatContext *oc = c->avf;
 816     AVFormatContext *vtt_oc = c->vtt_avf;
 817     AVDictionary *options = NULL;
 818     char *filename, iv_string[KEYSIZE*2 + 1];
 819     int err = 0;
 820
 821     if (c->flags & HLS_SINGLE_FILE) {
 822         av_strlcpy(oc->filename, c->basename,
 823                    sizeof(oc->filename));
 824         if (c->vtt_basename)
 825             av_strlcpy(vtt_oc->filename, c->vtt_basename,
 826                   sizeof(vtt_oc->filename));
 827     } else if (c->max_seg_size > 0) {
 828         if (replace_int_data_in_filename(oc->filename, sizeof(oc->filename),
 829             c->basename, 'd', c->wrap ? c->sequence % c->wrap : c->sequence) < 1) {
 830                 av_log(oc, AV_LOG_ERROR, "Invalid segment filename template '%s', you can try to use -use_localtime 1 with it\n", c->basename);
 831                 return AVERROR(EINVAL);
 832         }
 833     } else {
 834         if (c->use_localtime) {
 835             time_t now0;
 836             struct tm *tm, tmpbuf;
 837             time(&now0);
 838             tm = localtime_r(&now0, &tmpbuf);
 839             if (!strftime(oc->filename, sizeof(oc->filename), c->basename, tm)) {
 840                 av_log(oc, AV_LOG_ERROR, "Could not get segment filename with use_localtime\n");
 841                 return AVERROR(EINVAL);
 842             }
 843             if (c->flags & HLS_SECOND_LEVEL_SEGMENT_INDEX) {
 844                 char * filename = av_strdup(oc->filename);  // %%d will be %d after strftime
 845                 if (!filename)
 846                     return AVERROR(ENOMEM);
 847                 if (replace_int_data_in_filename(oc->filename, sizeof(oc->filename),
 848                     filename, 'd', c->wrap ? c->sequence % c->wrap : c->sequence) < 1) {
 849                     av_log(c, AV_LOG_ERROR,
 850                            "Invalid second level segment filename template '%s', "
 851                             "you can try to remove second_level_segment_index flag\n",
 852                            filename);
 853                     av_free(filename);
 854                     return AVERROR(EINVAL);
 855                 }
 856                 av_free(filename);
 857             }
 858             if (c->flags & (HLS_SECOND_LEVEL_SEGMENT_SIZE | HLS_SECOND_LEVEL_SEGMENT_DURATION)) {
 859                 av_strlcpy(c->current_segment_final_filename_fmt, oc->filename,
 860                            sizeof(c->current_segment_final_filename_fmt));
 861                 if (c->flags & HLS_SECOND_LEVEL_SEGMENT_SIZE) {
 862                     char * filename = av_strdup(oc->filename);  // %%s will be %s after strftime
 863                     if (!filename)
 864                         return AVERROR(ENOMEM);
 865                     if (replace_int_data_in_filename(oc->filename, sizeof(oc->filename), filename, 's', 0) < 1) {
 866                         av_log(c, AV_LOG_ERROR,
 867                                "Invalid second level segment filename template '%s', "
 868                                 "you can try to remove second_level_segment_size flag\n",
 869                                filename);
 870                         av_free(filename);
 871                         return AVERROR(EINVAL);
 872                     }
 873                     av_free(filename);
 874                 }
 875                 if (c->flags & HLS_SECOND_LEVEL_SEGMENT_DURATION) {
 876                     char * filename = av_strdup(oc->filename);  // %%t will be %t after strftime
 877                     if (!filename)
 878                         return AVERROR(ENOMEM);
 879                     if (replace_int_data_in_filename(oc->filename, sizeof(oc->filename), filename, 't', 0) < 1) {
 880                         av_log(c, AV_LOG_ERROR,
 881                                "Invalid second level segment filename template '%s', "
 882                                 "you can try to remove second_level_segment_time flag\n",
 883                                filename);
 884                         av_free(filename);
 885                         return AVERROR(EINVAL);
 886                     }
 887                     av_free(filename);
 888                 }
 889             }
 890             if (c->use_localtime_mkdir) {
 891                 const char *dir;
 892                 char *fn_copy = av_strdup(oc->filename);
 893                 if (!fn_copy) {
 894                     return AVERROR(ENOMEM);
 895                 }
 896                 dir = av_dirname(fn_copy);
 897                 if (mkdir_p(dir) == -1 && errno != EEXIST) {
 898                     av_log(oc, AV_LOG_ERROR, "Could not create directory %s with use_localtime_mkdir\n", dir);
 899                     av_free(fn_copy);
 900                     return AVERROR(errno);
 901                 }
 902                 av_free(fn_copy);
 903             }
 904         } else if (replace_int_data_in_filename(oc->filename, sizeof(oc->filename),
 905                    c->basename, 'd', c->wrap ? c->sequence % c->wrap : c->sequence) < 1) {
 906             av_log(oc, AV_LOG_ERROR, "Invalid segment filename template '%s' you can try to use -use_localtime 1 with it\n", c->basename);
 907             return AVERROR(EINVAL);
 908         }
 909         if( c->vtt_basename) {
 910             if (replace_int_data_in_filename(vtt_oc->filename, sizeof(vtt_oc->filename),
 911                 c->vtt_basename, 'd', c->wrap ? c->sequence % c->wrap : c->sequence) < 1) {
 912                 av_log(vtt_oc, AV_LOG_ERROR, "Invalid segment filename template '%s'\n", c->vtt_basename);
 913                 return AVERROR(EINVAL);
 914             }
 915        }
 916     }
 917     c->number++;
 918
 919     set_http_options(&options, c);
 920
 921     if (c->key_info_file) {
 922         if ((err = hls_encryption_start(s)) < 0)
 923             goto fail;
 924         if ((err = av_dict_set(&options, "encryption_key", c->key_string, 0))
 925                 < 0)
 926             goto fail;
 927         err = av_strlcpy(iv_string, c->iv_string, sizeof(iv_string));
 928         if (!err)
 929             snprintf(iv_string, sizeof(iv_string), "%032"PRIx64, c->sequence);
 930         if ((err = av_dict_set(&options, "encryption_iv", iv_string, 0)) < 0)
 931            goto fail;
 932
 933         filename = av_asprintf("crypto:%s", oc->filename);
 934         if (!filename) {
 935             err = AVERROR(ENOMEM);
 936             goto fail;
 937         }
 938         err = s->io_open(s, &oc->pb, filename, AVIO_FLAG_WRITE, &options);
 939         av_free(filename);
 940         av_dict_free(&options);
 941         if (err < 0)
 942             return err;
 943     } else
 944         if ((err = s->io_open(s, &oc->pb, oc->filename, AVIO_FLAG_WRITE, &options)) < 0)
 945             goto fail;
 946     if (c->vtt_basename) {
 947         set_http_options(&options, c);
 948         if ((err = s->io_open(s, &vtt_oc->pb, vtt_oc->filename, AVIO_FLAG_WRITE, &options)) < 0)
 949             goto fail;
 950     }
 951     av_dict_free(&options);
 952
 953     /* We only require one PAT/PMT per segment. */
 954     if (oc->oformat->priv_class && oc->priv_data) {
 955         char period[21];
 956
 957         snprintf(period, sizeof(period), "%d", (INT_MAX / 2) - 1);
 958
 959         av_opt_set(oc->priv_data, "mpegts_flags", "resend_headers", 0);
 960         av_opt_set(oc->priv_data, "sdt_period", period, 0);
 961         av_opt_set(oc->priv_data, "pat_period", period, 0);
 962     }
 963
 964     if (c->vtt_basename) {
 965         err = avformat_write_header(vtt_oc,NULL);
 966         if (err < 0)
 967             return err;
 968     }
 969
 970     return 0;
 971 fail:
 972     av_dict_free(&options);
 973
 974     return err;
 975 }
 976
 977 static const char * get_default_pattern_localtime_fmt(void)
 978 {
 979     char b[21];
 980     time_t t = time(NULL);
 981     struct tm *p, tmbuf;
 982     p = localtime_r(&t, &tmbuf);
 983     // no %s support when strftime returned error or left format string unchanged
 984     return (!strftime(b, sizeof(b), "%s", p) || !strcmp(b, "%s")) ? "-%Y%m%d%H%M%S.ts" : "-%s.ts";
 985 }
 986
 987 static int hls_write_header(AVFormatContext *s)
 988 {
 989     HLSContext *hls = s->priv_data;
 990     int ret, i;
 991     char *p;
 992     const char *pattern = "%d.ts";
 993     const char *pattern_localtime_fmt = get_default_pattern_localtime_fmt();
 994     const char *vtt_pattern = "%d.vtt";
 995     AVDictionary *options = NULL;
 996     int basename_size;
 997     int vtt_basename_size;
 998
 999     if (hls->start_sequence_source_type == HLS_START_SEQUENCE_AS_SECONDS_SINCE_EPOCH || hls->start_sequence_source_type == HLS_START_SEQUENCE_AS_FORMATTED_DATETIME) {
1000         time_t t = time(NULL); // we will need it in either case
1001         if (hls->start_sequence_source_type == HLS_START_SEQUENCE_AS_SECONDS_SINCE_EPOCH) {
1002             hls->start_sequence = (int64_t)t;
1003         } else if (hls->start_sequence_source_type == HLS_START_SEQUENCE_AS_FORMATTED_DATETIME) {
1004             char b[15];
1005             struct tm *p, tmbuf;
1006             if (!(p = localtime_r(&t, &tmbuf)))
1007                 return AVERROR(ENOMEM);
1008             if (!strftime(b, sizeof(b), "%Y%m%d%H%M%S", p))
1009                 return AVERROR(ENOMEM);
1010             hls->start_sequence = strtoll(b, NULL, 10);
1011         }
1012         av_log(hls, AV_LOG_DEBUG, "start_number evaluated to %"PRId64"\n", hls->start_sequence);
1013     }
1014
1015     hls->sequence       = hls->start_sequence;
1016     hls->recording_time = (hls->init_time ? hls->init_time : hls->time) * AV_TIME_BASE;
1017     hls->start_pts      = AV_NOPTS_VALUE;
1018     hls->current_segment_final_filename_fmt[0] = '\0';
1019
1020     if (hls->flags & HLS_PROGRAM_DATE_TIME) {
1021         time_t now0;
1022         time(&now0);
1023         hls->initial_prog_date_time = now0;
1024     }
1025
1026     if (hls->format_options_str) {
1027         ret = av_dict_parse_string(&hls->format_options, hls->format_options_str, "=", ":", 0);
1028         if (ret < 0) {
1029             av_log(s, AV_LOG_ERROR, "Could not parse format options list '%s'\n", hls->format_options_str);
1030             goto fail;
1031         }
1032     }
1033
1034     for (i = 0; i < s->nb_streams; i++) {
1035         hls->has_video +=
1036             s->streams[i]->codecpar->codec_type == AVMEDIA_TYPE_VIDEO;
1037         hls->has_subtitle +=
1038             s->streams[i]->codecpar->codec_type == AVMEDIA_TYPE_SUBTITLE;
1039     }
1040
1041     if (hls->has_video > 1)
1042         av_log(s, AV_LOG_WARNING,
1043                "More than a single video stream present, "
1044                "expect issues decoding it.\n");
1045
1046     hls->oformat = av_guess_format("mpegts", NULL, NULL);
1047
1048     if (!hls->oformat) {
1049         ret = AVERROR_MUXER_NOT_FOUND;
1050         goto fail;
1051     }
1052
1053     if(hls->has_subtitle) {
1054         hls->vtt_oformat = av_guess_format("webvtt", NULL, NULL);
1055         if (!hls->oformat) {
1056             ret = AVERROR_MUXER_NOT_FOUND;
1057             goto fail;
1058         }
1059     }
1060
1061     if (hls->segment_filename) {
1062         hls->basename = av_strdup(hls->segment_filename);
1063         if (!hls->basename) {
1064             ret = AVERROR(ENOMEM);
1065             goto fail;
1066         }
1067     } else {
1068         if (hls->flags & HLS_SINGLE_FILE)
1069             pattern = ".ts";
1070
1071         if (hls->use_localtime) {
1072             basename_size = strlen(s->filename) + strlen(pattern_localtime_fmt) + 1;
1073         } else {
1074             basename_size = strlen(s->filename) + strlen(pattern) + 1;
1075         }
1076         hls->basename = av_malloc(basename_size);
1077         if (!hls->basename) {
1078             ret = AVERROR(ENOMEM);
1079             goto fail;
1080         }
1081
1082         av_strlcpy(hls->basename, s->filename, basename_size);
1083
1084         p = strrchr(hls->basename, '.');
1085         if (p)
1086             *p = '\0';
1087         if (hls->use_localtime) {
1088             av_strlcat(hls->basename, pattern_localtime_fmt, basename_size);
1089         } else {
1090             av_strlcat(hls->basename, pattern, basename_size);
1091         }
1092     }
1093     if (!hls->use_localtime) {
1094         if (hls->flags & HLS_SECOND_LEVEL_SEGMENT_DURATION) {
1095              av_log(hls, AV_LOG_ERROR,
1096                     "second_level_segment_duration hls_flag requires use_localtime to be true\n");
1097              ret = AVERROR(EINVAL);
1098              goto fail;
1099         }
1100         if (hls->flags & HLS_SECOND_LEVEL_SEGMENT_SIZE) {
1101              av_log(hls, AV_LOG_ERROR,
1102                     "second_level_segment_size hls_flag requires use_localtime to be true\n");
1103              ret = AVERROR(EINVAL);
1104              goto fail;
1105         }
1106         if (hls->flags & HLS_SECOND_LEVEL_SEGMENT_INDEX) {
1107             av_log(hls, AV_LOG_ERROR,
1108                    "second_level_segment_index hls_flag requires use_localtime to be true\n");
1109             ret = AVERROR(EINVAL);
1110             goto fail;
1111         }
1112     } else {
1113         const char *proto = avio_find_protocol_name(hls->basename);
1114         int segment_renaming_ok = proto && !strcmp(proto, "file");
1115
1116         if ((hls->flags & HLS_SECOND_LEVEL_SEGMENT_DURATION) && !segment_renaming_ok) {
1117              av_log(hls, AV_LOG_ERROR,
1118                     "second_level_segment_duration hls_flag works only with file protocol segment names\n");
1119              ret = AVERROR(EINVAL);
1120              goto fail;
1121         }
1122         if ((hls->flags & HLS_SECOND_LEVEL_SEGMENT_SIZE) && !segment_renaming_ok) {
1123              av_log(hls, AV_LOG_ERROR,
1124                     "second_level_segment_size hls_flag works only with file protocol segment names\n");
1125              ret = AVERROR(EINVAL);
1126              goto fail;
1127         }
1128     }
1129     if(hls->has_subtitle) {
1130
1131         if (hls->flags & HLS_SINGLE_FILE)
1132             vtt_pattern = ".vtt";
1133         vtt_basename_size = strlen(s->filename) + strlen(vtt_pattern) + 1;
1134         hls->vtt_basename = av_malloc(vtt_basename_size);
1135         if (!hls->vtt_basename) {
1136             ret = AVERROR(ENOMEM);
1137             goto fail;
1138         }
1139         hls->vtt_m3u8_name = av_malloc(vtt_basename_size);
1140         if (!hls->vtt_m3u8_name ) {
1141             ret = AVERROR(ENOMEM);
1142             goto fail;
1143         }
1144         av_strlcpy(hls->vtt_basename, s->filename, vtt_basename_size);
1145         p = strrchr(hls->vtt_basename, '.');
1146         if (p)
1147             *p = '\0';
1148
1149         if( hls->subtitle_filename ) {
1150             strcpy(hls->vtt_m3u8_name, hls->subtitle_filename);
1151         } else {
1152             strcpy(hls->vtt_m3u8_name, hls->vtt_basename);
1153             av_strlcat(hls->vtt_m3u8_name, "_vtt.m3u8", vtt_basename_size);
1154         }
1155         av_strlcat(hls->vtt_basename, vtt_pattern, vtt_basename_size);
1156     }
1157
1158     if ((ret = hls_mux_init(s)) < 0)
1159         goto fail;
1160
1161     if (hls->flags & HLS_APPEND_LIST) {
1162         parse_playlist(s, s->filename);
1163         hls->discontinuity = 1;
1164         if (hls->init_time > 0) {
1165             av_log(s, AV_LOG_WARNING, "append_list mode does not support hls_init_time,"
1166                    " hls_init_time value will have no effect\n");
1167             hls->init_time = 0;
1168             hls->recording_time = hls->time * AV_TIME_BASE;
1169         }
1170     }
1171
1172     if ((ret = hls_start(s)) < 0)
1173         goto fail;
1174
1175     av_dict_copy(&options, hls->format_options, 0);
1176     ret = avformat_write_header(hls->avf, &options);
1177     if (av_dict_count(options)) {
1178         av_log(s, AV_LOG_ERROR, "Some of provided format options in '%s' are not recognized\n", hls->format_options_str);
1179         ret = AVERROR(EINVAL);
1180         goto fail;
1181     }
1182     //av_assert0(s->nb_streams == hls->avf->nb_streams);
1183     for (i = 0; i < s->nb_streams; i++) {
1184         AVStream *inner_st;
1185         AVStream *outer_st = s->streams[i];
1186
1187         if (hls->max_seg_size > 0) {
1188             if ((outer_st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO) &&
1189                 (outer_st->codecpar->bit_rate > hls->max_seg_size)) {
1190                 av_log(s, AV_LOG_WARNING, "Your video bitrate is bigger than hls_segment_size, "
1191                        "(%"PRId64 " > %"PRId64 "), the result maybe not be what you want.",
1192                        outer_st->codecpar->bit_rate, hls->max_seg_size);
1193             }
1194         }
1195
1196         if (outer_st->codecpar->codec_type != AVMEDIA_TYPE_SUBTITLE)
1197             inner_st = hls->avf->streams[i];
1198         else if (hls->vtt_avf)
1199             inner_st = hls->vtt_avf->streams[0];
1200         else {
1201             /* We have a subtitle stream, when the user does not want one */
1202             inner_st = NULL;
1203             continue;
1204         }
1205         avpriv_set_pts_info(outer_st, inner_st->pts_wrap_bits, inner_st->time_base.num, inner_st->time_base.den);
1206     }
1207 fail:
1208
1209     av_dict_free(&options);
1210     if (ret < 0) {
1211         av_freep(&hls->basename);
1212         av_freep(&hls->vtt_basename);
1213         if (hls->avf)
1214             avformat_free_context(hls->avf);
1215         if (hls->vtt_avf)
1216             avformat_free_context(hls->vtt_avf);
1217
1218     }
1219     return ret;
1220 }
1221
1222 static int hls_write_packet(AVFormatContext *s, AVPacket *pkt)
1223 {
1224     HLSContext *hls = s->priv_data;
1225     AVFormatContext *oc = NULL;
1226     AVStream *st = s->streams[pkt->stream_index];
1227     int64_t end_pts = hls->recording_time * hls->number;
1228     int is_ref_pkt = 1;
1229     int ret, can_split = 1;
1230     int stream_index = 0;
1231
1232     if (hls->sequence - hls->nb_entries > hls->start_sequence && hls->init_time > 0) {
1233         /* reset end_pts, hls->recording_time at end of the init hls list */
1234         int init_list_dur = hls->init_time * hls->nb_entries * AV_TIME_BASE;
1235         int after_init_list_dur = (hls->sequence - hls->nb_entries ) * hls->time * AV_TIME_BASE;
1236         hls->recording_time = hls->time * AV_TIME_BASE;
1237         end_pts = init_list_dur + after_init_list_dur ;
1238     }
1239
1240     if( st->codecpar->codec_type == AVMEDIA_TYPE_SUBTITLE ) {
1241         oc = hls->vtt_avf;
1242         stream_index = 0;
1243     } else {
1244         oc = hls->avf;
1245         stream_index = pkt->stream_index;
1246     }
1247     if (hls->start_pts == AV_NOPTS_VALUE) {
1248         hls->start_pts = pkt->pts;
1249         hls->end_pts   = pkt->pts;
1250     }
1251
1252     if (hls->has_video) {
1253         can_split = st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO &&
1254                     ((pkt->flags & AV_PKT_FLAG_KEY) || (hls->flags & HLS_SPLIT_BY_TIME));
1255         is_ref_pkt = st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO;
1256     }
1257     if (pkt->pts == AV_NOPTS_VALUE)
1258         is_ref_pkt = can_split = 0;
1259
1260     if (is_ref_pkt) {
1261         if (hls->new_start) {
1262             hls->new_start = 0;
1263             hls->duration = (double)(pkt->pts - hls->end_pts)
1264                                        * st->time_base.num / st->time_base.den;
1265             hls->dpp = (double)(pkt->duration) * st->time_base.num / st->time_base.den;
1266         } else {
1267             hls->duration += (double)(pkt->duration) * st->time_base.num / st->time_base.den;
1268         }
1269
1270     }
1271     if (can_split && av_compare_ts(pkt->pts - hls->start_pts, st->time_base,
1272                                    end_pts, AV_TIME_BASE_Q) >= 0) {
1273         int64_t new_start_pos;
1274         char *old_filename = av_strdup(hls->avf->filename);
1275
1276         if (!old_filename) {
1277             return AVERROR(ENOMEM);
1278         }
1279
1280         av_write_frame(oc, NULL); /* Flush any buffered data */
1281
1282         new_start_pos = avio_tell(hls->avf->pb);
1283         hls->size = new_start_pos - hls->start_pos;
1284         ret = hls_append_segment(s, hls, hls->duration, hls->start_pos, hls->size);
1285         hls->start_pos = new_start_pos;
1286         if (ret < 0) {
1287             av_free(old_filename);
1288             return ret;
1289         }
1290
1291         hls->end_pts = pkt->pts;
1292         hls->duration = 0;
1293
1294         if (hls->flags & HLS_SINGLE_FILE) {
1295             if (hls->avf->oformat->priv_class && hls->avf->priv_data)
1296                 av_opt_set(hls->avf->priv_data, "mpegts_flags", "resend_headers", 0);
1297             hls->number++;
1298         } else if (hls->max_seg_size > 0) {
1299             if (hls->avf->oformat->priv_class && hls->avf->priv_data)
1300                 av_opt_set(hls->avf->priv_data, "mpegts_flags", "resend_headers", 0);
1301             if (hls->start_pos >= hls->max_seg_size) {
1302                 hls->sequence++;
1303                 ff_format_io_close(s, &oc->pb);
1304                 if ((hls->flags & (HLS_SECOND_LEVEL_SEGMENT_SIZE | HLS_SECOND_LEVEL_SEGMENT_DURATION)) &&
1305                      strlen(hls->current_segment_final_filename_fmt)) {
1306                     ff_rename(old_filename, hls->avf->filename, hls);
1307                 }
1308                 if (hls->vtt_avf)
1309                     ff_format_io_close(s, &hls->vtt_avf->pb);
1310                 ret = hls_start(s);
1311                 hls->start_pos = 0;
1312                 /* When split segment by byte, the duration is short than hls_time,
1313                  * so it is not enough one segment duration as hls_time, */
1314                 hls->number--;
1315             }
1316             hls->number++;
1317         } else {
1318             ff_format_io_close(s, &oc->pb);
1319             if ((hls->flags & (HLS_SECOND_LEVEL_SEGMENT_SIZE | HLS_SECOND_LEVEL_SEGMENT_DURATION)) &&
1320                 strlen(hls->current_segment_final_filename_fmt)) {
1321                 ff_rename(old_filename, hls->avf->filename, hls);
1322             }
1323             if (hls->vtt_avf)
1324                 ff_format_io_close(s, &hls->vtt_avf->pb);
1325
1326             ret = hls_start(s);
1327         }
1328
1329         if (ret < 0) {
1330             av_free(old_filename);
1331             return ret;
1332         }
1333
1334         if ((ret = hls_window(s, 0)) < 0) {
1335             av_free(old_filename);
1336             return ret;
1337         }
1338     }
1339
1340     ret = ff_write_chained(oc, stream_index, pkt, s, 0);
1341
1342     return ret;
1343 }
1344
1345 static int hls_write_trailer(struct AVFormatContext *s)
1346 {
1347     HLSContext *hls = s->priv_data;
1348     AVFormatContext *oc = hls->avf;
1349     AVFormatContext *vtt_oc = hls->vtt_avf;
1350     char *old_filename = av_strdup(hls->avf->filename);
1351
1352     if (!old_filename) {
1353         return AVERROR(ENOMEM);
1354     }
1355
1356
1357     av_write_trailer(oc);
1358     if (oc->pb) {
1359         hls->size = avio_tell(hls->avf->pb) - hls->start_pos;
1360         ff_format_io_close(s, &oc->pb);
1361         /* after av_write_trailer, then duration + 1 duration per packet */
1362         hls_append_segment(s, hls, hls->duration + hls->dpp, hls->start_pos, hls->size);
1363     }
1364
1365     if ((hls->flags & (HLS_SECOND_LEVEL_SEGMENT_SIZE | HLS_SECOND_LEVEL_SEGMENT_DURATION)) &&
1366          strlen(hls->current_segment_final_filename_fmt)) {
1367          ff_rename(old_filename, hls->avf->filename, hls);
1368     }
1369
1370     if (vtt_oc) {
1371         if (vtt_oc->pb)
1372             av_write_trailer(vtt_oc);
1373         hls->size = avio_tell(hls->vtt_avf->pb) - hls->start_pos;
1374         ff_format_io_close(s, &vtt_oc->pb);
1375     }
1376     av_freep(&hls->basename);
1377     avformat_free_context(oc);
1378
1379     hls->avf = NULL;
1380     hls_window(s, 1);
1381
1382     if (vtt_oc) {
1383         av_freep(&hls->vtt_basename);
1384         av_freep(&hls->vtt_m3u8_name);
1385         avformat_free_context(vtt_oc);
1386     }
1387
1388     hls_free_segments(hls->segments);
1389     hls_free_segments(hls->old_segments);
1390     av_free(old_filename);
1391     return 0;
1392 }
1393
1394 #define OFFSET(x) offsetof(HLSContext, x)
1395 #define E AV_OPT_FLAG_ENCODING_PARAM
1396 static const AVOption options[] = {
1397     {"start_number",  "set first number in the sequence",        OFFSET(start_sequence),AV_OPT_TYPE_INT64,  {.i64 = 0},     0, INT64_MAX, E},
1398     {"hls_time",      "set segment length in seconds",           OFFSET(time),    AV_OPT_TYPE_FLOAT,  {.dbl = 2},     0, FLT_MAX, E},
1399     {"hls_init_time", "set segment length in seconds at init list",           OFFSET(init_time),    AV_OPT_TYPE_FLOAT,  {.dbl = 0},     0, FLT_MAX, E},
1400     {"hls_list_size", "set maximum number of playlist entries",  OFFSET(max_nb_segments),    AV_OPT_TYPE_INT,    {.i64 = 5},     0, INT_MAX, E},
1401     {"hls_ts_options","set hls mpegts list of options for the container format used for hls", OFFSET(format_options_str), AV_OPT_TYPE_STRING, {.str = NULL},  0, 0,    E},
1402     {"hls_vtt_options","set hls vtt list of options for the container format used for hls", OFFSET(vtt_format_options_str), AV_OPT_TYPE_STRING, {.str = NULL},  0, 0,    E},
1403     {"hls_wrap",      "set number after which the index wraps",  OFFSET(wrap),    AV_OPT_TYPE_INT,    {.i64 = 0},     0, INT_MAX, E},
1404     {"hls_allow_cache", "explicitly set whether the client MAY (1) or MUST NOT (0) cache media segments", OFFSET(allowcache), AV_OPT_TYPE_INT, {.i64 = -1}, INT_MIN, INT_MAX, E},
1405     {"hls_base_url",  "url to prepend to each playlist entry",   OFFSET(baseurl), AV_OPT_TYPE_STRING, {.str = NULL},  0, 0,       E},
1406     {"hls_segment_filename", "filename template for segment files", OFFSET(segment_filename),   AV_OPT_TYPE_STRING, {.str = NULL},            0,       0,         E},
1407     {"hls_segment_size", "maximum size per segment file, (in bytes)",  OFFSET(max_seg_size),    AV_OPT_TYPE_INT,    {.i64 = 0},               0,       INT_MAX,   E},
1408     {"hls_key_info_file",    "file with key URI and key file path", OFFSET(key_info_file),      AV_OPT_TYPE_STRING, {.str = NULL},            0,       0,         E},
1409     {"hls_subtitle_path",     "set path of hls subtitles", OFFSET(subtitle_filename), AV_OPT_TYPE_STRING, {.str = NULL},  0, 0,    E},
1410     {"hls_flags",     "set flags affecting HLS playlist and media file generation", OFFSET(flags), AV_OPT_TYPE_FLAGS, {.i64 = 0 }, 0, UINT_MAX, E, "flags"},
1411     {"single_file",   "generate a single media file indexed with byte ranges", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_SINGLE_FILE }, 0, UINT_MAX,   E, "flags"},
1412     {"delete_segments", "delete segment files that are no longer part of the playlist", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_DELETE_SEGMENTS }, 0, UINT_MAX,   E, "flags"},
1413     {"round_durations", "round durations in m3u8 to whole numbers", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_ROUND_DURATIONS }, 0, UINT_MAX,   E, "flags"},
1414     {"discont_start", "start the playlist with a discontinuity tag", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_DISCONT_START }, 0, UINT_MAX,   E, "flags"},
1415     {"omit_endlist", "Do not append an endlist when ending stream", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_OMIT_ENDLIST }, 0, UINT_MAX,   E, "flags"},
1416     {"split_by_time", "split the hls segment by time which user set by hls_time", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_SPLIT_BY_TIME }, 0, UINT_MAX,   E, "flags"},
1417     {"append_list", "append the new segments into old hls segment list", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_APPEND_LIST }, 0, UINT_MAX,   E, "flags"},
1418     {"program_date_time", "add EXT-X-PROGRAM-DATE-TIME", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_PROGRAM_DATE_TIME }, 0, UINT_MAX,   E, "flags"},
1419     {"second_level_segment_index", "include segment index in segment filenames when use_localtime", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_SECOND_LEVEL_SEGMENT_INDEX }, 0, UINT_MAX,   E, "flags"},
1420     {"second_level_segment_duration", "include segment duration in segment filenames when use_localtime", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_SECOND_LEVEL_SEGMENT_DURATION }, 0, UINT_MAX,   E, "flags"},
1421     {"second_level_segment_size", "include segment size in segment filenames when use_localtime", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_SECOND_LEVEL_SEGMENT_SIZE }, 0, UINT_MAX,   E, "flags"},
1422     {"use_localtime", "set filename expansion with strftime at segment creation", OFFSET(use_localtime), AV_OPT_TYPE_BOOL, {.i64 = 0 }, 0, 1, E },
1423     {"use_localtime_mkdir", "create last directory component in strftime-generated filename", OFFSET(use_localtime_mkdir), AV_OPT_TYPE_BOOL, {.i64 = 0 }, 0, 1, E },
1424     {"hls_playlist_type", "set the HLS playlist type", OFFSET(pl_type), AV_OPT_TYPE_INT, {.i64 = PLAYLIST_TYPE_NONE }, 0, PLAYLIST_TYPE_NB-1, E, "pl_type" },
1425     {"event", "EVENT playlist", 0, AV_OPT_TYPE_CONST, {.i64 = PLAYLIST_TYPE_EVENT }, INT_MIN, INT_MAX, E, "pl_type" },
1426     {"vod", "VOD playlist", 0, AV_OPT_TYPE_CONST, {.i64 = PLAYLIST_TYPE_VOD }, INT_MIN, INT_MAX, E, "pl_type" },
1427     {"method", "set the HTTP method", OFFSET(method), AV_OPT_TYPE_STRING, {.str = NULL},  0, 0,    E},
1428     {"hls_start_number_source", "set source of first number in sequence", OFFSET(start_sequence_source_type), AV_OPT_TYPE_INT, {.i64 = HLS_START_SEQUENCE_AS_START_NUMBER }, 0, HLS_START_SEQUENCE_AS_FORMATTED_DATETIME, E, "start_sequence_source_type" },
1429     {"generic", "start_number value (default)", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_START_SEQUENCE_AS_START_NUMBER }, INT_MIN, INT_MAX, E, "start_sequence_source_type" },
1430     {"epoch", "seconds since epoch", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_START_SEQUENCE_AS_SECONDS_SINCE_EPOCH }, INT_MIN, INT_MAX, E, "start_sequence_source_type" },
1431     {"datetime", "current datetime as YYYYMMDDhhmmss", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_START_SEQUENCE_AS_FORMATTED_DATETIME }, INT_MIN, INT_MAX, E, "start_sequence_source_type" },
1432     { NULL },
1433 };
1434
1435 static const AVClass hls_class = {
1436     .class_name = "hls muxer",
1437     .item_name  = av_default_item_name,
1438     .option     = options,
1439     .version    = LIBAVUTIL_VERSION_INT,
1440 };
1441
1442
1443 AVOutputFormat ff_hls_muxer = {
1444     .name           = "hls",
1445     .long_name      = NULL_IF_CONFIG_SMALL("Apple HTTP Live Streaming"),
1446     .extensions     = "m3u8",
1447     .priv_data_size = sizeof(HLSContext),
1448     .audio_codec    = AV_CODEC_ID_AAC,
1449     .video_codec    = AV_CODEC_ID_H264,
1450     .subtitle_codec = AV_CODEC_ID_WEBVTT,
1451     .flags          = AVFMT_NOFILE | AVFMT_ALLOW_FLUSH,
1452     .write_header   = hls_write_header,
1453     .write_packet   = hls_write_packet,
1454     .write_trailer  = hls_write_trailer,
1455     .priv_class     = &hls_class,
1456 };