git.sesse.net Git - ffmpeg/blob - libavformat/hlsenc.c

   1 /*
   2  * Apple HTTP Live Streaming segmenter
   3  * Copyright (c) 2012, Luca Barbato
   4  *
   5  * This file is part of FFmpeg.
   6  *
   7  * FFmpeg is free software; you can redistribute it and/or
   8  * modify it under the terms of the GNU Lesser General Public
   9  * License as published by the Free Software Foundation; either
  10  * version 2.1 of the License, or (at your option) any later version.
  11  *
  12  * FFmpeg is distributed in the hope that it will be useful,
  13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  15  * Lesser General Public License for more details.
  16  *
  17  * You should have received a copy of the GNU Lesser General Public
  18  * License along with FFmpeg; if not, write to the Free Software
  19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
  20  */
  21
  22 #include "config.h"
  23 #include <float.h>
  24 #include <stdint.h>
  25 #if HAVE_UNISTD_H
  26 #include <unistd.h>
  27 #endif
  28
  29 #include "libavutil/avassert.h"
  30 #include "libavutil/mathematics.h"
  31 #include "libavutil/parseutils.h"
  32 #include "libavutil/avstring.h"
  33 #include "libavutil/opt.h"
  34 #include "libavutil/log.h"
  35 #include "libavutil/time_internal.h"
  36
  37 #include "avformat.h"
  38 #include "avio_internal.h"
  39 #include "internal.h"
  40 #include "os_support.h"
  41
  42 typedef enum {
  43   HLS_START_SEQUENCE_AS_START_NUMBER = 0,
  44   HLS_START_SEQUENCE_AS_SECONDS_SINCE_EPOCH = 1,
  45   HLS_START_SEQUENCE_AS_FORMATTED_DATETIME = 2,  // YYYYMMDDhhmmss
  46 } StartSequenceSourceType;
  47
  48 #define KEYSIZE 16
  49 #define LINE_BUFFER_SIZE 1024
  50 #define HLS_MICROSECOND_UNIT   1000000
  51
  52 typedef struct HLSSegment {
  53     char filename[1024];
  54     char sub_filename[1024];
  55     double duration; /* in seconds */
  56     int discont;
  57     int64_t pos;
  58     int64_t size;
  59
  60     char key_uri[LINE_BUFFER_SIZE + 1];
  61     char iv_string[KEYSIZE*2 + 1];
  62
  63     struct HLSSegment *next;
  64 } HLSSegment;
  65
  66 typedef enum HLSFlags {
  67     // Generate a single media file and use byte ranges in the playlist.
  68     HLS_SINGLE_FILE = (1 << 0),
  69     HLS_DELETE_SEGMENTS = (1 << 1),
  70     HLS_ROUND_DURATIONS = (1 << 2),
  71     HLS_DISCONT_START = (1 << 3),
  72     HLS_OMIT_ENDLIST = (1 << 4),
  73     HLS_SPLIT_BY_TIME = (1 << 5),
  74     HLS_APPEND_LIST = (1 << 6),
  75     HLS_PROGRAM_DATE_TIME = (1 << 7),
  76     HLS_SECOND_LEVEL_SEGMENT_INDEX = (1 << 8), // include segment index in segment filenames when use_localtime  e.g.: %%03d
  77     HLS_SECOND_LEVEL_SEGMENT_DURATION = (1 << 9), // include segment duration (microsec) in segment filenames when use_localtime  e.g.: %%09t
  78     HLS_SECOND_LEVEL_SEGMENT_SIZE = (1 << 10), // include segment size (bytes) in segment filenames when use_localtime  e.g.: %%014s
  79     HLS_TEMP_FILE = (1 << 11),
  80 } HLSFlags;
  81
  82 typedef enum {
  83     PLAYLIST_TYPE_NONE,
  84     PLAYLIST_TYPE_EVENT,
  85     PLAYLIST_TYPE_VOD,
  86     PLAYLIST_TYPE_NB,
  87 } PlaylistType;
  88
  89 typedef struct HLSContext {
  90     const AVClass *class;  // Class for private options.
  91     unsigned number;
  92     int64_t sequence;
  93     int64_t start_sequence;
  94     uint32_t start_sequence_source_type;  // enum StartSequenceSourceType
  95     AVOutputFormat *oformat;
  96     AVOutputFormat *vtt_oformat;
  97
  98     AVFormatContext *avf;
  99     AVFormatContext *vtt_avf;
 100
 101     float time;            // Set by a private option.
 102     float init_time;       // Set by a private option.
 103     int max_nb_segments;   // Set by a private option.
 104 #if FF_API_HLS_WRAP
 105     int  wrap;             // Set by a private option.
 106 #endif
 107     uint32_t flags;        // enum HLSFlags
 108     uint32_t pl_type;      // enum PlaylistType
 109     char *segment_filename;
 110
 111     int use_localtime;      ///< flag to expand filename with localtime
 112     int use_localtime_mkdir;///< flag to mkdir dirname in timebased filename
 113     int allowcache;
 114     int64_t recording_time;
 115     int has_video;
 116     int has_subtitle;
 117     int new_start;
 118     double dpp;           // duration per packet
 119     int64_t start_pts;
 120     int64_t end_pts;
 121     double duration;      // last segment duration computed so far, in seconds
 122     int64_t start_pos;    // last segment starting position
 123     int64_t size;         // last segment size
 124     int64_t max_seg_size; // every segment file max size
 125     int nb_entries;
 126     int discontinuity_set;
 127     int discontinuity;
 128
 129     HLSSegment *segments;
 130     HLSSegment *last_segment;
 131     HLSSegment *old_segments;
 132
 133     char *basename;
 134     char *vtt_basename;
 135     char *vtt_m3u8_name;
 136     char *baseurl;
 137     char *format_options_str;
 138     char *vtt_format_options_str;
 139     char *subtitle_filename;
 140     AVDictionary *format_options;
 141
 142     char *key_info_file;
 143     char key_file[LINE_BUFFER_SIZE + 1];
 144     char key_uri[LINE_BUFFER_SIZE + 1];
 145     char key_string[KEYSIZE*2 + 1];
 146     char iv_string[KEYSIZE*2 + 1];
 147     AVDictionary *vtt_format_options;
 148
 149     char *method;
 150
 151     double initial_prog_date_time;
 152     char current_segment_final_filename_fmt[1024]; // when renaming segments
 153 } HLSContext;
 154
 155 static int get_int_from_double(double val)
 156 {
 157     return (int)((val - (int)val) >= 0.001) ? (int)(val + 1) : (int)val;
 158 }
 159
 160 static int mkdir_p(const char *path) {
 161     int ret = 0;
 162     char *temp = av_strdup(path);
 163     char *pos = temp;
 164     char tmp_ch = '\0';
 165
 166     if (!path || !temp) {
 167         return -1;
 168     }
 169
 170     if (!strncmp(temp, "/", 1) || !strncmp(temp, "\\", 1)) {
 171         pos++;
 172     } else if (!strncmp(temp, "./", 2) || !strncmp(temp, ".\\", 2)) {
 173         pos += 2;
 174     }
 175
 176     for ( ; *pos != '\0'; ++pos) {
 177         if (*pos == '/' || *pos == '\\') {
 178             tmp_ch = *pos;
 179             *pos = '\0';
 180             ret = mkdir(temp, 0755);
 181             *pos = tmp_ch;
 182         }
 183     }
 184
 185     if ((*(pos - 1) != '/') || (*(pos - 1) != '\\')) {
 186         ret = mkdir(temp, 0755);
 187     }
 188
 189     av_free(temp);
 190     return ret;
 191 }
 192
 193 static int replace_int_data_in_filename(char *buf, int buf_size, const char *filename, char placeholder, int64_t number)
 194 {
 195     const char *p;
 196     char *q, buf1[20], c;
 197     int nd, len, addchar_count;
 198     int found_count = 0;
 199
 200     q = buf;
 201     p = filename;
 202     for (;;) {
 203         c = *p;
 204         if (c == '\0')
 205             break;
 206         if (c == '%' && *(p+1) == '%')  // %%
 207             addchar_count = 2;
 208         else if (c == '%' && (av_isdigit(*(p+1)) || *(p+1) == placeholder)) {
 209             nd = 0;
 210             addchar_count = 1;
 211             while (av_isdigit(*(p + addchar_count))) {
 212                 nd = nd * 10 + *(p + addchar_count) - '0';
 213                 addchar_count++;
 214             }
 215
 216             if (*(p + addchar_count) == placeholder) {
 217                 len = snprintf(buf1, sizeof(buf1), "%0*"PRId64, (number < 0) ? nd : nd++, number);
 218                 if (len < 1)  // returned error or empty buf1
 219                     goto fail;
 220                 if ((q - buf + len) > buf_size - 1)
 221                     goto fail;
 222                 memcpy(q, buf1, len);
 223                 q += len;
 224                 p += (addchar_count + 1);
 225                 addchar_count = 0;
 226                 found_count++;
 227             }
 228
 229         } else
 230             addchar_count = 1;
 231
 232         while (addchar_count--)
 233             if ((q - buf) < buf_size - 1)
 234                 *q++ = *p++;
 235             else
 236                 goto fail;
 237     }
 238     *q = '\0';
 239     return found_count;
 240 fail:
 241     *q = '\0';
 242     return -1;
 243 }
 244
 245 static int hls_delete_old_segments(AVFormatContext *s, HLSContext *hls) {
 246
 247     HLSSegment *segment, *previous_segment = NULL;
 248     float playlist_duration = 0.0f;
 249     int ret = 0, path_size, sub_path_size;
 250     char *dirname = NULL, *p, *sub_path;
 251     char *path = NULL;
 252     AVDictionary *options = NULL;
 253     AVIOContext *out = NULL;
 254     const char *proto = NULL;
 255
 256     segment = hls->segments;
 257     while (segment) {
 258         playlist_duration += segment->duration;
 259         segment = segment->next;
 260     }
 261
 262     segment = hls->old_segments;
 263     while (segment) {
 264         playlist_duration -= segment->duration;
 265         previous_segment = segment;
 266         segment = previous_segment->next;
 267         if (playlist_duration <= -previous_segment->duration) {
 268             previous_segment->next = NULL;
 269             break;
 270         }
 271     }
 272
 273     if (segment && !hls->use_localtime_mkdir) {
 274         if (hls->segment_filename) {
 275             dirname = av_strdup(hls->segment_filename);
 276         } else {
 277             dirname = av_strdup(hls->avf->filename);
 278         }
 279         if (!dirname) {
 280             ret = AVERROR(ENOMEM);
 281             goto fail;
 282         }
 283         p = (char *)av_basename(dirname);
 284         *p = '\0';
 285     }
 286
 287     while (segment) {
 288         av_log(hls, AV_LOG_DEBUG, "deleting old segment %s\n",
 289                                   segment->filename);
 290         path_size =  (hls->use_localtime_mkdir ? 0 : strlen(dirname)) + strlen(segment->filename) + 1;
 291         path = av_malloc(path_size);
 292         if (!path) {
 293             ret = AVERROR(ENOMEM);
 294             goto fail;
 295         }
 296
 297         if (hls->use_localtime_mkdir)
 298             av_strlcpy(path, segment->filename, path_size);
 299         else { // segment->filename contains basename only
 300             av_strlcpy(path, dirname, path_size);
 301             av_strlcat(path, segment->filename, path_size);
 302         }
 303
 304         proto = avio_find_protocol_name(s->filename);
 305         if (hls->method || (proto && !av_strcasecmp(proto, "http"))) {
 306             av_dict_set(&options, "method", "DELETE", 0);
 307             if ((ret = hls->avf->io_open(hls->avf, &out, path, AVIO_FLAG_WRITE, &options)) < 0)
 308                 goto fail;
 309             ff_format_io_close(hls->avf, &out);
 310         } else if (unlink(path) < 0) {
 311             av_log(hls, AV_LOG_ERROR, "failed to delete old segment %s: %s\n",
 312                                      path, strerror(errno));
 313         }
 314
 315         if ((segment->sub_filename[0] != '\0')) {
 316             sub_path_size = strlen(segment->sub_filename) + 1 + (dirname ? strlen(dirname) : 0);
 317             sub_path = av_malloc(sub_path_size);
 318             if (!sub_path) {
 319                 ret = AVERROR(ENOMEM);
 320                 goto fail;
 321             }
 322
 323             av_strlcpy(sub_path, dirname, sub_path_size);
 324             av_strlcat(sub_path, segment->sub_filename, sub_path_size);
 325
 326             if (hls->method || (proto && !av_strcasecmp(proto, "http"))) {
 327                 av_dict_set(&options, "method", "DELETE", 0);
 328                 if ((ret = hls->avf->io_open(hls->avf, &out, sub_path, AVIO_FLAG_WRITE, &options)) < 0) {
 329                     av_free(sub_path);
 330                     goto fail;
 331                 }
 332                 ff_format_io_close(hls->avf, &out);
 333             } else if (unlink(sub_path) < 0) {
 334                 av_log(hls, AV_LOG_ERROR, "failed to delete old segment %s: %s\n",
 335                                          sub_path, strerror(errno));
 336             }
 337             av_free(sub_path);
 338         }
 339         av_freep(&path);
 340         previous_segment = segment;
 341         segment = previous_segment->next;
 342         av_free(previous_segment);
 343     }
 344
 345 fail:
 346     av_free(path);
 347     av_free(dirname);
 348
 349     return ret;
 350 }
 351
 352 static int hls_encryption_start(AVFormatContext *s)
 353 {
 354     HLSContext *hls = s->priv_data;
 355     int ret;
 356     AVIOContext *pb;
 357     uint8_t key[KEYSIZE];
 358
 359     if ((ret = s->io_open(s, &pb, hls->key_info_file, AVIO_FLAG_READ, NULL)) < 0) {
 360         av_log(hls, AV_LOG_ERROR,
 361                 "error opening key info file %s\n", hls->key_info_file);
 362         return ret;
 363     }
 364
 365     ff_get_line(pb, hls->key_uri, sizeof(hls->key_uri));
 366     hls->key_uri[strcspn(hls->key_uri, "\r\n")] = '\0';
 367
 368     ff_get_line(pb, hls->key_file, sizeof(hls->key_file));
 369     hls->key_file[strcspn(hls->key_file, "\r\n")] = '\0';
 370
 371     ff_get_line(pb, hls->iv_string, sizeof(hls->iv_string));
 372     hls->iv_string[strcspn(hls->iv_string, "\r\n")] = '\0';
 373
 374     ff_format_io_close(s, &pb);
 375
 376     if (!*hls->key_uri) {
 377         av_log(hls, AV_LOG_ERROR, "no key URI specified in key info file\n");
 378         return AVERROR(EINVAL);
 379     }
 380
 381     if (!*hls->key_file) {
 382         av_log(hls, AV_LOG_ERROR, "no key file specified in key info file\n");
 383         return AVERROR(EINVAL);
 384     }
 385
 386     if ((ret = s->io_open(s, &pb, hls->key_file, AVIO_FLAG_READ, NULL)) < 0) {
 387         av_log(hls, AV_LOG_ERROR, "error opening key file %s\n", hls->key_file);
 388         return ret;
 389     }
 390
 391     ret = avio_read(pb, key, sizeof(key));
 392     ff_format_io_close(s, &pb);
 393     if (ret != sizeof(key)) {
 394         av_log(hls, AV_LOG_ERROR, "error reading key file %s\n", hls->key_file);
 395         if (ret >= 0 || ret == AVERROR_EOF)
 396             ret = AVERROR(EINVAL);
 397         return ret;
 398     }
 399     ff_data_to_hex(hls->key_string, key, sizeof(key), 0);
 400
 401     return 0;
 402 }
 403
 404 static int read_chomp_line(AVIOContext *s, char *buf, int maxlen)
 405 {
 406     int len = ff_get_line(s, buf, maxlen);
 407     while (len > 0 && av_isspace(buf[len - 1]))
 408         buf[--len] = '\0';
 409     return len;
 410 }
 411
 412 static int hls_mux_init(AVFormatContext *s)
 413 {
 414     HLSContext *hls = s->priv_data;
 415     AVFormatContext *oc;
 416     AVFormatContext *vtt_oc = NULL;
 417     int i, ret;
 418
 419     ret = avformat_alloc_output_context2(&hls->avf, hls->oformat, NULL, NULL);
 420     if (ret < 0)
 421         return ret;
 422     oc = hls->avf;
 423
 424     oc->filename[0]        = '\0';
 425     oc->oformat            = hls->oformat;
 426     oc->interrupt_callback = s->interrupt_callback;
 427     oc->max_delay          = s->max_delay;
 428     oc->opaque             = s->opaque;
 429     oc->io_open            = s->io_open;
 430     oc->io_close           = s->io_close;
 431     av_dict_copy(&oc->metadata, s->metadata, 0);
 432
 433     if(hls->vtt_oformat) {
 434         ret = avformat_alloc_output_context2(&hls->vtt_avf, hls->vtt_oformat, NULL, NULL);
 435         if (ret < 0)
 436             return ret;
 437         vtt_oc          = hls->vtt_avf;
 438         vtt_oc->oformat = hls->vtt_oformat;
 439         av_dict_copy(&vtt_oc->metadata, s->metadata, 0);
 440     }
 441
 442     for (i = 0; i < s->nb_streams; i++) {
 443         AVStream *st;
 444         AVFormatContext *loc;
 445         if (s->streams[i]->codecpar->codec_type == AVMEDIA_TYPE_SUBTITLE)
 446             loc = vtt_oc;
 447         else
 448             loc = oc;
 449
 450         if (!(st = avformat_new_stream(loc, NULL)))
 451             return AVERROR(ENOMEM);
 452         avcodec_parameters_copy(st->codecpar, s->streams[i]->codecpar);
 453         st->sample_aspect_ratio = s->streams[i]->sample_aspect_ratio;
 454         st->time_base = s->streams[i]->time_base;
 455         av_dict_copy(&st->metadata, s->streams[i]->metadata, 0);
 456     }
 457     hls->start_pos = 0;
 458     hls->new_start = 1;
 459
 460     return 0;
 461 }
 462
 463 static HLSSegment *find_segment_by_filename(HLSSegment *segment, const char *filename)
 464 {
 465     while (segment) {
 466         if (!av_strcasecmp(segment->filename,filename))
 467             return segment;
 468         segment = segment->next;
 469     }
 470     return (HLSSegment *) NULL;
 471 }
 472
 473 static int sls_flags_filename_process(struct AVFormatContext *s, HLSContext *hls, HLSSegment *en, double duration,
 474                                          int64_t pos, int64_t size)
 475 {
 476     if ((hls->flags & (HLS_SECOND_LEVEL_SEGMENT_SIZE | HLS_SECOND_LEVEL_SEGMENT_DURATION)) &&
 477         strlen(hls->current_segment_final_filename_fmt)) {
 478         av_strlcpy(hls->avf->filename, hls->current_segment_final_filename_fmt, sizeof(hls->avf->filename));
 479         if (hls->flags & HLS_SECOND_LEVEL_SEGMENT_SIZE) {
 480             char * filename = av_strdup(hls->avf->filename);  // %%s will be %s after strftime
 481             if (!filename) {
 482                 av_free(en);
 483                 return AVERROR(ENOMEM);
 484             }
 485             if (replace_int_data_in_filename(hls->avf->filename, sizeof(hls->avf->filename),
 486                 filename, 's', pos + size) < 1) {
 487                 av_log(hls, AV_LOG_ERROR,
 488                        "Invalid second level segment filename template '%s', "
 489                         "you can try to remove second_level_segment_size flag\n",
 490                        filename);
 491                 av_free(filename);
 492                 av_free(en);
 493                 return AVERROR(EINVAL);
 494             }
 495             av_free(filename);
 496         }
 497         if (hls->flags & HLS_SECOND_LEVEL_SEGMENT_DURATION) {
 498             char * filename = av_strdup(hls->avf->filename);  // %%t will be %t after strftime
 499             if (!filename) {
 500                 av_free(en);
 501                 return AVERROR(ENOMEM);
 502             }
 503             if (replace_int_data_in_filename(hls->avf->filename, sizeof(hls->avf->filename),
 504                 filename, 't',  (int64_t)round(duration * HLS_MICROSECOND_UNIT)) < 1) {
 505                 av_log(hls, AV_LOG_ERROR,
 506                        "Invalid second level segment filename template '%s', "
 507                         "you can try to remove second_level_segment_time flag\n",
 508                        filename);
 509                 av_free(filename);
 510                 av_free(en);
 511                 return AVERROR(EINVAL);
 512             }
 513             av_free(filename);
 514         }
 515     }
 516     return 0;
 517 }
 518
 519 static int sls_flag_check_duration_size_index(HLSContext *hls)
 520 {
 521     int ret = 0;
 522
 523     if (hls->flags & HLS_SECOND_LEVEL_SEGMENT_DURATION) {
 524          av_log(hls, AV_LOG_ERROR,
 525                 "second_level_segment_duration hls_flag requires use_localtime to be true\n");
 526          ret = AVERROR(EINVAL);
 527     }
 528     if (hls->flags & HLS_SECOND_LEVEL_SEGMENT_SIZE) {
 529          av_log(hls, AV_LOG_ERROR,
 530                 "second_level_segment_size hls_flag requires use_localtime to be true\n");
 531          ret = AVERROR(EINVAL);
 532     }
 533     if (hls->flags & HLS_SECOND_LEVEL_SEGMENT_INDEX) {
 534         av_log(hls, AV_LOG_ERROR,
 535                "second_level_segment_index hls_flag requires use_localtime to be true\n");
 536         ret = AVERROR(EINVAL);
 537     }
 538
 539     return ret;
 540 }
 541
 542 static int sls_flag_check_duration_size(HLSContext *hls)
 543 {
 544     const char *proto = avio_find_protocol_name(hls->basename);
 545     int segment_renaming_ok = proto && !strcmp(proto, "file");
 546     int ret = 0;
 547
 548     if ((hls->flags & HLS_SECOND_LEVEL_SEGMENT_DURATION) && !segment_renaming_ok) {
 549          av_log(hls, AV_LOG_ERROR,
 550                 "second_level_segment_duration hls_flag works only with file protocol segment names\n");
 551          ret = AVERROR(EINVAL);
 552     }
 553     if ((hls->flags & HLS_SECOND_LEVEL_SEGMENT_SIZE) && !segment_renaming_ok) {
 554          av_log(hls, AV_LOG_ERROR,
 555                 "second_level_segment_size hls_flag works only with file protocol segment names\n");
 556          ret = AVERROR(EINVAL);
 557     }
 558
 559     return ret;
 560 }
 561
 562 static void sls_flag_file_rename(HLSContext *hls, char *old_filename) {
 563     if ((hls->flags & (HLS_SECOND_LEVEL_SEGMENT_SIZE | HLS_SECOND_LEVEL_SEGMENT_DURATION)) &&
 564         strlen(hls->current_segment_final_filename_fmt)) {
 565         ff_rename(old_filename, hls->avf->filename, hls);
 566     }
 567 }
 568
 569 static int sls_flag_use_localtime_filename(AVFormatContext *oc, HLSContext *c)
 570 {
 571     if (c->flags & HLS_SECOND_LEVEL_SEGMENT_INDEX) {
 572         char * filename = av_strdup(oc->filename);  // %%d will be %d after strftime
 573         if (!filename)
 574             return AVERROR(ENOMEM);
 575         if (replace_int_data_in_filename(oc->filename, sizeof(oc->filename),
 576 #if FF_API_HLS_WRAP
 577             filename, 'd', c->wrap ? c->sequence % c->wrap : c->sequence) < 1) {
 578 #else
 579             filename, 'd', c->sequence) < 1) {
 580 #endif
 581             av_log(c, AV_LOG_ERROR, "Invalid second level segment filename template '%s', "
 582                     "you can try to remove second_level_segment_index flag\n",
 583                    filename);
 584             av_free(filename);
 585             return AVERROR(EINVAL);
 586         }
 587         av_free(filename);
 588     }
 589     if (c->flags & (HLS_SECOND_LEVEL_SEGMENT_SIZE | HLS_SECOND_LEVEL_SEGMENT_DURATION)) {
 590         av_strlcpy(c->current_segment_final_filename_fmt, oc->filename,
 591                    sizeof(c->current_segment_final_filename_fmt));
 592         if (c->flags & HLS_SECOND_LEVEL_SEGMENT_SIZE) {
 593             char * filename = av_strdup(oc->filename);  // %%s will be %s after strftime
 594             if (!filename)
 595                 return AVERROR(ENOMEM);
 596             if (replace_int_data_in_filename(oc->filename, sizeof(oc->filename), filename, 's', 0) < 1) {
 597                 av_log(c, AV_LOG_ERROR, "Invalid second level segment filename template '%s', "
 598                         "you can try to remove second_level_segment_size flag\n",
 599                        filename);
 600                 av_free(filename);
 601                 return AVERROR(EINVAL);
 602             }
 603             av_free(filename);
 604         }
 605         if (c->flags & HLS_SECOND_LEVEL_SEGMENT_DURATION) {
 606             char * filename = av_strdup(oc->filename);  // %%t will be %t after strftime
 607             if (!filename)
 608                 return AVERROR(ENOMEM);
 609             if (replace_int_data_in_filename(oc->filename, sizeof(oc->filename), filename, 't', 0) < 1) {
 610                 av_log(c, AV_LOG_ERROR, "Invalid second level segment filename template '%s', "
 611                         "you can try to remove second_level_segment_time flag\n",
 612                        filename);
 613                 av_free(filename);
 614                 return AVERROR(EINVAL);
 615             }
 616             av_free(filename);
 617         }
 618     }
 619     return 0;
 620 }
 621
 622 /* Create a new segment and append it to the segment list */
 623 static int hls_append_segment(struct AVFormatContext *s, HLSContext *hls, double duration,
 624                               int64_t pos, int64_t size)
 625 {
 626     HLSSegment *en = av_malloc(sizeof(*en));
 627     const char  *filename;
 628     int ret;
 629
 630     if (!en)
 631         return AVERROR(ENOMEM);
 632
 633     ret = sls_flags_filename_process(s, hls, en, duration, pos, size);
 634     if (ret < 0) {
 635         return ret;
 636     }
 637
 638     filename = av_basename(hls->avf->filename);
 639
 640     if (hls->use_localtime_mkdir) {
 641         filename = hls->avf->filename;
 642     }
 643     if (find_segment_by_filename(hls->segments, filename)
 644         || find_segment_by_filename(hls->old_segments, filename)) {
 645         av_log(hls, AV_LOG_WARNING, "Duplicated segment filename detected: %s\n", filename);
 646     }
 647     av_strlcpy(en->filename, filename, sizeof(en->filename));
 648
 649     if(hls->has_subtitle)
 650         av_strlcpy(en->sub_filename, av_basename(hls->vtt_avf->filename), sizeof(en->sub_filename));
 651     else
 652         en->sub_filename[0] = '\0';
 653
 654     en->duration = duration;
 655     en->pos      = pos;
 656     en->size     = size;
 657     en->next     = NULL;
 658     en->discont  = 0;
 659
 660     if (hls->discontinuity) {
 661         en->discont = 1;
 662         hls->discontinuity = 0;
 663     }
 664
 665     if (hls->key_info_file) {
 666         av_strlcpy(en->key_uri, hls->key_uri, sizeof(en->key_uri));
 667         av_strlcpy(en->iv_string, hls->iv_string, sizeof(en->iv_string));
 668     }
 669
 670     if (!hls->segments)
 671         hls->segments = en;
 672     else
 673         hls->last_segment->next = en;
 674
 675     hls->last_segment = en;
 676
 677     // EVENT or VOD playlists imply sliding window cannot be used
 678     if (hls->pl_type != PLAYLIST_TYPE_NONE)
 679         hls->max_nb_segments = 0;
 680
 681     if (hls->max_nb_segments && hls->nb_entries >= hls->max_nb_segments) {
 682         en = hls->segments;
 683         hls->initial_prog_date_time += en->duration;
 684         hls->segments = en->next;
 685         if (en && hls->flags & HLS_DELETE_SEGMENTS &&
 686 #if FF_API_HLS_WRAP
 687                 !(hls->flags & HLS_SINGLE_FILE || hls->wrap)) {
 688 #else
 689                 !(hls->flags & HLS_SINGLE_FILE)) {
 690 #endif
 691             en->next = hls->old_segments;
 692             hls->old_segments = en;
 693             if ((ret = hls_delete_old_segments(s, hls)) < 0)
 694                 return ret;
 695         } else
 696             av_free(en);
 697     } else
 698         hls->nb_entries++;
 699
 700     if (hls->max_seg_size > 0) {
 701         return 0;
 702     }
 703     hls->sequence++;
 704
 705     return 0;
 706 }
 707
 708 static int parse_playlist(AVFormatContext *s, const char *url)
 709 {
 710     HLSContext *hls = s->priv_data;
 711     AVIOContext *in;
 712     int ret = 0, is_segment = 0;
 713     int64_t new_start_pos;
 714     char line[1024];
 715     const char *ptr;
 716
 717     if ((ret = ffio_open_whitelist(&in, url, AVIO_FLAG_READ,
 718                                    &s->interrupt_callback, NULL,
 719                                    s->protocol_whitelist, s->protocol_blacklist)) < 0)
 720         return ret;
 721
 722     read_chomp_line(in, line, sizeof(line));
 723     if (strcmp(line, "#EXTM3U")) {
 724         ret = AVERROR_INVALIDDATA;
 725         goto fail;
 726     }
 727
 728     hls->discontinuity = 0;
 729     while (!avio_feof(in)) {
 730         read_chomp_line(in, line, sizeof(line));
 731         if (av_strstart(line, "#EXT-X-MEDIA-SEQUENCE:", &ptr)) {
 732             int64_t tmp_sequence = strtoll(ptr, NULL, 10);
 733             if (tmp_sequence < hls->sequence)
 734               av_log(hls, AV_LOG_VERBOSE,
 735                      "Found playlist sequence number was smaller """
 736                      "than specified start sequence number: %"PRId64" < %"PRId64", "
 737                      "omitting\n", tmp_sequence, hls->start_sequence);
 738             else {
 739               av_log(hls, AV_LOG_DEBUG, "Found playlist sequence number: %"PRId64"\n", tmp_sequence);
 740               hls->sequence = tmp_sequence;
 741             }
 742         } else if (av_strstart(line, "#EXT-X-DISCONTINUITY", &ptr)) {
 743             is_segment = 1;
 744             hls->discontinuity = 1;
 745         } else if (av_strstart(line, "#EXTINF:", &ptr)) {
 746             is_segment = 1;
 747             hls->duration = atof(ptr);
 748         } else if (av_strstart(line, "#", NULL)) {
 749             continue;
 750         } else if (line[0]) {
 751             if (is_segment) {
 752                 is_segment = 0;
 753                 new_start_pos = avio_tell(hls->avf->pb);
 754                 hls->size = new_start_pos - hls->start_pos;
 755                 av_strlcpy(hls->avf->filename, line, sizeof(line));
 756                 ret = hls_append_segment(s, hls, hls->duration, hls->start_pos, hls->size);
 757                 if (ret < 0)
 758                     goto fail;
 759                 hls->start_pos = new_start_pos;
 760             }
 761         }
 762     }
 763
 764 fail:
 765     avio_close(in);
 766     return ret;
 767 }
 768
 769 static void hls_free_segments(HLSSegment *p)
 770 {
 771     HLSSegment *en;
 772
 773     while(p) {
 774         en = p;
 775         p = p->next;
 776         av_free(en);
 777     }
 778 }
 779
 780 static void set_http_options(AVFormatContext *s, AVDictionary **options, HLSContext *c)
 781 {
 782     const char *proto = avio_find_protocol_name(s->filename);
 783     int http_base_proto = proto ? (!av_strcasecmp(proto, "http") || !av_strcasecmp(proto, "https")) : 0;
 784
 785     if (c->method) {
 786         av_dict_set(options, "method", c->method, 0);
 787     } else if (http_base_proto) {
 788         av_log(c, AV_LOG_WARNING, "No HTTP method set, hls muxer defaulting to method PUT.\n");
 789         av_dict_set(options, "method", "PUT", 0);
 790     }
 791 }
 792
 793 static void write_m3u8_head_block(HLSContext *hls, AVIOContext *out, int version,
 794                                   int target_duration, int64_t sequence)
 795 {
 796     avio_printf(out, "#EXTM3U\n");
 797     avio_printf(out, "#EXT-X-VERSION:%d\n", version);
 798     if (hls->allowcache == 0 || hls->allowcache == 1) {
 799         avio_printf(out, "#EXT-X-ALLOW-CACHE:%s\n", hls->allowcache == 0 ? "NO" : "YES");
 800     }
 801     avio_printf(out, "#EXT-X-TARGETDURATION:%d\n", target_duration);
 802     avio_printf(out, "#EXT-X-MEDIA-SEQUENCE:%"PRId64"\n", sequence);
 803     av_log(hls, AV_LOG_VERBOSE, "EXT-X-MEDIA-SEQUENCE:%"PRId64"\n", sequence);
 804 }
 805
 806 static void hls_rename_temp_file(AVFormatContext *s, AVFormatContext *oc)
 807 {
 808     size_t len = strlen(oc->filename);
 809     char final_filename[sizeof(oc->filename)];
 810
 811     av_strlcpy(final_filename, oc->filename, len);
 812     final_filename[len-4] = '\0';
 813     ff_rename(oc->filename, final_filename, s);
 814     oc->filename[len-4] = '\0';
 815 }
 816
 817 static int hls_window(AVFormatContext *s, int last)
 818 {
 819     HLSContext *hls = s->priv_data;
 820     HLSSegment *en;
 821     int target_duration = 0;
 822     int ret = 0;
 823     AVIOContext *out = NULL;
 824     AVIOContext *sub_out = NULL;
 825     char temp_filename[1024];
 826     int64_t sequence = FFMAX(hls->start_sequence, hls->sequence - hls->nb_entries);
 827     int version = 3;
 828     const char *proto = avio_find_protocol_name(s->filename);
 829     int use_rename = proto && !strcmp(proto, "file");
 830     static unsigned warned_non_file;
 831     char *key_uri = NULL;
 832     char *iv_string = NULL;
 833     AVDictionary *options = NULL;
 834     double prog_date_time = hls->initial_prog_date_time;
 835     int byterange_mode = (hls->flags & HLS_SINGLE_FILE) || (hls->max_seg_size > 0);
 836
 837     if (byterange_mode) {
 838         version = 4;
 839         sequence = 0;
 840     }
 841
 842     if (!use_rename && !warned_non_file++)
 843         av_log(s, AV_LOG_ERROR, "Cannot use rename on non file protocol, this may lead to races and temporary partial files\n");
 844
 845     set_http_options(s, &options, hls);
 846     snprintf(temp_filename, sizeof(temp_filename), use_rename ? "%s.tmp" : "%s", s->filename);
 847     if ((ret = s->io_open(s, &out, temp_filename, AVIO_FLAG_WRITE, &options)) < 0)
 848         goto fail;
 849
 850     for (en = hls->segments; en; en = en->next) {
 851         if (target_duration <= en->duration)
 852             target_duration = get_int_from_double(en->duration);
 853     }
 854
 855     hls->discontinuity_set = 0;
 856     write_m3u8_head_block(hls, out, version, target_duration, sequence);
 857     if (hls->pl_type == PLAYLIST_TYPE_EVENT) {
 858         avio_printf(out, "#EXT-X-PLAYLIST-TYPE:EVENT\n");
 859     } else if (hls->pl_type == PLAYLIST_TYPE_VOD) {
 860         avio_printf(out, "#EXT-X-PLAYLIST-TYPE:VOD\n");
 861     }
 862
 863     if((hls->flags & HLS_DISCONT_START) && sequence==hls->start_sequence && hls->discontinuity_set==0 ){
 864         avio_printf(out, "#EXT-X-DISCONTINUITY\n");
 865         hls->discontinuity_set = 1;
 866     }
 867     for (en = hls->segments; en; en = en->next) {
 868         if (hls->key_info_file && (!key_uri || strcmp(en->key_uri, key_uri) ||
 869                                     av_strcasecmp(en->iv_string, iv_string))) {
 870             avio_printf(out, "#EXT-X-KEY:METHOD=AES-128,URI=\"%s\"", en->key_uri);
 871             if (*en->iv_string)
 872                 avio_printf(out, ",IV=0x%s", en->iv_string);
 873             avio_printf(out, "\n");
 874             key_uri = en->key_uri;
 875             iv_string = en->iv_string;
 876         }
 877
 878         if (en->discont) {
 879             avio_printf(out, "#EXT-X-DISCONTINUITY\n");
 880         }
 881
 882         if (hls->flags & HLS_ROUND_DURATIONS)
 883             avio_printf(out, "#EXTINF:%ld,\n",  lrint(en->duration));
 884         else
 885             avio_printf(out, "#EXTINF:%f,\n", en->duration);
 886         if (byterange_mode)
 887              avio_printf(out, "#EXT-X-BYTERANGE:%"PRIi64"@%"PRIi64"\n",
 888                          en->size, en->pos);
 889         if (hls->flags & HLS_PROGRAM_DATE_TIME) {
 890             time_t tt, wrongsecs;
 891             int milli;
 892             struct tm *tm, tmpbuf;
 893             char buf0[128], buf1[128];
 894             tt = (int64_t)prog_date_time;
 895             milli = av_clip(lrint(1000*(prog_date_time - tt)), 0, 999);
 896             tm = localtime_r(&tt, &tmpbuf);
 897             strftime(buf0, sizeof(buf0), "%Y-%m-%dT%H:%M:%S", tm);
 898             if (!strftime(buf1, sizeof(buf1), "%z", tm) || buf1[1]<'0' ||buf1[1]>'2') {
 899                 int tz_min, dst = tm->tm_isdst;
 900                 tm = gmtime_r(&tt, &tmpbuf);
 901                 tm->tm_isdst = dst;
 902                 wrongsecs = mktime(tm);
 903                 tz_min = (abs(wrongsecs - tt) + 30) / 60;
 904                 snprintf(buf1, sizeof(buf1),
 905                          "%c%02d%02d",
 906                          wrongsecs <= tt ? '+' : '-',
 907                          tz_min / 60,
 908                          tz_min % 60);
 909             }
 910             avio_printf(out, "#EXT-X-PROGRAM-DATE-TIME:%s.%03d%s\n", buf0, milli, buf1);
 911             prog_date_time += en->duration;
 912         }
 913         if (hls->baseurl)
 914             avio_printf(out, "%s", hls->baseurl);
 915         avio_printf(out, "%s\n", en->filename);
 916     }
 917
 918     if (last && (hls->flags & HLS_OMIT_ENDLIST)==0)
 919         avio_printf(out, "#EXT-X-ENDLIST\n");
 920
 921     if( hls->vtt_m3u8_name ) {
 922         if ((ret = s->io_open(s, &sub_out, hls->vtt_m3u8_name, AVIO_FLAG_WRITE, &options)) < 0)
 923             goto fail;
 924         write_m3u8_head_block(hls, sub_out, version, target_duration, sequence);
 925
 926         for (en = hls->segments; en; en = en->next) {
 927             avio_printf(sub_out, "#EXTINF:%f,\n", en->duration);
 928             if (byterange_mode)
 929                  avio_printf(sub_out, "#EXT-X-BYTERANGE:%"PRIi64"@%"PRIi64"\n",
 930                          en->size, en->pos);
 931             if (hls->baseurl)
 932                 avio_printf(sub_out, "%s", hls->baseurl);
 933             avio_printf(sub_out, "%s\n", en->sub_filename);
 934         }
 935
 936         if (last)
 937             avio_printf(sub_out, "#EXT-X-ENDLIST\n");
 938
 939     }
 940
 941 fail:
 942     av_dict_free(&options);
 943     ff_format_io_close(s, &out);
 944     ff_format_io_close(s, &sub_out);
 945     if (ret >= 0 && use_rename)
 946         ff_rename(temp_filename, s->filename, s);
 947     return ret;
 948 }
 949
 950 static int hls_start(AVFormatContext *s)
 951 {
 952     HLSContext *c = s->priv_data;
 953     AVFormatContext *oc = c->avf;
 954     AVFormatContext *vtt_oc = c->vtt_avf;
 955     AVDictionary *options = NULL;
 956     char *filename, iv_string[KEYSIZE*2 + 1];
 957     int err = 0;
 958
 959     if (c->flags & HLS_SINGLE_FILE) {
 960         av_strlcpy(oc->filename, c->basename,
 961                    sizeof(oc->filename));
 962         if (c->vtt_basename)
 963             av_strlcpy(vtt_oc->filename, c->vtt_basename,
 964                   sizeof(vtt_oc->filename));
 965     } else if (c->max_seg_size > 0) {
 966         if (replace_int_data_in_filename(oc->filename, sizeof(oc->filename),
 967 #if FF_API_HLS_WRAP
 968             c->basename, 'd', c->wrap ? c->sequence % c->wrap : c->sequence) < 1) {
 969 #else
 970             c->basename, 'd', c->sequence) < 1) {
 971 #endif
 972                 av_log(oc, AV_LOG_ERROR, "Invalid segment filename template '%s', you can try to use -use_localtime 1 with it\n", c->basename);
 973                 return AVERROR(EINVAL);
 974         }
 975     } else {
 976         if (c->use_localtime) {
 977             time_t now0;
 978             struct tm *tm, tmpbuf;
 979             time(&now0);
 980             tm = localtime_r(&now0, &tmpbuf);
 981             if (!strftime(oc->filename, sizeof(oc->filename), c->basename, tm)) {
 982                 av_log(oc, AV_LOG_ERROR, "Could not get segment filename with use_localtime\n");
 983                 return AVERROR(EINVAL);
 984             }
 985
 986             err = sls_flag_use_localtime_filename(oc, c);
 987             if (err < 0) {
 988                 return AVERROR(ENOMEM);
 989             }
 990
 991             if (c->use_localtime_mkdir) {
 992                 const char *dir;
 993                 char *fn_copy = av_strdup(oc->filename);
 994                 if (!fn_copy) {
 995                     return AVERROR(ENOMEM);
 996                 }
 997                 dir = av_dirname(fn_copy);
 998                 if (mkdir_p(dir) == -1 && errno != EEXIST) {
 999                     av_log(oc, AV_LOG_ERROR, "Could not create directory %s with use_localtime_mkdir\n", dir);
1000                     av_free(fn_copy);
1001                     return AVERROR(errno);
1002                 }
1003                 av_free(fn_copy);
1004             }
1005         } else if (replace_int_data_in_filename(oc->filename, sizeof(oc->filename),
1006 #if FF_API_HLS_WRAP
1007                    c->basename, 'd', c->wrap ? c->sequence % c->wrap : c->sequence) < 1) {
1008 #else
1009                    c->basename, 'd', c->sequence) < 1) {
1010 #endif
1011             av_log(oc, AV_LOG_ERROR, "Invalid segment filename template '%s' you can try to use -use_localtime 1 with it\n", c->basename);
1012             return AVERROR(EINVAL);
1013         }
1014         if( c->vtt_basename) {
1015             if (replace_int_data_in_filename(vtt_oc->filename, sizeof(vtt_oc->filename),
1016 #if FF_API_HLS_WRAP
1017                 c->vtt_basename, 'd', c->wrap ? c->sequence % c->wrap : c->sequence) < 1) {
1018 #else
1019                 c->vtt_basename, 'd', c->sequence) < 1) {
1020 #endif
1021                 av_log(vtt_oc, AV_LOG_ERROR, "Invalid segment filename template '%s'\n", c->vtt_basename);
1022                 return AVERROR(EINVAL);
1023             }
1024        }
1025     }
1026     c->number++;
1027
1028     set_http_options(s, &options, c);
1029
1030     if (c->flags & HLS_TEMP_FILE) {
1031         av_strlcat(oc->filename, ".tmp", sizeof(oc->filename));
1032     }
1033
1034     if (c->key_info_file) {
1035         if ((err = hls_encryption_start(s)) < 0)
1036             goto fail;
1037         if ((err = av_dict_set(&options, "encryption_key", c->key_string, 0))
1038                 < 0)
1039             goto fail;
1040         err = av_strlcpy(iv_string, c->iv_string, sizeof(iv_string));
1041         if (!err)
1042             snprintf(iv_string, sizeof(iv_string), "%032"PRIx64, c->sequence);
1043         if ((err = av_dict_set(&options, "encryption_iv", iv_string, 0)) < 0)
1044            goto fail;
1045
1046         filename = av_asprintf("crypto:%s", oc->filename);
1047         if (!filename) {
1048             err = AVERROR(ENOMEM);
1049             goto fail;
1050         }
1051         err = s->io_open(s, &oc->pb, filename, AVIO_FLAG_WRITE, &options);
1052         av_free(filename);
1053         av_dict_free(&options);
1054         if (err < 0)
1055             return err;
1056     } else
1057         if ((err = s->io_open(s, &oc->pb, oc->filename, AVIO_FLAG_WRITE, &options)) < 0)
1058             goto fail;
1059     if (c->vtt_basename) {
1060         set_http_options(s, &options, c);
1061         if ((err = s->io_open(s, &vtt_oc->pb, vtt_oc->filename, AVIO_FLAG_WRITE, &options)) < 0)
1062             goto fail;
1063     }
1064     av_dict_free(&options);
1065
1066     /* We only require one PAT/PMT per segment. */
1067     if (oc->oformat->priv_class && oc->priv_data) {
1068         char period[21];
1069
1070         snprintf(period, sizeof(period), "%d", (INT_MAX / 2) - 1);
1071
1072         av_opt_set(oc->priv_data, "mpegts_flags", "resend_headers", 0);
1073         av_opt_set(oc->priv_data, "sdt_period", period, 0);
1074         av_opt_set(oc->priv_data, "pat_period", period, 0);
1075     }
1076
1077     if (c->vtt_basename) {
1078         err = avformat_write_header(vtt_oc,NULL);
1079         if (err < 0)
1080             return err;
1081     }
1082
1083     return 0;
1084 fail:
1085     av_dict_free(&options);
1086
1087     return err;
1088 }
1089
1090 static const char * get_default_pattern_localtime_fmt(void)
1091 {
1092     char b[21];
1093     time_t t = time(NULL);
1094     struct tm *p, tmbuf;
1095     p = localtime_r(&t, &tmbuf);
1096     // no %s support when strftime returned error or left format string unchanged
1097     // also no %s support on MSVC, which invokes the invalid parameter handler on unsupported format strings, instead of returning an error
1098     return (HAVE_LIBC_MSVCRT || !strftime(b, sizeof(b), "%s", p) || !strcmp(b, "%s")) ? "-%Y%m%d%H%M%S.ts" : "-%s.ts";
1099 }
1100
1101 static int hls_write_header(AVFormatContext *s)
1102 {
1103     HLSContext *hls = s->priv_data;
1104     int ret, i;
1105     char *p;
1106     const char *pattern = "%d.ts";
1107     const char *pattern_localtime_fmt = get_default_pattern_localtime_fmt();
1108     const char *vtt_pattern = "%d.vtt";
1109     AVDictionary *options = NULL;
1110     int basename_size;
1111     int vtt_basename_size;
1112
1113     if ((hls->start_sequence_source_type == HLS_START_SEQUENCE_AS_SECONDS_SINCE_EPOCH) ||
1114         (hls->start_sequence_source_type == HLS_START_SEQUENCE_AS_FORMATTED_DATETIME)) {
1115         time_t t = time(NULL); // we will need it in either case
1116         if (hls->start_sequence_source_type == HLS_START_SEQUENCE_AS_SECONDS_SINCE_EPOCH) {
1117             hls->start_sequence = (int64_t)t;
1118         } else if (hls->start_sequence_source_type == HLS_START_SEQUENCE_AS_FORMATTED_DATETIME) {
1119             char b[15];
1120             struct tm *p, tmbuf;
1121             if (!(p = localtime_r(&t, &tmbuf)))
1122                 return AVERROR(ENOMEM);
1123             if (!strftime(b, sizeof(b), "%Y%m%d%H%M%S", p))
1124                 return AVERROR(ENOMEM);
1125             hls->start_sequence = strtoll(b, NULL, 10);
1126         }
1127         av_log(hls, AV_LOG_DEBUG, "start_number evaluated to %"PRId64"\n", hls->start_sequence);
1128     }
1129
1130     hls->sequence       = hls->start_sequence;
1131     hls->recording_time = (hls->init_time ? hls->init_time : hls->time) * AV_TIME_BASE;
1132     hls->start_pts      = AV_NOPTS_VALUE;
1133     hls->current_segment_final_filename_fmt[0] = '\0';
1134
1135     if (hls->flags & HLS_PROGRAM_DATE_TIME) {
1136         time_t now0;
1137         time(&now0);
1138         hls->initial_prog_date_time = now0;
1139     }
1140
1141     if (hls->format_options_str) {
1142         ret = av_dict_parse_string(&hls->format_options, hls->format_options_str, "=", ":", 0);
1143         if (ret < 0) {
1144             av_log(s, AV_LOG_ERROR, "Could not parse format options list '%s'\n", hls->format_options_str);
1145             goto fail;
1146         }
1147     }
1148
1149     for (i = 0; i < s->nb_streams; i++) {
1150         hls->has_video +=
1151             s->streams[i]->codecpar->codec_type == AVMEDIA_TYPE_VIDEO;
1152         hls->has_subtitle +=
1153             s->streams[i]->codecpar->codec_type == AVMEDIA_TYPE_SUBTITLE;
1154     }
1155
1156     if (hls->has_video > 1)
1157         av_log(s, AV_LOG_WARNING,
1158                "More than a single video stream present, "
1159                "expect issues decoding it.\n");
1160
1161     hls->oformat = av_guess_format("mpegts", NULL, NULL);
1162
1163     if (!hls->oformat) {
1164         ret = AVERROR_MUXER_NOT_FOUND;
1165         goto fail;
1166     }
1167
1168     if(hls->has_subtitle) {
1169         hls->vtt_oformat = av_guess_format("webvtt", NULL, NULL);
1170         if (!hls->oformat) {
1171             ret = AVERROR_MUXER_NOT_FOUND;
1172             goto fail;
1173         }
1174     }
1175
1176     if (hls->segment_filename) {
1177         hls->basename = av_strdup(hls->segment_filename);
1178         if (!hls->basename) {
1179             ret = AVERROR(ENOMEM);
1180             goto fail;
1181         }
1182     } else {
1183         if (hls->flags & HLS_SINGLE_FILE)
1184             pattern = ".ts";
1185
1186         if (hls->use_localtime) {
1187             basename_size = strlen(s->filename) + strlen(pattern_localtime_fmt) + 1;
1188         } else {
1189             basename_size = strlen(s->filename) + strlen(pattern) + 1;
1190         }
1191         hls->basename = av_malloc(basename_size);
1192         if (!hls->basename) {
1193             ret = AVERROR(ENOMEM);
1194             goto fail;
1195         }
1196
1197         av_strlcpy(hls->basename, s->filename, basename_size);
1198
1199         p = strrchr(hls->basename, '.');
1200         if (p)
1201             *p = '\0';
1202         if (hls->use_localtime) {
1203             av_strlcat(hls->basename, pattern_localtime_fmt, basename_size);
1204         } else {
1205             av_strlcat(hls->basename, pattern, basename_size);
1206         }
1207     }
1208     if (!hls->use_localtime) {
1209         ret = sls_flag_check_duration_size_index(hls);
1210         if (ret < 0) {
1211              goto fail;
1212         }
1213     } else {
1214         ret = sls_flag_check_duration_size(hls);
1215         if (ret < 0) {
1216              goto fail;
1217         }
1218     }
1219     if(hls->has_subtitle) {
1220
1221         if (hls->flags & HLS_SINGLE_FILE)
1222             vtt_pattern = ".vtt";
1223         vtt_basename_size = strlen(s->filename) + strlen(vtt_pattern) + 1;
1224         hls->vtt_basename = av_malloc(vtt_basename_size);
1225         if (!hls->vtt_basename) {
1226             ret = AVERROR(ENOMEM);
1227             goto fail;
1228         }
1229         hls->vtt_m3u8_name = av_malloc(vtt_basename_size);
1230         if (!hls->vtt_m3u8_name ) {
1231             ret = AVERROR(ENOMEM);
1232             goto fail;
1233         }
1234         av_strlcpy(hls->vtt_basename, s->filename, vtt_basename_size);
1235         p = strrchr(hls->vtt_basename, '.');
1236         if (p)
1237             *p = '\0';
1238
1239         if( hls->subtitle_filename ) {
1240             strcpy(hls->vtt_m3u8_name, hls->subtitle_filename);
1241         } else {
1242             strcpy(hls->vtt_m3u8_name, hls->vtt_basename);
1243             av_strlcat(hls->vtt_m3u8_name, "_vtt.m3u8", vtt_basename_size);
1244         }
1245         av_strlcat(hls->vtt_basename, vtt_pattern, vtt_basename_size);
1246     }
1247
1248     if ((ret = hls_mux_init(s)) < 0)
1249         goto fail;
1250
1251     if (hls->flags & HLS_APPEND_LIST) {
1252         parse_playlist(s, s->filename);
1253         hls->discontinuity = 1;
1254         if (hls->init_time > 0) {
1255             av_log(s, AV_LOG_WARNING, "append_list mode does not support hls_init_time,"
1256                    " hls_init_time value will have no effect\n");
1257             hls->init_time = 0;
1258             hls->recording_time = hls->time * AV_TIME_BASE;
1259         }
1260     }
1261
1262     if ((ret = hls_start(s)) < 0)
1263         goto fail;
1264
1265     av_dict_copy(&options, hls->format_options, 0);
1266     ret = avformat_write_header(hls->avf, &options);
1267     if (av_dict_count(options)) {
1268         av_log(s, AV_LOG_ERROR, "Some of provided format options in '%s' are not recognized\n", hls->format_options_str);
1269         ret = AVERROR(EINVAL);
1270         goto fail;
1271     }
1272     //av_assert0(s->nb_streams == hls->avf->nb_streams);
1273     for (i = 0; i < s->nb_streams; i++) {
1274         AVStream *inner_st;
1275         AVStream *outer_st = s->streams[i];
1276
1277         if (hls->max_seg_size > 0) {
1278             if ((outer_st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO) &&
1279                 (outer_st->codecpar->bit_rate > hls->max_seg_size)) {
1280                 av_log(s, AV_LOG_WARNING, "Your video bitrate is bigger than hls_segment_size, "
1281                        "(%"PRId64 " > %"PRId64 "), the result maybe not be what you want.",
1282                        outer_st->codecpar->bit_rate, hls->max_seg_size);
1283             }
1284         }
1285
1286         if (outer_st->codecpar->codec_type != AVMEDIA_TYPE_SUBTITLE)
1287             inner_st = hls->avf->streams[i];
1288         else if (hls->vtt_avf)
1289             inner_st = hls->vtt_avf->streams[0];
1290         else {
1291             /* We have a subtitle stream, when the user does not want one */
1292             inner_st = NULL;
1293             continue;
1294         }
1295         avpriv_set_pts_info(outer_st, inner_st->pts_wrap_bits, inner_st->time_base.num, inner_st->time_base.den);
1296     }
1297 fail:
1298
1299     av_dict_free(&options);
1300     if (ret < 0) {
1301         av_freep(&hls->basename);
1302         av_freep(&hls->vtt_basename);
1303         if (hls->avf)
1304             avformat_free_context(hls->avf);
1305         if (hls->vtt_avf)
1306             avformat_free_context(hls->vtt_avf);
1307
1308     }
1309     return ret;
1310 }
1311
1312 static int hls_write_packet(AVFormatContext *s, AVPacket *pkt)
1313 {
1314     HLSContext *hls = s->priv_data;
1315     AVFormatContext *oc = NULL;
1316     AVStream *st = s->streams[pkt->stream_index];
1317     int64_t end_pts = hls->recording_time * hls->number;
1318     int is_ref_pkt = 1;
1319     int ret, can_split = 1;
1320     int stream_index = 0;
1321
1322     if (hls->sequence - hls->nb_entries > hls->start_sequence && hls->init_time > 0) {
1323         /* reset end_pts, hls->recording_time at end of the init hls list */
1324         int init_list_dur = hls->init_time * hls->nb_entries * AV_TIME_BASE;
1325         int after_init_list_dur = (hls->sequence - hls->nb_entries ) * hls->time * AV_TIME_BASE;
1326         hls->recording_time = hls->time * AV_TIME_BASE;
1327         end_pts = init_list_dur + after_init_list_dur ;
1328     }
1329
1330     if( st->codecpar->codec_type == AVMEDIA_TYPE_SUBTITLE ) {
1331         oc = hls->vtt_avf;
1332         stream_index = 0;
1333     } else {
1334         oc = hls->avf;
1335         stream_index = pkt->stream_index;
1336     }
1337     if (hls->start_pts == AV_NOPTS_VALUE) {
1338         hls->start_pts = pkt->pts;
1339         hls->end_pts   = pkt->pts;
1340     }
1341
1342     if (hls->has_video) {
1343         can_split = st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO &&
1344                     ((pkt->flags & AV_PKT_FLAG_KEY) || (hls->flags & HLS_SPLIT_BY_TIME));
1345         is_ref_pkt = st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO;
1346     }
1347     if (pkt->pts == AV_NOPTS_VALUE)
1348         is_ref_pkt = can_split = 0;
1349
1350     if (is_ref_pkt) {
1351         if (hls->new_start) {
1352             hls->new_start = 0;
1353             hls->duration = (double)(pkt->pts - hls->end_pts)
1354                                        * st->time_base.num / st->time_base.den;
1355             hls->dpp = (double)(pkt->duration) * st->time_base.num / st->time_base.den;
1356         } else {
1357             hls->duration += (double)(pkt->duration) * st->time_base.num / st->time_base.den;
1358         }
1359
1360     }
1361     if (can_split && av_compare_ts(pkt->pts - hls->start_pts, st->time_base,
1362                                    end_pts, AV_TIME_BASE_Q) >= 0) {
1363         int64_t new_start_pos;
1364         char *old_filename = av_strdup(hls->avf->filename);
1365
1366         if (!old_filename) {
1367             return AVERROR(ENOMEM);
1368         }
1369
1370         av_write_frame(oc, NULL); /* Flush any buffered data */
1371
1372         new_start_pos = avio_tell(hls->avf->pb);
1373         hls->size = new_start_pos - hls->start_pos;
1374
1375         ff_format_io_close(s, &oc->pb);
1376         if (hls->vtt_avf) {
1377             ff_format_io_close(s, &hls->vtt_avf->pb);
1378         }
1379         if ((hls->flags & HLS_TEMP_FILE) && oc->filename[0]) {
1380             if (!(hls->flags & HLS_SINGLE_FILE) || (hls->max_seg_size <= 0))
1381                 if (hls->avf->oformat->priv_class && hls->avf->priv_data)
1382                     av_opt_set(hls->avf->priv_data, "mpegts_flags", "resend_headers", 0);
1383             hls_rename_temp_file(s, oc);
1384         }
1385
1386         ret = hls_append_segment(s, hls, hls->duration, hls->start_pos, hls->size);
1387         hls->start_pos = new_start_pos;
1388         if (ret < 0) {
1389             av_free(old_filename);
1390             return ret;
1391         }
1392
1393         hls->end_pts = pkt->pts;
1394         hls->duration = 0;
1395
1396         if (hls->flags & HLS_SINGLE_FILE) {
1397             hls->number++;
1398         } else if (hls->max_seg_size > 0) {
1399             if (hls->start_pos >= hls->max_seg_size) {
1400                 hls->sequence++;
1401                 sls_flag_file_rename(hls, old_filename);
1402                 ret = hls_start(s);
1403                 hls->start_pos = 0;
1404                 /* When split segment by byte, the duration is short than hls_time,
1405                  * so it is not enough one segment duration as hls_time, */
1406                 hls->number--;
1407             }
1408             hls->number++;
1409         } else {
1410             sls_flag_file_rename(hls, old_filename);
1411             ret = hls_start(s);
1412         }
1413
1414         if (ret < 0) {
1415             av_free(old_filename);
1416             return ret;
1417         }
1418
1419         if ((ret = hls_window(s, 0)) < 0) {
1420             av_free(old_filename);
1421             return ret;
1422         }
1423     }
1424
1425     ret = ff_write_chained(oc, stream_index, pkt, s, 0);
1426
1427     return ret;
1428 }
1429
1430 static int hls_write_trailer(struct AVFormatContext *s)
1431 {
1432     HLSContext *hls = s->priv_data;
1433     AVFormatContext *oc = hls->avf;
1434     AVFormatContext *vtt_oc = hls->vtt_avf;
1435     char *old_filename = av_strdup(hls->avf->filename);
1436
1437     if (!old_filename) {
1438         return AVERROR(ENOMEM);
1439     }
1440
1441
1442     av_write_trailer(oc);
1443     if (oc->pb) {
1444         hls->size = avio_tell(hls->avf->pb) - hls->start_pos;
1445         ff_format_io_close(s, &oc->pb);
1446
1447         if ((hls->flags & HLS_TEMP_FILE) && oc->filename[0]) {
1448             hls_rename_temp_file(s, oc);
1449         }
1450
1451         /* after av_write_trailer, then duration + 1 duration per packet */
1452         hls_append_segment(s, hls, hls->duration + hls->dpp, hls->start_pos, hls->size);
1453     }
1454
1455     sls_flag_file_rename(hls, old_filename);
1456
1457     if (vtt_oc) {
1458         if (vtt_oc->pb)
1459             av_write_trailer(vtt_oc);
1460         hls->size = avio_tell(hls->vtt_avf->pb) - hls->start_pos;
1461         ff_format_io_close(s, &vtt_oc->pb);
1462     }
1463     av_freep(&hls->basename);
1464     avformat_free_context(oc);
1465
1466     hls->avf = NULL;
1467     hls_window(s, 1);
1468
1469     if (vtt_oc) {
1470         av_freep(&hls->vtt_basename);
1471         av_freep(&hls->vtt_m3u8_name);
1472         avformat_free_context(vtt_oc);
1473     }
1474
1475     hls_free_segments(hls->segments);
1476     hls_free_segments(hls->old_segments);
1477     av_free(old_filename);
1478     return 0;
1479 }
1480
1481 #define OFFSET(x) offsetof(HLSContext, x)
1482 #define E AV_OPT_FLAG_ENCODING_PARAM
1483 static const AVOption options[] = {
1484     {"start_number",  "set first number in the sequence",        OFFSET(start_sequence),AV_OPT_TYPE_INT64,  {.i64 = 0},     0, INT64_MAX, E},
1485     {"hls_time",      "set segment length in seconds",           OFFSET(time),    AV_OPT_TYPE_FLOAT,  {.dbl = 2},     0, FLT_MAX, E},
1486     {"hls_init_time", "set segment length in seconds at init list",           OFFSET(init_time),    AV_OPT_TYPE_FLOAT,  {.dbl = 0},     0, FLT_MAX, E},
1487     {"hls_list_size", "set maximum number of playlist entries",  OFFSET(max_nb_segments),    AV_OPT_TYPE_INT,    {.i64 = 5},     0, INT_MAX, E},
1488     {"hls_ts_options","set hls mpegts list of options for the container format used for hls", OFFSET(format_options_str), AV_OPT_TYPE_STRING, {.str = NULL},  0, 0,    E},
1489     {"hls_vtt_options","set hls vtt list of options for the container format used for hls", OFFSET(vtt_format_options_str), AV_OPT_TYPE_STRING, {.str = NULL},  0, 0,    E},
1490 #if FF_API_HLS_WRAP
1491     {"hls_wrap",      "set number after which the index wraps (will be deprecated)",  OFFSET(wrap),    AV_OPT_TYPE_INT,    {.i64 = 0},     0, INT_MAX, E},
1492 #endif
1493     {"hls_allow_cache", "explicitly set whether the client MAY (1) or MUST NOT (0) cache media segments", OFFSET(allowcache), AV_OPT_TYPE_INT, {.i64 = -1}, INT_MIN, INT_MAX, E},
1494     {"hls_base_url",  "url to prepend to each playlist entry",   OFFSET(baseurl), AV_OPT_TYPE_STRING, {.str = NULL},  0, 0,       E},
1495     {"hls_segment_filename", "filename template for segment files", OFFSET(segment_filename),   AV_OPT_TYPE_STRING, {.str = NULL},            0,       0,         E},
1496     {"hls_segment_size", "maximum size per segment file, (in bytes)",  OFFSET(max_seg_size),    AV_OPT_TYPE_INT,    {.i64 = 0},               0,       INT_MAX,   E},
1497     {"hls_key_info_file",    "file with key URI and key file path", OFFSET(key_info_file),      AV_OPT_TYPE_STRING, {.str = NULL},            0,       0,         E},
1498     {"hls_subtitle_path",     "set path of hls subtitles", OFFSET(subtitle_filename), AV_OPT_TYPE_STRING, {.str = NULL},  0, 0,    E},
1499     {"hls_flags",     "set flags affecting HLS playlist and media file generation", OFFSET(flags), AV_OPT_TYPE_FLAGS, {.i64 = 0 }, 0, UINT_MAX, E, "flags"},
1500     {"single_file",   "generate a single media file indexed with byte ranges", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_SINGLE_FILE }, 0, UINT_MAX,   E, "flags"},
1501     {"temp_file", "write segment to temporary file and rename when complete", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_TEMP_FILE }, 0, UINT_MAX,   E, "flags"},
1502     {"delete_segments", "delete segment files that are no longer part of the playlist", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_DELETE_SEGMENTS }, 0, UINT_MAX,   E, "flags"},
1503     {"round_durations", "round durations in m3u8 to whole numbers", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_ROUND_DURATIONS }, 0, UINT_MAX,   E, "flags"},
1504     {"discont_start", "start the playlist with a discontinuity tag", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_DISCONT_START }, 0, UINT_MAX,   E, "flags"},
1505     {"omit_endlist", "Do not append an endlist when ending stream", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_OMIT_ENDLIST }, 0, UINT_MAX,   E, "flags"},
1506     {"split_by_time", "split the hls segment by time which user set by hls_time", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_SPLIT_BY_TIME }, 0, UINT_MAX,   E, "flags"},
1507     {"append_list", "append the new segments into old hls segment list", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_APPEND_LIST }, 0, UINT_MAX,   E, "flags"},
1508     {"program_date_time", "add EXT-X-PROGRAM-DATE-TIME", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_PROGRAM_DATE_TIME }, 0, UINT_MAX,   E, "flags"},
1509     {"second_level_segment_index", "include segment index in segment filenames when use_localtime", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_SECOND_LEVEL_SEGMENT_INDEX }, 0, UINT_MAX,   E, "flags"},
1510     {"second_level_segment_duration", "include segment duration in segment filenames when use_localtime", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_SECOND_LEVEL_SEGMENT_DURATION }, 0, UINT_MAX,   E, "flags"},
1511     {"second_level_segment_size", "include segment size in segment filenames when use_localtime", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_SECOND_LEVEL_SEGMENT_SIZE }, 0, UINT_MAX,   E, "flags"},
1512     {"use_localtime", "set filename expansion with strftime at segment creation", OFFSET(use_localtime), AV_OPT_TYPE_BOOL, {.i64 = 0 }, 0, 1, E },
1513     {"use_localtime_mkdir", "create last directory component in strftime-generated filename", OFFSET(use_localtime_mkdir), AV_OPT_TYPE_BOOL, {.i64 = 0 }, 0, 1, E },
1514     {"hls_playlist_type", "set the HLS playlist type", OFFSET(pl_type), AV_OPT_TYPE_INT, {.i64 = PLAYLIST_TYPE_NONE }, 0, PLAYLIST_TYPE_NB-1, E, "pl_type" },
1515     {"event", "EVENT playlist", 0, AV_OPT_TYPE_CONST, {.i64 = PLAYLIST_TYPE_EVENT }, INT_MIN, INT_MAX, E, "pl_type" },
1516     {"vod", "VOD playlist", 0, AV_OPT_TYPE_CONST, {.i64 = PLAYLIST_TYPE_VOD }, INT_MIN, INT_MAX, E, "pl_type" },
1517     {"method", "set the HTTP method(default: PUT)", OFFSET(method), AV_OPT_TYPE_STRING, {.str = NULL},  0, 0,    E},
1518     {"hls_start_number_source", "set source of first number in sequence", OFFSET(start_sequence_source_type), AV_OPT_TYPE_INT, {.i64 = HLS_START_SEQUENCE_AS_START_NUMBER }, 0, HLS_START_SEQUENCE_AS_FORMATTED_DATETIME, E, "start_sequence_source_type" },
1519     {"generic", "start_number value (default)", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_START_SEQUENCE_AS_START_NUMBER }, INT_MIN, INT_MAX, E, "start_sequence_source_type" },
1520     {"epoch", "seconds since epoch", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_START_SEQUENCE_AS_SECONDS_SINCE_EPOCH }, INT_MIN, INT_MAX, E, "start_sequence_source_type" },
1521     {"datetime", "current datetime as YYYYMMDDhhmmss", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_START_SEQUENCE_AS_FORMATTED_DATETIME }, INT_MIN, INT_MAX, E, "start_sequence_source_type" },
1522     { NULL },
1523 };
1524
1525 static const AVClass hls_class = {
1526     .class_name = "hls muxer",
1527     .item_name  = av_default_item_name,
1528     .option     = options,
1529     .version    = LIBAVUTIL_VERSION_INT,
1530 };
1531
1532
1533 AVOutputFormat ff_hls_muxer = {
1534     .name           = "hls",
1535     .long_name      = NULL_IF_CONFIG_SMALL("Apple HTTP Live Streaming"),
1536     .extensions     = "m3u8",
1537     .priv_data_size = sizeof(HLSContext),
1538     .audio_codec    = AV_CODEC_ID_AAC,
1539     .video_codec    = AV_CODEC_ID_H264,
1540     .subtitle_codec = AV_CODEC_ID_WEBVTT,
1541     .flags          = AVFMT_NOFILE | AVFMT_ALLOW_FLUSH,
1542     .write_header   = hls_write_header,
1543     .write_packet   = hls_write_packet,
1544     .write_trailer  = hls_write_trailer,
1545     .priv_class     = &hls_class,
1546 };