]> git.sesse.net Git - ffmpeg/blob - libavformat/hlsenc.c
Merge commit '17c99b6158f2c6720af74e81ee727ee50d2e7e96'
[ffmpeg] / libavformat / hlsenc.c
1 /*
2  * Apple HTTP Live Streaming segmenter
3  * Copyright (c) 2012, Luca Barbato
4  *
5  * This file is part of FFmpeg.
6  *
7  * FFmpeg is free software; you can redistribute it and/or
8  * modify it under the terms of the GNU Lesser General Public
9  * License as published by the Free Software Foundation; either
10  * version 2.1 of the License, or (at your option) any later version.
11  *
12  * FFmpeg is distributed in the hope that it will be useful,
13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
15  * Lesser General Public License for more details.
16  *
17  * You should have received a copy of the GNU Lesser General Public
18  * License along with FFmpeg; if not, write to the Free Software
19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
20  */
21
22 #include "config.h"
23 #include <float.h>
24 #include <stdint.h>
25 #if HAVE_UNISTD_H
26 #include <unistd.h>
27 #endif
28
29 #include "libavutil/avassert.h"
30 #include "libavutil/mathematics.h"
31 #include "libavutil/parseutils.h"
32 #include "libavutil/avstring.h"
33 #include "libavutil/opt.h"
34 #include "libavutil/log.h"
35 #include "libavutil/time_internal.h"
36
37 #include "avformat.h"
38 #include "avio_internal.h"
39 #include "internal.h"
40 #include "os_support.h"
41
42 #define KEYSIZE 16
43 #define LINE_BUFFER_SIZE 1024
44
45 typedef struct HLSSegment {
46     char filename[1024];
47     char sub_filename[1024];
48     double duration; /* in seconds */
49     int64_t pos;
50     int64_t size;
51
52     char key_uri[LINE_BUFFER_SIZE + 1];
53     char iv_string[KEYSIZE*2 + 1];
54
55     struct HLSSegment *next;
56 } HLSSegment;
57
58 typedef enum HLSFlags {
59     // Generate a single media file and use byte ranges in the playlist.
60     HLS_SINGLE_FILE = (1 << 0),
61     HLS_DELETE_SEGMENTS = (1 << 1),
62     HLS_ROUND_DURATIONS = (1 << 2),
63     HLS_DISCONT_START = (1 << 3),
64     HLS_OMIT_ENDLIST = (1 << 4),
65     HLS_SPLIT_BY_TIME = (1 << 5),
66     HLS_APPEND_LIST = (1 << 6),
67     HLS_PROGRAM_DATE_TIME = (1 << 7),
68 } HLSFlags;
69
70 typedef enum {
71     PLAYLIST_TYPE_NONE,
72     PLAYLIST_TYPE_EVENT,
73     PLAYLIST_TYPE_VOD,
74     PLAYLIST_TYPE_NB,
75 } PlaylistType;
76
77 typedef struct HLSContext {
78     const AVClass *class;  // Class for private options.
79     unsigned number;
80     int64_t sequence;
81     int64_t start_sequence;
82     AVOutputFormat *oformat;
83     AVOutputFormat *vtt_oformat;
84
85     AVFormatContext *avf;
86     AVFormatContext *vtt_avf;
87
88     float time;            // Set by a private option.
89     float init_time;       // Set by a private option.
90     int max_nb_segments;   // Set by a private option.
91     int  wrap;             // Set by a private option.
92     uint32_t flags;        // enum HLSFlags
93     uint32_t pl_type;      // enum PlaylistType
94     char *segment_filename;
95
96     int use_localtime;      ///< flag to expand filename with localtime
97     int use_localtime_mkdir;///< flag to mkdir dirname in timebased filename
98     int allowcache;
99     int64_t recording_time;
100     int has_video;
101     int has_subtitle;
102     int64_t start_pts;
103     int64_t end_pts;
104     double duration;      // last segment duration computed so far, in seconds
105     int64_t start_pos;    // last segment starting position
106     int64_t size;         // last segment size
107     int64_t max_seg_size; // every segment file max size
108     int nb_entries;
109     int discontinuity_set;
110
111     HLSSegment *segments;
112     HLSSegment *last_segment;
113     HLSSegment *old_segments;
114
115     char *basename;
116     char *vtt_basename;
117     char *vtt_m3u8_name;
118     char *baseurl;
119     char *format_options_str;
120     char *vtt_format_options_str;
121     char *subtitle_filename;
122     AVDictionary *format_options;
123
124     char *key_info_file;
125     char key_file[LINE_BUFFER_SIZE + 1];
126     char key_uri[LINE_BUFFER_SIZE + 1];
127     char key_string[KEYSIZE*2 + 1];
128     char iv_string[KEYSIZE*2 + 1];
129     AVDictionary *vtt_format_options;
130
131     char *method;
132
133     double initial_prog_date_time;
134 } HLSContext;
135
136 static int mkdir_p(const char *path) {
137     int ret = 0;
138     char *temp = av_strdup(path);
139     char *pos = temp;
140     char tmp_ch = '\0';
141
142     if (!path || !temp) {
143         return -1;
144     }
145
146     if (!strncmp(temp, "/", 1) || !strncmp(temp, "\\", 1)) {
147         pos++;
148     } else if (!strncmp(temp, "./", 2) || !strncmp(temp, ".\\", 2)) {
149         pos += 2;
150     }
151
152     for ( ; *pos != '\0'; ++pos) {
153         if (*pos == '/' || *pos == '\\') {
154             tmp_ch = *pos;
155             *pos = '\0';
156             ret = mkdir(temp, 0755);
157             *pos = tmp_ch;
158         }
159     }
160
161     if ((*(pos - 1) != '/') || (*(pos - 1) != '\\')) {
162         ret = mkdir(temp, 0755);
163     }
164
165     av_free(temp);
166     return ret;
167 }
168
169 static int hls_delete_old_segments(HLSContext *hls) {
170
171     HLSSegment *segment, *previous_segment = NULL;
172     float playlist_duration = 0.0f;
173     int ret = 0, path_size, sub_path_size;
174     char *dirname = NULL, *p, *sub_path;
175     char *path = NULL;
176
177     segment = hls->segments;
178     while (segment) {
179         playlist_duration += segment->duration;
180         segment = segment->next;
181     }
182
183     segment = hls->old_segments;
184     while (segment) {
185         playlist_duration -= segment->duration;
186         hls->initial_prog_date_time += segment->duration;
187         previous_segment = segment;
188         segment = previous_segment->next;
189         if (playlist_duration <= -previous_segment->duration) {
190             previous_segment->next = NULL;
191             break;
192         }
193     }
194
195     if (segment) {
196         if (hls->segment_filename) {
197             dirname = av_strdup(hls->segment_filename);
198         } else {
199             dirname = av_strdup(hls->avf->filename);
200         }
201         if (!dirname) {
202             ret = AVERROR(ENOMEM);
203             goto fail;
204         }
205         p = (char *)av_basename(dirname);
206         *p = '\0';
207     }
208
209     while (segment) {
210         av_log(hls, AV_LOG_DEBUG, "deleting old segment %s\n",
211                                   segment->filename);
212         path_size = strlen(dirname) + strlen(segment->filename) + 1;
213         path = av_malloc(path_size);
214         if (!path) {
215             ret = AVERROR(ENOMEM);
216             goto fail;
217         }
218
219         av_strlcpy(path, dirname, path_size);
220         av_strlcat(path, segment->filename, path_size);
221         if (unlink(path) < 0) {
222             av_log(hls, AV_LOG_ERROR, "failed to delete old segment %s: %s\n",
223                                      path, strerror(errno));
224         }
225
226         if (segment->sub_filename[0] != '\0') {
227             sub_path_size = strlen(dirname) + strlen(segment->sub_filename) + 1;
228             sub_path = av_malloc(sub_path_size);
229             if (!sub_path) {
230                 ret = AVERROR(ENOMEM);
231                 goto fail;
232             }
233
234             av_strlcpy(sub_path, dirname, sub_path_size);
235             av_strlcat(sub_path, segment->sub_filename, sub_path_size);
236             if (unlink(sub_path) < 0) {
237                 av_log(hls, AV_LOG_ERROR, "failed to delete old segment %s: %s\n",
238                                          sub_path, strerror(errno));
239             }
240             av_free(sub_path);
241         }
242         av_freep(&path);
243         previous_segment = segment;
244         segment = previous_segment->next;
245         av_free(previous_segment);
246     }
247
248 fail:
249     av_free(path);
250     av_free(dirname);
251
252     return ret;
253 }
254
255 static int hls_encryption_start(AVFormatContext *s)
256 {
257     HLSContext *hls = s->priv_data;
258     int ret;
259     AVIOContext *pb;
260     uint8_t key[KEYSIZE];
261
262     if ((ret = s->io_open(s, &pb, hls->key_info_file, AVIO_FLAG_READ, NULL)) < 0) {
263         av_log(hls, AV_LOG_ERROR,
264                 "error opening key info file %s\n", hls->key_info_file);
265         return ret;
266     }
267
268     ff_get_line(pb, hls->key_uri, sizeof(hls->key_uri));
269     hls->key_uri[strcspn(hls->key_uri, "\r\n")] = '\0';
270
271     ff_get_line(pb, hls->key_file, sizeof(hls->key_file));
272     hls->key_file[strcspn(hls->key_file, "\r\n")] = '\0';
273
274     ff_get_line(pb, hls->iv_string, sizeof(hls->iv_string));
275     hls->iv_string[strcspn(hls->iv_string, "\r\n")] = '\0';
276
277     ff_format_io_close(s, &pb);
278
279     if (!*hls->key_uri) {
280         av_log(hls, AV_LOG_ERROR, "no key URI specified in key info file\n");
281         return AVERROR(EINVAL);
282     }
283
284     if (!*hls->key_file) {
285         av_log(hls, AV_LOG_ERROR, "no key file specified in key info file\n");
286         return AVERROR(EINVAL);
287     }
288
289     if ((ret = s->io_open(s, &pb, hls->key_file, AVIO_FLAG_READ, NULL)) < 0) {
290         av_log(hls, AV_LOG_ERROR, "error opening key file %s\n", hls->key_file);
291         return ret;
292     }
293
294     ret = avio_read(pb, key, sizeof(key));
295     ff_format_io_close(s, &pb);
296     if (ret != sizeof(key)) {
297         av_log(hls, AV_LOG_ERROR, "error reading key file %s\n", hls->key_file);
298         if (ret >= 0 || ret == AVERROR_EOF)
299             ret = AVERROR(EINVAL);
300         return ret;
301     }
302     ff_data_to_hex(hls->key_string, key, sizeof(key), 0);
303
304     return 0;
305 }
306
307 static int read_chomp_line(AVIOContext *s, char *buf, int maxlen)
308 {
309     int len = ff_get_line(s, buf, maxlen);
310     while (len > 0 && av_isspace(buf[len - 1]))
311         buf[--len] = '\0';
312     return len;
313 }
314
315 static int hls_mux_init(AVFormatContext *s)
316 {
317     HLSContext *hls = s->priv_data;
318     AVFormatContext *oc;
319     AVFormatContext *vtt_oc = NULL;
320     int i, ret;
321
322     ret = avformat_alloc_output_context2(&hls->avf, hls->oformat, NULL, NULL);
323     if (ret < 0)
324         return ret;
325     oc = hls->avf;
326
327     oc->oformat            = hls->oformat;
328     oc->interrupt_callback = s->interrupt_callback;
329     oc->max_delay          = s->max_delay;
330     oc->opaque             = s->opaque;
331     oc->io_open            = s->io_open;
332     oc->io_close           = s->io_close;
333     av_dict_copy(&oc->metadata, s->metadata, 0);
334
335     if(hls->vtt_oformat) {
336         ret = avformat_alloc_output_context2(&hls->vtt_avf, hls->vtt_oformat, NULL, NULL);
337         if (ret < 0)
338             return ret;
339         vtt_oc          = hls->vtt_avf;
340         vtt_oc->oformat = hls->vtt_oformat;
341         av_dict_copy(&vtt_oc->metadata, s->metadata, 0);
342     }
343
344     for (i = 0; i < s->nb_streams; i++) {
345         AVStream *st;
346         AVFormatContext *loc;
347         if (s->streams[i]->codecpar->codec_type == AVMEDIA_TYPE_SUBTITLE)
348             loc = vtt_oc;
349         else
350             loc = oc;
351
352         if (!(st = avformat_new_stream(loc, NULL)))
353             return AVERROR(ENOMEM);
354         avcodec_parameters_copy(st->codecpar, s->streams[i]->codecpar);
355         st->sample_aspect_ratio = s->streams[i]->sample_aspect_ratio;
356         st->time_base = s->streams[i]->time_base;
357     }
358     hls->start_pos = 0;
359
360     return 0;
361 }
362
363 /* Create a new segment and append it to the segment list */
364 static int hls_append_segment(struct AVFormatContext *s, HLSContext *hls, double duration,
365                               int64_t pos, int64_t size)
366 {
367     HLSSegment *en = av_malloc(sizeof(*en));
368     const char  *filename;
369     int ret;
370
371     if (!en)
372         return AVERROR(ENOMEM);
373
374     filename = av_basename(hls->avf->filename);
375
376     if (hls->use_localtime_mkdir) {
377         filename = hls->avf->filename;
378     }
379     av_strlcpy(en->filename, filename, sizeof(en->filename));
380
381     if(hls->has_subtitle)
382         av_strlcpy(en->sub_filename, av_basename(hls->vtt_avf->filename), sizeof(en->sub_filename));
383     else
384         en->sub_filename[0] = '\0';
385
386     en->duration = duration;
387     en->pos      = pos;
388     en->size     = size;
389     en->next     = NULL;
390
391     if (hls->key_info_file) {
392         av_strlcpy(en->key_uri, hls->key_uri, sizeof(en->key_uri));
393         av_strlcpy(en->iv_string, hls->iv_string, sizeof(en->iv_string));
394     }
395
396     if (!hls->segments)
397         hls->segments = en;
398     else
399         hls->last_segment->next = en;
400
401     hls->last_segment = en;
402
403     // EVENT or VOD playlists imply sliding window cannot be used
404     if (hls->pl_type != PLAYLIST_TYPE_NONE)
405         hls->max_nb_segments = 0;
406
407     if (hls->max_nb_segments && hls->nb_entries >= hls->max_nb_segments) {
408         en = hls->segments;
409         hls->segments = en->next;
410         if (en && hls->flags & HLS_DELETE_SEGMENTS &&
411                 !(hls->flags & HLS_SINGLE_FILE || hls->wrap)) {
412             en->next = hls->old_segments;
413             hls->old_segments = en;
414             if ((ret = hls_delete_old_segments(hls)) < 0)
415                 return ret;
416         } else
417             av_free(en);
418     } else
419         hls->nb_entries++;
420
421     if (hls->max_seg_size > 0) {
422         return 0;
423     }
424     hls->sequence++;
425
426     return 0;
427 }
428
429 static int parse_playlist(AVFormatContext *s, const char *url)
430 {
431     HLSContext *hls = s->priv_data;
432     AVIOContext *in;
433     int ret = 0, is_segment = 0;
434     int64_t new_start_pos;
435     char line[1024];
436     const char *ptr;
437
438     if ((ret = ffio_open_whitelist(&in, url, AVIO_FLAG_READ,
439                                    &s->interrupt_callback, NULL,
440                                    s->protocol_whitelist, s->protocol_blacklist)) < 0)
441         return ret;
442
443     read_chomp_line(in, line, sizeof(line));
444     if (strcmp(line, "#EXTM3U")) {
445         ret = AVERROR_INVALIDDATA;
446         goto fail;
447     }
448
449     while (!avio_feof(in)) {
450         read_chomp_line(in, line, sizeof(line));
451         if (av_strstart(line, "#EXT-X-MEDIA-SEQUENCE:", &ptr)) {
452             hls->sequence = atoi(ptr);
453         } else if (av_strstart(line, "#EXTINF:", &ptr)) {
454             is_segment = 1;
455             hls->duration = atof(ptr);
456         } else if (av_strstart(line, "#", NULL)) {
457             continue;
458         } else if (line[0]) {
459             if (is_segment) {
460                 is_segment = 0;
461                 new_start_pos = avio_tell(hls->avf->pb);
462                 hls->size = new_start_pos - hls->start_pos;
463                 av_strlcpy(hls->avf->filename, line, sizeof(line));
464                 ret = hls_append_segment(s, hls, hls->duration, hls->start_pos, hls->size);
465                 if (ret < 0)
466                     goto fail;
467                 hls->start_pos = new_start_pos;
468             }
469         }
470     }
471
472 fail:
473     avio_close(in);
474     return ret;
475 }
476
477 static void hls_free_segments(HLSSegment *p)
478 {
479     HLSSegment *en;
480
481     while(p) {
482         en = p;
483         p = p->next;
484         av_free(en);
485     }
486 }
487
488 static void set_http_options(AVDictionary **options, HLSContext *c)
489 {
490     if (c->method)
491         av_dict_set(options, "method", c->method, 0);
492 }
493
494 static int hls_window(AVFormatContext *s, int last)
495 {
496     HLSContext *hls = s->priv_data;
497     HLSSegment *en;
498     int target_duration = 0;
499     int ret = 0;
500     AVIOContext *out = NULL;
501     AVIOContext *sub_out = NULL;
502     char temp_filename[1024];
503     int64_t sequence = FFMAX(hls->start_sequence, hls->sequence - hls->nb_entries);
504     int version = 3;
505     const char *proto = avio_find_protocol_name(s->filename);
506     int use_rename = proto && !strcmp(proto, "file");
507     static unsigned warned_non_file;
508     char *key_uri = NULL;
509     char *iv_string = NULL;
510     AVDictionary *options = NULL;
511     double prog_date_time = hls->initial_prog_date_time;
512     int byterange_mode = (hls->flags & HLS_SINGLE_FILE) || (hls->max_seg_size > 0);
513
514     if (byterange_mode) {
515         version = 4;
516         sequence = 0;
517     }
518
519     if (!use_rename && !warned_non_file++)
520         av_log(s, AV_LOG_ERROR, "Cannot use rename on non file protocol, this may lead to races and temporary partial files\n");
521
522     set_http_options(&options, hls);
523     snprintf(temp_filename, sizeof(temp_filename), use_rename ? "%s.tmp" : "%s", s->filename);
524     if ((ret = s->io_open(s, &out, temp_filename, AVIO_FLAG_WRITE, &options)) < 0)
525         goto fail;
526
527     for (en = hls->segments; en; en = en->next) {
528         if (target_duration < en->duration)
529             target_duration = ceil(en->duration);
530     }
531
532     hls->discontinuity_set = 0;
533     avio_printf(out, "#EXTM3U\n");
534     avio_printf(out, "#EXT-X-VERSION:%d\n", version);
535     if (hls->allowcache == 0 || hls->allowcache == 1) {
536         avio_printf(out, "#EXT-X-ALLOW-CACHE:%s\n", hls->allowcache == 0 ? "NO" : "YES");
537     }
538     avio_printf(out, "#EXT-X-TARGETDURATION:%d\n", target_duration);
539     avio_printf(out, "#EXT-X-MEDIA-SEQUENCE:%"PRId64"\n", sequence);
540     if (hls->pl_type == PLAYLIST_TYPE_EVENT) {
541         avio_printf(out, "#EXT-X-PLAYLIST-TYPE:EVENT\n");
542     } else if (hls->pl_type == PLAYLIST_TYPE_VOD) {
543         avio_printf(out, "#EXT-X-PLAYLIST-TYPE:VOD\n");
544     }
545
546     av_log(s, AV_LOG_VERBOSE, "EXT-X-MEDIA-SEQUENCE:%"PRId64"\n",
547            sequence);
548     if((hls->flags & HLS_DISCONT_START) && sequence==hls->start_sequence && hls->discontinuity_set==0 ){
549         avio_printf(out, "#EXT-X-DISCONTINUITY\n");
550         hls->discontinuity_set = 1;
551     }
552     for (en = hls->segments; en; en = en->next) {
553         if (hls->key_info_file && (!key_uri || strcmp(en->key_uri, key_uri) ||
554                                     av_strcasecmp(en->iv_string, iv_string))) {
555             avio_printf(out, "#EXT-X-KEY:METHOD=AES-128,URI=\"%s\"", en->key_uri);
556             if (*en->iv_string)
557                 avio_printf(out, ",IV=0x%s", en->iv_string);
558             avio_printf(out, "\n");
559             key_uri = en->key_uri;
560             iv_string = en->iv_string;
561         }
562
563         if (hls->flags & HLS_ROUND_DURATIONS)
564             avio_printf(out, "#EXTINF:%ld,\n",  lrint(en->duration));
565         else
566             avio_printf(out, "#EXTINF:%f,\n", en->duration);
567         if (byterange_mode)
568              avio_printf(out, "#EXT-X-BYTERANGE:%"PRIi64"@%"PRIi64"\n",
569                          en->size, en->pos);
570         if (hls->flags & HLS_PROGRAM_DATE_TIME) {
571             time_t tt, wrongsecs;
572             int milli;
573             struct tm *tm, tmpbuf;
574             char buf0[128], buf1[128];
575             tt = (int64_t)prog_date_time;
576             milli = av_clip(lrint(1000*(prog_date_time - tt)), 0, 999);
577             tm = localtime_r(&tt, &tmpbuf);
578             strftime(buf0, sizeof(buf0), "%Y-%m-%dT%H:%M:%S", tm);
579             if (!strftime(buf1, sizeof(buf1), "%z", tm) || buf1[1]<'0' ||buf1[1]>'2') {
580                 int tz_min, dst = tm->tm_isdst;
581                 tm = gmtime_r(&tt, &tmpbuf);
582                 tm->tm_isdst = dst;
583                 wrongsecs = mktime(tm);
584                 tz_min = (abs(wrongsecs - tt) + 30) / 60;
585                 snprintf(buf1, sizeof(buf1),
586                          "%c%02d%02d",
587                          wrongsecs <= tt ? '+' : '-',
588                          tz_min / 60,
589                          tz_min % 60);
590             }
591             avio_printf(out, "#EXT-X-PROGRAM-DATE-TIME:%s.%03d%s\n", buf0, milli, buf1);
592             prog_date_time += en->duration;
593         }
594         if (hls->baseurl)
595             avio_printf(out, "%s", hls->baseurl);
596         avio_printf(out, "%s\n", en->filename);
597     }
598
599     if (last && (hls->flags & HLS_OMIT_ENDLIST)==0)
600         avio_printf(out, "#EXT-X-ENDLIST\n");
601
602     if( hls->vtt_m3u8_name ) {
603         if ((ret = s->io_open(s, &sub_out, hls->vtt_m3u8_name, AVIO_FLAG_WRITE, &options)) < 0)
604             goto fail;
605         avio_printf(sub_out, "#EXTM3U\n");
606         avio_printf(sub_out, "#EXT-X-VERSION:%d\n", version);
607         if (hls->allowcache == 0 || hls->allowcache == 1) {
608             avio_printf(sub_out, "#EXT-X-ALLOW-CACHE:%s\n", hls->allowcache == 0 ? "NO" : "YES");
609         }
610         avio_printf(sub_out, "#EXT-X-TARGETDURATION:%d\n", target_duration);
611         avio_printf(sub_out, "#EXT-X-MEDIA-SEQUENCE:%"PRId64"\n", sequence);
612
613         av_log(s, AV_LOG_VERBOSE, "EXT-X-MEDIA-SEQUENCE:%"PRId64"\n",
614                sequence);
615
616         for (en = hls->segments; en; en = en->next) {
617             avio_printf(sub_out, "#EXTINF:%f,\n", en->duration);
618             if (byterange_mode)
619                  avio_printf(sub_out, "#EXT-X-BYTERANGE:%"PRIi64"@%"PRIi64"\n",
620                          en->size, en->pos);
621             if (hls->baseurl)
622                 avio_printf(sub_out, "%s", hls->baseurl);
623             avio_printf(sub_out, "%s\n", en->sub_filename);
624         }
625
626         if (last)
627             avio_printf(sub_out, "#EXT-X-ENDLIST\n");
628
629     }
630
631 fail:
632     av_dict_free(&options);
633     ff_format_io_close(s, &out);
634     ff_format_io_close(s, &sub_out);
635     if (ret >= 0 && use_rename)
636         ff_rename(temp_filename, s->filename, s);
637     return ret;
638 }
639
640 static int hls_start(AVFormatContext *s)
641 {
642     HLSContext *c = s->priv_data;
643     AVFormatContext *oc = c->avf;
644     AVFormatContext *vtt_oc = c->vtt_avf;
645     AVDictionary *options = NULL;
646     char *filename, iv_string[KEYSIZE*2 + 1];
647     int err = 0;
648
649     if (c->flags & HLS_SINGLE_FILE) {
650         av_strlcpy(oc->filename, c->basename,
651                    sizeof(oc->filename));
652         if (c->vtt_basename)
653             av_strlcpy(vtt_oc->filename, c->vtt_basename,
654                   sizeof(vtt_oc->filename));
655     } else if (c->max_seg_size > 0) {
656         if (av_get_frame_filename2(oc->filename, sizeof(oc->filename),
657             c->basename, c->wrap ? c->sequence % c->wrap : c->sequence,
658             AV_FRAME_FILENAME_FLAGS_MULTIPLE) < 0) {
659                 av_log(oc, AV_LOG_ERROR, "Invalid segment filename template '%s', you can try to use -use_localtime 1 with it\n", c->basename);
660                 return AVERROR(EINVAL);
661         }
662     } else {
663         if (c->use_localtime) {
664             time_t now0;
665             struct tm *tm, tmpbuf;
666             time(&now0);
667             tm = localtime_r(&now0, &tmpbuf);
668             if (!strftime(oc->filename, sizeof(oc->filename), c->basename, tm)) {
669                 av_log(oc, AV_LOG_ERROR, "Could not get segment filename with use_localtime\n");
670                 return AVERROR(EINVAL);
671             }
672
673             if (c->use_localtime_mkdir) {
674                 const char *dir;
675                 char *fn_copy = av_strdup(oc->filename);
676                 if (!fn_copy) {
677                     return AVERROR(ENOMEM);
678                 }
679                 dir = av_dirname(fn_copy);
680                 if (mkdir_p(dir) == -1 && errno != EEXIST) {
681                     av_log(oc, AV_LOG_ERROR, "Could not create directory %s with use_localtime_mkdir\n", dir);
682                     av_free(fn_copy);
683                     return AVERROR(errno);
684                 }
685                 av_free(fn_copy);
686             }
687         } else if (av_get_frame_filename2(oc->filename, sizeof(oc->filename),
688                                   c->basename, c->wrap ? c->sequence % c->wrap : c->sequence,
689                                   AV_FRAME_FILENAME_FLAGS_MULTIPLE) < 0) {
690             av_log(oc, AV_LOG_ERROR, "Invalid segment filename template '%s' you can try to use -use_localtime 1 with it\n", c->basename);
691             return AVERROR(EINVAL);
692         }
693         if( c->vtt_basename) {
694             if (av_get_frame_filename2(vtt_oc->filename, sizeof(vtt_oc->filename),
695                               c->vtt_basename, c->wrap ? c->sequence % c->wrap : c->sequence,
696                               AV_FRAME_FILENAME_FLAGS_MULTIPLE) < 0) {
697                 av_log(vtt_oc, AV_LOG_ERROR, "Invalid segment filename template '%s'\n", c->vtt_basename);
698                 return AVERROR(EINVAL);
699             }
700        }
701     }
702     c->number++;
703
704     set_http_options(&options, c);
705
706     if (c->key_info_file) {
707         if ((err = hls_encryption_start(s)) < 0)
708             goto fail;
709         if ((err = av_dict_set(&options, "encryption_key", c->key_string, 0))
710                 < 0)
711             goto fail;
712         err = av_strlcpy(iv_string, c->iv_string, sizeof(iv_string));
713         if (!err)
714             snprintf(iv_string, sizeof(iv_string), "%032"PRIx64, c->sequence);
715         if ((err = av_dict_set(&options, "encryption_iv", iv_string, 0)) < 0)
716            goto fail;
717
718         filename = av_asprintf("crypto:%s", oc->filename);
719         if (!filename) {
720             err = AVERROR(ENOMEM);
721             goto fail;
722         }
723         err = s->io_open(s, &oc->pb, filename, AVIO_FLAG_WRITE, &options);
724         av_free(filename);
725         av_dict_free(&options);
726         if (err < 0)
727             return err;
728     } else
729         if ((err = s->io_open(s, &oc->pb, oc->filename, AVIO_FLAG_WRITE, &options)) < 0)
730             goto fail;
731     if (c->vtt_basename) {
732         set_http_options(&options, c);
733         if ((err = s->io_open(s, &vtt_oc->pb, vtt_oc->filename, AVIO_FLAG_WRITE, &options)) < 0)
734             goto fail;
735     }
736     av_dict_free(&options);
737
738     /* We only require one PAT/PMT per segment. */
739     if (oc->oformat->priv_class && oc->priv_data) {
740         char period[21];
741
742         snprintf(period, sizeof(period), "%d", (INT_MAX / 2) - 1);
743
744         av_opt_set(oc->priv_data, "mpegts_flags", "resend_headers", 0);
745         av_opt_set(oc->priv_data, "sdt_period", period, 0);
746         av_opt_set(oc->priv_data, "pat_period", period, 0);
747     }
748
749     if (c->vtt_basename) {
750         err = avformat_write_header(vtt_oc,NULL);
751         if (err < 0)
752             return err;
753     }
754
755     return 0;
756 fail:
757     av_dict_free(&options);
758
759     return err;
760 }
761
762 static int hls_write_header(AVFormatContext *s)
763 {
764     HLSContext *hls = s->priv_data;
765     int ret, i;
766     char *p;
767     const char *pattern = "%d.ts";
768     const char *pattern_localtime_fmt = "-%s.ts";
769     const char *vtt_pattern = "%d.vtt";
770     AVDictionary *options = NULL;
771     int basename_size;
772     int vtt_basename_size;
773
774     hls->sequence       = hls->start_sequence;
775     hls->recording_time = (hls->init_time ? hls->init_time : hls->time) * AV_TIME_BASE;
776     hls->start_pts      = AV_NOPTS_VALUE;
777
778     if (hls->flags & HLS_PROGRAM_DATE_TIME) {
779         time_t now0;
780         time(&now0);
781         hls->initial_prog_date_time = now0;
782     }
783
784     if (hls->format_options_str) {
785         ret = av_dict_parse_string(&hls->format_options, hls->format_options_str, "=", ":", 0);
786         if (ret < 0) {
787             av_log(s, AV_LOG_ERROR, "Could not parse format options list '%s'\n", hls->format_options_str);
788             goto fail;
789         }
790     }
791
792     for (i = 0; i < s->nb_streams; i++) {
793         hls->has_video +=
794             s->streams[i]->codecpar->codec_type == AVMEDIA_TYPE_VIDEO;
795         hls->has_subtitle +=
796             s->streams[i]->codecpar->codec_type == AVMEDIA_TYPE_SUBTITLE;
797     }
798
799     if (hls->has_video > 1)
800         av_log(s, AV_LOG_WARNING,
801                "More than a single video stream present, "
802                "expect issues decoding it.\n");
803
804     hls->oformat = av_guess_format("mpegts", NULL, NULL);
805
806     if (!hls->oformat) {
807         ret = AVERROR_MUXER_NOT_FOUND;
808         goto fail;
809     }
810
811     if(hls->has_subtitle) {
812         hls->vtt_oformat = av_guess_format("webvtt", NULL, NULL);
813         if (!hls->oformat) {
814             ret = AVERROR_MUXER_NOT_FOUND;
815             goto fail;
816         }
817     }
818
819     if (hls->segment_filename) {
820         hls->basename = av_strdup(hls->segment_filename);
821         if (!hls->basename) {
822             ret = AVERROR(ENOMEM);
823             goto fail;
824         }
825     } else {
826         if (hls->flags & HLS_SINGLE_FILE)
827             pattern = ".ts";
828
829         if (hls->use_localtime) {
830             basename_size = strlen(s->filename) + strlen(pattern_localtime_fmt) + 1;
831         } else {
832             basename_size = strlen(s->filename) + strlen(pattern) + 1;
833         }
834         hls->basename = av_malloc(basename_size);
835         if (!hls->basename) {
836             ret = AVERROR(ENOMEM);
837             goto fail;
838         }
839
840         av_strlcpy(hls->basename, s->filename, basename_size);
841
842         p = strrchr(hls->basename, '.');
843         if (p)
844             *p = '\0';
845         if (hls->use_localtime) {
846             av_strlcat(hls->basename, pattern_localtime_fmt, basename_size);
847         } else {
848             av_strlcat(hls->basename, pattern, basename_size);
849         }
850     }
851
852     if(hls->has_subtitle) {
853
854         if (hls->flags & HLS_SINGLE_FILE)
855             vtt_pattern = ".vtt";
856         vtt_basename_size = strlen(s->filename) + strlen(vtt_pattern) + 1;
857         hls->vtt_basename = av_malloc(vtt_basename_size);
858         if (!hls->vtt_basename) {
859             ret = AVERROR(ENOMEM);
860             goto fail;
861         }
862         hls->vtt_m3u8_name = av_malloc(vtt_basename_size);
863         if (!hls->vtt_m3u8_name ) {
864             ret = AVERROR(ENOMEM);
865             goto fail;
866         }
867         av_strlcpy(hls->vtt_basename, s->filename, vtt_basename_size);
868         p = strrchr(hls->vtt_basename, '.');
869         if (p)
870             *p = '\0';
871
872         if( hls->subtitle_filename ) {
873             strcpy(hls->vtt_m3u8_name, hls->subtitle_filename);
874         } else {
875             strcpy(hls->vtt_m3u8_name, hls->vtt_basename);
876             av_strlcat(hls->vtt_m3u8_name, "_vtt.m3u8", vtt_basename_size);
877         }
878         av_strlcat(hls->vtt_basename, vtt_pattern, vtt_basename_size);
879     }
880
881     if ((ret = hls_mux_init(s)) < 0)
882         goto fail;
883
884     if (hls->flags & HLS_APPEND_LIST) {
885         parse_playlist(s, s->filename);
886         if (hls->init_time > 0) {
887             av_log(s, AV_LOG_WARNING, "append_list mode does not support hls_init_time,"
888                    " hls_init_time value will have no effect\n");
889             hls->init_time = 0;
890             hls->recording_time = hls->time * AV_TIME_BASE;
891         }
892     }
893
894     if ((ret = hls_start(s)) < 0)
895         goto fail;
896
897     av_dict_copy(&options, hls->format_options, 0);
898     ret = avformat_write_header(hls->avf, &options);
899     if (av_dict_count(options)) {
900         av_log(s, AV_LOG_ERROR, "Some of provided format options in '%s' are not recognized\n", hls->format_options_str);
901         ret = AVERROR(EINVAL);
902         goto fail;
903     }
904     //av_assert0(s->nb_streams == hls->avf->nb_streams);
905     for (i = 0; i < s->nb_streams; i++) {
906         AVStream *inner_st;
907         AVStream *outer_st = s->streams[i];
908
909         if (hls->max_seg_size > 0) {
910             if ((outer_st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO) &&
911                 (outer_st->codecpar->bit_rate > hls->max_seg_size)) {
912                 av_log(s, AV_LOG_WARNING, "Your video bitrate is bigger than hls_segment_size, "
913                        "(%"PRId64 " > %"PRId64 "), the result maybe not be what you want.",
914                        outer_st->codecpar->bit_rate, hls->max_seg_size);
915             }
916         }
917
918         if (outer_st->codecpar->codec_type != AVMEDIA_TYPE_SUBTITLE)
919             inner_st = hls->avf->streams[i];
920         else if (hls->vtt_avf)
921             inner_st = hls->vtt_avf->streams[0];
922         else {
923             /* We have a subtitle stream, when the user does not want one */
924             inner_st = NULL;
925             continue;
926         }
927         avpriv_set_pts_info(outer_st, inner_st->pts_wrap_bits, inner_st->time_base.num, inner_st->time_base.den);
928     }
929 fail:
930
931     av_dict_free(&options);
932     if (ret < 0) {
933         av_freep(&hls->basename);
934         av_freep(&hls->vtt_basename);
935         if (hls->avf)
936             avformat_free_context(hls->avf);
937         if (hls->vtt_avf)
938             avformat_free_context(hls->vtt_avf);
939
940     }
941     return ret;
942 }
943
944 static int hls_write_packet(AVFormatContext *s, AVPacket *pkt)
945 {
946     HLSContext *hls = s->priv_data;
947     AVFormatContext *oc = NULL;
948     AVStream *st = s->streams[pkt->stream_index];
949     int64_t end_pts = hls->recording_time * hls->number;
950     int is_ref_pkt = 1;
951     int ret, can_split = 1;
952     int stream_index = 0;
953
954     if (hls->sequence - hls->nb_entries > hls->start_sequence && hls->init_time > 0) {
955         /* reset end_pts, hls->recording_time at end of the init hls list */
956         int init_list_dur = hls->init_time * hls->nb_entries * AV_TIME_BASE;
957         int after_init_list_dur = (hls->sequence - hls->nb_entries ) * hls->time * AV_TIME_BASE;
958         hls->recording_time = hls->time * AV_TIME_BASE;
959         end_pts = init_list_dur + after_init_list_dur ;
960     }
961
962     if( st->codecpar->codec_type == AVMEDIA_TYPE_SUBTITLE ) {
963         oc = hls->vtt_avf;
964         stream_index = 0;
965     } else {
966         oc = hls->avf;
967         stream_index = pkt->stream_index;
968     }
969     if (hls->start_pts == AV_NOPTS_VALUE) {
970         hls->start_pts = pkt->pts;
971         hls->end_pts   = pkt->pts;
972     }
973
974     if (hls->has_video) {
975         can_split = st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO &&
976                     ((pkt->flags & AV_PKT_FLAG_KEY) || (hls->flags & HLS_SPLIT_BY_TIME));
977         is_ref_pkt = st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO;
978     }
979     if (pkt->pts == AV_NOPTS_VALUE)
980         is_ref_pkt = can_split = 0;
981
982     if (is_ref_pkt)
983         hls->duration = (double)(pkt->pts - hls->end_pts)
984                                    * st->time_base.num / st->time_base.den;
985
986     if (can_split && av_compare_ts(pkt->pts - hls->start_pts, st->time_base,
987                                    end_pts, AV_TIME_BASE_Q) >= 0) {
988         int64_t new_start_pos;
989         av_write_frame(oc, NULL); /* Flush any buffered data */
990
991         new_start_pos = avio_tell(hls->avf->pb);
992         hls->size = new_start_pos - hls->start_pos;
993         ret = hls_append_segment(s, hls, hls->duration, hls->start_pos, hls->size);
994         hls->start_pos = new_start_pos;
995         if (ret < 0)
996             return ret;
997
998         hls->end_pts = pkt->pts;
999         hls->duration = 0;
1000
1001         if (hls->flags & HLS_SINGLE_FILE) {
1002             if (hls->avf->oformat->priv_class && hls->avf->priv_data)
1003                 av_opt_set(hls->avf->priv_data, "mpegts_flags", "resend_headers", 0);
1004             hls->number++;
1005         } else if (hls->max_seg_size > 0) {
1006             if (hls->avf->oformat->priv_class && hls->avf->priv_data)
1007                 av_opt_set(hls->avf->priv_data, "mpegts_flags", "resend_headers", 0);
1008             if (hls->start_pos >= hls->max_seg_size) {
1009                 hls->sequence++;
1010                 ff_format_io_close(s, &oc->pb);
1011                 if (hls->vtt_avf)
1012                     ff_format_io_close(s, &hls->vtt_avf->pb);
1013                 ret = hls_start(s);
1014                 hls->start_pos = 0;
1015                 /* When split segment by byte, the duration is short than hls_time,
1016                  * so it is not enough one segment duration as hls_time, */
1017                 hls->number--;
1018             }
1019             hls->number++;
1020         } else {
1021             ff_format_io_close(s, &oc->pb);
1022             if (hls->vtt_avf)
1023                 ff_format_io_close(s, &hls->vtt_avf->pb);
1024
1025             ret = hls_start(s);
1026         }
1027
1028         if (ret < 0)
1029             return ret;
1030
1031         if( st->codecpar->codec_type == AVMEDIA_TYPE_SUBTITLE )
1032             oc = hls->vtt_avf;
1033         else
1034         oc = hls->avf;
1035
1036         if ((ret = hls_window(s, 0)) < 0)
1037             return ret;
1038     }
1039
1040     ret = ff_write_chained(oc, stream_index, pkt, s, 0);
1041
1042     return ret;
1043 }
1044
1045 static int hls_write_trailer(struct AVFormatContext *s)
1046 {
1047     HLSContext *hls = s->priv_data;
1048     AVFormatContext *oc = hls->avf;
1049     AVFormatContext *vtt_oc = hls->vtt_avf;
1050
1051     av_write_trailer(oc);
1052     if (oc->pb) {
1053         hls->size = avio_tell(hls->avf->pb) - hls->start_pos;
1054         ff_format_io_close(s, &oc->pb);
1055         hls_append_segment(s, hls, hls->duration, hls->start_pos, hls->size);
1056     }
1057
1058     if (vtt_oc) {
1059         if (vtt_oc->pb)
1060             av_write_trailer(vtt_oc);
1061         hls->size = avio_tell(hls->vtt_avf->pb) - hls->start_pos;
1062         ff_format_io_close(s, &vtt_oc->pb);
1063     }
1064     av_freep(&hls->basename);
1065     avformat_free_context(oc);
1066
1067     hls->avf = NULL;
1068     hls_window(s, 1);
1069
1070     if (vtt_oc) {
1071         av_freep(&hls->vtt_basename);
1072         av_freep(&hls->vtt_m3u8_name);
1073         avformat_free_context(vtt_oc);
1074     }
1075
1076     hls_free_segments(hls->segments);
1077     hls_free_segments(hls->old_segments);
1078     return 0;
1079 }
1080
1081 #define OFFSET(x) offsetof(HLSContext, x)
1082 #define E AV_OPT_FLAG_ENCODING_PARAM
1083 static const AVOption options[] = {
1084     {"start_number",  "set first number in the sequence",        OFFSET(start_sequence),AV_OPT_TYPE_INT64,  {.i64 = 0},     0, INT64_MAX, E},
1085     {"hls_time",      "set segment length in seconds",           OFFSET(time),    AV_OPT_TYPE_FLOAT,  {.dbl = 2},     0, FLT_MAX, E},
1086     {"hls_init_time", "set segment length in seconds at init list",           OFFSET(init_time),    AV_OPT_TYPE_FLOAT,  {.dbl = 0},     0, FLT_MAX, E},
1087     {"hls_list_size", "set maximum number of playlist entries",  OFFSET(max_nb_segments),    AV_OPT_TYPE_INT,    {.i64 = 5},     0, INT_MAX, E},
1088     {"hls_ts_options","set hls mpegts list of options for the container format used for hls", OFFSET(format_options_str), AV_OPT_TYPE_STRING, {.str = NULL},  0, 0,    E},
1089     {"hls_vtt_options","set hls vtt list of options for the container format used for hls", OFFSET(vtt_format_options_str), AV_OPT_TYPE_STRING, {.str = NULL},  0, 0,    E},
1090     {"hls_wrap",      "set number after which the index wraps",  OFFSET(wrap),    AV_OPT_TYPE_INT,    {.i64 = 0},     0, INT_MAX, E},
1091     {"hls_allow_cache", "explicitly set whether the client MAY (1) or MUST NOT (0) cache media segments", OFFSET(allowcache), AV_OPT_TYPE_INT, {.i64 = -1}, INT_MIN, INT_MAX, E},
1092     {"hls_base_url",  "url to prepend to each playlist entry",   OFFSET(baseurl), AV_OPT_TYPE_STRING, {.str = NULL},  0, 0,       E},
1093     {"hls_segment_filename", "filename template for segment files", OFFSET(segment_filename),   AV_OPT_TYPE_STRING, {.str = NULL},            0,       0,         E},
1094     {"hls_segment_size", "maximum size per segment file, (in bytes)",  OFFSET(max_seg_size),    AV_OPT_TYPE_INT,    {.i64 = 0},               0,       INT_MAX,   E},
1095     {"hls_key_info_file",    "file with key URI and key file path", OFFSET(key_info_file),      AV_OPT_TYPE_STRING, {.str = NULL},            0,       0,         E},
1096     {"hls_subtitle_path",     "set path of hls subtitles", OFFSET(subtitle_filename), AV_OPT_TYPE_STRING, {.str = NULL},  0, 0,    E},
1097     {"hls_flags",     "set flags affecting HLS playlist and media file generation", OFFSET(flags), AV_OPT_TYPE_FLAGS, {.i64 = 0 }, 0, UINT_MAX, E, "flags"},
1098     {"single_file",   "generate a single media file indexed with byte ranges", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_SINGLE_FILE }, 0, UINT_MAX,   E, "flags"},
1099     {"delete_segments", "delete segment files that are no longer part of the playlist", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_DELETE_SEGMENTS }, 0, UINT_MAX,   E, "flags"},
1100     {"round_durations", "round durations in m3u8 to whole numbers", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_ROUND_DURATIONS }, 0, UINT_MAX,   E, "flags"},
1101     {"discont_start", "start the playlist with a discontinuity tag", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_DISCONT_START }, 0, UINT_MAX,   E, "flags"},
1102     {"omit_endlist", "Do not append an endlist when ending stream", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_OMIT_ENDLIST }, 0, UINT_MAX,   E, "flags"},
1103     {"split_by_time", "split the hls segment by time which user set by hls_time", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_SPLIT_BY_TIME }, 0, UINT_MAX,   E, "flags"},
1104     {"append_list", "append the new segments into old hls segment list", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_APPEND_LIST }, 0, UINT_MAX,   E, "flags"},
1105     {"program_date_time", "add EXT-X-PROGRAM-DATE-TIME", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_PROGRAM_DATE_TIME }, 0, UINT_MAX,   E, "flags"},
1106     {"use_localtime", "set filename expansion with strftime at segment creation", OFFSET(use_localtime), AV_OPT_TYPE_BOOL, {.i64 = 0 }, 0, 1, E },
1107     {"use_localtime_mkdir", "create last directory component in strftime-generated filename", OFFSET(use_localtime_mkdir), AV_OPT_TYPE_BOOL, {.i64 = 0 }, 0, 1, E },
1108     {"hls_playlist_type", "set the HLS playlist type", OFFSET(pl_type), AV_OPT_TYPE_INT, {.i64 = PLAYLIST_TYPE_NONE }, 0, PLAYLIST_TYPE_NB-1, E, "pl_type" },
1109     {"event", "EVENT playlist", 0, AV_OPT_TYPE_CONST, {.i64 = PLAYLIST_TYPE_EVENT }, INT_MIN, INT_MAX, E, "pl_type" },
1110     {"vod", "VOD playlist", 0, AV_OPT_TYPE_CONST, {.i64 = PLAYLIST_TYPE_VOD }, INT_MIN, INT_MAX, E, "pl_type" },
1111     {"method", "set the HTTP method", OFFSET(method), AV_OPT_TYPE_STRING, {.str = NULL},  0, 0,    E},
1112
1113     { NULL },
1114 };
1115
1116 static const AVClass hls_class = {
1117     .class_name = "hls muxer",
1118     .item_name  = av_default_item_name,
1119     .option     = options,
1120     .version    = LIBAVUTIL_VERSION_INT,
1121 };
1122
1123
1124 AVOutputFormat ff_hls_muxer = {
1125     .name           = "hls",
1126     .long_name      = NULL_IF_CONFIG_SMALL("Apple HTTP Live Streaming"),
1127     .extensions     = "m3u8",
1128     .priv_data_size = sizeof(HLSContext),
1129     .audio_codec    = AV_CODEC_ID_AAC,
1130     .video_codec    = AV_CODEC_ID_H264,
1131     .subtitle_codec = AV_CODEC_ID_WEBVTT,
1132     .flags          = AVFMT_NOFILE | AVFMT_ALLOW_FLUSH,
1133     .write_header   = hls_write_header,
1134     .write_packet   = hls_write_packet,
1135     .write_trailer  = hls_write_trailer,
1136     .priv_class     = &hls_class,
1137 };