git.sesse.net Git - ffmpeg/blob - libavformat/hls.c

   1 /*
   2  * Apple HTTP Live Streaming demuxer
   3  * Copyright (c) 2010 Martin Storsjo
   4  *
   5  * This file is part of FFmpeg.
   6  *
   7  * FFmpeg is free software; you can redistribute it and/or
   8  * modify it under the terms of the GNU Lesser General Public
   9  * License as published by the Free Software Foundation; either
  10  * version 2.1 of the License, or (at your option) any later version.
  11  *
  12  * FFmpeg is distributed in the hope that it will be useful,
  13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  15  * Lesser General Public License for more details.
  16  *
  17  * You should have received a copy of the GNU Lesser General Public
  18  * License along with FFmpeg; if not, write to the Free Software
  19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
  20  */
  21
  22 /**
  23  * @file
  24  * Apple HTTP Live Streaming demuxer
  25  * http://tools.ietf.org/html/draft-pantos-http-live-streaming
  26  */
  27
  28 #include "libavutil/avstring.h"
  29 #include "libavutil/intreadwrite.h"
  30 #include "libavutil/mathematics.h"
  31 #include "libavutil/opt.h"
  32 #include "libavutil/dict.h"
  33 #include "libavutil/time.h"
  34 #include "avformat.h"
  35 #include "internal.h"
  36 #include "avio_internal.h"
  37 #include "url.h"
  38
  39 #define INITIAL_BUFFER_SIZE 32768
  40
  41 /*
  42  * An apple http stream consists of a playlist with media segment files,
  43  * played sequentially. There may be several playlists with the same
  44  * video content, in different bandwidth variants, that are played in
  45  * parallel (preferably only one bandwidth variant at a time). In this case,
  46  * the user supplied the url to a main playlist that only lists the variant
  47  * playlists.
  48  *
  49  * If the main playlist doesn't point at any variants, we still create
  50  * one anonymous toplevel variant for this, to maintain the structure.
  51  */
  52
  53 enum KeyType {
  54     KEY_NONE,
  55     KEY_AES_128,
  56 };
  57
  58 struct segment {
  59     int64_t duration;
  60     char url[MAX_URL_SIZE];
  61     char key[MAX_URL_SIZE];
  62     enum KeyType key_type;
  63     uint8_t iv[16];
  64 };
  65
  66 /*
  67  * Each variant has its own demuxer. If it currently is active,
  68  * it has an open AVIOContext too, and potentially an AVPacket
  69  * containing the next packet from this stream.
  70  */
  71 struct variant {
  72     int bandwidth;
  73     char url[MAX_URL_SIZE];
  74     AVIOContext pb;
  75     uint8_t* read_buffer;
  76     URLContext *input;
  77     AVFormatContext *parent;
  78     int index;
  79     AVFormatContext *ctx;
  80     AVPacket pkt;
  81     int stream_offset;
  82
  83     int finished;
  84     int64_t target_duration;
  85     int start_seq_no;
  86     int n_segments;
  87     struct segment **segments;
  88     int needed, cur_needed;
  89     int cur_seq_no;
  90     int64_t last_load_time;
  91
  92     char key_url[MAX_URL_SIZE];
  93     uint8_t key[16];
  94 };
  95
  96 typedef struct HLSContext {
  97     int n_variants;
  98     struct variant **variants;
  99     int cur_seq_no;
 100     int end_of_segment;
 101     int first_packet;
 102     int64_t first_timestamp;
 103     int64_t seek_timestamp;
 104     int seek_flags;
 105     AVIOInterruptCB *interrupt_callback;
 106     char *user_agent;                    ///< holds HTTP user agent set as an AVOption to the HTTP protocol context
 107     char *cookies;                       ///< holds HTTP cookie values set in either the initial response or as an AVOption to the HTTP protocol context
 108     char *headers;                       ///< holds HTTP headers set as an AVOption to the HTTP protocol context
 109 } HLSContext;
 110
 111 static int read_chomp_line(AVIOContext *s, char *buf, int maxlen)
 112 {
 113     int len = ff_get_line(s, buf, maxlen);
 114     while (len > 0 && av_isspace(buf[len - 1]))
 115         buf[--len] = '\0';
 116     return len;
 117 }
 118
 119 static void free_segment_list(struct variant *var)
 120 {
 121     int i;
 122     for (i = 0; i < var->n_segments; i++)
 123         av_free(var->segments[i]);
 124     av_freep(&var->segments);
 125     var->n_segments = 0;
 126 }
 127
 128 static void free_variant_list(HLSContext *c)
 129 {
 130     int i;
 131     for (i = 0; i < c->n_variants; i++) {
 132         struct variant *var = c->variants[i];
 133         free_segment_list(var);
 134         av_free_packet(&var->pkt);
 135         av_free(var->pb.buffer);
 136         if (var->input)
 137             ffurl_close(var->input);
 138         if (var->ctx) {
 139             var->ctx->pb = NULL;
 140             avformat_close_input(&var->ctx);
 141         }
 142         av_free(var);
 143     }
 144     av_freep(&c->variants);
 145     av_freep(&c->cookies);
 146     av_freep(&c->user_agent);
 147     c->n_variants = 0;
 148 }
 149
 150 /*
 151  * Used to reset a statically allocated AVPacket to a clean slate,
 152  * containing no data.
 153  */
 154 static void reset_packet(AVPacket *pkt)
 155 {
 156     av_init_packet(pkt);
 157     pkt->data = NULL;
 158 }
 159
 160 static struct variant *new_variant(HLSContext *c, int bandwidth,
 161                                    const char *url, const char *base)
 162 {
 163     struct variant *var = av_mallocz(sizeof(struct variant));
 164     if (!var)
 165         return NULL;
 166     reset_packet(&var->pkt);
 167     var->bandwidth = bandwidth;
 168     ff_make_absolute_url(var->url, sizeof(var->url), base, url);
 169     dynarray_add(&c->variants, &c->n_variants, var);
 170     return var;
 171 }
 172
 173 struct variant_info {
 174     char bandwidth[20];
 175 };
 176
 177 static void handle_variant_args(struct variant_info *info, const char *key,
 178                                 int key_len, char **dest, int *dest_len)
 179 {
 180     if (!strncmp(key, "BANDWIDTH=", key_len)) {
 181         *dest     =        info->bandwidth;
 182         *dest_len = sizeof(info->bandwidth);
 183     }
 184 }
 185
 186 struct key_info {
 187      char uri[MAX_URL_SIZE];
 188      char method[10];
 189      char iv[35];
 190 };
 191
 192 static void handle_key_args(struct key_info *info, const char *key,
 193                             int key_len, char **dest, int *dest_len)
 194 {
 195     if (!strncmp(key, "METHOD=", key_len)) {
 196         *dest     =        info->method;
 197         *dest_len = sizeof(info->method);
 198     } else if (!strncmp(key, "URI=", key_len)) {
 199         *dest     =        info->uri;
 200         *dest_len = sizeof(info->uri);
 201     } else if (!strncmp(key, "IV=", key_len)) {
 202         *dest     =        info->iv;
 203         *dest_len = sizeof(info->iv);
 204     }
 205 }
 206
 207 static int parse_playlist(HLSContext *c, const char *url,
 208                           struct variant *var, AVIOContext *in)
 209 {
 210     int ret = 0, is_segment = 0, is_variant = 0, bandwidth = 0;
 211     int64_t duration = 0;
 212     enum KeyType key_type = KEY_NONE;
 213     uint8_t iv[16] = "";
 214     int has_iv = 0;
 215     char key[MAX_URL_SIZE] = "";
 216     char line[MAX_URL_SIZE];
 217     const char *ptr;
 218     int close_in = 0;
 219     uint8_t *new_url = NULL;
 220
 221     if (!in) {
 222         AVDictionary *opts = NULL;
 223         close_in = 1;
 224         /* Some HLS servers don't like being sent the range header */
 225         av_dict_set(&opts, "seekable", "0", 0);
 226
 227         // broker prior HTTP options that should be consistent across requests
 228         av_dict_set(&opts, "user-agent", c->user_agent, 0);
 229         av_dict_set(&opts, "cookies", c->cookies, 0);
 230         av_dict_set(&opts, "headers", c->headers, 0);
 231
 232         ret = avio_open2(&in, url, AVIO_FLAG_READ,
 233                          c->interrupt_callback, &opts);
 234         av_dict_free(&opts);
 235         if (ret < 0)
 236             return ret;
 237     }
 238
 239     if (av_opt_get(in, "location", AV_OPT_SEARCH_CHILDREN, &new_url) >= 0)
 240         url = new_url;
 241
 242     read_chomp_line(in, line, sizeof(line));
 243     if (strcmp(line, "#EXTM3U")) {
 244         ret = AVERROR_INVALIDDATA;
 245         goto fail;
 246     }
 247
 248     if (var) {
 249         free_segment_list(var);
 250         var->finished = 0;
 251     }
 252     while (!url_feof(in)) {
 253         read_chomp_line(in, line, sizeof(line));
 254         if (av_strstart(line, "#EXT-X-STREAM-INF:", &ptr)) {
 255             struct variant_info info = {{0}};
 256             is_variant = 1;
 257             ff_parse_key_value(ptr, (ff_parse_key_val_cb) handle_variant_args,
 258                                &info);
 259             bandwidth = atoi(info.bandwidth);
 260         } else if (av_strstart(line, "#EXT-X-KEY:", &ptr)) {
 261             struct key_info info = {{0}};
 262             ff_parse_key_value(ptr, (ff_parse_key_val_cb) handle_key_args,
 263                                &info);
 264             key_type = KEY_NONE;
 265             has_iv = 0;
 266             if (!strcmp(info.method, "AES-128"))
 267                 key_type = KEY_AES_128;
 268             if (!strncmp(info.iv, "0x", 2) || !strncmp(info.iv, "0X", 2)) {
 269                 ff_hex_to_data(iv, info.iv + 2);
 270                 has_iv = 1;
 271             }
 272             av_strlcpy(key, info.uri, sizeof(key));
 273         } else if (av_strstart(line, "#EXT-X-TARGETDURATION:", &ptr)) {
 274             if (!var) {
 275                 var = new_variant(c, 0, url, NULL);
 276                 if (!var) {
 277                     ret = AVERROR(ENOMEM);
 278                     goto fail;
 279                 }
 280             }
 281             var->target_duration = atoi(ptr) * AV_TIME_BASE;
 282         } else if (av_strstart(line, "#EXT-X-MEDIA-SEQUENCE:", &ptr)) {
 283             if (!var) {
 284                 var = new_variant(c, 0, url, NULL);
 285                 if (!var) {
 286                     ret = AVERROR(ENOMEM);
 287                     goto fail;
 288                 }
 289             }
 290             var->start_seq_no = atoi(ptr);
 291         } else if (av_strstart(line, "#EXT-X-ENDLIST", &ptr)) {
 292             if (var)
 293                 var->finished = 1;
 294         } else if (av_strstart(line, "#EXTINF:", &ptr)) {
 295             is_segment = 1;
 296             duration   = atof(ptr) * AV_TIME_BASE;
 297         } else if (av_strstart(line, "#", NULL)) {
 298             continue;
 299         } else if (line[0]) {
 300             if (is_variant) {
 301                 if (!new_variant(c, bandwidth, line, url)) {
 302                     ret = AVERROR(ENOMEM);
 303                     goto fail;
 304                 }
 305                 is_variant = 0;
 306                 bandwidth  = 0;
 307             }
 308             if (is_segment) {
 309                 struct segment *seg;
 310                 if (!var) {
 311                     var = new_variant(c, 0, url, NULL);
 312                     if (!var) {
 313                         ret = AVERROR(ENOMEM);
 314                         goto fail;
 315                     }
 316                 }
 317                 seg = av_malloc(sizeof(struct segment));
 318                 if (!seg) {
 319                     ret = AVERROR(ENOMEM);
 320                     goto fail;
 321                 }
 322                 seg->duration = duration;
 323                 seg->key_type = key_type;
 324                 if (has_iv) {
 325                     memcpy(seg->iv, iv, sizeof(iv));
 326                 } else {
 327                     int seq = var->start_seq_no + var->n_segments;
 328                     memset(seg->iv, 0, sizeof(seg->iv));
 329                     AV_WB32(seg->iv + 12, seq);
 330                 }
 331                 ff_make_absolute_url(seg->key, sizeof(seg->key), url, key);
 332                 ff_make_absolute_url(seg->url, sizeof(seg->url), url, line);
 333                 dynarray_add(&var->segments, &var->n_segments, seg);
 334                 is_segment = 0;
 335             }
 336         }
 337     }
 338     if (var)
 339         var->last_load_time = av_gettime();
 340
 341 fail:
 342     av_free(new_url);
 343     if (close_in)
 344         avio_close(in);
 345     return ret;
 346 }
 347
 348 static int open_input(HLSContext *c, struct variant *var)
 349 {
 350     AVDictionary *opts = NULL;
 351     int ret;
 352     struct segment *seg = var->segments[var->cur_seq_no - var->start_seq_no];
 353
 354     // broker prior HTTP options that should be consistent across requests
 355     av_dict_set(&opts, "user-agent", c->user_agent, 0);
 356     av_dict_set(&opts, "cookies", c->cookies, 0);
 357     av_dict_set(&opts, "headers", c->headers, 0);
 358     av_dict_set(&opts, "seekable", "0", 0);
 359
 360     if (seg->key_type == KEY_NONE) {
 361         ret = ffurl_open(&var->input, seg->url, AVIO_FLAG_READ,
 362                           &var->parent->interrupt_callback, &opts);
 363         goto cleanup;
 364     } else if (seg->key_type == KEY_AES_128) {
 365         char iv[33], key[33], url[MAX_URL_SIZE];
 366         if (strcmp(seg->key, var->key_url)) {
 367             URLContext *uc;
 368             if (ffurl_open(&uc, seg->key, AVIO_FLAG_READ,
 369                            &var->parent->interrupt_callback, &opts) == 0) {
 370                 if (ffurl_read_complete(uc, var->key, sizeof(var->key))
 371                     != sizeof(var->key)) {
 372                     av_log(NULL, AV_LOG_ERROR, "Unable to read key file %s\n",
 373                            seg->key);
 374                 }
 375                 ffurl_close(uc);
 376             } else {
 377                 av_log(NULL, AV_LOG_ERROR, "Unable to open key file %s\n",
 378                        seg->key);
 379             }
 380             av_strlcpy(var->key_url, seg->key, sizeof(var->key_url));
 381         }
 382         ff_data_to_hex(iv, seg->iv, sizeof(seg->iv), 0);
 383         ff_data_to_hex(key, var->key, sizeof(var->key), 0);
 384         iv[32] = key[32] = '\0';
 385         if (strstr(seg->url, "://"))
 386             snprintf(url, sizeof(url), "crypto+%s", seg->url);
 387         else
 388             snprintf(url, sizeof(url), "crypto:%s", seg->url);
 389         if ((ret = ffurl_alloc(&var->input, url, AVIO_FLAG_READ,
 390                                &var->parent->interrupt_callback)) < 0)
 391             goto cleanup;
 392         av_opt_set(var->input->priv_data, "key", key, 0);
 393         av_opt_set(var->input->priv_data, "iv", iv, 0);
 394         /* Need to repopulate options */
 395         av_dict_free(&opts);
 396         av_dict_set(&opts, "seekable", "0", 0);
 397         if ((ret = ffurl_connect(var->input, &opts)) < 0) {
 398             ffurl_close(var->input);
 399             var->input = NULL;
 400             goto cleanup;
 401         }
 402         ret = 0;
 403     }
 404     else
 405       ret = AVERROR(ENOSYS);
 406
 407 cleanup:
 408     av_dict_free(&opts);
 409     return ret;
 410 }
 411
 412 static int read_data(void *opaque, uint8_t *buf, int buf_size)
 413 {
 414     struct variant *v = opaque;
 415     HLSContext *c = v->parent->priv_data;
 416     int ret, i;
 417
 418 restart:
 419     if (!v->input) {
 420         /* If this is a live stream and the reload interval has elapsed since
 421          * the last playlist reload, reload the variant playlists now. */
 422         int64_t reload_interval = v->n_segments > 0 ?
 423                                   v->segments[v->n_segments - 1]->duration :
 424                                   v->target_duration;
 425
 426 reload:
 427         if (!v->finished &&
 428             av_gettime() - v->last_load_time >= reload_interval) {
 429             if ((ret = parse_playlist(c, v->url, v, NULL)) < 0)
 430                 return ret;
 431             /* If we need to reload the playlist again below (if
 432              * there's still no more segments), switch to a reload
 433              * interval of half the target duration. */
 434             reload_interval = v->target_duration / 2;
 435         }
 436         if (v->cur_seq_no < v->start_seq_no) {
 437             av_log(NULL, AV_LOG_WARNING,
 438                    "skipping %d segments ahead, expired from playlists\n",
 439                    v->start_seq_no - v->cur_seq_no);
 440             v->cur_seq_no = v->start_seq_no;
 441         }
 442         if (v->cur_seq_no >= v->start_seq_no + v->n_segments) {
 443             if (v->finished)
 444                 return AVERROR_EOF;
 445             while (av_gettime() - v->last_load_time < reload_interval) {
 446                 if (ff_check_interrupt(c->interrupt_callback))
 447                     return AVERROR_EXIT;
 448                 av_usleep(100*1000);
 449             }
 450             /* Enough time has elapsed since the last reload */
 451             goto reload;
 452         }
 453
 454         ret = open_input(c, v);
 455         if (ret < 0)
 456             return ret;
 457     }
 458     ret = ffurl_read(v->input, buf, buf_size);
 459     if (ret > 0)
 460         return ret;
 461     ffurl_close(v->input);
 462     v->input = NULL;
 463     v->cur_seq_no++;
 464
 465     c->end_of_segment = 1;
 466     c->cur_seq_no = v->cur_seq_no;
 467
 468     if (v->ctx && v->ctx->nb_streams &&
 469         v->parent->nb_streams >= v->stream_offset + v->ctx->nb_streams) {
 470         v->needed = 0;
 471         for (i = v->stream_offset; i < v->stream_offset + v->ctx->nb_streams;
 472              i++) {
 473             if (v->parent->streams[i]->discard < AVDISCARD_ALL)
 474                 v->needed = 1;
 475         }
 476     }
 477     if (!v->needed) {
 478         av_log(v->parent, AV_LOG_INFO, "No longer receiving variant %d\n",
 479                v->index);
 480         return AVERROR_EOF;
 481     }
 482     goto restart;
 483 }
 484
 485 static int hls_read_header(AVFormatContext *s)
 486 {
 487     URLContext *u = (s->flags & AVFMT_FLAG_CUSTOM_IO) ? NULL : s->pb->opaque;
 488     HLSContext *c = s->priv_data;
 489     int ret = 0, i, j, stream_offset = 0;
 490
 491     c->interrupt_callback = &s->interrupt_callback;
 492
 493     // if the URL context is good, read important options we must broker later
 494     if (u && u->prot->priv_data_class) {
 495         // get the previous user agent & set back to null if string size is zero
 496         av_freep(&c->user_agent);
 497         av_opt_get(u->priv_data, "user-agent", 0, (uint8_t**)&(c->user_agent));
 498         if (c->user_agent && !strlen(c->user_agent))
 499             av_freep(&c->user_agent);
 500
 501         // get the previous cookies & set back to null if string size is zero
 502         av_freep(&c->cookies);
 503         av_opt_get(u->priv_data, "cookies", 0, (uint8_t**)&(c->cookies));
 504         if (c->cookies && !strlen(c->cookies))
 505             av_freep(&c->cookies);
 506
 507         // get the previous headers & set back to null if string size is zero
 508         av_freep(&c->headers);
 509         av_opt_get(u->priv_data, "headers", 0, (uint8_t**)&(c->headers));
 510         if (c->headers && !strlen(c->headers))
 511             av_freep(&c->headers);
 512     }
 513
 514     if ((ret = parse_playlist(c, s->filename, NULL, s->pb)) < 0)
 515         goto fail;
 516
 517     if (c->n_variants == 0) {
 518         av_log(NULL, AV_LOG_WARNING, "Empty playlist\n");
 519         ret = AVERROR_EOF;
 520         goto fail;
 521     }
 522     /* If the playlist only contained variants, parse each individual
 523      * variant playlist. */
 524     if (c->n_variants > 1 || c->variants[0]->n_segments == 0) {
 525         for (i = 0; i < c->n_variants; i++) {
 526             struct variant *v = c->variants[i];
 527             if ((ret = parse_playlist(c, v->url, v, NULL)) < 0)
 528                 goto fail;
 529         }
 530     }
 531
 532     if (c->variants[0]->n_segments == 0) {
 533         av_log(NULL, AV_LOG_WARNING, "Empty playlist\n");
 534         ret = AVERROR_EOF;
 535         goto fail;
 536     }
 537
 538     /* If this isn't a live stream, calculate the total duration of the
 539      * stream. */
 540     if (c->variants[0]->finished) {
 541         int64_t duration = 0;
 542         for (i = 0; i < c->variants[0]->n_segments; i++)
 543             duration += c->variants[0]->segments[i]->duration;
 544         s->duration = duration;
 545     }
 546
 547     /* Open the demuxer for each variant */
 548     for (i = 0; i < c->n_variants; i++) {
 549         struct variant *v = c->variants[i];
 550         AVInputFormat *in_fmt = NULL;
 551         char bitrate_str[20];
 552         AVProgram *program;
 553
 554         if (v->n_segments == 0)
 555             continue;
 556
 557         if (!(v->ctx = avformat_alloc_context())) {
 558             ret = AVERROR(ENOMEM);
 559             goto fail;
 560         }
 561
 562         v->index  = i;
 563         v->needed = 1;
 564         v->parent = s;
 565
 566         /* If this is a live stream with more than 3 segments, start at the
 567          * third last segment. */
 568         v->cur_seq_no = v->start_seq_no;
 569         if (!v->finished && v->n_segments > 3)
 570             v->cur_seq_no = v->start_seq_no + v->n_segments - 3;
 571
 572         v->read_buffer = av_malloc(INITIAL_BUFFER_SIZE);
 573         ffio_init_context(&v->pb, v->read_buffer, INITIAL_BUFFER_SIZE, 0, v,
 574                           read_data, NULL, NULL);
 575         v->pb.seekable = 0;
 576         ret = av_probe_input_buffer(&v->pb, &in_fmt, v->segments[0]->url,
 577                                     NULL, 0, 0);
 578         if (ret < 0) {
 579             /* Free the ctx - it isn't initialized properly at this point,
 580              * so avformat_close_input shouldn't be called. If
 581              * avformat_open_input fails below, it frees and zeros the
 582              * context, so it doesn't need any special treatment like this. */
 583             av_log(s, AV_LOG_ERROR, "Error when loading first segment '%s'\n", v->segments[0]->url);
 584             avformat_free_context(v->ctx);
 585             v->ctx = NULL;
 586             goto fail;
 587         }
 588         v->ctx->pb       = &v->pb;
 589         v->stream_offset = stream_offset;
 590         ret = avformat_open_input(&v->ctx, v->segments[0]->url, in_fmt, NULL);
 591         if (ret < 0)
 592             goto fail;
 593
 594         v->ctx->ctx_flags &= ~AVFMTCTX_NOHEADER;
 595         ret = avformat_find_stream_info(v->ctx, NULL);
 596         if (ret < 0)
 597             goto fail;
 598         snprintf(bitrate_str, sizeof(bitrate_str), "%d", v->bandwidth);
 599
 600         program = av_new_program(s, i);
 601         if (!program)
 602             goto fail;
 603         av_dict_set(&program->metadata, "variant_bitrate", bitrate_str, 0);
 604
 605         /* Create new AVStreams for each stream in this variant */
 606         for (j = 0; j < v->ctx->nb_streams; j++) {
 607             AVStream *st = avformat_new_stream(s, NULL);
 608             AVStream *ist = v->ctx->streams[j];
 609             if (!st) {
 610                 ret = AVERROR(ENOMEM);
 611                 goto fail;
 612             }
 613             ff_program_add_stream_index(s, i, stream_offset + j);
 614             st->id = i;
 615             avpriv_set_pts_info(st, ist->pts_wrap_bits, ist->time_base.num, ist->time_base.den);
 616             avcodec_copy_context(st->codec, v->ctx->streams[j]->codec);
 617             if (v->bandwidth)
 618                 av_dict_set(&st->metadata, "variant_bitrate", bitrate_str,
 619                                  0);
 620         }
 621         stream_offset += v->ctx->nb_streams;
 622     }
 623
 624     c->first_packet = 1;
 625     c->first_timestamp = AV_NOPTS_VALUE;
 626     c->seek_timestamp  = AV_NOPTS_VALUE;
 627
 628     return 0;
 629 fail:
 630     free_variant_list(c);
 631     return ret;
 632 }
 633
 634 static int recheck_discard_flags(AVFormatContext *s, int first)
 635 {
 636     HLSContext *c = s->priv_data;
 637     int i, changed = 0;
 638
 639     /* Check if any new streams are needed */
 640     for (i = 0; i < c->n_variants; i++)
 641         c->variants[i]->cur_needed = 0;
 642
 643     for (i = 0; i < s->nb_streams; i++) {
 644         AVStream *st = s->streams[i];
 645         struct variant *var = c->variants[s->streams[i]->id];
 646         if (st->discard < AVDISCARD_ALL)
 647             var->cur_needed = 1;
 648     }
 649     for (i = 0; i < c->n_variants; i++) {
 650         struct variant *v = c->variants[i];
 651         if (v->cur_needed && !v->needed) {
 652             v->needed = 1;
 653             changed = 1;
 654             v->cur_seq_no = c->cur_seq_no;
 655             v->pb.eof_reached = 0;
 656             av_log(s, AV_LOG_INFO, "Now receiving variant %d\n", i);
 657         } else if (first && !v->cur_needed && v->needed) {
 658             if (v->input)
 659                 ffurl_close(v->input);
 660             v->input = NULL;
 661             v->needed = 0;
 662             changed = 1;
 663             av_log(s, AV_LOG_INFO, "No longer receiving variant %d\n", i);
 664         }
 665     }
 666     return changed;
 667 }
 668
 669 static int hls_read_packet(AVFormatContext *s, AVPacket *pkt)
 670 {
 671     HLSContext *c = s->priv_data;
 672     int ret, i, minvariant = -1;
 673
 674     if (c->first_packet) {
 675         recheck_discard_flags(s, 1);
 676         c->first_packet = 0;
 677     }
 678
 679 start:
 680     c->end_of_segment = 0;
 681     for (i = 0; i < c->n_variants; i++) {
 682         struct variant *var = c->variants[i];
 683         /* Make sure we've got one buffered packet from each open variant
 684          * stream */
 685         if (var->needed && !var->pkt.data) {
 686             while (1) {
 687                 int64_t ts_diff;
 688                 AVStream *st;
 689                 ret = av_read_frame(var->ctx, &var->pkt);
 690                 if (ret < 0) {
 691                     if (!url_feof(&var->pb) && ret != AVERROR_EOF)
 692                         return ret;
 693                     reset_packet(&var->pkt);
 694                     break;
 695                 } else {
 696                     if (c->first_timestamp == AV_NOPTS_VALUE &&
 697                         var->pkt.dts       != AV_NOPTS_VALUE)
 698                         c->first_timestamp = av_rescale_q(var->pkt.dts,
 699                             var->ctx->streams[var->pkt.stream_index]->time_base,
 700                             AV_TIME_BASE_Q);
 701                 }
 702
 703                 if (c->seek_timestamp == AV_NOPTS_VALUE)
 704                     break;
 705
 706                 if (var->pkt.dts == AV_NOPTS_VALUE) {
 707                     c->seek_timestamp = AV_NOPTS_VALUE;
 708                     break;
 709                 }
 710
 711                 st = var->ctx->streams[var->pkt.stream_index];
 712                 ts_diff = av_rescale_rnd(var->pkt.dts, AV_TIME_BASE,
 713                                          st->time_base.den, AV_ROUND_DOWN) -
 714                           c->seek_timestamp;
 715                 if (ts_diff >= 0 && (c->seek_flags  & AVSEEK_FLAG_ANY ||
 716                                      var->pkt.flags & AV_PKT_FLAG_KEY)) {
 717                     c->seek_timestamp = AV_NOPTS_VALUE;
 718                     break;
 719                 }
 720                 av_free_packet(&var->pkt);
 721                 reset_packet(&var->pkt);
 722             }
 723         }
 724         /* Check if this stream still is on an earlier segment number, or
 725          * has the packet with the lowest dts */
 726         if (var->pkt.data) {
 727             struct variant *minvar = minvariant < 0 ?
 728                                      NULL : c->variants[minvariant];
 729             if (minvariant < 0 || var->cur_seq_no < minvar->cur_seq_no) {
 730                 minvariant = i;
 731             } else if (var->cur_seq_no == minvar->cur_seq_no) {
 732                 int64_t dts     =    var->pkt.dts;
 733                 int64_t mindts  = minvar->pkt.dts;
 734                 AVStream *st    =    var->ctx->streams[var->pkt.stream_index];
 735                 AVStream *minst = minvar->ctx->streams[minvar->pkt.stream_index];
 736
 737                 if (dts == AV_NOPTS_VALUE) {
 738                     minvariant = i;
 739                 } else if (mindts != AV_NOPTS_VALUE) {
 740                     if (st->start_time    != AV_NOPTS_VALUE)
 741                         dts    -= st->start_time;
 742                     if (minst->start_time != AV_NOPTS_VALUE)
 743                         mindts -= minst->start_time;
 744
 745                     if (av_compare_ts(dts, st->time_base,
 746                                       mindts, minst->time_base) < 0)
 747                         minvariant = i;
 748                 }
 749             }
 750         }
 751     }
 752     if (c->end_of_segment) {
 753         if (recheck_discard_flags(s, 0))
 754             goto start;
 755     }
 756     /* If we got a packet, return it */
 757     if (minvariant >= 0) {
 758         *pkt = c->variants[minvariant]->pkt;
 759         pkt->stream_index += c->variants[minvariant]->stream_offset;
 760         reset_packet(&c->variants[minvariant]->pkt);
 761         return 0;
 762     }
 763     return AVERROR_EOF;
 764 }
 765
 766 static int hls_close(AVFormatContext *s)
 767 {
 768     HLSContext *c = s->priv_data;
 769
 770     free_variant_list(c);
 771     return 0;
 772 }
 773
 774 static int hls_read_seek(AVFormatContext *s, int stream_index,
 775                                int64_t timestamp, int flags)
 776 {
 777     HLSContext *c = s->priv_data;
 778     int i, j, ret;
 779
 780     if ((flags & AVSEEK_FLAG_BYTE) || !c->variants[0]->finished)
 781         return AVERROR(ENOSYS);
 782
 783     c->seek_flags     = flags;
 784     c->seek_timestamp = stream_index < 0 ? timestamp :
 785                         av_rescale_rnd(timestamp, AV_TIME_BASE,
 786                                        s->streams[stream_index]->time_base.den,
 787                                        flags & AVSEEK_FLAG_BACKWARD ?
 788                                        AV_ROUND_DOWN : AV_ROUND_UP);
 789     timestamp = av_rescale_rnd(timestamp, AV_TIME_BASE, stream_index >= 0 ?
 790                                s->streams[stream_index]->time_base.den :
 791                                AV_TIME_BASE, flags & AVSEEK_FLAG_BACKWARD ?
 792                                AV_ROUND_DOWN : AV_ROUND_UP);
 793     if (s->duration < c->seek_timestamp) {
 794         c->seek_timestamp = AV_NOPTS_VALUE;
 795         return AVERROR(EIO);
 796     }
 797
 798     ret = AVERROR(EIO);
 799     for (i = 0; i < c->n_variants; i++) {
 800         /* Reset reading */
 801         struct variant *var = c->variants[i];
 802         int64_t pos = c->first_timestamp == AV_NOPTS_VALUE ?
 803                       0 : c->first_timestamp;
 804         if (var->input) {
 805             ffurl_close(var->input);
 806             var->input = NULL;
 807         }
 808         av_free_packet(&var->pkt);
 809         reset_packet(&var->pkt);
 810         var->pb.eof_reached = 0;
 811         /* Clear any buffered data */
 812         var->pb.buf_end = var->pb.buf_ptr = var->pb.buffer;
 813         /* Reset the pos, to let the mpegts demuxer know we've seeked. */
 814         var->pb.pos = 0;
 815
 816         /* Locate the segment that contains the target timestamp */
 817         for (j = 0; j < var->n_segments; j++) {
 818             if (timestamp >= pos &&
 819                 timestamp < pos + var->segments[j]->duration) {
 820                 var->cur_seq_no = var->start_seq_no + j;
 821                 ret = 0;
 822                 break;
 823             }
 824             pos += var->segments[j]->duration;
 825         }
 826         if (ret)
 827             c->seek_timestamp = AV_NOPTS_VALUE;
 828     }
 829     return ret;
 830 }
 831
 832 static int hls_probe(AVProbeData *p)
 833 {
 834     /* Require #EXTM3U at the start, and either one of the ones below
 835      * somewhere for a proper match. */
 836     if (strncmp(p->buf, "#EXTM3U", 7))
 837         return 0;
 838     if (strstr(p->buf, "#EXT-X-STREAM-INF:")     ||
 839         strstr(p->buf, "#EXT-X-TARGETDURATION:") ||
 840         strstr(p->buf, "#EXT-X-MEDIA-SEQUENCE:"))
 841         return AVPROBE_SCORE_MAX;
 842     return 0;
 843 }
 844
 845 AVInputFormat ff_hls_demuxer = {
 846     .name           = "hls,applehttp",
 847     .long_name      = NULL_IF_CONFIG_SMALL("Apple HTTP Live Streaming"),
 848     .priv_data_size = sizeof(HLSContext),
 849     .read_probe     = hls_probe,
 850     .read_header    = hls_read_header,
 851     .read_packet    = hls_read_packet,
 852     .read_close     = hls_close,
 853     .read_seek      = hls_read_seek,
 854 };