git.sesse.net Git - ffmpeg/blob - libavformat/avidec.c

   1 /*
   2  * AVI demuxer
   3  * Copyright (c) 2001 Fabrice Bellard
   4  *
   5  * This file is part of FFmpeg.
   6  *
   7  * FFmpeg is free software; you can redistribute it and/or
   8  * modify it under the terms of the GNU Lesser General Public
   9  * License as published by the Free Software Foundation; either
  10  * version 2.1 of the License, or (at your option) any later version.
  11  *
  12  * FFmpeg is distributed in the hope that it will be useful,
  13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  15  * Lesser General Public License for more details.
  16  *
  17  * You should have received a copy of the GNU Lesser General Public
  18  * License along with FFmpeg; if not, write to the Free Software
  19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
  20  */
  21
  22 #include <inttypes.h>
  23
  24 #include "libavutil/avassert.h"
  25 #include "libavutil/avstring.h"
  26 #include "libavutil/opt.h"
  27 #include "libavutil/dict.h"
  28 #include "libavutil/internal.h"
  29 #include "libavutil/intreadwrite.h"
  30 #include "libavutil/mathematics.h"
  31 #include "avformat.h"
  32 #include "avi.h"
  33 #include "dv.h"
  34 #include "internal.h"
  35 #include "isom.h"
  36 #include "riff.h"
  37 #include "libavcodec/bytestream.h"
  38 #include "libavcodec/exif.h"
  39 #include "libavcodec/internal.h"
  40
  41 typedef struct AVIStream {
  42     int64_t frame_offset;   /* current frame (video) or byte (audio) counter
  43                              * (used to compute the pts) */
  44     int remaining;
  45     int packet_size;
  46
  47     uint32_t handler;
  48     uint32_t scale;
  49     uint32_t rate;
  50     int sample_size;        /* size of one sample (or packet)
  51                              * (in the rate/scale sense) in bytes */
  52
  53     int64_t cum_len;        /* temporary storage (used during seek) */
  54     int prefix;             /* normally 'd'<<8 + 'c' or 'w'<<8 + 'b' */
  55     int prefix_count;
  56     uint32_t pal[256];
  57     int has_pal;
  58     int dshow_block_align;  /* block align variable used to emulate bugs in
  59                              * the MS dshow demuxer */
  60
  61     AVFormatContext *sub_ctx;
  62     AVPacket sub_pkt;
  63     AVBufferRef *sub_buffer;
  64
  65     int64_t seek_pos;
  66 } AVIStream;
  67
  68 typedef struct AVIContext {
  69     const AVClass *class;
  70     int64_t riff_end;
  71     int64_t movi_end;
  72     int64_t fsize;
  73     int64_t io_fsize;
  74     int64_t movi_list;
  75     int64_t last_pkt_pos;
  76     int index_loaded;
  77     int is_odml;
  78     int non_interleaved;
  79     int stream_index;
  80     DVDemuxContext *dv_demux;
  81     int odml_depth;
  82     int use_odml;
  83 #define MAX_ODML_DEPTH 1000
  84     int64_t dts_max;
  85 } AVIContext;
  86
  87
  88 static const AVOption options[] = {
  89     { "use_odml", "use odml index", offsetof(AVIContext, use_odml), AV_OPT_TYPE_BOOL, {.i64 = 1}, -1, 1, AV_OPT_FLAG_DECODING_PARAM},
  90     { NULL },
  91 };
  92
  93 static const AVClass demuxer_class = {
  94     .class_name = "avi",
  95     .item_name  = av_default_item_name,
  96     .option     = options,
  97     .version    = LIBAVUTIL_VERSION_INT,
  98     .category   = AV_CLASS_CATEGORY_DEMUXER,
  99 };
 100
 101
 102 static const char avi_headers[][8] = {
 103     { 'R', 'I', 'F', 'F', 'A', 'V', 'I', ' '  },
 104     { 'R', 'I', 'F', 'F', 'A', 'V', 'I', 'X'  },
 105     { 'R', 'I', 'F', 'F', 'A', 'V', 'I', 0x19 },
 106     { 'O', 'N', '2', ' ', 'O', 'N', '2', 'f'  },
 107     { 'R', 'I', 'F', 'F', 'A', 'M', 'V', ' '  },
 108     { 0 }
 109 };
 110
 111 static const AVMetadataConv avi_metadata_conv[] = {
 112     { "strn", "title" },
 113     { 0 },
 114 };
 115
 116 static int avi_read_close(AVFormatContext *s);
 117 static int avi_load_index(AVFormatContext *s);
 118 static int guess_ni_flag(AVFormatContext *s);
 119
 120 #define print_tag(s, str, tag, size)                                      \
 121     av_log(s, AV_LOG_TRACE, "pos:%"PRIX64" %s: tag=%s size=0x%x\n", \
 122            avio_tell(pb), str, av_fourcc2str(tag), size)                  \
 123
 124 static inline int get_duration(AVIStream *ast, int len)
 125 {
 126     if (ast->sample_size)
 127         return len;
 128     else if (ast->dshow_block_align)
 129         return (len + ast->dshow_block_align - 1) / ast->dshow_block_align;
 130     else
 131         return 1;
 132 }
 133
 134 static int get_riff(AVFormatContext *s, AVIOContext *pb)
 135 {
 136     AVIContext *avi = s->priv_data;
 137     char header[8] = {0};
 138     int i;
 139
 140     /* check RIFF header */
 141     avio_read(pb, header, 4);
 142     avi->riff_end  = avio_rl32(pb); /* RIFF chunk size */
 143     avi->riff_end += avio_tell(pb); /* RIFF chunk end */
 144     avio_read(pb, header + 4, 4);
 145
 146     for (i = 0; avi_headers[i][0]; i++)
 147         if (!memcmp(header, avi_headers[i], 8))
 148             break;
 149     if (!avi_headers[i][0])
 150         return AVERROR_INVALIDDATA;
 151
 152     if (header[7] == 0x19)
 153         av_log(s, AV_LOG_INFO,
 154                "This file has been generated by a totally broken muxer.\n");
 155
 156     return 0;
 157 }
 158
 159 static int read_odml_index(AVFormatContext *s, int frame_num)
 160 {
 161     AVIContext *avi     = s->priv_data;
 162     AVIOContext *pb     = s->pb;
 163     int longs_per_entry = avio_rl16(pb);
 164     int index_sub_type  = avio_r8(pb);
 165     int index_type      = avio_r8(pb);
 166     int entries_in_use  = avio_rl32(pb);
 167     int chunk_id        = avio_rl32(pb);
 168     int64_t base        = avio_rl64(pb);
 169     int stream_id       = ((chunk_id      & 0xFF) - '0') * 10 +
 170                           ((chunk_id >> 8 & 0xFF) - '0');
 171     AVStream *st;
 172     AVIStream *ast;
 173     int i;
 174     int64_t last_pos = -1;
 175     int64_t filesize = avi->fsize;
 176
 177     av_log(s, AV_LOG_TRACE,
 178             "longs_per_entry:%d index_type:%d entries_in_use:%d "
 179             "chunk_id:%X base:%16"PRIX64" frame_num:%d\n",
 180             longs_per_entry,
 181             index_type,
 182             entries_in_use,
 183             chunk_id,
 184             base,
 185             frame_num);
 186
 187     if (stream_id >= s->nb_streams || stream_id < 0)
 188         return AVERROR_INVALIDDATA;
 189     st  = s->streams[stream_id];
 190     ast = st->priv_data;
 191
 192     if (index_sub_type)
 193         return AVERROR_INVALIDDATA;
 194
 195     avio_rl32(pb);
 196
 197     if (index_type && longs_per_entry != 2)
 198         return AVERROR_INVALIDDATA;
 199     if (index_type > 1)
 200         return AVERROR_INVALIDDATA;
 201
 202     if (filesize > 0 && base >= filesize) {
 203         av_log(s, AV_LOG_ERROR, "ODML index invalid\n");
 204         if (base >> 32 == (base & 0xFFFFFFFF) &&
 205             (base & 0xFFFFFFFF) < filesize    &&
 206             filesize <= 0xFFFFFFFF)
 207             base &= 0xFFFFFFFF;
 208         else
 209             return AVERROR_INVALIDDATA;
 210     }
 211
 212     for (i = 0; i < entries_in_use; i++) {
 213         if (index_type) {
 214             int64_t pos = avio_rl32(pb) + base - 8;
 215             int len     = avio_rl32(pb);
 216             int key     = len >= 0;
 217             len &= 0x7FFFFFFF;
 218
 219             av_log(s, AV_LOG_TRACE, "pos:%"PRId64", len:%X\n", pos, len);
 220
 221             if (avio_feof(pb))
 222                 return AVERROR_INVALIDDATA;
 223
 224             if (last_pos == pos || pos == base - 8)
 225                 avi->non_interleaved = 1;
 226             if (last_pos != pos && len)
 227                 av_add_index_entry(st, pos, ast->cum_len, len, 0,
 228                                    key ? AVINDEX_KEYFRAME : 0);
 229
 230             ast->cum_len += get_duration(ast, len);
 231             last_pos      = pos;
 232         } else {
 233             int64_t offset, pos;
 234             int duration;
 235             offset = avio_rl64(pb);
 236             avio_rl32(pb);       /* size */
 237             duration = avio_rl32(pb);
 238
 239             if (avio_feof(pb))
 240                 return AVERROR_INVALIDDATA;
 241
 242             pos = avio_tell(pb);
 243
 244             if (avi->odml_depth > MAX_ODML_DEPTH) {
 245                 av_log(s, AV_LOG_ERROR, "Too deeply nested ODML indexes\n");
 246                 return AVERROR_INVALIDDATA;
 247             }
 248
 249             if (avio_seek(pb, offset + 8, SEEK_SET) < 0)
 250                 return -1;
 251             avi->odml_depth++;
 252             read_odml_index(s, frame_num);
 253             avi->odml_depth--;
 254             frame_num += duration;
 255
 256             if (avio_seek(pb, pos, SEEK_SET) < 0) {
 257                 av_log(s, AV_LOG_ERROR, "Failed to restore position after reading index\n");
 258                 return -1;
 259             }
 260
 261         }
 262     }
 263     avi->index_loaded = 2;
 264     return 0;
 265 }
 266
 267 static void clean_index(AVFormatContext *s)
 268 {
 269     int i;
 270     int64_t j;
 271
 272     for (i = 0; i < s->nb_streams; i++) {
 273         AVStream *st   = s->streams[i];
 274         AVIStream *ast = st->priv_data;
 275         int n          = st->internal->nb_index_entries;
 276         int max        = ast->sample_size;
 277         int64_t pos, size, ts;
 278
 279         if (n != 1 || ast->sample_size == 0)
 280             continue;
 281
 282         while (max < 1024)
 283             max += max;
 284
 285         pos  = st->internal->index_entries[0].pos;
 286         size = st->internal->index_entries[0].size;
 287         ts   = st->internal->index_entries[0].timestamp;
 288
 289         for (j = 0; j < size; j += max)
 290             av_add_index_entry(st, pos + j, ts + j, FFMIN(max, size - j), 0,
 291                                AVINDEX_KEYFRAME);
 292     }
 293 }
 294
 295 static int avi_read_tag(AVFormatContext *s, AVStream *st, uint32_t tag,
 296                         uint32_t size)
 297 {
 298     AVIOContext *pb = s->pb;
 299     char key[5]     = { 0 };
 300     char *value;
 301
 302     size += (size & 1);
 303
 304     if (size == UINT_MAX)
 305         return AVERROR(EINVAL);
 306     value = av_malloc(size + 1);
 307     if (!value)
 308         return AVERROR(ENOMEM);
 309     if (avio_read(pb, value, size) != size) {
 310         av_freep(&value);
 311         return AVERROR_INVALIDDATA;
 312     }
 313     value[size] = 0;
 314
 315     AV_WL32(key, tag);
 316
 317     return av_dict_set(st ? &st->metadata : &s->metadata, key, value,
 318                        AV_DICT_DONT_STRDUP_VAL);
 319 }
 320
 321 static const char months[12][4] = { "Jan", "Feb", "Mar", "Apr", "May", "Jun",
 322                                     "Jul", "Aug", "Sep", "Oct", "Nov", "Dec" };
 323
 324 static void avi_metadata_creation_time(AVDictionary **metadata, char *date)
 325 {
 326     char month[4], time[9], buffer[64];
 327     int i, day, year;
 328     /* parse standard AVI date format (ie. "Mon Mar 10 15:04:43 2003") */
 329     if (sscanf(date, "%*3s%*[ ]%3s%*[ ]%2d%*[ ]%8s%*[ ]%4d",
 330                month, &day, time, &year) == 4) {
 331         for (i = 0; i < 12; i++)
 332             if (!av_strcasecmp(month, months[i])) {
 333                 snprintf(buffer, sizeof(buffer), "%.4d-%.2d-%.2d %s",
 334                          year, i + 1, day, time);
 335                 av_dict_set(metadata, "creation_time", buffer, 0);
 336             }
 337     } else if (date[4] == '/' && date[7] == '/') {
 338         date[4] = date[7] = '-';
 339         av_dict_set(metadata, "creation_time", date, 0);
 340     }
 341 }
 342
 343 static void avi_read_nikon(AVFormatContext *s, uint64_t end)
 344 {
 345     while (avio_tell(s->pb) < end && !avio_feof(s->pb)) {
 346         uint32_t tag  = avio_rl32(s->pb);
 347         uint32_t size = avio_rl32(s->pb);
 348         switch (tag) {
 349         case MKTAG('n', 'c', 't', 'g'):  /* Nikon Tags */
 350         {
 351             uint64_t tag_end = avio_tell(s->pb) + size;
 352             while (avio_tell(s->pb) < tag_end && !avio_feof(s->pb)) {
 353                 uint16_t tag     = avio_rl16(s->pb);
 354                 uint16_t size    = avio_rl16(s->pb);
 355                 const char *name = NULL;
 356                 char buffer[64]  = { 0 };
 357                 size = FFMIN(size, tag_end - avio_tell(s->pb));
 358                 size -= avio_read(s->pb, buffer,
 359                                   FFMIN(size, sizeof(buffer) - 1));
 360                 switch (tag) {
 361                 case 0x03:
 362                     name = "maker";
 363                     break;
 364                 case 0x04:
 365                     name = "model";
 366                     break;
 367                 case 0x13:
 368                     name = "creation_time";
 369                     if (buffer[4] == ':' && buffer[7] == ':')
 370                         buffer[4] = buffer[7] = '-';
 371                     break;
 372                 }
 373                 if (name)
 374                     av_dict_set(&s->metadata, name, buffer, 0);
 375                 avio_skip(s->pb, size);
 376             }
 377             break;
 378         }
 379         default:
 380             avio_skip(s->pb, size);
 381             break;
 382         }
 383     }
 384 }
 385
 386 static int avi_extract_stream_metadata(AVFormatContext *s, AVStream *st)
 387 {
 388     GetByteContext gb;
 389     uint8_t *data = st->codecpar->extradata;
 390     int data_size = st->codecpar->extradata_size;
 391     int tag, offset;
 392
 393     if (!data || data_size < 8) {
 394         return AVERROR_INVALIDDATA;
 395     }
 396
 397     bytestream2_init(&gb, data, data_size);
 398
 399     tag = bytestream2_get_le32(&gb);
 400
 401     switch (tag) {
 402     case MKTAG('A', 'V', 'I', 'F'):
 403         // skip 4 byte padding
 404         bytestream2_skip(&gb, 4);
 405         offset = bytestream2_tell(&gb);
 406
 407         // decode EXIF tags from IFD, AVI is always little-endian
 408         return avpriv_exif_decode_ifd(s, data + offset, data_size - offset,
 409                                       1, 0, &st->metadata);
 410         break;
 411     case MKTAG('C', 'A', 'S', 'I'):
 412         avpriv_request_sample(s, "RIFF stream data tag type CASI (%u)", tag);
 413         break;
 414     case MKTAG('Z', 'o', 'r', 'a'):
 415         avpriv_request_sample(s, "RIFF stream data tag type Zora (%u)", tag);
 416         break;
 417     default:
 418         break;
 419     }
 420
 421     return 0;
 422 }
 423
 424 static int calculate_bitrate(AVFormatContext *s)
 425 {
 426     AVIContext *avi = s->priv_data;
 427     int i, j;
 428     int64_t lensum = 0;
 429     int64_t maxpos = 0;
 430
 431     for (i = 0; i<s->nb_streams; i++) {
 432         int64_t len = 0;
 433         AVStream *st = s->streams[i];
 434
 435         if (!st->internal->nb_index_entries)
 436             continue;
 437
 438         for (j = 0; j < st->internal->nb_index_entries; j++)
 439             len += st->internal->index_entries[j].size;
 440         maxpos = FFMAX(maxpos, st->internal->index_entries[j-1].pos);
 441         lensum += len;
 442     }
 443     if (maxpos < av_rescale(avi->io_fsize, 9, 10)) // index does not cover the whole file
 444         return 0;
 445     if (lensum*9/10 > maxpos || lensum < maxpos*9/10) // frame sum and filesize mismatch
 446         return 0;
 447
 448     for (i = 0; i<s->nb_streams; i++) {
 449         int64_t len = 0;
 450         AVStream *st = s->streams[i];
 451         int64_t duration;
 452         int64_t bitrate;
 453
 454         for (j = 0; j < st->internal->nb_index_entries; j++)
 455             len += st->internal->index_entries[j].size;
 456
 457         if (st->internal->nb_index_entries < 2 || st->codecpar->bit_rate > 0)
 458             continue;
 459         duration = st->internal->index_entries[j-1].timestamp - st->internal->index_entries[0].timestamp;
 460         bitrate = av_rescale(8*len, st->time_base.den, duration * st->time_base.num);
 461         if (bitrate > 0) {
 462             st->codecpar->bit_rate = bitrate;
 463         }
 464     }
 465     return 1;
 466 }
 467
 468 #define RETURN_ERROR(code) do { ret = (code); goto fail; } while (0)
 469 static int avi_read_header(AVFormatContext *s)
 470 {
 471     AVIContext *avi = s->priv_data;
 472     AVIOContext *pb = s->pb;
 473     unsigned int tag, tag1, handler;
 474     int codec_type, stream_index, frame_period;
 475     unsigned int size;
 476     int i;
 477     AVStream *st;
 478     AVIStream *ast      = NULL;
 479     int avih_width      = 0, avih_height = 0;
 480     int amv_file_format = 0;
 481     uint64_t list_end   = 0;
 482     int64_t pos;
 483     int ret;
 484     AVDictionaryEntry *dict_entry;
 485
 486     avi->stream_index = -1;
 487
 488     ret = get_riff(s, pb);
 489     if (ret < 0)
 490         return ret;
 491
 492     av_log(avi, AV_LOG_DEBUG, "use odml:%d\n", avi->use_odml);
 493
 494     avi->io_fsize = avi->fsize = avio_size(pb);
 495     if (avi->fsize <= 0 || avi->fsize < avi->riff_end)
 496         avi->fsize = avi->riff_end == 8 ? INT64_MAX : avi->riff_end;
 497
 498     /* first list tag */
 499     stream_index = -1;
 500     codec_type   = -1;
 501     frame_period = 0;
 502     for (;;) {
 503         if (avio_feof(pb))
 504             RETURN_ERROR(AVERROR_INVALIDDATA);
 505         tag  = avio_rl32(pb);
 506         size = avio_rl32(pb);
 507
 508         print_tag(s, "tag", tag, size);
 509
 510         switch (tag) {
 511         case MKTAG('L', 'I', 'S', 'T'):
 512             list_end = avio_tell(pb) + size;
 513             /* Ignored, except at start of video packets. */
 514             tag1 = avio_rl32(pb);
 515
 516             print_tag(s, "list", tag1, 0);
 517
 518             if (tag1 == MKTAG('m', 'o', 'v', 'i')) {
 519                 avi->movi_list = avio_tell(pb) - 4;
 520                 if (size)
 521                     avi->movi_end = avi->movi_list + size + (size & 1);
 522                 else
 523                     avi->movi_end = avi->fsize;
 524                 av_log(s, AV_LOG_TRACE, "movi end=%"PRIx64"\n", avi->movi_end);
 525                 goto end_of_header;
 526             } else if (tag1 == MKTAG('I', 'N', 'F', 'O'))
 527                 ff_read_riff_info(s, size - 4);
 528             else if (tag1 == MKTAG('n', 'c', 'd', 't'))
 529                 avi_read_nikon(s, list_end);
 530
 531             break;
 532         case MKTAG('I', 'D', 'I', 'T'):
 533         {
 534             unsigned char date[64] = { 0 };
 535             size += (size & 1);
 536             size -= avio_read(pb, date, FFMIN(size, sizeof(date) - 1));
 537             avio_skip(pb, size);
 538             avi_metadata_creation_time(&s->metadata, date);
 539             break;
 540         }
 541         case MKTAG('d', 'm', 'l', 'h'):
 542             avi->is_odml = 1;
 543             avio_skip(pb, size + (size & 1));
 544             break;
 545         case MKTAG('a', 'm', 'v', 'h'):
 546             amv_file_format = 1;
 547         case MKTAG('a', 'v', 'i', 'h'):
 548             /* AVI header */
 549             /* using frame_period is bad idea */
 550             frame_period = avio_rl32(pb);
 551             avio_rl32(pb); /* max. bytes per second */
 552             avio_rl32(pb);
 553             avi->non_interleaved |= avio_rl32(pb) & AVIF_MUSTUSEINDEX;
 554
 555             avio_skip(pb, 2 * 4);
 556             avio_rl32(pb);
 557             avio_rl32(pb);
 558             avih_width  = avio_rl32(pb);
 559             avih_height = avio_rl32(pb);
 560
 561             avio_skip(pb, size - 10 * 4);
 562             break;
 563         case MKTAG('s', 't', 'r', 'h'):
 564             /* stream header */
 565
 566             tag1    = avio_rl32(pb);
 567             handler = avio_rl32(pb); /* codec tag */
 568
 569             if (tag1 == MKTAG('p', 'a', 'd', 's')) {
 570                 avio_skip(pb, size - 8);
 571                 break;
 572             } else {
 573                 stream_index++;
 574                 st = avformat_new_stream(s, NULL);
 575                 if (!st)
 576                     RETURN_ERROR(AVERROR(ENOMEM));
 577
 578                 st->id = stream_index;
 579                 ast    = av_mallocz(sizeof(AVIStream));
 580                 if (!ast)
 581                     RETURN_ERROR(AVERROR(ENOMEM));
 582                 st->priv_data = ast;
 583             }
 584             if (amv_file_format)
 585                 tag1 = stream_index ? MKTAG('a', 'u', 'd', 's')
 586                                     : MKTAG('v', 'i', 'd', 's');
 587
 588             print_tag(s, "strh", tag1, -1);
 589
 590             if (tag1 == MKTAG('i', 'a', 'v', 's') ||
 591                 tag1 == MKTAG('i', 'v', 'a', 's')) {
 592                 int64_t dv_dur;
 593
 594                 /* After some consideration -- I don't think we
 595                  * have to support anything but DV in type1 AVIs. */
 596                 if (s->nb_streams != 1)
 597                     RETURN_ERROR(AVERROR_INVALIDDATA);
 598
 599                 if (handler != MKTAG('d', 'v', 's', 'd') &&
 600                     handler != MKTAG('d', 'v', 'h', 'd') &&
 601                     handler != MKTAG('d', 'v', 's', 'l'))
 602                     return AVERROR_INVALIDDATA;
 603
 604                 if (!CONFIG_DV_DEMUXER)
 605                     return AVERROR_DEMUXER_NOT_FOUND;
 606
 607                 ast = s->streams[0]->priv_data;
 608                 st->priv_data = NULL;
 609                 ff_free_stream(s, st);
 610
 611                 avi->dv_demux = avpriv_dv_init_demux(s);
 612                 if (!avi->dv_demux) {
 613                     av_free(ast);
 614                     return AVERROR(ENOMEM);
 615                 }
 616
 617                 s->streams[0]->priv_data = ast;
 618                 avio_skip(pb, 3 * 4);
 619                 ast->scale = avio_rl32(pb);
 620                 ast->rate  = avio_rl32(pb);
 621                 avio_skip(pb, 4);  /* start time */
 622
 623                 dv_dur = avio_rl32(pb);
 624                 if (ast->scale > 0 && ast->rate > 0 && dv_dur > 0) {
 625                     dv_dur     *= AV_TIME_BASE;
 626                     s->duration = av_rescale(dv_dur, ast->scale, ast->rate);
 627                 }
 628                 /* else, leave duration alone; timing estimation in utils.c
 629                  * will make a guess based on bitrate. */
 630
 631                 stream_index = s->nb_streams - 1;
 632                 avio_skip(pb, size - 9 * 4);
 633                 break;
 634             }
 635
 636             av_assert0(stream_index < s->nb_streams);
 637             ast->handler = handler;
 638
 639             avio_rl32(pb); /* flags */
 640             avio_rl16(pb); /* priority */
 641             avio_rl16(pb); /* language */
 642             avio_rl32(pb); /* initial frame */
 643             ast->scale = avio_rl32(pb);
 644             ast->rate  = avio_rl32(pb);
 645             if (!(ast->scale && ast->rate)) {
 646                 av_log(s, AV_LOG_WARNING,
 647                        "scale/rate is %"PRIu32"/%"PRIu32" which is invalid. "
 648                        "(This file has been generated by broken software.)\n",
 649                        ast->scale,
 650                        ast->rate);
 651                 if (frame_period) {
 652                     ast->rate  = 1000000;
 653                     ast->scale = frame_period;
 654                 } else {
 655                     ast->rate  = 25;
 656                     ast->scale = 1;
 657                 }
 658             }
 659             avpriv_set_pts_info(st, 64, ast->scale, ast->rate);
 660
 661             ast->cum_len  = avio_rl32(pb); /* start */
 662             st->nb_frames = avio_rl32(pb);
 663
 664             st->start_time = 0;
 665             avio_rl32(pb); /* buffer size */
 666             avio_rl32(pb); /* quality */
 667             if (ast->cum_len > 3600LL * ast->rate / ast->scale) {
 668                 av_log(s, AV_LOG_ERROR, "crazy start time, iam scared, giving up\n");
 669                 ast->cum_len = 0;
 670             }
 671             ast->sample_size = avio_rl32(pb);
 672             ast->cum_len    *= FFMAX(1, ast->sample_size);
 673             av_log(s, AV_LOG_TRACE, "%"PRIu32" %"PRIu32" %d\n",
 674                     ast->rate, ast->scale, ast->sample_size);
 675
 676             switch (tag1) {
 677             case MKTAG('v', 'i', 'd', 's'):
 678                 codec_type = AVMEDIA_TYPE_VIDEO;
 679
 680                 ast->sample_size = 0;
 681                 st->avg_frame_rate = av_inv_q(st->time_base);
 682                 break;
 683             case MKTAG('a', 'u', 'd', 's'):
 684                 codec_type = AVMEDIA_TYPE_AUDIO;
 685                 break;
 686             case MKTAG('t', 'x', 't', 's'):
 687                 codec_type = AVMEDIA_TYPE_SUBTITLE;
 688                 break;
 689             case MKTAG('d', 'a', 't', 's'):
 690                 codec_type = AVMEDIA_TYPE_DATA;
 691                 break;
 692             default:
 693                 av_log(s, AV_LOG_INFO, "unknown stream type %X\n", tag1);
 694             }
 695
 696             if (ast->sample_size < 0) {
 697                 if (s->error_recognition & AV_EF_EXPLODE) {
 698                     av_log(s, AV_LOG_ERROR,
 699                            "Invalid sample_size %d at stream %d\n",
 700                            ast->sample_size,
 701                            stream_index);
 702                     RETURN_ERROR(AVERROR_INVALIDDATA);
 703                 }
 704                 av_log(s, AV_LOG_WARNING,
 705                        "Invalid sample_size %d at stream %d "
 706                        "setting it to 0\n",
 707                        ast->sample_size,
 708                        stream_index);
 709                 ast->sample_size = 0;
 710             }
 711
 712             if (ast->sample_size == 0) {
 713                 st->duration = st->nb_frames;
 714                 if (st->duration > 0 && avi->io_fsize > 0 && avi->riff_end > avi->io_fsize) {
 715                     av_log(s, AV_LOG_DEBUG, "File is truncated adjusting duration\n");
 716                     st->duration = av_rescale(st->duration, avi->io_fsize, avi->riff_end);
 717                 }
 718             }
 719             ast->frame_offset = ast->cum_len;
 720             avio_skip(pb, size - 12 * 4);
 721             break;
 722         case MKTAG('s', 't', 'r', 'f'):
 723             /* stream header */
 724             if (!size && (codec_type == AVMEDIA_TYPE_AUDIO ||
 725                           codec_type == AVMEDIA_TYPE_VIDEO))
 726                 break;
 727             if (stream_index >= (unsigned)s->nb_streams || avi->dv_demux) {
 728                 avio_skip(pb, size);
 729             } else {
 730                 uint64_t cur_pos = avio_tell(pb);
 731                 unsigned esize;
 732                 if (cur_pos < list_end)
 733                     size = FFMIN(size, list_end - cur_pos);
 734                 st = s->streams[stream_index];
 735                 if (st->codecpar->codec_type != AVMEDIA_TYPE_UNKNOWN) {
 736                     avio_skip(pb, size);
 737                     break;
 738                 }
 739                 switch (codec_type) {
 740                 case AVMEDIA_TYPE_VIDEO:
 741                     if (amv_file_format) {
 742                         st->codecpar->width      = avih_width;
 743                         st->codecpar->height     = avih_height;
 744                         st->codecpar->codec_type = AVMEDIA_TYPE_VIDEO;
 745                         st->codecpar->codec_id   = AV_CODEC_ID_AMV;
 746                         avio_skip(pb, size);
 747                         break;
 748                     }
 749                     tag1 = ff_get_bmp_header(pb, st, &esize);
 750
 751                     if (tag1 == MKTAG('D', 'X', 'S', 'B') ||
 752                         tag1 == MKTAG('D', 'X', 'S', 'A')) {
 753                         st->codecpar->codec_type = AVMEDIA_TYPE_SUBTITLE;
 754                         st->codecpar->codec_tag  = tag1;
 755                         st->codecpar->codec_id   = AV_CODEC_ID_XSUB;
 756                         break;
 757                     }
 758
 759                     if (size > 10 * 4 && size < (1 << 30) && size < avi->fsize) {
 760                         if (esize == size-1 && (esize&1)) {
 761                             st->codecpar->extradata_size = esize - 10 * 4;
 762                         } else
 763                             st->codecpar->extradata_size =  size - 10 * 4;
 764                         if (st->codecpar->extradata) {
 765                             av_log(s, AV_LOG_WARNING, "New extradata in strf chunk, freeing previous one.\n");
 766                         }
 767                         ret = ff_get_extradata(s, st->codecpar, pb,
 768                                                st->codecpar->extradata_size);
 769                         if (ret < 0)
 770                             return ret;
 771                     }
 772
 773                     // FIXME: check if the encoder really did this correctly
 774                     if (st->codecpar->extradata_size & 1)
 775                         avio_r8(pb);
 776
 777                     /* Extract palette from extradata if bpp <= 8.
 778                      * This code assumes that extradata contains only palette.
 779                      * This is true for all paletted codecs implemented in
 780                      * FFmpeg. */
 781                     if (st->codecpar->extradata_size &&
 782                         (st->codecpar->bits_per_coded_sample <= 8)) {
 783                         int pal_size = (1 << st->codecpar->bits_per_coded_sample) << 2;
 784                         const uint8_t *pal_src;
 785
 786                         pal_size = FFMIN(pal_size, st->codecpar->extradata_size);
 787                         pal_src  = st->codecpar->extradata +
 788                                    st->codecpar->extradata_size - pal_size;
 789                         /* Exclude the "BottomUp" field from the palette */
 790                         if (pal_src - st->codecpar->extradata >= 9 &&
 791                             !memcmp(st->codecpar->extradata + st->codecpar->extradata_size - 9, "BottomUp", 9))
 792                             pal_src -= 9;
 793                         for (i = 0; i < pal_size / 4; i++)
 794                             ast->pal[i] = 0xFFU<<24 | AV_RL32(pal_src + 4 * i);
 795                         ast->has_pal = 1;
 796                     }
 797
 798                     print_tag(s, "video", tag1, 0);
 799
 800                     st->codecpar->codec_type = AVMEDIA_TYPE_VIDEO;
 801                     st->codecpar->codec_tag  = tag1;
 802                     st->codecpar->codec_id   = ff_codec_get_id(ff_codec_bmp_tags,
 803                                                             tag1);
 804                     /* If codec is not found yet, try with the mov tags. */
 805                     if (!st->codecpar->codec_id) {
 806                         st->codecpar->codec_id =
 807                             ff_codec_get_id(ff_codec_movvideo_tags, tag1);
 808                         if (st->codecpar->codec_id)
 809                            av_log(s, AV_LOG_WARNING,
 810                                   "mov tag found in avi (fourcc %s)\n",
 811                                   av_fourcc2str(tag1));
 812                     }
 813                     if (!st->codecpar->codec_id)
 814                         st->codecpar->codec_id = ff_codec_get_id(ff_codec_bmp_tags_unofficial, tag1);
 815
 816                     /* This is needed to get the pict type which is necessary
 817                      * for generating correct pts. */
 818                     st->need_parsing = AVSTREAM_PARSE_HEADERS;
 819
 820                     if (st->codecpar->codec_id == AV_CODEC_ID_MPEG4 &&
 821                         ast->handler == MKTAG('X', 'V', 'I', 'D'))
 822                         st->codecpar->codec_tag = MKTAG('X', 'V', 'I', 'D');
 823
 824                     if (st->codecpar->codec_tag == MKTAG('V', 'S', 'S', 'H'))
 825                         st->need_parsing = AVSTREAM_PARSE_FULL;
 826                     if (st->codecpar->codec_id == AV_CODEC_ID_RV40)
 827                         st->need_parsing = AVSTREAM_PARSE_NONE;
 828                     if (st->codecpar->codec_id == AV_CODEC_ID_HEVC &&
 829                         st->codecpar->codec_tag == MKTAG('H', '2', '6', '5'))
 830                         st->need_parsing = AVSTREAM_PARSE_FULL;
 831
 832                     if (st->codecpar->codec_tag == 0 && st->codecpar->height > 0 &&
 833                         st->codecpar->extradata_size < 1U << 30) {
 834                         st->codecpar->extradata_size += 9;
 835                         if ((ret = av_reallocp(&st->codecpar->extradata,
 836                                                st->codecpar->extradata_size +
 837                                                AV_INPUT_BUFFER_PADDING_SIZE)) < 0) {
 838                             st->codecpar->extradata_size = 0;
 839                             return ret;
 840                         } else
 841                             memcpy(st->codecpar->extradata + st->codecpar->extradata_size - 9,
 842                                    "BottomUp", 9);
 843                     }
 844                     st->codecpar->height = FFABS(st->codecpar->height);
 845
 846 //                    avio_skip(pb, size - 5 * 4);
 847                     break;
 848                 case AVMEDIA_TYPE_AUDIO:
 849                     ret = ff_get_wav_header(s, pb, st->codecpar, size, 0);
 850                     if (ret < 0)
 851                         return ret;
 852                     ast->dshow_block_align = st->codecpar->block_align;
 853                     if (ast->sample_size && st->codecpar->block_align &&
 854                         ast->sample_size != st->codecpar->block_align) {
 855                         av_log(s,
 856                                AV_LOG_WARNING,
 857                                "sample size (%d) != block align (%d)\n",
 858                                ast->sample_size,
 859                                st->codecpar->block_align);
 860                         ast->sample_size = st->codecpar->block_align;
 861                     }
 862                     /* 2-aligned
 863                      * (fix for Stargate SG-1 - 3x18 - Shades of Grey.avi) */
 864                     if (size & 1)
 865                         avio_skip(pb, 1);
 866                     /* Force parsing as several audio frames can be in
 867                      * one packet and timestamps refer to packet start. */
 868                     st->need_parsing = AVSTREAM_PARSE_TIMESTAMPS;
 869                     /* ADTS header is in extradata, AAC without header must be
 870                      * stored as exact frames. Parser not needed and it will
 871                      * fail. */
 872                     if (st->codecpar->codec_id == AV_CODEC_ID_AAC &&
 873                         st->codecpar->extradata_size)
 874                         st->need_parsing = AVSTREAM_PARSE_NONE;
 875                     // The flac parser does not work with AVSTREAM_PARSE_TIMESTAMPS
 876                     if (st->codecpar->codec_id == AV_CODEC_ID_FLAC)
 877                         st->need_parsing = AVSTREAM_PARSE_NONE;
 878                     /* AVI files with Xan DPCM audio (wrongly) declare PCM
 879                      * audio in the header but have Axan as stream_code_tag. */
 880                     if (ast->handler == AV_RL32("Axan")) {
 881                         st->codecpar->codec_id  = AV_CODEC_ID_XAN_DPCM;
 882                         st->codecpar->codec_tag = 0;
 883                         ast->dshow_block_align = 0;
 884                     }
 885                     if (amv_file_format) {
 886                         st->codecpar->codec_id    = AV_CODEC_ID_ADPCM_IMA_AMV;
 887                         ast->dshow_block_align = 0;
 888                     }
 889                     if ((st->codecpar->codec_id == AV_CODEC_ID_AAC  ||
 890                          st->codecpar->codec_id == AV_CODEC_ID_FLAC ||
 891                          st->codecpar->codec_id == AV_CODEC_ID_MP2 ) && ast->dshow_block_align <= 4 && ast->dshow_block_align) {
 892                         av_log(s, AV_LOG_DEBUG, "overriding invalid dshow_block_align of %d\n", ast->dshow_block_align);
 893                         ast->dshow_block_align = 0;
 894                     }
 895                     if (st->codecpar->codec_id == AV_CODEC_ID_AAC && ast->dshow_block_align == 1024 && ast->sample_size == 1024 ||
 896                        st->codecpar->codec_id == AV_CODEC_ID_AAC && ast->dshow_block_align == 4096 && ast->sample_size == 4096 ||
 897                        st->codecpar->codec_id == AV_CODEC_ID_MP3 && ast->dshow_block_align == 1152 && ast->sample_size == 1152) {
 898                         av_log(s, AV_LOG_DEBUG, "overriding sample_size\n");
 899                         ast->sample_size = 0;
 900                     }
 901                     break;
 902                 case AVMEDIA_TYPE_SUBTITLE:
 903                     st->codecpar->codec_type = AVMEDIA_TYPE_SUBTITLE;
 904                     st->internal->request_probe= 1;
 905                     avio_skip(pb, size);
 906                     break;
 907                 default:
 908                     st->codecpar->codec_type = AVMEDIA_TYPE_DATA;
 909                     st->codecpar->codec_id   = AV_CODEC_ID_NONE;
 910                     st->codecpar->codec_tag  = 0;
 911                     avio_skip(pb, size);
 912                     break;
 913                 }
 914             }
 915             break;
 916         case MKTAG('s', 't', 'r', 'd'):
 917             if (stream_index >= (unsigned)s->nb_streams
 918                 || s->streams[stream_index]->codecpar->extradata_size
 919                 || s->streams[stream_index]->codecpar->codec_tag == MKTAG('H','2','6','4')) {
 920                 avio_skip(pb, size);
 921             } else {
 922                 uint64_t cur_pos = avio_tell(pb);
 923                 if (cur_pos < list_end)
 924                     size = FFMIN(size, list_end - cur_pos);
 925                 st = s->streams[stream_index];
 926
 927                 if (size<(1<<30)) {
 928                     if (st->codecpar->extradata) {
 929                         av_log(s, AV_LOG_WARNING, "New extradata in strd chunk, freeing previous one.\n");
 930                     }
 931                     if ((ret = ff_get_extradata(s, st->codecpar, pb, size)) < 0)
 932                         goto fail;
 933                 }
 934
 935                 if (st->codecpar->extradata_size & 1) //FIXME check if the encoder really did this correctly
 936                     avio_r8(pb);
 937
 938                 ret = avi_extract_stream_metadata(s, st);
 939                 if (ret < 0) {
 940                     av_log(s, AV_LOG_WARNING, "could not decoding EXIF data in stream header.\n");
 941                 }
 942             }
 943             break;
 944         case MKTAG('i', 'n', 'd', 'x'):
 945             pos = avio_tell(pb);
 946             if ((pb->seekable & AVIO_SEEKABLE_NORMAL) && !(s->flags & AVFMT_FLAG_IGNIDX) &&
 947                 avi->use_odml &&
 948                 read_odml_index(s, 0) < 0 &&
 949                 (s->error_recognition & AV_EF_EXPLODE))
 950                 RETURN_ERROR(AVERROR_INVALIDDATA);
 951             avio_seek(pb, pos + size, SEEK_SET);
 952             break;
 953         case MKTAG('v', 'p', 'r', 'p'):
 954             if (stream_index < (unsigned)s->nb_streams && size > 9 * 4) {
 955                 AVRational active, active_aspect;
 956
 957                 st = s->streams[stream_index];
 958                 avio_rl32(pb);
 959                 avio_rl32(pb);
 960                 avio_rl32(pb);
 961                 avio_rl32(pb);
 962                 avio_rl32(pb);
 963
 964                 active_aspect.den = avio_rl16(pb);
 965                 active_aspect.num = avio_rl16(pb);
 966                 active.num        = avio_rl32(pb);
 967                 active.den        = avio_rl32(pb);
 968                 avio_rl32(pb); // nbFieldsPerFrame
 969
 970                 if (active_aspect.num && active_aspect.den &&
 971                     active.num && active.den) {
 972                     st->sample_aspect_ratio = av_div_q(active_aspect, active);
 973                     av_log(s, AV_LOG_TRACE, "vprp %d/%d %d/%d\n",
 974                             active_aspect.num, active_aspect.den,
 975                             active.num, active.den);
 976                 }
 977                 size -= 9 * 4;
 978             }
 979             avio_skip(pb, size);
 980             break;
 981         case MKTAG('s', 't', 'r', 'n'):
 982             if (s->nb_streams) {
 983                 ret = avi_read_tag(s, s->streams[s->nb_streams - 1], tag, size);
 984                 if (ret < 0)
 985                     goto fail;
 986                 break;
 987             }
 988         default:
 989             if (size > 1000000) {
 990                 av_log(s, AV_LOG_ERROR,
 991                        "Something went wrong during header parsing, "
 992                        "tag %s has size %u, "
 993                        "I will ignore it and try to continue anyway.\n",
 994                        av_fourcc2str(tag), size);
 995                 if (s->error_recognition & AV_EF_EXPLODE)
 996                     RETURN_ERROR(AVERROR_INVALIDDATA);
 997                 avi->movi_list = avio_tell(pb) - 4;
 998                 avi->movi_end  = avi->fsize;
 999                 goto end_of_header;
1000             }
1001         /* Do not fail for very large idx1 tags */
1002         case MKTAG('i', 'd', 'x', '1'):
1003             /* skip tag */
1004             size += (size & 1);
1005             avio_skip(pb, size);
1006             break;
1007         }
1008     }
1009
1010 end_of_header:
1011     /* check stream number */
1012     if (stream_index != s->nb_streams - 1) {
1013         RETURN_ERROR(AVERROR_INVALIDDATA);
1014     }
1015
1016     if (!avi->index_loaded && (pb->seekable & AVIO_SEEKABLE_NORMAL))
1017         avi_load_index(s);
1018     calculate_bitrate(s);
1019     avi->index_loaded    |= 1;
1020
1021     if ((ret = guess_ni_flag(s)) < 0)
1022         goto fail;
1023
1024     avi->non_interleaved |= ret | (s->flags & AVFMT_FLAG_SORT_DTS);
1025
1026     dict_entry = av_dict_get(s->metadata, "ISFT", NULL, 0);
1027     if (dict_entry && !strcmp(dict_entry->value, "PotEncoder"))
1028         for (i = 0; i < s->nb_streams; i++) {
1029             AVStream *st = s->streams[i];
1030             if (   st->codecpar->codec_id == AV_CODEC_ID_MPEG1VIDEO
1031                 || st->codecpar->codec_id == AV_CODEC_ID_MPEG2VIDEO)
1032                 st->need_parsing = AVSTREAM_PARSE_FULL;
1033         }
1034
1035     for (i = 0; i < s->nb_streams; i++) {
1036         AVStream *st = s->streams[i];
1037         if (st->internal->nb_index_entries)
1038             break;
1039     }
1040     // DV-in-AVI cannot be non-interleaved, if set this must be
1041     // a mis-detection.
1042     if (avi->dv_demux)
1043         avi->non_interleaved = 0;
1044     if (i == s->nb_streams && avi->non_interleaved) {
1045         av_log(s, AV_LOG_WARNING,
1046                "Non-interleaved AVI without index, switching to interleaved\n");
1047         avi->non_interleaved = 0;
1048     }
1049
1050     if (avi->non_interleaved) {
1051         av_log(s, AV_LOG_INFO, "non-interleaved AVI\n");
1052         clean_index(s);
1053     }
1054
1055     ff_metadata_conv_ctx(s, NULL, avi_metadata_conv);
1056     ff_metadata_conv_ctx(s, NULL, ff_riff_info_conv);
1057
1058     return 0;
1059 fail:
1060     avi_read_close(s);
1061     return ret;
1062 }
1063
1064 static int read_gab2_sub(AVFormatContext *s, AVStream *st, AVPacket *pkt)
1065 {
1066     if (pkt->size >= 7 &&
1067         pkt->size < INT_MAX - AVPROBE_PADDING_SIZE &&
1068         !strcmp(pkt->data, "GAB2") && AV_RL16(pkt->data + 5) == 2) {
1069         uint8_t desc[256];
1070         int score      = AVPROBE_SCORE_EXTENSION, ret;
1071         AVIStream *ast = st->priv_data;
1072         ff_const59 AVInputFormat *sub_demuxer;
1073         AVRational time_base;
1074         int size;
1075         AVProbeData pd;
1076         unsigned int desc_len;
1077         AVIOContext *pb = avio_alloc_context(pkt->data + 7,
1078                                              pkt->size - 7,
1079                                              0, NULL, NULL, NULL, NULL);
1080         if (!pb)
1081             goto error;
1082
1083         desc_len = avio_rl32(pb);
1084
1085         if (desc_len > pb->buf_end - pb->buf_ptr)
1086             goto error;
1087
1088         ret = avio_get_str16le(pb, desc_len, desc, sizeof(desc));
1089         avio_skip(pb, desc_len - ret);
1090         if (*desc)
1091             av_dict_set(&st->metadata, "title", desc, 0);
1092
1093         avio_rl16(pb);   /* flags? */
1094         avio_rl32(pb);   /* data size */
1095
1096         size = pb->buf_end - pb->buf_ptr;
1097         pd = (AVProbeData) { .buf      = av_mallocz(size + AVPROBE_PADDING_SIZE),
1098                              .buf_size = size };
1099         if (!pd.buf)
1100             goto error;
1101         memcpy(pd.buf, pb->buf_ptr, size);
1102         sub_demuxer = av_probe_input_format2(&pd, 1, &score);
1103         av_freep(&pd.buf);
1104         if (!sub_demuxer)
1105             goto error;
1106
1107         if (strcmp(sub_demuxer->name, "srt") && strcmp(sub_demuxer->name, "ass"))
1108             goto error;
1109
1110         if (!(ast->sub_ctx = avformat_alloc_context()))
1111             goto error;
1112
1113         ast->sub_ctx->pb = pb;
1114
1115         if (ff_copy_whiteblacklists(ast->sub_ctx, s) < 0)
1116             goto error;
1117
1118         if (!avformat_open_input(&ast->sub_ctx, "", sub_demuxer, NULL)) {
1119             if (ast->sub_ctx->nb_streams != 1)
1120                 goto error;
1121             ff_read_packet(ast->sub_ctx, &ast->sub_pkt);
1122             avcodec_parameters_copy(st->codecpar, ast->sub_ctx->streams[0]->codecpar);
1123             time_base = ast->sub_ctx->streams[0]->time_base;
1124             avpriv_set_pts_info(st, 64, time_base.num, time_base.den);
1125         }
1126         ast->sub_buffer = pkt->buf;
1127         pkt->buf = NULL;
1128         av_packet_unref(pkt);
1129         return 1;
1130
1131 error:
1132         av_freep(&ast->sub_ctx);
1133         avio_context_free(&pb);
1134     }
1135     return 0;
1136 }
1137
1138 static AVStream *get_subtitle_pkt(AVFormatContext *s, AVStream *next_st,
1139                                   AVPacket *pkt)
1140 {
1141     AVIStream *ast, *next_ast = next_st->priv_data;
1142     int64_t ts, next_ts, ts_min = INT64_MAX;
1143     AVStream *st, *sub_st = NULL;
1144     int i;
1145
1146     next_ts = av_rescale_q(next_ast->frame_offset, next_st->time_base,
1147                            AV_TIME_BASE_Q);
1148
1149     for (i = 0; i < s->nb_streams; i++) {
1150         st  = s->streams[i];
1151         ast = st->priv_data;
1152         if (st->discard < AVDISCARD_ALL && ast && ast->sub_pkt.data) {
1153             ts = av_rescale_q(ast->sub_pkt.dts, st->time_base, AV_TIME_BASE_Q);
1154             if (ts <= next_ts && ts < ts_min) {
1155                 ts_min = ts;
1156                 sub_st = st;
1157             }
1158         }
1159     }
1160
1161     if (sub_st) {
1162         ast               = sub_st->priv_data;
1163         *pkt              = ast->sub_pkt;
1164         pkt->stream_index = sub_st->index;
1165
1166         if (ff_read_packet(ast->sub_ctx, &ast->sub_pkt) < 0)
1167             ast->sub_pkt.data = NULL;
1168     }
1169     return sub_st;
1170 }
1171
1172 static int get_stream_idx(const unsigned *d)
1173 {
1174     if (d[0] >= '0' && d[0] <= '9' &&
1175         d[1] >= '0' && d[1] <= '9') {
1176         return (d[0] - '0') * 10 + (d[1] - '0');
1177     } else {
1178         return 100; // invalid stream ID
1179     }
1180 }
1181
1182 /**
1183  *
1184  * @param exit_early set to 1 to just gather packet position without making the changes needed to actually read & return the packet
1185  */
1186 static int avi_sync(AVFormatContext *s, int exit_early)
1187 {
1188     AVIContext *avi = s->priv_data;
1189     AVIOContext *pb = s->pb;
1190     int n;
1191     unsigned int d[8];
1192     unsigned int size;
1193     int64_t i, sync;
1194
1195 start_sync:
1196     memset(d, -1, sizeof(d));
1197     for (i = sync = avio_tell(pb); !avio_feof(pb); i++) {
1198         int j;
1199
1200         for (j = 0; j < 7; j++)
1201             d[j] = d[j + 1];
1202         d[7] = avio_r8(pb);
1203
1204         size = d[4] + (d[5] << 8) + (d[6] << 16) + (d[7] << 24);
1205
1206         n = get_stream_idx(d + 2);
1207         ff_tlog(s, "%X %X %X %X %X %X %X %X %"PRId64" %u %d\n",
1208                 d[0], d[1], d[2], d[3], d[4], d[5], d[6], d[7], i, size, n);
1209         if (i*(avi->io_fsize>0) + (uint64_t)size > avi->fsize || d[0] > 127)
1210             continue;
1211
1212         // parse ix##
1213         if ((d[0] == 'i' && d[1] == 'x' && n < s->nb_streams) ||
1214             // parse JUNK
1215             (d[0] == 'J' && d[1] == 'U' && d[2] == 'N' && d[3] == 'K') ||
1216             (d[0] == 'i' && d[1] == 'd' && d[2] == 'x' && d[3] == '1') ||
1217             (d[0] == 'i' && d[1] == 'n' && d[2] == 'd' && d[3] == 'x')) {
1218             avio_skip(pb, size);
1219             goto start_sync;
1220         }
1221
1222         // parse stray LIST
1223         if (d[0] == 'L' && d[1] == 'I' && d[2] == 'S' && d[3] == 'T') {
1224             avio_skip(pb, 4);
1225             goto start_sync;
1226         }
1227
1228         n = get_stream_idx(d);
1229
1230         if (!((i - avi->last_pkt_pos) & 1) &&
1231             get_stream_idx(d + 1) < s->nb_streams)
1232             continue;
1233
1234         // detect ##ix chunk and skip
1235         if (d[2] == 'i' && d[3] == 'x' && n < s->nb_streams) {
1236             avio_skip(pb, size);
1237             goto start_sync;
1238         }
1239
1240         if (d[2] == 'w' && d[3] == 'c' && n < s->nb_streams) {
1241             avio_skip(pb, 16 * 3 + 8);
1242             goto start_sync;
1243         }
1244
1245         if (avi->dv_demux && n != 0)
1246             continue;
1247
1248         // parse ##dc/##wb
1249         if (n < s->nb_streams) {
1250             AVStream *st;
1251             AVIStream *ast;
1252             st  = s->streams[n];
1253             ast = st->priv_data;
1254
1255             if (!ast) {
1256                 av_log(s, AV_LOG_WARNING, "Skipping foreign stream %d packet\n", n);
1257                 continue;
1258             }
1259
1260             if (s->nb_streams >= 2) {
1261                 AVStream *st1   = s->streams[1];
1262                 AVIStream *ast1 = st1->priv_data;
1263                 // workaround for broken small-file-bug402.avi
1264                 if (   d[2] == 'w' && d[3] == 'b'
1265                    && n == 0
1266                    && st ->codecpar->codec_type == AVMEDIA_TYPE_VIDEO
1267                    && st1->codecpar->codec_type == AVMEDIA_TYPE_AUDIO
1268                    && ast->prefix == 'd'*256+'c'
1269                    && (d[2]*256+d[3] == ast1->prefix || !ast1->prefix_count)
1270                   ) {
1271                     n   = 1;
1272                     st  = st1;
1273                     ast = ast1;
1274                     av_log(s, AV_LOG_WARNING,
1275                            "Invalid stream + prefix combination, assuming audio.\n");
1276                 }
1277             }
1278
1279             if (d[2] == 'p' && d[3] == 'c' && size <= 4 * 256 + 4) {
1280                 int k    = avio_r8(pb);
1281                 int last = (k + avio_r8(pb) - 1) & 0xFF;
1282
1283                 avio_rl16(pb); // flags
1284
1285                 // b + (g << 8) + (r << 16);
1286                 for (; k <= last; k++)
1287                     ast->pal[k] = 0xFFU<<24 | avio_rb32(pb)>>8;
1288
1289                 ast->has_pal = 1;
1290                 goto start_sync;
1291             } else if (((ast->prefix_count < 5 || sync + 9 > i) &&
1292                         d[2] < 128 && d[3] < 128) ||
1293                        d[2] * 256 + d[3] == ast->prefix /* ||
1294                        (d[2] == 'd' && d[3] == 'c') ||
1295                        (d[2] == 'w' && d[3] == 'b') */) {
1296                 if (exit_early)
1297                     return 0;
1298                 if (d[2] * 256 + d[3] == ast->prefix)
1299                     ast->prefix_count++;
1300                 else {
1301                     ast->prefix       = d[2] * 256 + d[3];
1302                     ast->prefix_count = 0;
1303                 }
1304
1305                 if (!avi->dv_demux &&
1306                     ((st->discard >= AVDISCARD_DEFAULT && size == 0) /* ||
1307                         // FIXME: needs a little reordering
1308                         (st->discard >= AVDISCARD_NONKEY &&
1309                         !(pkt->flags & AV_PKT_FLAG_KEY)) */
1310                     || st->discard >= AVDISCARD_ALL)) {
1311
1312                     ast->frame_offset += get_duration(ast, size);
1313                     avio_skip(pb, size);
1314                     goto start_sync;
1315                 }
1316
1317                 avi->stream_index = n;
1318                 ast->packet_size  = size + 8;
1319                 ast->remaining    = size;
1320
1321                 if (size) {
1322                     uint64_t pos = avio_tell(pb) - 8;
1323                     if (!st->internal->index_entries || !st->internal->nb_index_entries ||
1324                         st->internal->index_entries[st->internal->nb_index_entries - 1].pos < pos) {
1325                         av_add_index_entry(st, pos, ast->frame_offset, size,
1326                                            0, AVINDEX_KEYFRAME);
1327                     }
1328                 }
1329                 return 0;
1330             }
1331         }
1332     }
1333
1334     if (pb->error)
1335         return pb->error;
1336     return AVERROR_EOF;
1337 }
1338
1339 static int ni_prepare_read(AVFormatContext *s)
1340 {
1341     AVIContext *avi = s->priv_data;
1342     int best_stream_index = 0;
1343     AVStream *best_st     = NULL;
1344     AVIStream *best_ast;
1345     int64_t best_ts = INT64_MAX;
1346     int i;
1347
1348     for (i = 0; i < s->nb_streams; i++) {
1349         AVStream *st   = s->streams[i];
1350         AVIStream *ast = st->priv_data;
1351         int64_t ts     = ast->frame_offset;
1352         int64_t last_ts;
1353
1354         if (!st->internal->nb_index_entries)
1355             continue;
1356
1357         last_ts = st->internal->index_entries[st->internal->nb_index_entries - 1].timestamp;
1358         if (!ast->remaining && ts > last_ts)
1359             continue;
1360
1361         ts = av_rescale_q(ts, st->time_base,
1362                           (AVRational) { FFMAX(1, ast->sample_size),
1363                                          AV_TIME_BASE });
1364
1365         av_log(s, AV_LOG_TRACE, "%"PRId64" %d/%d %"PRId64"\n", ts,
1366                 st->time_base.num, st->time_base.den, ast->frame_offset);
1367         if (ts < best_ts) {
1368             best_ts           = ts;
1369             best_st           = st;
1370             best_stream_index = i;
1371         }
1372     }
1373     if (!best_st)
1374         return AVERROR_EOF;
1375
1376     best_ast = best_st->priv_data;
1377     best_ts  = best_ast->frame_offset;
1378     if (best_ast->remaining) {
1379         i = av_index_search_timestamp(best_st,
1380                                       best_ts,
1381                                       AVSEEK_FLAG_ANY |
1382                                       AVSEEK_FLAG_BACKWARD);
1383     } else {
1384         i = av_index_search_timestamp(best_st, best_ts, AVSEEK_FLAG_ANY);
1385         if (i >= 0)
1386             best_ast->frame_offset = best_st->internal->index_entries[i].timestamp;
1387     }
1388
1389     if (i >= 0) {
1390         int64_t pos = best_st->internal->index_entries[i].pos;
1391         pos += best_ast->packet_size - best_ast->remaining;
1392         if (avio_seek(s->pb, pos + 8, SEEK_SET) < 0)
1393           return AVERROR_EOF;
1394
1395         av_assert0(best_ast->remaining <= best_ast->packet_size);
1396
1397         avi->stream_index = best_stream_index;
1398         if (!best_ast->remaining)
1399             best_ast->packet_size =
1400             best_ast->remaining   = best_st->internal->index_entries[i].size;
1401     }
1402     else
1403         return AVERROR_EOF;
1404
1405     return 0;
1406 }
1407
1408 static int avi_read_packet(AVFormatContext *s, AVPacket *pkt)
1409 {
1410     AVIContext *avi = s->priv_data;
1411     AVIOContext *pb = s->pb;
1412     int err;
1413
1414     if (CONFIG_DV_DEMUXER && avi->dv_demux) {
1415         int size = avpriv_dv_get_packet(avi->dv_demux, pkt);
1416         if (size >= 0)
1417             return size;
1418         else
1419             goto resync;
1420     }
1421
1422     if (avi->non_interleaved) {
1423         err = ni_prepare_read(s);
1424         if (err < 0)
1425             return err;
1426     }
1427
1428 resync:
1429     if (avi->stream_index >= 0) {
1430         AVStream *st   = s->streams[avi->stream_index];
1431         AVIStream *ast = st->priv_data;
1432         int size, err;
1433
1434         if (get_subtitle_pkt(s, st, pkt))
1435             return 0;
1436
1437         // minorityreport.AVI block_align=1024 sample_size=1 IMA-ADPCM
1438         if (ast->sample_size <= 1)
1439             size = INT_MAX;
1440         else if (ast->sample_size < 32)
1441             // arbitrary multiplier to avoid tiny packets for raw PCM data
1442             size = 1024 * ast->sample_size;
1443         else
1444             size = ast->sample_size;
1445
1446         if (size > ast->remaining)
1447             size = ast->remaining;
1448         avi->last_pkt_pos = avio_tell(pb);
1449         err               = av_get_packet(pb, pkt, size);
1450         if (err < 0)
1451             return err;
1452         size = err;
1453
1454         if (ast->has_pal && pkt->size < (unsigned)INT_MAX / 2) {
1455             uint8_t *pal;
1456             pal = av_packet_new_side_data(pkt,
1457                                           AV_PKT_DATA_PALETTE,
1458                                           AVPALETTE_SIZE);
1459             if (!pal) {
1460                 av_log(s, AV_LOG_ERROR,
1461                        "Failed to allocate data for palette\n");
1462             } else {
1463                 memcpy(pal, ast->pal, AVPALETTE_SIZE);
1464                 ast->has_pal = 0;
1465             }
1466         }
1467
1468         if (CONFIG_DV_DEMUXER && avi->dv_demux) {
1469             AVBufferRef *avbuf = pkt->buf;
1470             size = avpriv_dv_produce_packet(avi->dv_demux, pkt,
1471                                             pkt->data, pkt->size, pkt->pos);
1472             pkt->buf    = avbuf;
1473             pkt->flags |= AV_PKT_FLAG_KEY;
1474             if (size < 0)
1475                 av_packet_unref(pkt);
1476         } else if (st->codecpar->codec_type == AVMEDIA_TYPE_SUBTITLE &&
1477                    !st->codecpar->codec_tag && read_gab2_sub(s, st, pkt)) {
1478             ast->frame_offset++;
1479             avi->stream_index = -1;
1480             ast->remaining    = 0;
1481             goto resync;
1482         } else {
1483             /* XXX: How to handle B-frames in AVI? */
1484             pkt->dts = ast->frame_offset;
1485 //                pkt->dts += ast->start;
1486             if (ast->sample_size)
1487                 pkt->dts /= ast->sample_size;
1488             pkt->stream_index = avi->stream_index;
1489
1490             if (st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO && st->internal->index_entries) {
1491                 AVIndexEntry *e;
1492                 int index;
1493
1494                 index = av_index_search_timestamp(st, ast->frame_offset, AVSEEK_FLAG_ANY);
1495                 e     = &st->internal->index_entries[index];
1496
1497                 if (index >= 0 && e->timestamp == ast->frame_offset) {
1498                     if (index == st->internal->nb_index_entries-1) {
1499                         int key=1;
1500                         uint32_t state=-1;
1501                         if (st->codecpar->codec_id == AV_CODEC_ID_MPEG4) {
1502                             const uint8_t *ptr = pkt->data, *end = ptr + FFMIN(size, 256);
1503                             while (ptr < end) {
1504                                 ptr = avpriv_find_start_code(ptr, end, &state);
1505                                 if (state == 0x1B6 && ptr < end) {
1506                                     key = !(*ptr & 0xC0);
1507                                     break;
1508                                 }
1509                             }
1510                         }
1511                         if (!key)
1512                             e->flags &= ~AVINDEX_KEYFRAME;
1513                     }
1514                     if (e->flags & AVINDEX_KEYFRAME)
1515                         pkt->flags |= AV_PKT_FLAG_KEY;
1516                 }
1517             } else {
1518                 pkt->flags |= AV_PKT_FLAG_KEY;
1519             }
1520             ast->frame_offset += get_duration(ast, pkt->size);
1521         }
1522         ast->remaining -= err;
1523         if (!ast->remaining) {
1524             avi->stream_index = -1;
1525             ast->packet_size  = 0;
1526         }
1527
1528         if (!avi->non_interleaved && pkt->pos >= 0 && ast->seek_pos > pkt->pos) {
1529             av_packet_unref(pkt);
1530             goto resync;
1531         }
1532         ast->seek_pos= 0;
1533
1534         if (!avi->non_interleaved && st->internal->nb_index_entries>1 && avi->index_loaded>1) {
1535             int64_t dts= av_rescale_q(pkt->dts, st->time_base, AV_TIME_BASE_Q);
1536
1537             if (avi->dts_max < dts) {
1538                 avi->dts_max = dts;
1539             } else if (avi->dts_max - (uint64_t)dts > 2*AV_TIME_BASE) {
1540                 avi->non_interleaved= 1;
1541                 av_log(s, AV_LOG_INFO, "Switching to NI mode, due to poor interleaving\n");
1542             }
1543         }
1544
1545         return 0;
1546     }
1547
1548     if ((err = avi_sync(s, 0)) < 0)
1549         return err;
1550     goto resync;
1551 }
1552
1553 /* XXX: We make the implicit supposition that the positions are sorted
1554  * for each stream. */
1555 static int avi_read_idx1(AVFormatContext *s, int size)
1556 {
1557     AVIContext *avi = s->priv_data;
1558     AVIOContext *pb = s->pb;
1559     int nb_index_entries, i;
1560     AVStream *st;
1561     AVIStream *ast;
1562     int64_t pos;
1563     unsigned int index, tag, flags, len, first_packet = 1;
1564     int64_t last_pos = -1;
1565     unsigned last_idx = -1;
1566     int64_t idx1_pos, first_packet_pos = 0, data_offset = 0;
1567     int anykey = 0;
1568
1569     nb_index_entries = size / 16;
1570     if (nb_index_entries <= 0)
1571         return AVERROR_INVALIDDATA;
1572
1573     idx1_pos = avio_tell(pb);
1574     avio_seek(pb, avi->movi_list + 4, SEEK_SET);
1575     if (avi_sync(s, 1) == 0)
1576         first_packet_pos = avio_tell(pb) - 8;
1577     avi->stream_index = -1;
1578     avio_seek(pb, idx1_pos, SEEK_SET);
1579
1580     if (s->nb_streams == 1 && s->streams[0]->codecpar->codec_tag == AV_RL32("MMES")) {
1581         first_packet_pos = 0;
1582         data_offset = avi->movi_list;
1583     }
1584
1585     /* Read the entries and sort them in each stream component. */
1586     for (i = 0; i < nb_index_entries; i++) {
1587         if (avio_feof(pb))
1588             return -1;
1589
1590         tag   = avio_rl32(pb);
1591         flags = avio_rl32(pb);
1592         pos   = avio_rl32(pb);
1593         len   = avio_rl32(pb);
1594         av_log(s, AV_LOG_TRACE, "%d: tag=0x%x flags=0x%x pos=0x%"PRIx64" len=%d/",
1595                 i, tag, flags, pos, len);
1596
1597         index  = ((tag      & 0xff) - '0') * 10;
1598         index +=  (tag >> 8 & 0xff) - '0';
1599         if (index >= s->nb_streams)
1600             continue;
1601         st  = s->streams[index];
1602         ast = st->priv_data;
1603
1604         /* Skip 'xxpc' palette change entries in the index until a logic
1605          * to process these is properly implemented. */
1606         if ((tag >> 16 & 0xff) == 'p' && (tag >> 24 & 0xff) == 'c')
1607             continue;
1608
1609         if (first_packet && first_packet_pos) {
1610             if (avi->movi_list + 4 != pos || pos + 500 > first_packet_pos)
1611                 data_offset  = first_packet_pos - pos;
1612             first_packet = 0;
1613         }
1614         pos += data_offset;
1615
1616         av_log(s, AV_LOG_TRACE, "%d cum_len=%"PRId64"\n", len, ast->cum_len);
1617
1618         // even if we have only a single stream, we should
1619         // switch to non-interleaved to get correct timestamps
1620         if (last_pos == pos)
1621             avi->non_interleaved = 1;
1622         if (last_idx != pos && len) {
1623             av_add_index_entry(st, pos, ast->cum_len, len, 0,
1624                                (flags & AVIIF_INDEX) ? AVINDEX_KEYFRAME : 0);
1625             last_idx= pos;
1626         }
1627         ast->cum_len += get_duration(ast, len);
1628         last_pos      = pos;
1629         anykey       |= flags&AVIIF_INDEX;
1630     }
1631     if (!anykey) {
1632         for (index = 0; index < s->nb_streams; index++) {
1633             st = s->streams[index];
1634             if (st->internal->nb_index_entries)
1635                 st->internal->index_entries[0].flags |= AVINDEX_KEYFRAME;
1636         }
1637     }
1638     return 0;
1639 }
1640
1641 /* Scan the index and consider any file with streams more than
1642  * 2 seconds or 64MB apart non-interleaved. */
1643 static int check_stream_max_drift(AVFormatContext *s)
1644 {
1645     int64_t min_pos, pos;
1646     int i;
1647     int *idx = av_mallocz_array(s->nb_streams, sizeof(*idx));
1648     if (!idx)
1649         return AVERROR(ENOMEM);
1650     for (min_pos = pos = 0; min_pos != INT64_MAX; pos = min_pos + 1LU) {
1651         int64_t max_dts = INT64_MIN / 2;
1652         int64_t min_dts = INT64_MAX / 2;
1653         int64_t max_buffer = 0;
1654
1655         min_pos = INT64_MAX;
1656
1657         for (i = 0; i < s->nb_streams; i++) {
1658             AVStream *st = s->streams[i];
1659             AVIStream *ast = st->priv_data;
1660             int n = st->internal->nb_index_entries;
1661             while (idx[i] < n && st->internal->index_entries[idx[i]].pos < pos)
1662                 idx[i]++;
1663             if (idx[i] < n) {
1664                 int64_t dts;
1665                 dts = av_rescale_q(st->internal->index_entries[idx[i]].timestamp /
1666                                    FFMAX(ast->sample_size, 1),
1667                                    st->time_base, AV_TIME_BASE_Q);
1668                 min_dts = FFMIN(min_dts, dts);
1669                 min_pos = FFMIN(min_pos, st->internal->index_entries[idx[i]].pos);
1670             }
1671         }
1672         for (i = 0; i < s->nb_streams; i++) {
1673             AVStream *st = s->streams[i];
1674             AVIStream *ast = st->priv_data;
1675
1676             if (idx[i] && min_dts != INT64_MAX / 2) {
1677                 int64_t dts;
1678                 dts = av_rescale_q(st->internal->index_entries[idx[i] - 1].timestamp /
1679                                    FFMAX(ast->sample_size, 1),
1680                                    st->time_base, AV_TIME_BASE_Q);
1681                 max_dts = FFMAX(max_dts, dts);
1682                 max_buffer = FFMAX(max_buffer,
1683                                    av_rescale(dts - min_dts,
1684                                               st->codecpar->bit_rate,
1685                                               AV_TIME_BASE));
1686             }
1687         }
1688         if (max_dts - min_dts > 2 * AV_TIME_BASE ||
1689             max_buffer > 1024 * 1024 * 8 * 8) {
1690             av_free(idx);
1691             return 1;
1692         }
1693     }
1694     av_free(idx);
1695     return 0;
1696 }
1697
1698 static int guess_ni_flag(AVFormatContext *s)
1699 {
1700     int i;
1701     int64_t last_start = 0;
1702     int64_t first_end  = INT64_MAX;
1703     int64_t oldpos     = avio_tell(s->pb);
1704
1705     for (i = 0; i < s->nb_streams; i++) {
1706         AVStream *st = s->streams[i];
1707         int n        = st->internal->nb_index_entries;
1708         unsigned int size;
1709
1710         if (n <= 0)
1711             continue;
1712
1713         if (n >= 2) {
1714             int64_t pos = st->internal->index_entries[0].pos;
1715             unsigned tag[2];
1716             avio_seek(s->pb, pos, SEEK_SET);
1717             tag[0] = avio_r8(s->pb);
1718             tag[1] = avio_r8(s->pb);
1719             avio_rl16(s->pb);
1720             size = avio_rl32(s->pb);
1721             if (get_stream_idx(tag) == i && pos + size > st->internal->index_entries[1].pos)
1722                 last_start = INT64_MAX;
1723             if (get_stream_idx(tag) == i && size == st->internal->index_entries[0].size + 8)
1724                 last_start = INT64_MAX;
1725         }
1726
1727         if (st->internal->index_entries[0].pos > last_start)
1728             last_start = st->internal->index_entries[0].pos;
1729         if (st->internal->index_entries[n - 1].pos < first_end)
1730             first_end = st->internal->index_entries[n - 1].pos;
1731     }
1732     avio_seek(s->pb, oldpos, SEEK_SET);
1733
1734     if (last_start > first_end)
1735         return 1;
1736
1737     return check_stream_max_drift(s);
1738 }
1739
1740 static int avi_load_index(AVFormatContext *s)
1741 {
1742     AVIContext *avi = s->priv_data;
1743     AVIOContext *pb = s->pb;
1744     uint32_t tag, size;
1745     int64_t pos = avio_tell(pb);
1746     int64_t next;
1747     int ret     = -1;
1748
1749     if (avio_seek(pb, avi->movi_end, SEEK_SET) < 0)
1750         goto the_end; // maybe truncated file
1751     av_log(s, AV_LOG_TRACE, "movi_end=0x%"PRIx64"\n", avi->movi_end);
1752     for (;;) {
1753         tag  = avio_rl32(pb);
1754         size = avio_rl32(pb);
1755         if (avio_feof(pb))
1756             break;
1757         next = avio_tell(pb) + size + (size & 1);
1758
1759         if (tag == MKTAG('i', 'd', 'x', '1') &&
1760             avi_read_idx1(s, size) >= 0) {
1761             avi->index_loaded=2;
1762             ret = 0;
1763         }else if (tag == MKTAG('L', 'I', 'S', 'T')) {
1764             uint32_t tag1 = avio_rl32(pb);
1765
1766             if (tag1 == MKTAG('I', 'N', 'F', 'O'))
1767                 ff_read_riff_info(s, size - 4);
1768         }else if (!ret)
1769             break;
1770
1771         if (avio_seek(pb, next, SEEK_SET) < 0)
1772             break; // something is wrong here
1773     }
1774
1775 the_end:
1776     avio_seek(pb, pos, SEEK_SET);
1777     return ret;
1778 }
1779
1780 static void seek_subtitle(AVStream *st, AVStream *st2, int64_t timestamp)
1781 {
1782     AVIStream *ast2 = st2->priv_data;
1783     int64_t ts2     = av_rescale_q(timestamp, st->time_base, st2->time_base);
1784     av_packet_unref(&ast2->sub_pkt);
1785     if (avformat_seek_file(ast2->sub_ctx, 0, INT64_MIN, ts2, ts2, 0) >= 0 ||
1786         avformat_seek_file(ast2->sub_ctx, 0, ts2, ts2, INT64_MAX, 0) >= 0)
1787         ff_read_packet(ast2->sub_ctx, &ast2->sub_pkt);
1788 }
1789
1790 static int avi_read_seek(AVFormatContext *s, int stream_index,
1791                          int64_t timestamp, int flags)
1792 {
1793     AVIContext *avi = s->priv_data;
1794     AVStream *st;
1795     int i, index;
1796     int64_t pos, pos_min;
1797     AVIStream *ast;
1798
1799     /* Does not matter which stream is requested dv in avi has the
1800      * stream information in the first video stream.
1801      */
1802     if (avi->dv_demux)
1803         stream_index = 0;
1804
1805     if (!avi->index_loaded) {
1806         /* we only load the index on demand */
1807         avi_load_index(s);
1808         avi->index_loaded |= 1;
1809     }
1810     av_assert0(stream_index >= 0);
1811
1812     st    = s->streams[stream_index];
1813     ast   = st->priv_data;
1814     index = av_index_search_timestamp(st,
1815                                       timestamp * FFMAX(ast->sample_size, 1),
1816                                       flags);
1817     if (index < 0) {
1818         if (st->internal->nb_index_entries > 0)
1819             av_log(s, AV_LOG_DEBUG, "Failed to find timestamp %"PRId64 " in index %"PRId64 " .. %"PRId64 "\n",
1820                    timestamp * FFMAX(ast->sample_size, 1),
1821                    st->internal->index_entries[0].timestamp,
1822                    st->internal->index_entries[st->internal->nb_index_entries - 1].timestamp);
1823         return AVERROR_INVALIDDATA;
1824     }
1825
1826     /* find the position */
1827     pos       = st->internal->index_entries[index].pos;
1828     timestamp = st->internal->index_entries[index].timestamp / FFMAX(ast->sample_size, 1);
1829
1830     av_log(s, AV_LOG_TRACE, "XX %"PRId64" %d %"PRId64"\n",
1831             timestamp, index, st->internal->index_entries[index].timestamp);
1832
1833     if (CONFIG_DV_DEMUXER && avi->dv_demux) {
1834         /* One and only one real stream for DV in AVI, and it has video  */
1835         /* offsets. Calling with other stream indexes should have failed */
1836         /* the av_index_search_timestamp call above.                     */
1837
1838         if (avio_seek(s->pb, pos, SEEK_SET) < 0)
1839             return -1;
1840
1841         /* Feed the DV video stream version of the timestamp to the */
1842         /* DV demux so it can synthesize correct timestamps.        */
1843         ff_dv_offset_reset(avi->dv_demux, timestamp);
1844
1845         avi->stream_index = -1;
1846         return 0;
1847     }
1848
1849     pos_min = pos;
1850     for (i = 0; i < s->nb_streams; i++) {
1851         AVStream *st2   = s->streams[i];
1852         AVIStream *ast2 = st2->priv_data;
1853
1854         ast2->packet_size =
1855         ast2->remaining   = 0;
1856
1857         if (ast2->sub_ctx) {
1858             seek_subtitle(st, st2, timestamp);
1859             continue;
1860         }
1861
1862         if (st2->internal->nb_index_entries <= 0)
1863             continue;
1864
1865 //        av_assert1(st2->codecpar->block_align);
1866         index = av_index_search_timestamp(st2,
1867                                           av_rescale_q(timestamp,
1868                                                        st->time_base,
1869                                                        st2->time_base) *
1870                                           FFMAX(ast2->sample_size, 1),
1871                                           flags |
1872                                           AVSEEK_FLAG_BACKWARD |
1873                                           (st2->codecpar->codec_type != AVMEDIA_TYPE_VIDEO ? AVSEEK_FLAG_ANY : 0));
1874         if (index < 0)
1875             index = 0;
1876         ast2->seek_pos = st2->internal->index_entries[index].pos;
1877         pos_min = FFMIN(pos_min,ast2->seek_pos);
1878     }
1879     for (i = 0; i < s->nb_streams; i++) {
1880         AVStream *st2 = s->streams[i];
1881         AVIStream *ast2 = st2->priv_data;
1882
1883         if (ast2->sub_ctx || st2->internal->nb_index_entries <= 0)
1884             continue;
1885
1886         index = av_index_search_timestamp(
1887                 st2,
1888                 av_rescale_q(timestamp, st->time_base, st2->time_base) * FFMAX(ast2->sample_size, 1),
1889                 flags | AVSEEK_FLAG_BACKWARD | (st2->codecpar->codec_type != AVMEDIA_TYPE_VIDEO ? AVSEEK_FLAG_ANY : 0));
1890         if (index < 0)
1891             index = 0;
1892         while (!avi->non_interleaved && index>0 && st2->internal->index_entries[index-1].pos >= pos_min)
1893             index--;
1894         ast2->frame_offset = st2->internal->index_entries[index].timestamp;
1895     }
1896
1897     /* do the seek */
1898     if (avio_seek(s->pb, pos_min, SEEK_SET) < 0) {
1899         av_log(s, AV_LOG_ERROR, "Seek failed\n");
1900         return -1;
1901     }
1902     avi->stream_index = -1;
1903     avi->dts_max      = INT_MIN;
1904     return 0;
1905 }
1906
1907 static int avi_read_close(AVFormatContext *s)
1908 {
1909     int i;
1910     AVIContext *avi = s->priv_data;
1911
1912     for (i = 0; i < s->nb_streams; i++) {
1913         AVStream *st   = s->streams[i];
1914         AVIStream *ast = st->priv_data;
1915         if (ast) {
1916             if (ast->sub_ctx) {
1917                 av_freep(&ast->sub_ctx->pb);
1918                 avformat_close_input(&ast->sub_ctx);
1919             }
1920             av_buffer_unref(&ast->sub_buffer);
1921             av_packet_unref(&ast->sub_pkt);
1922         }
1923     }
1924
1925     av_freep(&avi->dv_demux);
1926
1927     return 0;
1928 }
1929
1930 static int avi_probe(const AVProbeData *p)
1931 {
1932     int i;
1933
1934     /* check file header */
1935     for (i = 0; avi_headers[i][0]; i++)
1936         if (AV_RL32(p->buf    ) == AV_RL32(avi_headers[i]    ) &&
1937             AV_RL32(p->buf + 8) == AV_RL32(avi_headers[i] + 4))
1938             return AVPROBE_SCORE_MAX;
1939
1940     return 0;
1941 }
1942
1943 AVInputFormat ff_avi_demuxer = {
1944     .name           = "avi",
1945     .long_name      = NULL_IF_CONFIG_SMALL("AVI (Audio Video Interleaved)"),
1946     .priv_data_size = sizeof(AVIContext),
1947     .extensions     = "avi",
1948     .read_probe     = avi_probe,
1949     .read_header    = avi_read_header,
1950     .read_packet    = avi_read_packet,
1951     .read_close     = avi_read_close,
1952     .read_seek      = avi_read_seek,
1953     .priv_class = &demuxer_class,
1954 };