git.sesse.net Git - ffmpeg/blob - libavformat/avidec.c

   1 /*
   2  * AVI demuxer
   3  * Copyright (c) 2001 Fabrice Bellard
   4  *
   5  * This file is part of FFmpeg.
   6  *
   7  * FFmpeg is free software; you can redistribute it and/or
   8  * modify it under the terms of the GNU Lesser General Public
   9  * License as published by the Free Software Foundation; either
  10  * version 2.1 of the License, or (at your option) any later version.
  11  *
  12  * FFmpeg is distributed in the hope that it will be useful,
  13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  15  * Lesser General Public License for more details.
  16  *
  17  * You should have received a copy of the GNU Lesser General Public
  18  * License along with FFmpeg; if not, write to the Free Software
  19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
  20  */
  21
  22 #include "libavutil/intreadwrite.h"
  23 #include "libavutil/mathematics.h"
  24 #include "libavutil/bswap.h"
  25 #include "libavutil/opt.h"
  26 #include "libavutil/dict.h"
  27 #include "libavutil/avstring.h"
  28 #include "avformat.h"
  29 #include "internal.h"
  30 #include "avi.h"
  31 #include "dv.h"
  32 #include "riff.h"
  33
  34 #undef NDEBUG
  35 #include <assert.h>
  36
  37 typedef struct AVIStream {
  38     int64_t frame_offset; /* current frame (video) or byte (audio) counter
  39                          (used to compute the pts) */
  40     int remaining;
  41     int packet_size;
  42
  43     int scale;
  44     int rate;
  45     int sample_size; /* size of one sample (or packet) (in the rate/scale sense) in bytes */
  46
  47     int64_t cum_len; /* temporary storage (used during seek) */
  48
  49     int prefix;                       ///< normally 'd'<<8 + 'c' or 'w'<<8 + 'b'
  50     int prefix_count;
  51     uint32_t pal[256];
  52     int has_pal;
  53     int dshow_block_align;            ///< block align variable used to emulate bugs in the MS dshow demuxer
  54
  55     AVFormatContext *sub_ctx;
  56     AVPacket sub_pkt;
  57     uint8_t *sub_buffer;
  58
  59     int64_t seek_pos;
  60 } AVIStream;
  61
  62 typedef struct {
  63     const AVClass *class;
  64     int64_t  riff_end;
  65     int64_t  movi_end;
  66     int64_t  fsize;
  67     int64_t movi_list;
  68     int64_t last_pkt_pos;
  69     int index_loaded;
  70     int is_odml;
  71     int non_interleaved;
  72     int stream_index;
  73     DVDemuxContext* dv_demux;
  74     int odml_depth;
  75     int use_odml;
  76 #define MAX_ODML_DEPTH 1000
  77     int64_t dts_max;
  78 } AVIContext;
  79
  80
  81 static const AVOption options[] = {
  82     { "use_odml", "use odml index", offsetof(AVIContext, use_odml), AV_OPT_TYPE_INT, {.dbl = 1}, -1, 1, AV_OPT_FLAG_DECODING_PARAM},
  83     { NULL },
  84 };
  85
  86 static const AVClass demuxer_class = {
  87     "AVI demuxer",
  88     av_default_item_name,
  89     options,
  90     LIBAVUTIL_VERSION_INT,
  91 };
  92
  93
  94 static const char avi_headers[][8] = {
  95     { 'R', 'I', 'F', 'F',    'A', 'V', 'I', ' ' },
  96     { 'R', 'I', 'F', 'F',    'A', 'V', 'I', 'X' },
  97     { 'R', 'I', 'F', 'F',    'A', 'V', 'I', 0x19},
  98     { 'O', 'N', '2', ' ',    'O', 'N', '2', 'f' },
  99     { 'R', 'I', 'F', 'F',    'A', 'M', 'V', ' ' },
 100     { 0 }
 101 };
 102
 103 static const AVMetadataConv avi_metadata_conv[] = {
 104     { "strn", "title" },
 105     { 0 },
 106 };
 107
 108 static int avi_load_index(AVFormatContext *s);
 109 static int guess_ni_flag(AVFormatContext *s);
 110
 111 #define print_tag(str, tag, size)                       \
 112     av_dlog(NULL, "%s: tag=%c%c%c%c size=0x%x\n",       \
 113            str, tag & 0xff,                             \
 114            (tag >> 8) & 0xff,                           \
 115            (tag >> 16) & 0xff,                          \
 116            (tag >> 24) & 0xff,                          \
 117            size)
 118
 119 static inline int get_duration(AVIStream *ast, int len){
 120     if(ast->sample_size){
 121         return len;
 122     }else if (ast->dshow_block_align){
 123         return (len + ast->dshow_block_align - 1)/ast->dshow_block_align;
 124     }else
 125         return 1;
 126 }
 127
 128 static int get_riff(AVFormatContext *s, AVIOContext *pb)
 129 {
 130     AVIContext *avi = s->priv_data;
 131     char header[8];
 132     int i;
 133
 134     /* check RIFF header */
 135     avio_read(pb, header, 4);
 136     avi->riff_end = avio_rl32(pb);  /* RIFF chunk size */
 137     avi->riff_end += avio_tell(pb); /* RIFF chunk end */
 138     avio_read(pb, header+4, 4);
 139
 140     for(i=0; avi_headers[i][0]; i++)
 141         if(!memcmp(header, avi_headers[i], 8))
 142             break;
 143     if(!avi_headers[i][0])
 144         return -1;
 145
 146     if(header[7] == 0x19)
 147         av_log(s, AV_LOG_INFO, "This file has been generated by a totally broken muxer.\n");
 148
 149     return 0;
 150 }
 151
 152 static int read_braindead_odml_indx(AVFormatContext *s, int frame_num){
 153     AVIContext *avi = s->priv_data;
 154     AVIOContext *pb = s->pb;
 155     int longs_pre_entry= avio_rl16(pb);
 156     int index_sub_type = avio_r8(pb);
 157     int index_type     = avio_r8(pb);
 158     int entries_in_use = avio_rl32(pb);
 159     int chunk_id       = avio_rl32(pb);
 160     int64_t base       = avio_rl64(pb);
 161     int stream_id= 10*((chunk_id&0xFF) - '0') + (((chunk_id>>8)&0xFF) - '0');
 162     AVStream *st;
 163     AVIStream *ast;
 164     int i;
 165     int64_t last_pos= -1;
 166     int64_t filesize= avi->fsize;
 167
 168     av_dlog(s, "longs_pre_entry:%d index_type:%d entries_in_use:%d chunk_id:%X base:%16"PRIX64"\n",
 169             longs_pre_entry,index_type, entries_in_use, chunk_id, base);
 170
 171     if(stream_id >= s->nb_streams || stream_id < 0)
 172         return -1;
 173     st= s->streams[stream_id];
 174     ast = st->priv_data;
 175
 176     if(index_sub_type)
 177         return -1;
 178
 179     avio_rl32(pb);
 180
 181     if(index_type && longs_pre_entry != 2)
 182         return -1;
 183     if(index_type>1)
 184         return -1;
 185
 186     if(filesize > 0 && base >= filesize){
 187         av_log(s, AV_LOG_ERROR, "ODML index invalid\n");
 188         if(base>>32 == (base & 0xFFFFFFFF) && (base & 0xFFFFFFFF) < filesize && filesize <= 0xFFFFFFFF)
 189             base &= 0xFFFFFFFF;
 190         else
 191             return -1;
 192     }
 193
 194     for(i=0; i<entries_in_use; i++){
 195         if(index_type){
 196             int64_t pos= avio_rl32(pb) + base - 8;
 197             int len    = avio_rl32(pb);
 198             int key= len >= 0;
 199             len &= 0x7FFFFFFF;
 200
 201 #ifdef DEBUG_SEEK
 202             av_log(s, AV_LOG_ERROR, "pos:%"PRId64", len:%X\n", pos, len);
 203 #endif
 204             if(url_feof(pb))
 205                 return -1;
 206
 207             if(last_pos == pos || pos == base - 8)
 208                 avi->non_interleaved= 1;
 209             if(last_pos != pos && (len || !ast->sample_size))
 210                 av_add_index_entry(st, pos, ast->cum_len, len, 0, key ? AVINDEX_KEYFRAME : 0);
 211
 212             ast->cum_len += get_duration(ast, len);
 213             last_pos= pos;
 214         }else{
 215             int64_t offset, pos;
 216             int duration;
 217             offset = avio_rl64(pb);
 218             avio_rl32(pb);       /* size */
 219             duration = avio_rl32(pb);
 220
 221             if(url_feof(pb))
 222                 return -1;
 223
 224             pos = avio_tell(pb);
 225
 226             if(avi->odml_depth > MAX_ODML_DEPTH){
 227                 av_log(s, AV_LOG_ERROR, "Too deeply nested ODML indexes\n");
 228                 return -1;
 229             }
 230
 231             if(avio_seek(pb, offset+8, SEEK_SET) < 0)
 232                 return -1;
 233             avi->odml_depth++;
 234             read_braindead_odml_indx(s, frame_num);
 235             avi->odml_depth--;
 236             frame_num += duration;
 237
 238             if(avio_seek(pb, pos, SEEK_SET) < 0) {
 239                 av_log(s, AV_LOG_ERROR, "Failed to restore position after reading index");
 240                 return -1;
 241             }
 242
 243         }
 244     }
 245     avi->index_loaded=2;
 246     return 0;
 247 }
 248
 249 static void clean_index(AVFormatContext *s){
 250     int i;
 251     int64_t j;
 252
 253     for(i=0; i<s->nb_streams; i++){
 254         AVStream *st = s->streams[i];
 255         AVIStream *ast = st->priv_data;
 256         int n= st->nb_index_entries;
 257         int max= ast->sample_size;
 258         int64_t pos, size, ts;
 259
 260         if(n != 1 || ast->sample_size==0)
 261             continue;
 262
 263         while(max < 1024) max+=max;
 264
 265         pos= st->index_entries[0].pos;
 266         size= st->index_entries[0].size;
 267         ts= st->index_entries[0].timestamp;
 268
 269         for(j=0; j<size; j+=max){
 270             av_add_index_entry(st, pos+j, ts+j, FFMIN(max, size-j), 0, AVINDEX_KEYFRAME);
 271         }
 272     }
 273 }
 274
 275 static int avi_read_tag(AVFormatContext *s, AVStream *st, uint32_t tag, uint32_t size)
 276 {
 277     AVIOContext *pb = s->pb;
 278     char key[5] = {0}, *value;
 279
 280     size += (size & 1);
 281
 282     if (size == UINT_MAX)
 283         return -1;
 284     value = av_malloc(size+1);
 285     if (!value)
 286         return -1;
 287     avio_read(pb, value, size);
 288     value[size]=0;
 289
 290     AV_WL32(key, tag);
 291
 292     return av_dict_set(st ? &st->metadata : &s->metadata, key, value,
 293                             AV_DICT_DONT_STRDUP_VAL);
 294 }
 295
 296 static const char months[12][4] = { "Jan", "Feb", "Mar", "Apr", "May", "Jun",
 297                                     "Jul", "Aug", "Sep", "Oct", "Nov", "Dec" };
 298
 299 static void avi_metadata_creation_time(AVDictionary **metadata, char *date)
 300 {
 301     char month[4], time[9], buffer[64];
 302     int i, day, year;
 303     /* parse standard AVI date format (ie. "Mon Mar 10 15:04:43 2003") */
 304     if (sscanf(date, "%*3s%*[ ]%3s%*[ ]%2d%*[ ]%8s%*[ ]%4d",
 305                month, &day, time, &year) == 4) {
 306         for (i=0; i<12; i++)
 307             if (!av_strcasecmp(month, months[i])) {
 308                 snprintf(buffer, sizeof(buffer), "%.4d-%.2d-%.2d %s",
 309                          year, i+1, day, time);
 310                 av_dict_set(metadata, "creation_time", buffer, 0);
 311             }
 312     } else if (date[4] == '/' && date[7] == '/') {
 313         date[4] = date[7] = '-';
 314         av_dict_set(metadata, "creation_time", date, 0);
 315     }
 316 }
 317
 318 static void avi_read_nikon(AVFormatContext *s, uint64_t end)
 319 {
 320     while (avio_tell(s->pb) < end) {
 321         uint32_t tag  = avio_rl32(s->pb);
 322         uint32_t size = avio_rl32(s->pb);
 323         switch (tag) {
 324         case MKTAG('n', 'c', 't', 'g'): {  /* Nikon Tags */
 325             uint64_t tag_end = avio_tell(s->pb) + size;
 326             while (avio_tell(s->pb) < tag_end) {
 327                 uint16_t tag  = avio_rl16(s->pb);
 328                 uint16_t size = avio_rl16(s->pb);
 329                 const char *name = NULL;
 330                 char buffer[64] = {0};
 331                 size -= avio_read(s->pb, buffer,
 332                                    FFMIN(size, sizeof(buffer)-1));
 333                 switch (tag) {
 334                 case 0x03:  name = "maker";  break;
 335                 case 0x04:  name = "model";  break;
 336                 case 0x13:  name = "creation_time";
 337                     if (buffer[4] == ':' && buffer[7] == ':')
 338                         buffer[4] = buffer[7] = '-';
 339                     break;
 340                 }
 341                 if (name)
 342                     av_dict_set(&s->metadata, name, buffer, 0);
 343                 avio_skip(s->pb, size);
 344             }
 345             break;
 346         }
 347         default:
 348             avio_skip(s->pb, size);
 349             break;
 350         }
 351     }
 352 }
 353
 354 static int avi_read_header(AVFormatContext *s)
 355 {
 356     AVIContext *avi = s->priv_data;
 357     AVIOContext *pb = s->pb;
 358     unsigned int tag, tag1, handler;
 359     int codec_type, stream_index, frame_period;
 360     unsigned int size;
 361     int i;
 362     AVStream *st;
 363     AVIStream *ast = NULL;
 364     int avih_width=0, avih_height=0;
 365     int amv_file_format=0;
 366     uint64_t list_end = 0;
 367     int ret;
 368
 369     avi->stream_index= -1;
 370
 371     if (get_riff(s, pb) < 0)
 372         return -1;
 373
 374     av_log(avi, AV_LOG_DEBUG, "use odml:%d\n", avi->use_odml);
 375
 376     avi->fsize = avio_size(pb);
 377     if(avi->fsize<=0 || avi->fsize < avi->riff_end)
 378         avi->fsize= avi->riff_end == 8 ? INT64_MAX : avi->riff_end;
 379
 380     /* first list tag */
 381     stream_index = -1;
 382     codec_type = -1;
 383     frame_period = 0;
 384     for(;;) {
 385         if (url_feof(pb))
 386             goto fail;
 387         tag = avio_rl32(pb);
 388         size = avio_rl32(pb);
 389
 390         print_tag("tag", tag, size);
 391
 392         switch(tag) {
 393         case MKTAG('L', 'I', 'S', 'T'):
 394             list_end = avio_tell(pb) + size;
 395             /* Ignored, except at start of video packets. */
 396             tag1 = avio_rl32(pb);
 397
 398             print_tag("list", tag1, 0);
 399
 400             if (tag1 == MKTAG('m', 'o', 'v', 'i')) {
 401                 avi->movi_list = avio_tell(pb) - 4;
 402                 if(size) avi->movi_end = avi->movi_list + size + (size & 1);
 403                 else     avi->movi_end = avi->fsize;
 404                 av_dlog(NULL, "movi end=%"PRIx64"\n", avi->movi_end);
 405                 goto end_of_header;
 406             }
 407             else if (tag1 == MKTAG('I', 'N', 'F', 'O'))
 408                 ff_read_riff_info(s, size - 4);
 409             else if (tag1 == MKTAG('n', 'c', 'd', 't'))
 410                 avi_read_nikon(s, list_end);
 411
 412             break;
 413         case MKTAG('I', 'D', 'I', 'T'): {
 414             unsigned char date[64] = {0};
 415             size += (size & 1);
 416             size -= avio_read(pb, date, FFMIN(size, sizeof(date)-1));
 417             avio_skip(pb, size);
 418             avi_metadata_creation_time(&s->metadata, date);
 419             break;
 420         }
 421         case MKTAG('d', 'm', 'l', 'h'):
 422             avi->is_odml = 1;
 423             avio_skip(pb, size + (size & 1));
 424             break;
 425         case MKTAG('a', 'm', 'v', 'h'):
 426             amv_file_format=1;
 427         case MKTAG('a', 'v', 'i', 'h'):
 428             /* AVI header */
 429             /* using frame_period is bad idea */
 430             frame_period = avio_rl32(pb);
 431             avio_rl32(pb); /* max. bytes per second */
 432             avio_rl32(pb);
 433             avi->non_interleaved |= avio_rl32(pb) & AVIF_MUSTUSEINDEX;
 434
 435             avio_skip(pb, 2 * 4);
 436             avio_rl32(pb);
 437             avio_rl32(pb);
 438             avih_width=avio_rl32(pb);
 439             avih_height=avio_rl32(pb);
 440
 441             avio_skip(pb, size - 10 * 4);
 442             break;
 443         case MKTAG('s', 't', 'r', 'h'):
 444             /* stream header */
 445
 446             tag1 = avio_rl32(pb);
 447             handler = avio_rl32(pb); /* codec tag */
 448
 449             if(tag1 == MKTAG('p', 'a', 'd', 's')){
 450                 avio_skip(pb, size - 8);
 451                 break;
 452             }else{
 453                 stream_index++;
 454                 st = avformat_new_stream(s, NULL);
 455                 if (!st)
 456                     goto fail;
 457
 458                 st->id = stream_index;
 459                 ast = av_mallocz(sizeof(AVIStream));
 460                 if (!ast)
 461                     goto fail;
 462                 st->priv_data = ast;
 463             }
 464             if(amv_file_format)
 465                 tag1 = stream_index ? MKTAG('a','u','d','s') : MKTAG('v','i','d','s');
 466
 467             print_tag("strh", tag1, -1);
 468
 469             if(tag1 == MKTAG('i', 'a', 'v', 's') || tag1 == MKTAG('i', 'v', 'a', 's')){
 470                 int64_t dv_dur;
 471
 472                 /*
 473                  * After some consideration -- I don't think we
 474                  * have to support anything but DV in type1 AVIs.
 475                  */
 476                 if (s->nb_streams != 1)
 477                     goto fail;
 478
 479                 if (handler != MKTAG('d', 'v', 's', 'd') &&
 480                     handler != MKTAG('d', 'v', 'h', 'd') &&
 481                     handler != MKTAG('d', 'v', 's', 'l'))
 482                    goto fail;
 483
 484                 ast = s->streams[0]->priv_data;
 485                 av_freep(&s->streams[0]->codec->extradata);
 486                 av_freep(&s->streams[0]->codec);
 487                 av_freep(&s->streams[0]);
 488                 s->nb_streams = 0;
 489                 if (CONFIG_DV_DEMUXER) {
 490                     avi->dv_demux = avpriv_dv_init_demux(s);
 491                     if (!avi->dv_demux)
 492                         goto fail;
 493                 }
 494                 s->streams[0]->priv_data = ast;
 495                 avio_skip(pb, 3 * 4);
 496                 ast->scale = avio_rl32(pb);
 497                 ast->rate = avio_rl32(pb);
 498                 avio_skip(pb, 4);  /* start time */
 499
 500                 dv_dur = avio_rl32(pb);
 501                 if (ast->scale > 0 && ast->rate > 0 && dv_dur > 0) {
 502                     dv_dur *= AV_TIME_BASE;
 503                     s->duration = av_rescale(dv_dur, ast->scale, ast->rate);
 504                 }
 505                 /*
 506                  * else, leave duration alone; timing estimation in utils.c
 507                  *      will make a guess based on bitrate.
 508                  */
 509
 510                 stream_index = s->nb_streams - 1;
 511                 avio_skip(pb, size - 9*4);
 512                 break;
 513             }
 514
 515             assert(stream_index < s->nb_streams);
 516             st->codec->stream_codec_tag= handler;
 517
 518             avio_rl32(pb); /* flags */
 519             avio_rl16(pb); /* priority */
 520             avio_rl16(pb); /* language */
 521             avio_rl32(pb); /* initial frame */
 522             ast->scale = avio_rl32(pb);
 523             ast->rate = avio_rl32(pb);
 524             if(!(ast->scale && ast->rate)){
 525                 av_log(s, AV_LOG_WARNING, "scale/rate is %u/%u which is invalid. (This file has been generated by broken software.)\n", ast->scale, ast->rate);
 526                 if(frame_period){
 527                     ast->rate = 1000000;
 528                     ast->scale = frame_period;
 529                 }else{
 530                     ast->rate = 25;
 531                     ast->scale = 1;
 532                 }
 533             }
 534             avpriv_set_pts_info(st, 64, ast->scale, ast->rate);
 535
 536             ast->cum_len=avio_rl32(pb); /* start */
 537             st->nb_frames = avio_rl32(pb);
 538
 539             st->start_time = 0;
 540             avio_rl32(pb); /* buffer size */
 541             avio_rl32(pb); /* quality */
 542             if (ast->cum_len*ast->scale/ast->rate > 3600) {
 543                 av_log(s, AV_LOG_ERROR, "crazy start time, iam scared, giving up\n");
 544                 return AVERROR_INVALIDDATA;
 545             }
 546             ast->sample_size = avio_rl32(pb); /* sample ssize */
 547             ast->cum_len *= FFMAX(1, ast->sample_size);
 548 //            av_log(s, AV_LOG_DEBUG, "%d %d %d %d\n", ast->rate, ast->scale, ast->start, ast->sample_size);
 549
 550             switch(tag1) {
 551             case MKTAG('v', 'i', 'd', 's'):
 552                 codec_type = AVMEDIA_TYPE_VIDEO;
 553
 554                 ast->sample_size = 0;
 555                 break;
 556             case MKTAG('a', 'u', 'd', 's'):
 557                 codec_type = AVMEDIA_TYPE_AUDIO;
 558                 break;
 559             case MKTAG('t', 'x', 't', 's'):
 560                 codec_type = AVMEDIA_TYPE_SUBTITLE;
 561                 break;
 562             case MKTAG('d', 'a', 't', 's'):
 563                 codec_type = AVMEDIA_TYPE_DATA;
 564                 break;
 565             default:
 566                 av_log(s, AV_LOG_INFO, "unknown stream type %X\n", tag1);
 567             }
 568             if(ast->sample_size == 0)
 569                 st->duration = st->nb_frames;
 570             ast->frame_offset= ast->cum_len;
 571             avio_skip(pb, size - 12 * 4);
 572             break;
 573         case MKTAG('s', 't', 'r', 'f'):
 574             /* stream header */
 575             if (!size)
 576                 break;
 577             if (stream_index >= (unsigned)s->nb_streams || avi->dv_demux) {
 578                 avio_skip(pb, size);
 579             } else {
 580                 uint64_t cur_pos = avio_tell(pb);
 581                 unsigned esize;
 582                 if (cur_pos < list_end)
 583                     size = FFMIN(size, list_end - cur_pos);
 584                 st = s->streams[stream_index];
 585                 switch(codec_type) {
 586                 case AVMEDIA_TYPE_VIDEO:
 587                     if(amv_file_format){
 588                         st->codec->width=avih_width;
 589                         st->codec->height=avih_height;
 590                         st->codec->codec_type = AVMEDIA_TYPE_VIDEO;
 591                         st->codec->codec_id = CODEC_ID_AMV;
 592                         avio_skip(pb, size);
 593                         break;
 594                     }
 595                     tag1 = ff_get_bmp_header(pb, st, &esize);
 596
 597                     if (tag1 == MKTAG('D', 'X', 'S', 'B') || tag1 == MKTAG('D','X','S','A')) {
 598                         st->codec->codec_type = AVMEDIA_TYPE_SUBTITLE;
 599                         st->codec->codec_tag = tag1;
 600                         st->codec->codec_id = CODEC_ID_XSUB;
 601                         break;
 602                     }
 603
 604                     if(size > 10*4 && size<(1<<30) && size < avi->fsize){
 605                         if(esize == size-1 && (esize&1)) st->codec->extradata_size= esize - 10*4;
 606                         else                             st->codec->extradata_size=  size - 10*4;
 607                         st->codec->extradata= av_malloc(st->codec->extradata_size + FF_INPUT_BUFFER_PADDING_SIZE);
 608                         if (!st->codec->extradata) {
 609                             st->codec->extradata_size= 0;
 610                             return AVERROR(ENOMEM);
 611                         }
 612                         avio_read(pb, st->codec->extradata, st->codec->extradata_size);
 613                     }
 614
 615                     if(st->codec->extradata_size & 1) //FIXME check if the encoder really did this correctly
 616                         avio_r8(pb);
 617
 618                     /* Extract palette from extradata if bpp <= 8. */
 619                     /* This code assumes that extradata contains only palette. */
 620                     /* This is true for all paletted codecs implemented in FFmpeg. */
 621                     if (st->codec->extradata_size && (st->codec->bits_per_coded_sample <= 8)) {
 622                         int pal_size = (1 << st->codec->bits_per_coded_sample) << 2;
 623                         const uint8_t *pal_src;
 624
 625                         pal_size = FFMIN(pal_size, st->codec->extradata_size);
 626                         pal_src = st->codec->extradata + st->codec->extradata_size - pal_size;
 627                         for (i = 0; i < pal_size/4; i++)
 628                             ast->pal[i] = 0xFF<<24 | AV_RL32(pal_src+4*i);
 629                         ast->has_pal = 1;
 630                     }
 631
 632                     print_tag("video", tag1, 0);
 633
 634                     st->codec->codec_type = AVMEDIA_TYPE_VIDEO;
 635                     st->codec->codec_tag = tag1;
 636                     st->codec->codec_id = ff_codec_get_id(ff_codec_bmp_tags, tag1);
 637                     st->need_parsing = AVSTREAM_PARSE_HEADERS; // This is needed to get the pict type which is necessary for generating correct pts.
 638                     // Support "Resolution 1:1" for Avid AVI Codec
 639                     if(tag1 == MKTAG('A', 'V', 'R', 'n') &&
 640                        st->codec->extradata_size >= 31 &&
 641                        !memcmp(&st->codec->extradata[28], "1:1", 3))
 642                         st->codec->codec_id = CODEC_ID_RAWVIDEO;
 643
 644                     if(st->codec->codec_tag==0 && st->codec->height > 0 && st->codec->extradata_size < 1U<<30){
 645                         st->codec->extradata_size+= 9;
 646                         st->codec->extradata= av_realloc_f(st->codec->extradata, 1, st->codec->extradata_size + FF_INPUT_BUFFER_PADDING_SIZE);
 647                         if(st->codec->extradata)
 648                             memcpy(st->codec->extradata + st->codec->extradata_size - 9, "BottomUp", 9);
 649                     }
 650                     st->codec->height= FFABS(st->codec->height);
 651
 652 //                    avio_skip(pb, size - 5 * 4);
 653                     break;
 654                 case AVMEDIA_TYPE_AUDIO:
 655                     ret = ff_get_wav_header(pb, st->codec, size);
 656                     if (ret < 0)
 657                         return ret;
 658                     ast->dshow_block_align= st->codec->block_align;
 659                     if(ast->sample_size && st->codec->block_align && ast->sample_size != st->codec->block_align){
 660                         av_log(s, AV_LOG_WARNING, "sample size (%d) != block align (%d)\n", ast->sample_size, st->codec->block_align);
 661                         ast->sample_size= st->codec->block_align;
 662                     }
 663                     if (size&1) /* 2-aligned (fix for Stargate SG-1 - 3x18 - Shades of Grey.avi) */
 664                         avio_skip(pb, 1);
 665                     /* Force parsing as several audio frames can be in
 666                      * one packet and timestamps refer to packet start. */
 667                     st->need_parsing = AVSTREAM_PARSE_TIMESTAMPS;
 668                     /* ADTS header is in extradata, AAC without header must be
 669                      * stored as exact frames. Parser not needed and it will
 670                      * fail. */
 671                     if (st->codec->codec_id == CODEC_ID_AAC && st->codec->extradata_size)
 672                         st->need_parsing = AVSTREAM_PARSE_NONE;
 673                     /* AVI files with Xan DPCM audio (wrongly) declare PCM
 674                      * audio in the header but have Axan as stream_code_tag. */
 675                     if (st->codec->stream_codec_tag == AV_RL32("Axan")){
 676                         st->codec->codec_id  = CODEC_ID_XAN_DPCM;
 677                         st->codec->codec_tag = 0;
 678                         ast->dshow_block_align = 0;
 679                     }
 680                     if (amv_file_format){
 681                         st->codec->codec_id  = CODEC_ID_ADPCM_IMA_AMV;
 682                         ast->dshow_block_align = 0;
 683                     }
 684                     break;
 685                 case AVMEDIA_TYPE_SUBTITLE:
 686                     st->codec->codec_type = AVMEDIA_TYPE_SUBTITLE;
 687                     st->request_probe= 1;
 688                     break;
 689                 default:
 690                     st->codec->codec_type = AVMEDIA_TYPE_DATA;
 691                     st->codec->codec_id= CODEC_ID_NONE;
 692                     st->codec->codec_tag= 0;
 693                     avio_skip(pb, size);
 694                     break;
 695                 }
 696             }
 697             break;
 698         case MKTAG('s', 't', 'r', 'd'):
 699             if (stream_index >= (unsigned)s->nb_streams || s->streams[stream_index]->codec->extradata_size) {
 700                 avio_skip(pb, size);
 701             } else {
 702                 uint64_t cur_pos = avio_tell(pb);
 703                 if (cur_pos < list_end)
 704                     size = FFMIN(size, list_end - cur_pos);
 705                 st = s->streams[stream_index];
 706
 707                 if(size<(1<<30)){
 708                     st->codec->extradata_size= size;
 709                     st->codec->extradata= av_mallocz(st->codec->extradata_size + FF_INPUT_BUFFER_PADDING_SIZE);
 710                     if (!st->codec->extradata) {
 711                         st->codec->extradata_size= 0;
 712                         return AVERROR(ENOMEM);
 713                     }
 714                     avio_read(pb, st->codec->extradata, st->codec->extradata_size);
 715                 }
 716
 717                 if(st->codec->extradata_size & 1) //FIXME check if the encoder really did this correctly
 718                     avio_r8(pb);
 719             }
 720             break;
 721         case MKTAG('i', 'n', 'd', 'x'):
 722             i= avio_tell(pb);
 723             if(pb->seekable && !(s->flags & AVFMT_FLAG_IGNIDX) && avi->use_odml &&
 724                read_braindead_odml_indx(s, 0) < 0 && (s->error_recognition & AV_EF_EXPLODE))
 725                 goto fail;
 726             avio_seek(pb, i+size, SEEK_SET);
 727             break;
 728         case MKTAG('v', 'p', 'r', 'p'):
 729             if(stream_index < (unsigned)s->nb_streams && size > 9*4){
 730                 AVRational active, active_aspect;
 731
 732                 st = s->streams[stream_index];
 733                 avio_rl32(pb);
 734                 avio_rl32(pb);
 735                 avio_rl32(pb);
 736                 avio_rl32(pb);
 737                 avio_rl32(pb);
 738
 739                 active_aspect.den= avio_rl16(pb);
 740                 active_aspect.num= avio_rl16(pb);
 741                 active.num       = avio_rl32(pb);
 742                 active.den       = avio_rl32(pb);
 743                 avio_rl32(pb); //nbFieldsPerFrame
 744
 745                 if(active_aspect.num && active_aspect.den && active.num && active.den){
 746                     st->sample_aspect_ratio= av_div_q(active_aspect, active);
 747 //av_log(s, AV_LOG_ERROR, "vprp %d/%d %d/%d\n", active_aspect.num, active_aspect.den, active.num, active.den);
 748                 }
 749                 size -= 9*4;
 750             }
 751             avio_skip(pb, size);
 752             break;
 753         case MKTAG('s', 't', 'r', 'n'):
 754             if(s->nb_streams){
 755                 avi_read_tag(s, s->streams[s->nb_streams-1], tag, size);
 756                 break;
 757             }
 758         default:
 759             if(size > 1000000){
 760                 av_log(s, AV_LOG_ERROR, "Something went wrong during header parsing, "
 761                                         "I will ignore it and try to continue anyway.\n");
 762                 if (s->error_recognition & AV_EF_EXPLODE)
 763                     goto fail;
 764                 avi->movi_list = avio_tell(pb) - 4;
 765                 avi->movi_end  = avi->fsize;
 766                 goto end_of_header;
 767             }
 768             /* skip tag */
 769             size += (size & 1);
 770             avio_skip(pb, size);
 771             break;
 772         }
 773     }
 774  end_of_header:
 775     /* check stream number */
 776     if (stream_index != s->nb_streams - 1) {
 777     fail:
 778         return -1;
 779     }
 780
 781     if(!avi->index_loaded && pb->seekable)
 782         avi_load_index(s);
 783     avi->index_loaded |= 1;
 784     avi->non_interleaved |= guess_ni_flag(s) | (s->flags & AVFMT_FLAG_SORT_DTS);
 785     for(i=0; i<s->nb_streams; i++){
 786         AVStream *st = s->streams[i];
 787         if(st->nb_index_entries)
 788             break;
 789     }
 790     // DV-in-AVI cannot be non-interleaved, if set this must be
 791     // a mis-detection.
 792     if(avi->dv_demux)
 793         avi->non_interleaved=0;
 794     if(i==s->nb_streams && avi->non_interleaved) {
 795         av_log(s, AV_LOG_WARNING, "non-interleaved AVI without index, switching to interleaved\n");
 796         avi->non_interleaved=0;
 797     }
 798
 799     if(avi->non_interleaved) {
 800         av_log(s, AV_LOG_INFO, "non-interleaved AVI\n");
 801         clean_index(s);
 802     }
 803
 804     ff_metadata_conv_ctx(s, NULL, avi_metadata_conv);
 805     ff_metadata_conv_ctx(s, NULL, ff_riff_info_conv);
 806
 807     return 0;
 808 }
 809
 810 static int read_gab2_sub(AVStream *st, AVPacket *pkt) {
 811     if (!strcmp(pkt->data, "GAB2") && AV_RL16(pkt->data+5) == 2) {
 812         uint8_t desc[256];
 813         int score = AVPROBE_SCORE_MAX / 2, ret;
 814         AVIStream *ast = st->priv_data;
 815         AVInputFormat *sub_demuxer;
 816         AVRational time_base;
 817         AVIOContext *pb = avio_alloc_context( pkt->data + 7,
 818                                               pkt->size - 7,
 819                                               0, NULL, NULL, NULL, NULL);
 820         AVProbeData pd;
 821         unsigned int desc_len = avio_rl32(pb);
 822
 823         if (desc_len > pb->buf_end - pb->buf_ptr)
 824             goto error;
 825
 826         ret = avio_get_str16le(pb, desc_len, desc, sizeof(desc));
 827         avio_skip(pb, desc_len - ret);
 828         if (*desc)
 829             av_dict_set(&st->metadata, "title", desc, 0);
 830
 831         avio_rl16(pb);   /* flags? */
 832         avio_rl32(pb);   /* data size */
 833
 834         pd = (AVProbeData) { .buf = pb->buf_ptr, .buf_size = pb->buf_end - pb->buf_ptr };
 835         if (!(sub_demuxer = av_probe_input_format2(&pd, 1, &score)))
 836             goto error;
 837
 838         if (!(ast->sub_ctx = avformat_alloc_context()))
 839             goto error;
 840
 841         ast->sub_ctx->pb      = pb;
 842         if (!avformat_open_input(&ast->sub_ctx, "", sub_demuxer, NULL)) {
 843             ff_read_packet(ast->sub_ctx, &ast->sub_pkt);
 844             *st->codec = *ast->sub_ctx->streams[0]->codec;
 845             ast->sub_ctx->streams[0]->codec->extradata = NULL;
 846             time_base = ast->sub_ctx->streams[0]->time_base;
 847             avpriv_set_pts_info(st, 64, time_base.num, time_base.den);
 848         }
 849         ast->sub_buffer = pkt->data;
 850         memset(pkt, 0, sizeof(*pkt));
 851         return 1;
 852 error:
 853         av_freep(&pb);
 854     }
 855     return 0;
 856 }
 857
 858 static AVStream *get_subtitle_pkt(AVFormatContext *s, AVStream *next_st,
 859                                   AVPacket *pkt)
 860 {
 861     AVIStream *ast, *next_ast = next_st->priv_data;
 862     int64_t ts, next_ts, ts_min = INT64_MAX;
 863     AVStream *st, *sub_st = NULL;
 864     int i;
 865
 866     next_ts = av_rescale_q(next_ast->frame_offset, next_st->time_base,
 867                            AV_TIME_BASE_Q);
 868
 869     for (i=0; i<s->nb_streams; i++) {
 870         st  = s->streams[i];
 871         ast = st->priv_data;
 872         if (st->discard < AVDISCARD_ALL && ast && ast->sub_pkt.data) {
 873             ts = av_rescale_q(ast->sub_pkt.dts, st->time_base, AV_TIME_BASE_Q);
 874             if (ts <= next_ts && ts < ts_min) {
 875                 ts_min = ts;
 876                 sub_st = st;
 877             }
 878         }
 879     }
 880
 881     if (sub_st) {
 882         ast = sub_st->priv_data;
 883         *pkt = ast->sub_pkt;
 884         pkt->stream_index = sub_st->index;
 885         if (ff_read_packet(ast->sub_ctx, &ast->sub_pkt) < 0)
 886             ast->sub_pkt.data = NULL;
 887     }
 888     return sub_st;
 889 }
 890
 891 static int get_stream_idx(int *d){
 892     if(    d[0] >= '0' && d[0] <= '9'
 893         && d[1] >= '0' && d[1] <= '9'){
 894         return (d[0] - '0') * 10 + (d[1] - '0');
 895     }else{
 896         return 100; //invalid stream ID
 897     }
 898 }
 899
 900 /**
 901  *
 902  * @param exit_early set to 1 to just gather packet position without making the changes needed to actually read & return the packet
 903  */
 904 static int avi_sync(AVFormatContext *s, int exit_early)
 905 {
 906     AVIContext *avi = s->priv_data;
 907     AVIOContext *pb = s->pb;
 908     int n;
 909     unsigned int d[8];
 910     unsigned int size;
 911     int64_t i, sync;
 912
 913 start_sync:
 914     memset(d, -1, sizeof(d));
 915     for(i=sync=avio_tell(pb); !url_feof(pb); i++) {
 916         int j;
 917
 918         for(j=0; j<7; j++)
 919             d[j]= d[j+1];
 920         d[7]= avio_r8(pb);
 921
 922         size= d[4] + (d[5]<<8) + (d[6]<<16) + (d[7]<<24);
 923
 924         n= get_stream_idx(d+2);
 925 //av_log(s, AV_LOG_DEBUG, "%X %X %X %X %X %X %X %X %"PRId64" %d %d\n", d[0], d[1], d[2], d[3], d[4], d[5], d[6], d[7], i, size, n);
 926         if(i + (uint64_t)size > avi->fsize || d[0] > 127)
 927             continue;
 928
 929         //parse ix##
 930         if(  (d[0] == 'i' && d[1] == 'x' && n < s->nb_streams)
 931         //parse JUNK
 932            ||(d[0] == 'J' && d[1] == 'U' && d[2] == 'N' && d[3] == 'K')
 933            ||(d[0] == 'i' && d[1] == 'd' && d[2] == 'x' && d[3] == '1')){
 934             avio_skip(pb, size);
 935 //av_log(s, AV_LOG_DEBUG, "SKIP\n");
 936             goto start_sync;
 937         }
 938
 939         //parse stray LIST
 940         if(d[0] == 'L' && d[1] == 'I' && d[2] == 'S' && d[3] == 'T'){
 941             avio_skip(pb, 4);
 942             goto start_sync;
 943         }
 944
 945         n= get_stream_idx(d);
 946
 947         if(!((i-avi->last_pkt_pos)&1) && get_stream_idx(d+1) < s->nb_streams)
 948             continue;
 949
 950         //detect ##ix chunk and skip
 951         if(d[2] == 'i' && d[3] == 'x' && n < s->nb_streams){
 952             avio_skip(pb, size);
 953             goto start_sync;
 954         }
 955
 956         //parse ##dc/##wb
 957         if(n < s->nb_streams){
 958             AVStream *st;
 959             AVIStream *ast;
 960             st = s->streams[n];
 961             ast = st->priv_data;
 962
 963             if (!ast) {
 964                 av_log(s, AV_LOG_WARNING, "Skiping foreign stream %d packet\n", n);
 965                 continue;
 966             }
 967
 968             if(s->nb_streams>=2){
 969                 AVStream *st1  = s->streams[1];
 970                 AVIStream *ast1= st1->priv_data;
 971                 //workaround for broken small-file-bug402.avi
 972                 if(   d[2] == 'w' && d[3] == 'b'
 973                    && n==0
 974                    && st ->codec->codec_type == AVMEDIA_TYPE_VIDEO
 975                    && st1->codec->codec_type == AVMEDIA_TYPE_AUDIO
 976                    && ast->prefix == 'd'*256+'c'
 977                    && (d[2]*256+d[3] == ast1->prefix || !ast1->prefix_count)
 978                   ){
 979                     n=1;
 980                     st = st1;
 981                     ast = ast1;
 982                     av_log(s, AV_LOG_WARNING, "Invalid stream + prefix combination, assuming audio.\n");
 983                 }
 984             }
 985
 986
 987             if(   (st->discard >= AVDISCARD_DEFAULT && size==0)
 988                /*|| (st->discard >= AVDISCARD_NONKEY && !(pkt->flags & AV_PKT_FLAG_KEY))*/ //FIXME needs a little reordering
 989                || st->discard >= AVDISCARD_ALL){
 990                 if (!exit_early) {
 991                     ast->frame_offset += get_duration(ast, size);
 992                 }
 993                 avio_skip(pb, size);
 994                 goto start_sync;
 995             }
 996
 997             if (d[2] == 'p' && d[3] == 'c' && size<=4*256+4) {
 998                 int k = avio_r8(pb);
 999                 int last = (k + avio_r8(pb) - 1) & 0xFF;
1000
1001                 avio_rl16(pb); //flags
1002
1003                 for (; k <= last; k++)
1004                     ast->pal[k] = 0xFF<<24 | avio_rb32(pb)>>8;// b + (g << 8) + (r << 16);
1005                 ast->has_pal= 1;
1006                 goto start_sync;
1007             } else if(   ((ast->prefix_count<5 || sync+9 > i) && d[2]<128 && d[3]<128) ||
1008                          d[2]*256+d[3] == ast->prefix /*||
1009                          (d[2] == 'd' && d[3] == 'c') ||
1010                          (d[2] == 'w' && d[3] == 'b')*/) {
1011
1012                 if (exit_early)
1013                     return 0;
1014 //av_log(s, AV_LOG_DEBUG, "OK\n");
1015                 if(d[2]*256+d[3] == ast->prefix)
1016                     ast->prefix_count++;
1017                 else{
1018                     ast->prefix= d[2]*256+d[3];
1019                     ast->prefix_count= 0;
1020                 }
1021
1022                 avi->stream_index= n;
1023                 ast->packet_size= size + 8;
1024                 ast->remaining= size;
1025
1026                 if(size || !ast->sample_size){
1027                     uint64_t pos= avio_tell(pb) - 8;
1028                     if(!st->index_entries || !st->nb_index_entries || st->index_entries[st->nb_index_entries - 1].pos < pos){
1029                         av_add_index_entry(st, pos, ast->frame_offset, size, 0, AVINDEX_KEYFRAME);
1030                     }
1031                 }
1032                 return 0;
1033             }
1034         }
1035     }
1036
1037     if(pb->error)
1038         return pb->error;
1039     return AVERROR_EOF;
1040 }
1041
1042 static int avi_read_packet(AVFormatContext *s, AVPacket *pkt)
1043 {
1044     AVIContext *avi = s->priv_data;
1045     AVIOContext *pb = s->pb;
1046     int err;
1047     void* dstr;
1048
1049     if (CONFIG_DV_DEMUXER && avi->dv_demux) {
1050         int size = avpriv_dv_get_packet(avi->dv_demux, pkt);
1051         if (size >= 0)
1052             return size;
1053     }
1054
1055     if(avi->non_interleaved){
1056         int best_stream_index = 0;
1057         AVStream *best_st= NULL;
1058         AVIStream *best_ast;
1059         int64_t best_ts= INT64_MAX;
1060         int i;
1061
1062         for(i=0; i<s->nb_streams; i++){
1063             AVStream *st = s->streams[i];
1064             AVIStream *ast = st->priv_data;
1065             int64_t ts= ast->frame_offset;
1066             int64_t last_ts;
1067
1068             if(!st->nb_index_entries)
1069                 continue;
1070
1071             last_ts = st->index_entries[st->nb_index_entries - 1].timestamp;
1072             if(!ast->remaining && ts > last_ts)
1073                 continue;
1074
1075             ts = av_rescale_q(ts, st->time_base, (AVRational){FFMAX(1, ast->sample_size), AV_TIME_BASE});
1076
1077 //            av_log(s, AV_LOG_DEBUG, "%"PRId64" %d/%d %"PRId64"\n", ts, st->time_base.num, st->time_base.den, ast->frame_offset);
1078             if(ts < best_ts){
1079                 best_ts= ts;
1080                 best_st= st;
1081                 best_stream_index= i;
1082             }
1083         }
1084         if(!best_st)
1085             return AVERROR_EOF;
1086
1087         best_ast = best_st->priv_data;
1088         best_ts = best_ast->frame_offset;
1089         if(best_ast->remaining)
1090             i= av_index_search_timestamp(best_st, best_ts, AVSEEK_FLAG_ANY | AVSEEK_FLAG_BACKWARD);
1091         else{
1092             i= av_index_search_timestamp(best_st, best_ts, AVSEEK_FLAG_ANY);
1093             if(i>=0)
1094                 best_ast->frame_offset= best_st->index_entries[i].timestamp;
1095         }
1096
1097 //        av_log(s, AV_LOG_DEBUG, "%d\n", i);
1098         if(i>=0){
1099             int64_t pos= best_st->index_entries[i].pos;
1100             pos += best_ast->packet_size - best_ast->remaining;
1101             if(avio_seek(s->pb, pos + 8, SEEK_SET) < 0)
1102               return AVERROR_EOF;
1103 //        av_log(s, AV_LOG_DEBUG, "pos=%"PRId64"\n", pos);
1104
1105             assert(best_ast->remaining <= best_ast->packet_size);
1106
1107             avi->stream_index= best_stream_index;
1108             if(!best_ast->remaining)
1109                 best_ast->packet_size=
1110                 best_ast->remaining= best_st->index_entries[i].size;
1111         }
1112         else
1113           return AVERROR_EOF;
1114     }
1115
1116 resync:
1117     if(avi->stream_index >= 0){
1118         AVStream *st= s->streams[ avi->stream_index ];
1119         AVIStream *ast= st->priv_data;
1120         int size, err;
1121
1122         if(get_subtitle_pkt(s, st, pkt))
1123             return 0;
1124
1125         if(ast->sample_size <= 1) // minorityreport.AVI block_align=1024 sample_size=1 IMA-ADPCM
1126             size= INT_MAX;
1127         else if(ast->sample_size < 32)
1128             // arbitrary multiplier to avoid tiny packets for raw PCM data
1129             size= 1024*ast->sample_size;
1130         else
1131             size= ast->sample_size;
1132
1133         if(size > ast->remaining)
1134             size= ast->remaining;
1135         avi->last_pkt_pos= avio_tell(pb);
1136         err= av_get_packet(pb, pkt, size);
1137         if(err<0)
1138             return err;
1139         size = err;
1140
1141         if(ast->has_pal && pkt->data && pkt->size<(unsigned)INT_MAX/2){
1142             uint8_t *pal;
1143             pal = av_packet_new_side_data(pkt, AV_PKT_DATA_PALETTE, AVPALETTE_SIZE);
1144             if(!pal){
1145                 av_log(s, AV_LOG_ERROR, "Failed to allocate data for palette\n");
1146             }else{
1147                 memcpy(pal, ast->pal, AVPALETTE_SIZE);
1148                 ast->has_pal = 0;
1149             }
1150         }
1151
1152         if (CONFIG_DV_DEMUXER && avi->dv_demux) {
1153             dstr = pkt->destruct;
1154             size = avpriv_dv_produce_packet(avi->dv_demux, pkt,
1155                                     pkt->data, pkt->size, pkt->pos);
1156             pkt->destruct = dstr;
1157             pkt->flags |= AV_PKT_FLAG_KEY;
1158             if (size < 0)
1159                 av_free_packet(pkt);
1160         } else if (st->codec->codec_type == AVMEDIA_TYPE_SUBTITLE
1161                    && !st->codec->codec_tag && read_gab2_sub(st, pkt)) {
1162             ast->frame_offset++;
1163             avi->stream_index = -1;
1164             ast->remaining = 0;
1165             goto resync;
1166         } else {
1167             /* XXX: How to handle B-frames in AVI? */
1168             pkt->dts = ast->frame_offset;
1169 //                pkt->dts += ast->start;
1170             if(ast->sample_size)
1171                 pkt->dts /= ast->sample_size;
1172 //av_log(s, AV_LOG_DEBUG, "dts:%"PRId64" offset:%"PRId64" %d/%d smpl_siz:%d base:%d st:%d size:%d\n", pkt->dts, ast->frame_offset, ast->scale, ast->rate, ast->sample_size, AV_TIME_BASE, avi->stream_index, size);
1173             pkt->stream_index = avi->stream_index;
1174
1175             if (st->codec->codec_type == AVMEDIA_TYPE_VIDEO) {
1176                 AVIndexEntry *e;
1177                 int index;
1178                 assert(st->index_entries);
1179
1180                 index= av_index_search_timestamp(st, ast->frame_offset, 0);
1181                 e= &st->index_entries[index];
1182
1183                 if(index >= 0 && e->timestamp == ast->frame_offset){
1184                     if (index == st->nb_index_entries-1){
1185                         int key=1;
1186                         int i;
1187                         uint32_t state=-1;
1188                         for(i=0; i<FFMIN(size,256); i++){
1189                             if(st->codec->codec_id == CODEC_ID_MPEG4){
1190                                 if(state == 0x1B6){
1191                                     key= !(pkt->data[i]&0xC0);
1192                                     break;
1193                                 }
1194                             }else
1195                                 break;
1196                             state= (state<<8) + pkt->data[i];
1197                         }
1198                         if(!key)
1199                             e->flags &= ~AVINDEX_KEYFRAME;
1200                     }
1201                     if (e->flags & AVINDEX_KEYFRAME)
1202                         pkt->flags |= AV_PKT_FLAG_KEY;
1203                 }
1204             } else {
1205                 pkt->flags |= AV_PKT_FLAG_KEY;
1206             }
1207             ast->frame_offset += get_duration(ast, pkt->size);
1208         }
1209         ast->remaining -= size;
1210         if(!ast->remaining){
1211             avi->stream_index= -1;
1212             ast->packet_size= 0;
1213         }
1214
1215         if(!avi->non_interleaved && pkt->pos >= 0 && ast->seek_pos > pkt->pos){
1216             av_free_packet(pkt);
1217             goto resync;
1218         }
1219         ast->seek_pos= 0;
1220
1221         if(!avi->non_interleaved && st->nb_index_entries>1 && avi->index_loaded>1){
1222             int64_t dts= av_rescale_q(pkt->dts, st->time_base, AV_TIME_BASE_Q);
1223
1224             if(avi->dts_max - dts > 2*AV_TIME_BASE){
1225                 avi->non_interleaved= 1;
1226                 av_log(s, AV_LOG_INFO, "Switching to NI mode, due to poor interleaving\n");
1227             }else if(avi->dts_max < dts)
1228                 avi->dts_max = dts;
1229         }
1230
1231         return size;
1232     }
1233
1234     if ((err = avi_sync(s, 0)) < 0)
1235         return err;
1236     goto resync;
1237 }
1238
1239 /* XXX: We make the implicit supposition that the positions are sorted
1240    for each stream. */
1241 static int avi_read_idx1(AVFormatContext *s, int size)
1242 {
1243     AVIContext *avi = s->priv_data;
1244     AVIOContext *pb = s->pb;
1245     int nb_index_entries, i;
1246     AVStream *st;
1247     AVIStream *ast;
1248     unsigned int index, tag, flags, pos, len, first_packet = 1;
1249     unsigned last_pos= -1;
1250     unsigned last_idx= -1;
1251     int64_t idx1_pos, first_packet_pos = 0, data_offset = 0;
1252
1253     nb_index_entries = size / 16;
1254     if (nb_index_entries <= 0)
1255         return -1;
1256
1257     idx1_pos = avio_tell(pb);
1258     avio_seek(pb, avi->movi_list+4, SEEK_SET);
1259     if (avi_sync(s, 1) == 0) {
1260         first_packet_pos = avio_tell(pb) - 8;
1261     }
1262     avi->stream_index = -1;
1263     avio_seek(pb, idx1_pos, SEEK_SET);
1264
1265     /* Read the entries and sort them in each stream component. */
1266     for(i = 0; i < nb_index_entries; i++) {
1267         if(url_feof(pb))
1268             return -1;
1269
1270         tag = avio_rl32(pb);
1271         flags = avio_rl32(pb);
1272         pos = avio_rl32(pb);
1273         len = avio_rl32(pb);
1274         av_dlog(s, "%d: tag=0x%x flags=0x%x pos=0x%x len=%d/",
1275                 i, tag, flags, pos, len);
1276
1277         index = ((tag & 0xff) - '0') * 10;
1278         index += ((tag >> 8) & 0xff) - '0';
1279         if (index >= s->nb_streams)
1280             continue;
1281         st = s->streams[index];
1282         ast = st->priv_data;
1283
1284         if(first_packet && first_packet_pos && len) {
1285             data_offset = first_packet_pos - pos;
1286             first_packet = 0;
1287         }
1288         pos += data_offset;
1289
1290         av_dlog(s, "%d cum_len=%"PRId64"\n", len, ast->cum_len);
1291
1292
1293         // even if we have only a single stream, we should
1294         // switch to non-interleaved to get correct timestamps
1295         if(last_pos == pos)
1296             avi->non_interleaved= 1;
1297         if(last_idx != pos && len) {
1298             av_add_index_entry(st, pos, ast->cum_len, len, 0, (flags&AVIIF_INDEX) ? AVINDEX_KEYFRAME : 0);
1299             last_idx= pos;
1300         }
1301         ast->cum_len += get_duration(ast, len);
1302         last_pos= pos;
1303     }
1304     return 0;
1305 }
1306
1307 static int guess_ni_flag(AVFormatContext *s){
1308     int i;
1309     int64_t last_start=0;
1310     int64_t first_end= INT64_MAX;
1311     int64_t oldpos= avio_tell(s->pb);
1312     int *idx;
1313     int64_t min_pos, pos;
1314
1315     for(i=0; i<s->nb_streams; i++){
1316         AVStream *st = s->streams[i];
1317         int n= st->nb_index_entries;
1318         unsigned int size;
1319
1320         if(n <= 0)
1321             continue;
1322
1323         if(n >= 2){
1324             int64_t pos= st->index_entries[0].pos;
1325             avio_seek(s->pb, pos + 4, SEEK_SET);
1326             size= avio_rl32(s->pb);
1327             if(pos + size > st->index_entries[1].pos)
1328                 last_start= INT64_MAX;
1329         }
1330
1331         if(st->index_entries[0].pos > last_start)
1332             last_start= st->index_entries[0].pos;
1333         if(st->index_entries[n-1].pos < first_end)
1334             first_end= st->index_entries[n-1].pos;
1335     }
1336     avio_seek(s->pb, oldpos, SEEK_SET);
1337     if (last_start > first_end)
1338         return 1;
1339     idx= av_mallocz(sizeof(*idx) * s->nb_streams);
1340     for (min_pos=pos=0; min_pos!=INT64_MAX; pos= min_pos+1) {
1341         int64_t max_dts = INT64_MIN/2, min_dts= INT64_MAX/2;
1342         min_pos = INT64_MAX;
1343
1344         for (i=0; i<s->nb_streams; i++) {
1345             AVStream *st = s->streams[i];
1346             int n= st->nb_index_entries;
1347             while (idx[i]<n && st->index_entries[idx[i]].pos < pos)
1348                 idx[i]++;
1349             if (idx[i] < n) {
1350                 min_dts = FFMIN(min_dts, av_rescale_q(st->index_entries[idx[i]].timestamp, st->time_base, AV_TIME_BASE_Q));
1351                 min_pos = FFMIN(min_pos, st->index_entries[idx[i]].pos);
1352             }
1353             if (idx[i])
1354                 max_dts = FFMAX(max_dts, av_rescale_q(st->index_entries[idx[i]-1].timestamp, st->time_base, AV_TIME_BASE_Q));
1355         }
1356         if(max_dts - min_dts > 2*AV_TIME_BASE) {
1357             av_free(idx);
1358             return 1;
1359         }
1360     }
1361     av_free(idx);
1362     return 0;
1363 }
1364
1365 static int avi_load_index(AVFormatContext *s)
1366 {
1367     AVIContext *avi = s->priv_data;
1368     AVIOContext *pb = s->pb;
1369     uint32_t tag, size;
1370     int64_t pos= avio_tell(pb);
1371     int ret = -1;
1372
1373     if (avio_seek(pb, avi->movi_end, SEEK_SET) < 0)
1374         goto the_end; // maybe truncated file
1375     av_dlog(s, "movi_end=0x%"PRIx64"\n", avi->movi_end);
1376     for(;;) {
1377         if (url_feof(pb))
1378             break;
1379         tag = avio_rl32(pb);
1380         size = avio_rl32(pb);
1381         av_dlog(s, "tag=%c%c%c%c size=0x%x\n",
1382                  tag        & 0xff,
1383                 (tag >>  8) & 0xff,
1384                 (tag >> 16) & 0xff,
1385                 (tag >> 24) & 0xff,
1386                 size);
1387
1388         if (tag == MKTAG('i', 'd', 'x', '1') &&
1389             avi_read_idx1(s, size) >= 0) {
1390             avi->index_loaded=2;
1391             ret = 0;
1392             break;
1393         }
1394
1395         size += (size & 1);
1396         if (avio_skip(pb, size) < 0)
1397             break; // something is wrong here
1398     }
1399  the_end:
1400     avio_seek(pb, pos, SEEK_SET);
1401     return ret;
1402 }
1403
1404 static void seek_subtitle(AVStream *st, AVStream *st2, int64_t timestamp)
1405 {
1406     AVIStream *ast2 = st2->priv_data;
1407     int64_t ts2 = av_rescale_q(timestamp, st->time_base, st2->time_base);
1408     av_free_packet(&ast2->sub_pkt);
1409     if (avformat_seek_file(ast2->sub_ctx, 0, INT64_MIN, ts2, ts2, 0) >= 0 ||
1410         avformat_seek_file(ast2->sub_ctx, 0, ts2, ts2, INT64_MAX, 0) >= 0)
1411         ff_read_packet(ast2->sub_ctx, &ast2->sub_pkt);
1412 }
1413
1414 static int avi_read_seek(AVFormatContext *s, int stream_index, int64_t timestamp, int flags)
1415 {
1416     AVIContext *avi = s->priv_data;
1417     AVStream *st;
1418     int i, index;
1419     int64_t pos, pos_min;
1420     AVIStream *ast;
1421
1422     if (!avi->index_loaded) {
1423         /* we only load the index on demand */
1424         avi_load_index(s);
1425         avi->index_loaded |= 1;
1426     }
1427     assert(stream_index>= 0);
1428
1429     st = s->streams[stream_index];
1430     ast= st->priv_data;
1431     index= av_index_search_timestamp(st, timestamp * FFMAX(ast->sample_size, 1), flags);
1432     if (index<0) {
1433         if (st->nb_index_entries > 0)
1434             av_log(s, AV_LOG_DEBUG, "Failed to find timestamp %"PRId64 " in index %"PRId64 " .. %"PRId64 "\n",
1435                    timestamp * FFMAX(ast->sample_size, 1),
1436                    st->index_entries[0].timestamp,
1437                    st->index_entries[st->nb_index_entries - 1].timestamp);
1438         return -1;
1439     }
1440
1441     /* find the position */
1442     pos = st->index_entries[index].pos;
1443     timestamp = st->index_entries[index].timestamp / FFMAX(ast->sample_size, 1);
1444
1445 //    av_log(s, AV_LOG_DEBUG, "XX %"PRId64" %d %"PRId64"\n", timestamp, index, st->index_entries[index].timestamp);
1446
1447     if (CONFIG_DV_DEMUXER && avi->dv_demux) {
1448         /* One and only one real stream for DV in AVI, and it has video  */
1449         /* offsets. Calling with other stream indexes should have failed */
1450         /* the av_index_search_timestamp call above.                     */
1451         assert(stream_index == 0);
1452
1453         if(avio_seek(s->pb, pos, SEEK_SET) < 0)
1454             return -1;
1455
1456         /* Feed the DV video stream version of the timestamp to the */
1457         /* DV demux so it can synthesize correct timestamps.        */
1458         ff_dv_offset_reset(avi->dv_demux, timestamp);
1459
1460         avi->stream_index= -1;
1461         return 0;
1462     }
1463
1464     pos_min= pos;
1465     for(i = 0; i < s->nb_streams; i++) {
1466         AVStream *st2 = s->streams[i];
1467         AVIStream *ast2 = st2->priv_data;
1468
1469         ast2->packet_size=
1470         ast2->remaining= 0;
1471
1472         if (ast2->sub_ctx) {
1473             seek_subtitle(st, st2, timestamp);
1474             continue;
1475         }
1476
1477         if (st2->nb_index_entries <= 0)
1478             continue;
1479
1480 //        assert(st2->codec->block_align);
1481         assert((int64_t)st2->time_base.num*ast2->rate == (int64_t)st2->time_base.den*ast2->scale);
1482         index = av_index_search_timestamp(
1483                 st2,
1484                 av_rescale_q(timestamp, st->time_base, st2->time_base) * FFMAX(ast2->sample_size, 1),
1485                 flags | AVSEEK_FLAG_BACKWARD | (st2->codec->codec_type != AVMEDIA_TYPE_VIDEO ? AVSEEK_FLAG_ANY : 0));
1486         if(index<0)
1487             index=0;
1488         ast2->seek_pos= st2->index_entries[index].pos;
1489         pos_min= FFMIN(pos_min,ast2->seek_pos);
1490     }
1491     for(i = 0; i < s->nb_streams; i++) {
1492         AVStream *st2 = s->streams[i];
1493         AVIStream *ast2 = st2->priv_data;
1494
1495         if (ast2->sub_ctx || st2->nb_index_entries <= 0)
1496             continue;
1497
1498         index = av_index_search_timestamp(
1499                 st2,
1500                 av_rescale_q(timestamp, st->time_base, st2->time_base) * FFMAX(ast2->sample_size, 1),
1501                 flags | AVSEEK_FLAG_BACKWARD | (st2->codec->codec_type != AVMEDIA_TYPE_VIDEO ? AVSEEK_FLAG_ANY : 0));
1502         if(index<0)
1503             index=0;
1504         while(!avi->non_interleaved && index>0 && st2->index_entries[index-1].pos >= pos_min)
1505             index--;
1506         ast2->frame_offset = st2->index_entries[index].timestamp;
1507     }
1508
1509     /* do the seek */
1510     if (avio_seek(s->pb, pos_min, SEEK_SET) < 0) {
1511         av_log(s, AV_LOG_ERROR, "Seek failed\n");
1512         return -1;
1513     }
1514     avi->stream_index= -1;
1515     avi->dts_max= INT_MIN;
1516     return 0;
1517 }
1518
1519 static int avi_read_close(AVFormatContext *s)
1520 {
1521     int i;
1522     AVIContext *avi = s->priv_data;
1523
1524     for(i=0;i<s->nb_streams;i++) {
1525         AVStream *st = s->streams[i];
1526         AVIStream *ast = st->priv_data;
1527         if (ast) {
1528             if (ast->sub_ctx) {
1529                 av_freep(&ast->sub_ctx->pb);
1530                 avformat_close_input(&ast->sub_ctx);
1531             }
1532             av_free(ast->sub_buffer);
1533             av_free_packet(&ast->sub_pkt);
1534         }
1535     }
1536
1537     av_free(avi->dv_demux);
1538
1539     return 0;
1540 }
1541
1542 static int avi_probe(AVProbeData *p)
1543 {
1544     int i;
1545
1546     /* check file header */
1547     for(i=0; avi_headers[i][0]; i++)
1548         if(!memcmp(p->buf  , avi_headers[i]  , 4) &&
1549            !memcmp(p->buf+8, avi_headers[i]+4, 4))
1550             return AVPROBE_SCORE_MAX;
1551
1552     return 0;
1553 }
1554
1555 AVInputFormat ff_avi_demuxer = {
1556     .name           = "avi",
1557     .long_name      = NULL_IF_CONFIG_SMALL("AVI format"),
1558     .priv_data_size = sizeof(AVIContext),
1559     .read_probe     = avi_probe,
1560     .read_header    = avi_read_header,
1561     .read_packet    = avi_read_packet,
1562     .read_close     = avi_read_close,
1563     .read_seek      = avi_read_seek,
1564     .priv_class = &demuxer_class,
1565 };