]> git.sesse.net Git - ffmpeg/blob - libavformat/avidec.c
Merge commit '8438b3f09f6b225d0886cc385117c38eb44ca0c1'
[ffmpeg] / libavformat / avidec.c
1 /*
2  * AVI demuxer
3  * Copyright (c) 2001 Fabrice Bellard
4  *
5  * This file is part of FFmpeg.
6  *
7  * FFmpeg is free software; you can redistribute it and/or
8  * modify it under the terms of the GNU Lesser General Public
9  * License as published by the Free Software Foundation; either
10  * version 2.1 of the License, or (at your option) any later version.
11  *
12  * FFmpeg is distributed in the hope that it will be useful,
13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
15  * Lesser General Public License for more details.
16  *
17  * You should have received a copy of the GNU Lesser General Public
18  * License along with FFmpeg; if not, write to the Free Software
19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
20  */
21
22 #include <stdint.h>
23
24 #include "libavutil/avassert.h"
25 #include "libavutil/avstring.h"
26 #include "libavutil/bswap.h"
27 #include "libavutil/opt.h"
28 #include "libavutil/dict.h"
29 #include "libavutil/internal.h"
30 #include "libavutil/intreadwrite.h"
31 #include "libavutil/mathematics.h"
32 #include "avformat.h"
33 #include "avi.h"
34 #include "dv.h"
35 #include "internal.h"
36 #include "riff.h"
37
38 typedef struct AVIStream {
39     int64_t frame_offset;   /* current frame (video) or byte (audio) counter
40                              * (used to compute the pts) */
41     int remaining;
42     int packet_size;
43
44     uint32_t scale;
45     uint32_t rate;
46     int sample_size;        /* size of one sample (or packet)
47                              * (in the rate/scale sense) in bytes */
48
49     int64_t cum_len;        /* temporary storage (used during seek) */
50     int prefix;             /* normally 'd'<<8 + 'c' or 'w'<<8 + 'b' */
51     int prefix_count;
52     uint32_t pal[256];
53     int has_pal;
54     int dshow_block_align;  /* block align variable used to emulate bugs in
55                              * the MS dshow demuxer */
56
57     AVFormatContext *sub_ctx;
58     AVPacket sub_pkt;
59     uint8_t *sub_buffer;
60
61     int64_t seek_pos;
62 } AVIStream;
63
64 typedef struct {
65     const AVClass *class;
66     int64_t riff_end;
67     int64_t movi_end;
68     int64_t fsize;
69     int64_t io_fsize;
70     int64_t movi_list;
71     int64_t last_pkt_pos;
72     int index_loaded;
73     int is_odml;
74     int non_interleaved;
75     int stream_index;
76     DVDemuxContext *dv_demux;
77     int odml_depth;
78     int use_odml;
79 #define MAX_ODML_DEPTH 1000
80     int64_t dts_max;
81 } AVIContext;
82
83
84 static const AVOption options[] = {
85     { "use_odml", "use odml index", offsetof(AVIContext, use_odml), AV_OPT_TYPE_INT, {.i64 = 1}, -1, 1, AV_OPT_FLAG_DECODING_PARAM},
86     { NULL },
87 };
88
89 static const AVClass demuxer_class = {
90     .class_name = "avi",
91     .item_name  = av_default_item_name,
92     .option     = options,
93     .version    = LIBAVUTIL_VERSION_INT,
94     .category   = AV_CLASS_CATEGORY_DEMUXER,
95 };
96
97
98 static const char avi_headers[][8] = {
99     { 'R', 'I', 'F', 'F', 'A', 'V', 'I', ' '  },
100     { 'R', 'I', 'F', 'F', 'A', 'V', 'I', 'X'  },
101     { 'R', 'I', 'F', 'F', 'A', 'V', 'I', 0x19 },
102     { 'O', 'N', '2', ' ', 'O', 'N', '2', 'f'  },
103     { 'R', 'I', 'F', 'F', 'A', 'M', 'V', ' '  },
104     { 0 }
105 };
106
107 static const AVMetadataConv avi_metadata_conv[] = {
108     { "strn", "title" },
109     { 0 },
110 };
111
112 static int avi_load_index(AVFormatContext *s);
113 static int guess_ni_flag(AVFormatContext *s);
114
115 #define print_tag(str, tag, size)                        \
116     av_dlog(NULL, "pos:%"PRIX64" %s: tag=%c%c%c%c size=0x%x\n", \
117             avio_tell(pb), str, tag & 0xff,              \
118             (tag >> 8) & 0xff,                           \
119             (tag >> 16) & 0xff,                          \
120             (tag >> 24) & 0xff,                          \
121             size)
122
123 static inline int get_duration(AVIStream *ast, int len)
124 {
125     if (ast->sample_size)
126         return len;
127     else if (ast->dshow_block_align)
128         return (len + ast->dshow_block_align - 1) / ast->dshow_block_align;
129     else
130         return 1;
131 }
132
133 static int get_riff(AVFormatContext *s, AVIOContext *pb)
134 {
135     AVIContext *avi = s->priv_data;
136     char header[8];
137     int i;
138
139     /* check RIFF header */
140     avio_read(pb, header, 4);
141     avi->riff_end  = avio_rl32(pb); /* RIFF chunk size */
142     avi->riff_end += avio_tell(pb); /* RIFF chunk end */
143     avio_read(pb, header + 4, 4);
144
145     for (i = 0; avi_headers[i][0]; i++)
146         if (!memcmp(header, avi_headers[i], 8))
147             break;
148     if (!avi_headers[i][0])
149         return AVERROR_INVALIDDATA;
150
151     if (header[7] == 0x19)
152         av_log(s, AV_LOG_INFO,
153                "This file has been generated by a totally broken muxer.\n");
154
155     return 0;
156 }
157
158 static int read_braindead_odml_indx(AVFormatContext *s, int frame_num)
159 {
160     AVIContext *avi     = s->priv_data;
161     AVIOContext *pb     = s->pb;
162     int longs_pre_entry = avio_rl16(pb);
163     int index_sub_type  = avio_r8(pb);
164     int index_type      = avio_r8(pb);
165     int entries_in_use  = avio_rl32(pb);
166     int chunk_id        = avio_rl32(pb);
167     int64_t base        = avio_rl64(pb);
168     int stream_id       = ((chunk_id      & 0xFF) - '0') * 10 +
169                           ((chunk_id >> 8 & 0xFF) - '0');
170     AVStream *st;
171     AVIStream *ast;
172     int i;
173     int64_t last_pos = -1;
174     int64_t filesize = avi->fsize;
175
176     av_dlog(s,
177             "longs_pre_entry:%d index_type:%d entries_in_use:%d "
178             "chunk_id:%X base:%16"PRIX64"\n",
179             longs_pre_entry,
180             index_type,
181             entries_in_use,
182             chunk_id,
183             base);
184
185     if (stream_id >= s->nb_streams || stream_id < 0)
186         return AVERROR_INVALIDDATA;
187     st  = s->streams[stream_id];
188     ast = st->priv_data;
189
190     if (index_sub_type)
191         return AVERROR_INVALIDDATA;
192
193     avio_rl32(pb);
194
195     if (index_type && longs_pre_entry != 2)
196         return AVERROR_INVALIDDATA;
197     if (index_type > 1)
198         return AVERROR_INVALIDDATA;
199
200     if (filesize > 0 && base >= filesize) {
201         av_log(s, AV_LOG_ERROR, "ODML index invalid\n");
202         if (base >> 32 == (base & 0xFFFFFFFF) &&
203             (base & 0xFFFFFFFF) < filesize    &&
204             filesize <= 0xFFFFFFFF)
205             base &= 0xFFFFFFFF;
206         else
207             return AVERROR_INVALIDDATA;
208     }
209
210     for (i = 0; i < entries_in_use; i++) {
211         if (index_type) {
212             int64_t pos = avio_rl32(pb) + base - 8;
213             int len     = avio_rl32(pb);
214             int key     = len >= 0;
215             len &= 0x7FFFFFFF;
216
217 #ifdef DEBUG_SEEK
218             av_log(s, AV_LOG_ERROR, "pos:%"PRId64", len:%X\n", pos, len);
219 #endif
220             if (url_feof(pb))
221                 return AVERROR_INVALIDDATA;
222
223             if (last_pos == pos || pos == base - 8)
224                 avi->non_interleaved = 1;
225             if (last_pos != pos && (len || !ast->sample_size))
226                 av_add_index_entry(st, pos, ast->cum_len, len, 0,
227                                    key ? AVINDEX_KEYFRAME : 0);
228
229             ast->cum_len += get_duration(ast, len);
230             last_pos      = pos;
231         } else {
232             int64_t offset, pos;
233             int duration;
234             offset = avio_rl64(pb);
235             avio_rl32(pb);       /* size */
236             duration = avio_rl32(pb);
237
238             if (url_feof(pb))
239                 return AVERROR_INVALIDDATA;
240
241             pos = avio_tell(pb);
242
243             if (avi->odml_depth > MAX_ODML_DEPTH) {
244                 av_log(s, AV_LOG_ERROR, "Too deeply nested ODML indexes\n");
245                 return AVERROR_INVALIDDATA;
246             }
247
248             if (avio_seek(pb, offset + 8, SEEK_SET) < 0)
249                 return -1;
250             avi->odml_depth++;
251             read_braindead_odml_indx(s, frame_num);
252             avi->odml_depth--;
253             frame_num += duration;
254
255             if (avio_seek(pb, pos, SEEK_SET) < 0) {
256                 av_log(s, AV_LOG_ERROR, "Failed to restore position after reading index\n");
257                 return -1;
258             }
259
260         }
261     }
262     avi->index_loaded = 2;
263     return 0;
264 }
265
266 static void clean_index(AVFormatContext *s)
267 {
268     int i;
269     int64_t j;
270
271     for (i = 0; i < s->nb_streams; i++) {
272         AVStream *st   = s->streams[i];
273         AVIStream *ast = st->priv_data;
274         int n          = st->nb_index_entries;
275         int max        = ast->sample_size;
276         int64_t pos, size, ts;
277
278         if (n != 1 || ast->sample_size == 0)
279             continue;
280
281         while (max < 1024)
282             max += max;
283
284         pos  = st->index_entries[0].pos;
285         size = st->index_entries[0].size;
286         ts   = st->index_entries[0].timestamp;
287
288         for (j = 0; j < size; j += max)
289             av_add_index_entry(st, pos + j, ts + j, FFMIN(max, size - j), 0,
290                                AVINDEX_KEYFRAME);
291     }
292 }
293
294 static int avi_read_tag(AVFormatContext *s, AVStream *st, uint32_t tag,
295                         uint32_t size)
296 {
297     AVIOContext *pb = s->pb;
298     char key[5]     = { 0 };
299     char *value;
300
301     size += (size & 1);
302
303     if (size == UINT_MAX)
304         return AVERROR(EINVAL);
305     value = av_malloc(size + 1);
306     if (!value)
307         return AVERROR(ENOMEM);
308     avio_read(pb, value, size);
309     value[size] = 0;
310
311     AV_WL32(key, tag);
312
313     return av_dict_set(st ? &st->metadata : &s->metadata, key, value,
314                        AV_DICT_DONT_STRDUP_VAL);
315 }
316
317 static const char months[12][4] = { "Jan", "Feb", "Mar", "Apr", "May", "Jun",
318                                     "Jul", "Aug", "Sep", "Oct", "Nov", "Dec" };
319
320 static void avi_metadata_creation_time(AVDictionary **metadata, char *date)
321 {
322     char month[4], time[9], buffer[64];
323     int i, day, year;
324     /* parse standard AVI date format (ie. "Mon Mar 10 15:04:43 2003") */
325     if (sscanf(date, "%*3s%*[ ]%3s%*[ ]%2d%*[ ]%8s%*[ ]%4d",
326                month, &day, time, &year) == 4) {
327         for (i = 0; i < 12; i++)
328             if (!av_strcasecmp(month, months[i])) {
329                 snprintf(buffer, sizeof(buffer), "%.4d-%.2d-%.2d %s",
330                          year, i + 1, day, time);
331                 av_dict_set(metadata, "creation_time", buffer, 0);
332             }
333     } else if (date[4] == '/' && date[7] == '/') {
334         date[4] = date[7] = '-';
335         av_dict_set(metadata, "creation_time", date, 0);
336     }
337 }
338
339 static void avi_read_nikon(AVFormatContext *s, uint64_t end)
340 {
341     while (avio_tell(s->pb) < end) {
342         uint32_t tag  = avio_rl32(s->pb);
343         uint32_t size = avio_rl32(s->pb);
344         switch (tag) {
345         case MKTAG('n', 'c', 't', 'g'):  /* Nikon Tags */
346         {
347             uint64_t tag_end = avio_tell(s->pb) + size;
348             while (avio_tell(s->pb) < tag_end) {
349                 uint16_t tag     = avio_rl16(s->pb);
350                 uint16_t size    = avio_rl16(s->pb);
351                 const char *name = NULL;
352                 char buffer[64]  = { 0 };
353                 size -= avio_read(s->pb, buffer,
354                                   FFMIN(size, sizeof(buffer) - 1));
355                 switch (tag) {
356                 case 0x03:
357                     name = "maker";
358                     break;
359                 case 0x04:
360                     name = "model";
361                     break;
362                 case 0x13:
363                     name = "creation_time";
364                     if (buffer[4] == ':' && buffer[7] == ':')
365                         buffer[4] = buffer[7] = '-';
366                     break;
367                 }
368                 if (name)
369                     av_dict_set(&s->metadata, name, buffer, 0);
370                 avio_skip(s->pb, size);
371             }
372             break;
373         }
374         default:
375             avio_skip(s->pb, size);
376             break;
377         }
378     }
379 }
380
381 static int avi_read_header(AVFormatContext *s)
382 {
383     AVIContext *avi = s->priv_data;
384     AVIOContext *pb = s->pb;
385     unsigned int tag, tag1, handler;
386     int codec_type, stream_index, frame_period;
387     unsigned int size;
388     int i;
389     AVStream *st;
390     AVIStream *ast      = NULL;
391     int avih_width      = 0, avih_height = 0;
392     int amv_file_format = 0;
393     uint64_t list_end   = 0;
394     int ret;
395     AVDictionaryEntry *dict_entry;
396
397     avi->stream_index = -1;
398
399     ret = get_riff(s, pb);
400     if (ret < 0)
401         return ret;
402
403     av_log(avi, AV_LOG_DEBUG, "use odml:%d\n", avi->use_odml);
404
405     avi->io_fsize = avi->fsize = avio_size(pb);
406     if (avi->fsize <= 0 || avi->fsize < avi->riff_end)
407         avi->fsize = avi->riff_end == 8 ? INT64_MAX : avi->riff_end;
408
409     /* first list tag */
410     stream_index = -1;
411     codec_type   = -1;
412     frame_period = 0;
413     for (;;) {
414         if (url_feof(pb))
415             goto fail;
416         tag  = avio_rl32(pb);
417         size = avio_rl32(pb);
418
419         print_tag("tag", tag, size);
420
421         switch (tag) {
422         case MKTAG('L', 'I', 'S', 'T'):
423             list_end = avio_tell(pb) + size;
424             /* Ignored, except at start of video packets. */
425             tag1 = avio_rl32(pb);
426
427             print_tag("list", tag1, 0);
428
429             if (tag1 == MKTAG('m', 'o', 'v', 'i')) {
430                 avi->movi_list = avio_tell(pb) - 4;
431                 if (size)
432                     avi->movi_end = avi->movi_list + size + (size & 1);
433                 else
434                     avi->movi_end = avi->fsize;
435                 av_dlog(NULL, "movi end=%"PRIx64"\n", avi->movi_end);
436                 goto end_of_header;
437             } else if (tag1 == MKTAG('I', 'N', 'F', 'O'))
438                 ff_read_riff_info(s, size - 4);
439             else if (tag1 == MKTAG('n', 'c', 'd', 't'))
440                 avi_read_nikon(s, list_end);
441
442             break;
443         case MKTAG('I', 'D', 'I', 'T'):
444         {
445             unsigned char date[64] = { 0 };
446             size += (size & 1);
447             size -= avio_read(pb, date, FFMIN(size, sizeof(date) - 1));
448             avio_skip(pb, size);
449             avi_metadata_creation_time(&s->metadata, date);
450             break;
451         }
452         case MKTAG('d', 'm', 'l', 'h'):
453             avi->is_odml = 1;
454             avio_skip(pb, size + (size & 1));
455             break;
456         case MKTAG('a', 'm', 'v', 'h'):
457             amv_file_format = 1;
458         case MKTAG('a', 'v', 'i', 'h'):
459             /* AVI header */
460             /* using frame_period is bad idea */
461             frame_period = avio_rl32(pb);
462             avio_rl32(pb); /* max. bytes per second */
463             avio_rl32(pb);
464             avi->non_interleaved |= avio_rl32(pb) & AVIF_MUSTUSEINDEX;
465
466             avio_skip(pb, 2 * 4);
467             avio_rl32(pb);
468             avio_rl32(pb);
469             avih_width  = avio_rl32(pb);
470             avih_height = avio_rl32(pb);
471
472             avio_skip(pb, size - 10 * 4);
473             break;
474         case MKTAG('s', 't', 'r', 'h'):
475             /* stream header */
476
477             tag1    = avio_rl32(pb);
478             handler = avio_rl32(pb); /* codec tag */
479
480             if (tag1 == MKTAG('p', 'a', 'd', 's')) {
481                 avio_skip(pb, size - 8);
482                 break;
483             } else {
484                 stream_index++;
485                 st = avformat_new_stream(s, NULL);
486                 if (!st)
487                     goto fail;
488
489                 st->id = stream_index;
490                 ast    = av_mallocz(sizeof(AVIStream));
491                 if (!ast)
492                     goto fail;
493                 st->priv_data = ast;
494             }
495             if (amv_file_format)
496                 tag1 = stream_index ? MKTAG('a', 'u', 'd', 's')
497                                     : MKTAG('v', 'i', 'd', 's');
498
499             print_tag("strh", tag1, -1);
500
501             if (tag1 == MKTAG('i', 'a', 'v', 's') ||
502                 tag1 == MKTAG('i', 'v', 'a', 's')) {
503                 int64_t dv_dur;
504
505                 /* After some consideration -- I don't think we
506                  * have to support anything but DV in type1 AVIs. */
507                 if (s->nb_streams != 1)
508                     goto fail;
509
510                 if (handler != MKTAG('d', 'v', 's', 'd') &&
511                     handler != MKTAG('d', 'v', 'h', 'd') &&
512                     handler != MKTAG('d', 'v', 's', 'l'))
513                     goto fail;
514
515                 ast = s->streams[0]->priv_data;
516                 av_freep(&s->streams[0]->codec->extradata);
517                 av_freep(&s->streams[0]->codec);
518                 if (s->streams[0]->info)
519                     av_freep(&s->streams[0]->info->duration_error);
520                 av_freep(&s->streams[0]->info);
521                 av_freep(&s->streams[0]);
522                 s->nb_streams = 0;
523                 if (CONFIG_DV_DEMUXER) {
524                     avi->dv_demux = avpriv_dv_init_demux(s);
525                     if (!avi->dv_demux)
526                         goto fail;
527                 } else
528                     goto fail;
529                 s->streams[0]->priv_data = ast;
530                 avio_skip(pb, 3 * 4);
531                 ast->scale = avio_rl32(pb);
532                 ast->rate  = avio_rl32(pb);
533                 avio_skip(pb, 4);  /* start time */
534
535                 dv_dur = avio_rl32(pb);
536                 if (ast->scale > 0 && ast->rate > 0 && dv_dur > 0) {
537                     dv_dur     *= AV_TIME_BASE;
538                     s->duration = av_rescale(dv_dur, ast->scale, ast->rate);
539                 }
540                 /* else, leave duration alone; timing estimation in utils.c
541                  * will make a guess based on bitrate. */
542
543                 stream_index = s->nb_streams - 1;
544                 avio_skip(pb, size - 9 * 4);
545                 break;
546             }
547
548             av_assert0(stream_index < s->nb_streams);
549             st->codec->stream_codec_tag = handler;
550
551             avio_rl32(pb); /* flags */
552             avio_rl16(pb); /* priority */
553             avio_rl16(pb); /* language */
554             avio_rl32(pb); /* initial frame */
555             ast->scale = avio_rl32(pb);
556             ast->rate  = avio_rl32(pb);
557             if (!(ast->scale && ast->rate)) {
558                 av_log(s, AV_LOG_WARNING,
559                        "scale/rate is %u/%u which is invalid. "
560                        "(This file has been generated by broken software.)\n",
561                        ast->scale,
562                        ast->rate);
563                 if (frame_period) {
564                     ast->rate  = 1000000;
565                     ast->scale = frame_period;
566                 } else {
567                     ast->rate  = 25;
568                     ast->scale = 1;
569                 }
570             }
571             avpriv_set_pts_info(st, 64, ast->scale, ast->rate);
572
573             ast->cum_len  = avio_rl32(pb); /* start */
574             st->nb_frames = avio_rl32(pb);
575
576             st->start_time = 0;
577             avio_rl32(pb); /* buffer size */
578             avio_rl32(pb); /* quality */
579             if (ast->cum_len*ast->scale/ast->rate > 3600) {
580                 av_log(s, AV_LOG_ERROR, "crazy start time, iam scared, giving up\n");
581                 return AVERROR_INVALIDDATA;
582             }
583             ast->sample_size = avio_rl32(pb); /* sample ssize */
584             ast->cum_len    *= FFMAX(1, ast->sample_size);
585             av_dlog(s, "%"PRIu32" %"PRIu32" %d\n",
586                     ast->rate, ast->scale, ast->sample_size);
587
588             switch (tag1) {
589             case MKTAG('v', 'i', 'd', 's'):
590                 codec_type = AVMEDIA_TYPE_VIDEO;
591
592                 ast->sample_size = 0;
593                 break;
594             case MKTAG('a', 'u', 'd', 's'):
595                 codec_type = AVMEDIA_TYPE_AUDIO;
596                 break;
597             case MKTAG('t', 'x', 't', 's'):
598                 codec_type = AVMEDIA_TYPE_SUBTITLE;
599                 break;
600             case MKTAG('d', 'a', 't', 's'):
601                 codec_type = AVMEDIA_TYPE_DATA;
602                 break;
603             default:
604                 av_log(s, AV_LOG_INFO, "unknown stream type %X\n", tag1);
605             }
606             if (ast->sample_size == 0) {
607                 st->duration = st->nb_frames;
608                 if (st->duration > 0 && avi->io_fsize > 0 && avi->riff_end > avi->io_fsize) {
609                     av_log(s, AV_LOG_DEBUG, "File is truncated adjusting duration\n");
610                     st->duration = av_rescale(st->duration, avi->io_fsize, avi->riff_end);
611                 }
612             }
613             ast->frame_offset = ast->cum_len;
614             avio_skip(pb, size - 12 * 4);
615             break;
616         case MKTAG('s', 't', 'r', 'f'):
617             /* stream header */
618             if (!size)
619                 break;
620             if (stream_index >= (unsigned)s->nb_streams || avi->dv_demux) {
621                 avio_skip(pb, size);
622             } else {
623                 uint64_t cur_pos = avio_tell(pb);
624                 unsigned esize;
625                 if (cur_pos < list_end)
626                     size = FFMIN(size, list_end - cur_pos);
627                 st = s->streams[stream_index];
628                 if (st->codec->codec_type != AVMEDIA_TYPE_UNKNOWN) {
629                     avio_skip(pb, size);
630                     break;
631                 }
632                 switch (codec_type) {
633                 case AVMEDIA_TYPE_VIDEO:
634                     if (amv_file_format) {
635                         st->codec->width      = avih_width;
636                         st->codec->height     = avih_height;
637                         st->codec->codec_type = AVMEDIA_TYPE_VIDEO;
638                         st->codec->codec_id   = AV_CODEC_ID_AMV;
639                         avio_skip(pb, size);
640                         break;
641                     }
642                     tag1 = ff_get_bmp_header(pb, st, &esize);
643
644                     if (tag1 == MKTAG('D', 'X', 'S', 'B') ||
645                         tag1 == MKTAG('D', 'X', 'S', 'A')) {
646                         st->codec->codec_type = AVMEDIA_TYPE_SUBTITLE;
647                         st->codec->codec_tag  = tag1;
648                         st->codec->codec_id   = AV_CODEC_ID_XSUB;
649                         break;
650                     }
651
652                     if (size > 10 * 4 && size < (1 << 30) && size < avi->fsize) {
653                         if (esize == size-1 && (esize&1)) {
654                             st->codec->extradata_size = esize - 10 * 4;
655                         } else
656                             st->codec->extradata_size =  size - 10 * 4;
657                         if (ff_get_extradata(st->codec, pb, st->codec->extradata_size) < 0)
658                             return AVERROR(ENOMEM);
659                     }
660
661                     // FIXME: check if the encoder really did this correctly
662                     if (st->codec->extradata_size & 1)
663                         avio_r8(pb);
664
665                     /* Extract palette from extradata if bpp <= 8.
666                      * This code assumes that extradata contains only palette.
667                      * This is true for all paletted codecs implemented in
668                      * FFmpeg. */
669                     if (st->codec->extradata_size &&
670                         (st->codec->bits_per_coded_sample <= 8)) {
671                         int pal_size = (1 << st->codec->bits_per_coded_sample) << 2;
672                         const uint8_t *pal_src;
673
674                         pal_size = FFMIN(pal_size, st->codec->extradata_size);
675                         pal_src  = st->codec->extradata +
676                                    st->codec->extradata_size - pal_size;
677                         for (i = 0; i < pal_size / 4; i++)
678                             ast->pal[i] = 0xFFU<<24 | AV_RL32(pal_src+4*i);
679                         ast->has_pal = 1;
680                     }
681
682                     print_tag("video", tag1, 0);
683
684                     st->codec->codec_type = AVMEDIA_TYPE_VIDEO;
685                     st->codec->codec_tag  = tag1;
686                     st->codec->codec_id   = ff_codec_get_id(ff_codec_bmp_tags,
687                                                             tag1);
688                     /* This is needed to get the pict type which is necessary
689                      * for generating correct pts. */
690                     st->need_parsing = AVSTREAM_PARSE_HEADERS;
691                     if (st->codec->codec_tag == MKTAG('V', 'S', 'S', 'H'))
692                         st->need_parsing = AVSTREAM_PARSE_FULL;
693
694                     if (st->codec->codec_tag == 0 && st->codec->height > 0 &&
695                         st->codec->extradata_size < 1U << 30) {
696                         st->codec->extradata_size += 9;
697                         if ((ret = av_reallocp(&st->codec->extradata,
698                                                st->codec->extradata_size +
699                                                FF_INPUT_BUFFER_PADDING_SIZE)) < 0) {
700                             st->codec->extradata_size = 0;
701                             return ret;
702                         } else
703                             memcpy(st->codec->extradata + st->codec->extradata_size - 9,
704                                    "BottomUp", 9);
705                     }
706                     st->codec->height = FFABS(st->codec->height);
707
708 //                    avio_skip(pb, size - 5 * 4);
709                     break;
710                 case AVMEDIA_TYPE_AUDIO:
711                     ret = ff_get_wav_header(pb, st->codec, size);
712                     if (ret < 0)
713                         return ret;
714                     ast->dshow_block_align = st->codec->block_align;
715                     if (ast->sample_size && st->codec->block_align &&
716                         ast->sample_size != st->codec->block_align) {
717                         av_log(s,
718                                AV_LOG_WARNING,
719                                "sample size (%d) != block align (%d)\n",
720                                ast->sample_size,
721                                st->codec->block_align);
722                         ast->sample_size = st->codec->block_align;
723                     }
724                     /* 2-aligned
725                      * (fix for Stargate SG-1 - 3x18 - Shades of Grey.avi) */
726                     if (size & 1)
727                         avio_skip(pb, 1);
728                     /* Force parsing as several audio frames can be in
729                      * one packet and timestamps refer to packet start. */
730                     st->need_parsing = AVSTREAM_PARSE_TIMESTAMPS;
731                     /* ADTS header is in extradata, AAC without header must be
732                      * stored as exact frames. Parser not needed and it will
733                      * fail. */
734                     if (st->codec->codec_id == AV_CODEC_ID_AAC &&
735                         st->codec->extradata_size)
736                         st->need_parsing = AVSTREAM_PARSE_NONE;
737                     /* AVI files with Xan DPCM audio (wrongly) declare PCM
738                      * audio in the header but have Axan as stream_code_tag. */
739                     if (st->codec->stream_codec_tag == AV_RL32("Axan")) {
740                         st->codec->codec_id  = AV_CODEC_ID_XAN_DPCM;
741                         st->codec->codec_tag = 0;
742                         ast->dshow_block_align = 0;
743                     }
744                     if (amv_file_format) {
745                         st->codec->codec_id    = AV_CODEC_ID_ADPCM_IMA_AMV;
746                         ast->dshow_block_align = 0;
747                     }
748                     if (st->codec->codec_id == AV_CODEC_ID_AAC && ast->dshow_block_align <= 4 && ast->dshow_block_align) {
749                         av_log(s, AV_LOG_DEBUG, "overriding invalid dshow_block_align of %d\n", ast->dshow_block_align);
750                         ast->dshow_block_align = 0;
751                     }
752                     if (st->codec->codec_id == AV_CODEC_ID_AAC && ast->dshow_block_align == 1024 && ast->sample_size == 1024 ||
753                        st->codec->codec_id == AV_CODEC_ID_AAC && ast->dshow_block_align == 4096 && ast->sample_size == 4096 ||
754                        st->codec->codec_id == AV_CODEC_ID_MP3 && ast->dshow_block_align == 1152 && ast->sample_size == 1152) {
755                         av_log(s, AV_LOG_DEBUG, "overriding sample_size\n");
756                         ast->sample_size = 0;
757                     }
758                     break;
759                 case AVMEDIA_TYPE_SUBTITLE:
760                     st->codec->codec_type = AVMEDIA_TYPE_SUBTITLE;
761                     st->request_probe= 1;
762                     avio_skip(pb, size);
763                     break;
764                 default:
765                     st->codec->codec_type = AVMEDIA_TYPE_DATA;
766                     st->codec->codec_id   = AV_CODEC_ID_NONE;
767                     st->codec->codec_tag  = 0;
768                     avio_skip(pb, size);
769                     break;
770                 }
771             }
772             break;
773         case MKTAG('s', 't', 'r', 'd'):
774             if (stream_index >= (unsigned)s->nb_streams
775                 || s->streams[stream_index]->codec->extradata_size
776                 || s->streams[stream_index]->codec->codec_tag == MKTAG('H','2','6','4')) {
777                 avio_skip(pb, size);
778             } else {
779                 uint64_t cur_pos = avio_tell(pb);
780                 if (cur_pos < list_end)
781                     size = FFMIN(size, list_end - cur_pos);
782                 st = s->streams[stream_index];
783
784                 if (size<(1<<30)) {
785                     if (ff_get_extradata(st->codec, pb, size) < 0)
786                         return AVERROR(ENOMEM);
787                 }
788
789                 if (st->codec->extradata_size & 1) //FIXME check if the encoder really did this correctly
790                     avio_r8(pb);
791             }
792             break;
793         case MKTAG('i', 'n', 'd', 'x'):
794             i = avio_tell(pb);
795             if (pb->seekable && !(s->flags & AVFMT_FLAG_IGNIDX) &&
796                 avi->use_odml &&
797                 read_braindead_odml_indx(s, 0) < 0 &&
798                 (s->error_recognition & AV_EF_EXPLODE))
799                 goto fail;
800             avio_seek(pb, i + size, SEEK_SET);
801             break;
802         case MKTAG('v', 'p', 'r', 'p'):
803             if (stream_index < (unsigned)s->nb_streams && size > 9 * 4) {
804                 AVRational active, active_aspect;
805
806                 st = s->streams[stream_index];
807                 avio_rl32(pb);
808                 avio_rl32(pb);
809                 avio_rl32(pb);
810                 avio_rl32(pb);
811                 avio_rl32(pb);
812
813                 active_aspect.den = avio_rl16(pb);
814                 active_aspect.num = avio_rl16(pb);
815                 active.num        = avio_rl32(pb);
816                 active.den        = avio_rl32(pb);
817                 avio_rl32(pb); // nbFieldsPerFrame
818
819                 if (active_aspect.num && active_aspect.den &&
820                     active.num && active.den) {
821                     st->sample_aspect_ratio = av_div_q(active_aspect, active);
822                     av_dlog(s, "vprp %d/%d %d/%d\n",
823                             active_aspect.num, active_aspect.den,
824                             active.num, active.den);
825                 }
826                 size -= 9 * 4;
827             }
828             avio_skip(pb, size);
829             break;
830         case MKTAG('s', 't', 'r', 'n'):
831             if (s->nb_streams) {
832                 ret = avi_read_tag(s, s->streams[s->nb_streams - 1], tag, size);
833                 if (ret < 0)
834                     return ret;
835                 break;
836             }
837         default:
838             if (size > 1000000) {
839                 av_log(s, AV_LOG_ERROR,
840                        "Something went wrong during header parsing, "
841                        "I will ignore it and try to continue anyway.\n");
842                 if (s->error_recognition & AV_EF_EXPLODE)
843                     goto fail;
844                 avi->movi_list = avio_tell(pb) - 4;
845                 avi->movi_end  = avi->fsize;
846                 goto end_of_header;
847             }
848             /* skip tag */
849             size += (size & 1);
850             avio_skip(pb, size);
851             break;
852         }
853     }
854
855 end_of_header:
856     /* check stream number */
857     if (stream_index != s->nb_streams - 1) {
858
859 fail:
860         return AVERROR_INVALIDDATA;
861     }
862
863     if (!avi->index_loaded && pb->seekable)
864         avi_load_index(s);
865     avi->index_loaded    |= 1;
866     avi->non_interleaved |= guess_ni_flag(s) | (s->flags & AVFMT_FLAG_SORT_DTS);
867
868     dict_entry = av_dict_get(s->metadata, "ISFT", NULL, 0);
869     if (dict_entry && !strcmp(dict_entry->value, "PotEncoder"))
870         for (i = 0; i < s->nb_streams; i++) {
871             AVStream *st = s->streams[i];
872             if (   st->codec->codec_id == AV_CODEC_ID_MPEG1VIDEO
873                 || st->codec->codec_id == AV_CODEC_ID_MPEG2VIDEO)
874                 st->need_parsing = AVSTREAM_PARSE_FULL;
875         }
876
877     for (i = 0; i < s->nb_streams; i++) {
878         AVStream *st = s->streams[i];
879         if (st->nb_index_entries)
880             break;
881     }
882     // DV-in-AVI cannot be non-interleaved, if set this must be
883     // a mis-detection.
884     if (avi->dv_demux)
885         avi->non_interleaved = 0;
886     if (i == s->nb_streams && avi->non_interleaved) {
887         av_log(s, AV_LOG_WARNING,
888                "Non-interleaved AVI without index, switching to interleaved\n");
889         avi->non_interleaved = 0;
890     }
891
892     if (avi->non_interleaved) {
893         av_log(s, AV_LOG_INFO, "non-interleaved AVI\n");
894         clean_index(s);
895     }
896
897     ff_metadata_conv_ctx(s, NULL, avi_metadata_conv);
898     ff_metadata_conv_ctx(s, NULL, ff_riff_info_conv);
899
900     return 0;
901 }
902
903 static int read_gab2_sub(AVStream *st, AVPacket *pkt)
904 {
905     if (pkt->size >= 7 &&
906         !strcmp(pkt->data, "GAB2") && AV_RL16(pkt->data + 5) == 2) {
907         uint8_t desc[256];
908         int score      = AVPROBE_SCORE_EXTENSION, ret;
909         AVIStream *ast = st->priv_data;
910         AVInputFormat *sub_demuxer;
911         AVRational time_base;
912         AVIOContext *pb = avio_alloc_context(pkt->data + 7,
913                                              pkt->size - 7,
914                                              0, NULL, NULL, NULL, NULL);
915         AVProbeData pd;
916         unsigned int desc_len = avio_rl32(pb);
917
918         if (desc_len > pb->buf_end - pb->buf_ptr)
919             goto error;
920
921         ret = avio_get_str16le(pb, desc_len, desc, sizeof(desc));
922         avio_skip(pb, desc_len - ret);
923         if (*desc)
924             av_dict_set(&st->metadata, "title", desc, 0);
925
926         avio_rl16(pb);   /* flags? */
927         avio_rl32(pb);   /* data size */
928
929         pd = (AVProbeData) { .buf      = pb->buf_ptr,
930                              .buf_size = pb->buf_end - pb->buf_ptr };
931         if (!(sub_demuxer = av_probe_input_format2(&pd, 1, &score)))
932             goto error;
933
934         if (!(ast->sub_ctx = avformat_alloc_context()))
935             goto error;
936
937         ast->sub_ctx->pb = pb;
938         if (!avformat_open_input(&ast->sub_ctx, "", sub_demuxer, NULL)) {
939             ff_read_packet(ast->sub_ctx, &ast->sub_pkt);
940             *st->codec = *ast->sub_ctx->streams[0]->codec;
941             ast->sub_ctx->streams[0]->codec->extradata = NULL;
942             time_base = ast->sub_ctx->streams[0]->time_base;
943             avpriv_set_pts_info(st, 64, time_base.num, time_base.den);
944         }
945         ast->sub_buffer = pkt->data;
946         memset(pkt, 0, sizeof(*pkt));
947         return 1;
948
949 error:
950         av_freep(&pb);
951     }
952     return 0;
953 }
954
955 static AVStream *get_subtitle_pkt(AVFormatContext *s, AVStream *next_st,
956                                   AVPacket *pkt)
957 {
958     AVIStream *ast, *next_ast = next_st->priv_data;
959     int64_t ts, next_ts, ts_min = INT64_MAX;
960     AVStream *st, *sub_st = NULL;
961     int i;
962
963     next_ts = av_rescale_q(next_ast->frame_offset, next_st->time_base,
964                            AV_TIME_BASE_Q);
965
966     for (i = 0; i < s->nb_streams; i++) {
967         st  = s->streams[i];
968         ast = st->priv_data;
969         if (st->discard < AVDISCARD_ALL && ast && ast->sub_pkt.data) {
970             ts = av_rescale_q(ast->sub_pkt.dts, st->time_base, AV_TIME_BASE_Q);
971             if (ts <= next_ts && ts < ts_min) {
972                 ts_min = ts;
973                 sub_st = st;
974             }
975         }
976     }
977
978     if (sub_st) {
979         ast               = sub_st->priv_data;
980         *pkt              = ast->sub_pkt;
981         pkt->stream_index = sub_st->index;
982
983         if (ff_read_packet(ast->sub_ctx, &ast->sub_pkt) < 0)
984             ast->sub_pkt.data = NULL;
985     }
986     return sub_st;
987 }
988
989 static int get_stream_idx(unsigned *d)
990 {
991     if (d[0] >= '0' && d[0] <= '9' &&
992         d[1] >= '0' && d[1] <= '9') {
993         return (d[0] - '0') * 10 + (d[1] - '0');
994     } else {
995         return 100; // invalid stream ID
996     }
997 }
998
999 /**
1000  *
1001  * @param exit_early set to 1 to just gather packet position without making the changes needed to actually read & return the packet
1002  */
1003 static int avi_sync(AVFormatContext *s, int exit_early)
1004 {
1005     AVIContext *avi = s->priv_data;
1006     AVIOContext *pb = s->pb;
1007     int n;
1008     unsigned int d[8];
1009     unsigned int size;
1010     int64_t i, sync;
1011
1012 start_sync:
1013     memset(d, -1, sizeof(d));
1014     for (i = sync = avio_tell(pb); !url_feof(pb); i++) {
1015         int j;
1016
1017         for (j = 0; j < 7; j++)
1018             d[j] = d[j + 1];
1019         d[7] = avio_r8(pb);
1020
1021         size = d[4] + (d[5] << 8) + (d[6] << 16) + (d[7] << 24);
1022
1023         n = get_stream_idx(d + 2);
1024         av_dlog(s, "%X %X %X %X %X %X %X %X %"PRId64" %u %d\n",
1025                 d[0], d[1], d[2], d[3], d[4], d[5], d[6], d[7], i, size, n);
1026         if (i*(avi->io_fsize>0) + (uint64_t)size > avi->fsize || d[0] > 127)
1027             continue;
1028
1029         // parse ix##
1030         if ((d[0] == 'i' && d[1] == 'x' && n < s->nb_streams) ||
1031             // parse JUNK
1032             (d[0] == 'J' && d[1] == 'U' && d[2] == 'N' && d[3] == 'K') ||
1033             (d[0] == 'i' && d[1] == 'd' && d[2] == 'x' && d[3] == '1')) {
1034             avio_skip(pb, size);
1035             goto start_sync;
1036         }
1037
1038         // parse stray LIST
1039         if (d[0] == 'L' && d[1] == 'I' && d[2] == 'S' && d[3] == 'T') {
1040             avio_skip(pb, 4);
1041             goto start_sync;
1042         }
1043
1044         n = avi->dv_demux ? 0 : get_stream_idx(d);
1045
1046         if (!((i - avi->last_pkt_pos) & 1) &&
1047             get_stream_idx(d + 1) < s->nb_streams)
1048             continue;
1049
1050         // detect ##ix chunk and skip
1051         if (d[2] == 'i' && d[3] == 'x' && n < s->nb_streams) {
1052             avio_skip(pb, size);
1053             goto start_sync;
1054         }
1055
1056         // parse ##dc/##wb
1057         if (n < s->nb_streams) {
1058             AVStream *st;
1059             AVIStream *ast;
1060             st  = s->streams[n];
1061             ast = st->priv_data;
1062
1063             if (!ast) {
1064                 av_log(s, AV_LOG_WARNING, "Skiping foreign stream %d packet\n", n);
1065                 continue;
1066             }
1067
1068             if (s->nb_streams >= 2) {
1069                 AVStream *st1   = s->streams[1];
1070                 AVIStream *ast1 = st1->priv_data;
1071                 // workaround for broken small-file-bug402.avi
1072                 if (   d[2] == 'w' && d[3] == 'b'
1073                    && n == 0
1074                    && st ->codec->codec_type == AVMEDIA_TYPE_VIDEO
1075                    && st1->codec->codec_type == AVMEDIA_TYPE_AUDIO
1076                    && ast->prefix == 'd'*256+'c'
1077                    && (d[2]*256+d[3] == ast1->prefix || !ast1->prefix_count)
1078                   ) {
1079                     n   = 1;
1080                     st  = st1;
1081                     ast = ast1;
1082                     av_log(s, AV_LOG_WARNING,
1083                            "Invalid stream + prefix combination, assuming audio.\n");
1084                 }
1085             }
1086
1087             if (!avi->dv_demux &&
1088                 ((st->discard >= AVDISCARD_DEFAULT && size == 0) /* ||
1089                  // FIXME: needs a little reordering
1090                  (st->discard >= AVDISCARD_NONKEY &&
1091                  !(pkt->flags & AV_PKT_FLAG_KEY)) */
1092                 || st->discard >= AVDISCARD_ALL)) {
1093                 if (!exit_early) {
1094                     ast->frame_offset += get_duration(ast, size);
1095                     avio_skip(pb, size);
1096                     goto start_sync;
1097                 }
1098             }
1099
1100             if (d[2] == 'p' && d[3] == 'c' && size <= 4 * 256 + 4) {
1101                 int k    = avio_r8(pb);
1102                 int last = (k + avio_r8(pb) - 1) & 0xFF;
1103
1104                 avio_rl16(pb); // flags
1105
1106                 // b + (g << 8) + (r << 16);
1107                 for (; k <= last; k++)
1108                     ast->pal[k] = 0xFFU<<24 | avio_rb32(pb)>>8;
1109
1110                 ast->has_pal = 1;
1111                 goto start_sync;
1112             } else if (((ast->prefix_count < 5 || sync + 9 > i) &&
1113                         d[2] < 128 && d[3] < 128) ||
1114                        d[2] * 256 + d[3] == ast->prefix /* ||
1115                        (d[2] == 'd' && d[3] == 'c') ||
1116                        (d[2] == 'w' && d[3] == 'b') */) {
1117                 if (exit_early)
1118                     return 0;
1119                 if (d[2] * 256 + d[3] == ast->prefix)
1120                     ast->prefix_count++;
1121                 else {
1122                     ast->prefix       = d[2] * 256 + d[3];
1123                     ast->prefix_count = 0;
1124                 }
1125
1126                 avi->stream_index = n;
1127                 ast->packet_size  = size + 8;
1128                 ast->remaining    = size;
1129
1130                 if (size || !ast->sample_size) {
1131                     uint64_t pos = avio_tell(pb) - 8;
1132                     if (!st->index_entries || !st->nb_index_entries ||
1133                         st->index_entries[st->nb_index_entries - 1].pos < pos) {
1134                         av_add_index_entry(st, pos, ast->frame_offset, size,
1135                                            0, AVINDEX_KEYFRAME);
1136                     }
1137                 }
1138                 return 0;
1139             }
1140         }
1141     }
1142
1143     if (pb->error)
1144         return pb->error;
1145     return AVERROR_EOF;
1146 }
1147
1148 static int avi_read_packet(AVFormatContext *s, AVPacket *pkt)
1149 {
1150     AVIContext *avi = s->priv_data;
1151     AVIOContext *pb = s->pb;
1152     int err;
1153 #if FF_API_DESTRUCT_PACKET
1154     void *dstr;
1155 #endif
1156
1157     if (CONFIG_DV_DEMUXER && avi->dv_demux) {
1158         int size = avpriv_dv_get_packet(avi->dv_demux, pkt);
1159         if (size >= 0)
1160             return size;
1161         else
1162             goto resync;
1163     }
1164
1165     if (avi->non_interleaved) {
1166         int best_stream_index = 0;
1167         AVStream *best_st     = NULL;
1168         AVIStream *best_ast;
1169         int64_t best_ts = INT64_MAX;
1170         int i;
1171
1172         for (i = 0; i < s->nb_streams; i++) {
1173             AVStream *st   = s->streams[i];
1174             AVIStream *ast = st->priv_data;
1175             int64_t ts     = ast->frame_offset;
1176             int64_t last_ts;
1177
1178             if (!st->nb_index_entries)
1179                 continue;
1180
1181             last_ts = st->index_entries[st->nb_index_entries - 1].timestamp;
1182             if (!ast->remaining && ts > last_ts)
1183                 continue;
1184
1185             ts = av_rescale_q(ts, st->time_base,
1186                               (AVRational) { FFMAX(1, ast->sample_size),
1187                                              AV_TIME_BASE });
1188
1189             av_dlog(s, "%"PRId64" %d/%d %"PRId64"\n", ts,
1190                     st->time_base.num, st->time_base.den, ast->frame_offset);
1191             if (ts < best_ts) {
1192                 best_ts           = ts;
1193                 best_st           = st;
1194                 best_stream_index = i;
1195             }
1196         }
1197         if (!best_st)
1198             return AVERROR_EOF;
1199
1200         best_ast = best_st->priv_data;
1201         best_ts  = best_ast->frame_offset;
1202         if (best_ast->remaining) {
1203             i = av_index_search_timestamp(best_st,
1204                                           best_ts,
1205                                           AVSEEK_FLAG_ANY |
1206                                           AVSEEK_FLAG_BACKWARD);
1207         } else {
1208             i = av_index_search_timestamp(best_st, best_ts, AVSEEK_FLAG_ANY);
1209             if (i >= 0)
1210                 best_ast->frame_offset = best_st->index_entries[i].timestamp;
1211         }
1212
1213         if (i >= 0) {
1214             int64_t pos = best_st->index_entries[i].pos;
1215             pos += best_ast->packet_size - best_ast->remaining;
1216             if (avio_seek(s->pb, pos + 8, SEEK_SET) < 0)
1217               return AVERROR_EOF;
1218
1219             av_assert0(best_ast->remaining <= best_ast->packet_size);
1220
1221             avi->stream_index = best_stream_index;
1222             if (!best_ast->remaining)
1223                 best_ast->packet_size =
1224                 best_ast->remaining   = best_st->index_entries[i].size;
1225         }
1226         else
1227           return AVERROR_EOF;
1228     }
1229
1230 resync:
1231     if (avi->stream_index >= 0) {
1232         AVStream *st   = s->streams[avi->stream_index];
1233         AVIStream *ast = st->priv_data;
1234         int size, err;
1235
1236         if (get_subtitle_pkt(s, st, pkt))
1237             return 0;
1238
1239         // minorityreport.AVI block_align=1024 sample_size=1 IMA-ADPCM
1240         if (ast->sample_size <= 1)
1241             size = INT_MAX;
1242         else if (ast->sample_size < 32)
1243             // arbitrary multiplier to avoid tiny packets for raw PCM data
1244             size = 1024 * ast->sample_size;
1245         else
1246             size = ast->sample_size;
1247
1248         if (size > ast->remaining)
1249             size = ast->remaining;
1250         avi->last_pkt_pos = avio_tell(pb);
1251         err               = av_get_packet(pb, pkt, size);
1252         if (err < 0)
1253             return err;
1254         size = err;
1255
1256         if (ast->has_pal && pkt->size < (unsigned)INT_MAX / 2) {
1257             uint8_t *pal;
1258             pal = av_packet_new_side_data(pkt,
1259                                           AV_PKT_DATA_PALETTE,
1260                                           AVPALETTE_SIZE);
1261             if (!pal) {
1262                 av_log(s, AV_LOG_ERROR,
1263                        "Failed to allocate data for palette\n");
1264             } else {
1265                 memcpy(pal, ast->pal, AVPALETTE_SIZE);
1266                 ast->has_pal = 0;
1267             }
1268         }
1269
1270         if (CONFIG_DV_DEMUXER && avi->dv_demux) {
1271             AVBufferRef *avbuf = pkt->buf;
1272 #if FF_API_DESTRUCT_PACKET
1273 FF_DISABLE_DEPRECATION_WARNINGS
1274             dstr = pkt->destruct;
1275 FF_ENABLE_DEPRECATION_WARNINGS
1276 #endif
1277             size = avpriv_dv_produce_packet(avi->dv_demux, pkt,
1278                                             pkt->data, pkt->size, pkt->pos);
1279 #if FF_API_DESTRUCT_PACKET
1280 FF_DISABLE_DEPRECATION_WARNINGS
1281             pkt->destruct = dstr;
1282 FF_ENABLE_DEPRECATION_WARNINGS
1283 #endif
1284             pkt->buf    = avbuf;
1285             pkt->flags |= AV_PKT_FLAG_KEY;
1286             if (size < 0)
1287                 av_free_packet(pkt);
1288         } else if (st->codec->codec_type == AVMEDIA_TYPE_SUBTITLE &&
1289                    !st->codec->codec_tag && read_gab2_sub(st, pkt)) {
1290             ast->frame_offset++;
1291             avi->stream_index = -1;
1292             ast->remaining    = 0;
1293             goto resync;
1294         } else {
1295             /* XXX: How to handle B-frames in AVI? */
1296             pkt->dts = ast->frame_offset;
1297 //                pkt->dts += ast->start;
1298             if (ast->sample_size)
1299                 pkt->dts /= ast->sample_size;
1300             av_dlog(s,
1301                     "dts:%"PRId64" offset:%"PRId64" %d/%d smpl_siz:%d "
1302                     "base:%d st:%d size:%d\n",
1303                     pkt->dts,
1304                     ast->frame_offset,
1305                     ast->scale,
1306                     ast->rate,
1307                     ast->sample_size,
1308                     AV_TIME_BASE,
1309                     avi->stream_index,
1310                     size);
1311             pkt->stream_index = avi->stream_index;
1312
1313             if (st->codec->codec_type == AVMEDIA_TYPE_VIDEO && st->index_entries) {
1314                 AVIndexEntry *e;
1315                 int index;
1316
1317                 index = av_index_search_timestamp(st, ast->frame_offset, 0);
1318                 e     = &st->index_entries[index];
1319
1320                 if (index >= 0 && e->timestamp == ast->frame_offset) {
1321                     if (index == st->nb_index_entries-1) {
1322                         int key=1;
1323                         int i;
1324                         uint32_t state=-1;
1325                         for (i=0; i<FFMIN(size,256); i++) {
1326                             if (st->codec->codec_id == AV_CODEC_ID_MPEG4) {
1327                                 if (state == 0x1B6) {
1328                                     key= !(pkt->data[i]&0xC0);
1329                                     break;
1330                                 }
1331                             }else
1332                                 break;
1333                             state= (state<<8) + pkt->data[i];
1334                         }
1335                         if (!key)
1336                             e->flags &= ~AVINDEX_KEYFRAME;
1337                     }
1338                     if (e->flags & AVINDEX_KEYFRAME)
1339                         pkt->flags |= AV_PKT_FLAG_KEY;
1340                 }
1341             } else {
1342                 pkt->flags |= AV_PKT_FLAG_KEY;
1343             }
1344             ast->frame_offset += get_duration(ast, pkt->size);
1345         }
1346         ast->remaining -= err;
1347         if (!ast->remaining) {
1348             avi->stream_index = -1;
1349             ast->packet_size  = 0;
1350         }
1351
1352         if (!avi->non_interleaved && pkt->pos >= 0 && ast->seek_pos > pkt->pos) {
1353             av_free_packet(pkt);
1354             goto resync;
1355         }
1356         ast->seek_pos= 0;
1357
1358         if (!avi->non_interleaved && st->nb_index_entries>1 && avi->index_loaded>1) {
1359             int64_t dts= av_rescale_q(pkt->dts, st->time_base, AV_TIME_BASE_Q);
1360
1361             if (avi->dts_max - dts > 2*AV_TIME_BASE) {
1362                 avi->non_interleaved= 1;
1363                 av_log(s, AV_LOG_INFO, "Switching to NI mode, due to poor interleaving\n");
1364             }else if (avi->dts_max < dts)
1365                 avi->dts_max = dts;
1366         }
1367
1368         return 0;
1369     }
1370
1371     if ((err = avi_sync(s, 0)) < 0)
1372         return err;
1373     goto resync;
1374 }
1375
1376 /* XXX: We make the implicit supposition that the positions are sorted
1377  * for each stream. */
1378 static int avi_read_idx1(AVFormatContext *s, int size)
1379 {
1380     AVIContext *avi = s->priv_data;
1381     AVIOContext *pb = s->pb;
1382     int nb_index_entries, i;
1383     AVStream *st;
1384     AVIStream *ast;
1385     unsigned int index, tag, flags, pos, len, first_packet = 1;
1386     unsigned last_pos = -1;
1387     unsigned last_idx = -1;
1388     int64_t idx1_pos, first_packet_pos = 0, data_offset = 0;
1389     int anykey = 0;
1390
1391     nb_index_entries = size / 16;
1392     if (nb_index_entries <= 0)
1393         return AVERROR_INVALIDDATA;
1394
1395     idx1_pos = avio_tell(pb);
1396     avio_seek(pb, avi->movi_list + 4, SEEK_SET);
1397     if (avi_sync(s, 1) == 0)
1398         first_packet_pos = avio_tell(pb) - 8;
1399     avi->stream_index = -1;
1400     avio_seek(pb, idx1_pos, SEEK_SET);
1401
1402     if (s->nb_streams == 1 && s->streams[0]->codec->codec_tag == AV_RL32("MMES")) {
1403         first_packet_pos = 0;
1404         data_offset = avi->movi_list;
1405     }
1406
1407     /* Read the entries and sort them in each stream component. */
1408     for (i = 0; i < nb_index_entries; i++) {
1409         if (url_feof(pb))
1410             return -1;
1411
1412         tag   = avio_rl32(pb);
1413         flags = avio_rl32(pb);
1414         pos   = avio_rl32(pb);
1415         len   = avio_rl32(pb);
1416         av_dlog(s, "%d: tag=0x%x flags=0x%x pos=0x%x len=%d/",
1417                 i, tag, flags, pos, len);
1418
1419         index  = ((tag      & 0xff) - '0') * 10;
1420         index +=  (tag >> 8 & 0xff) - '0';
1421         if (index >= s->nb_streams)
1422             continue;
1423         st  = s->streams[index];
1424         ast = st->priv_data;
1425
1426         if (first_packet && first_packet_pos) {
1427             data_offset  = first_packet_pos - pos;
1428             first_packet = 0;
1429         }
1430         pos += data_offset;
1431
1432         av_dlog(s, "%d cum_len=%"PRId64"\n", len, ast->cum_len);
1433
1434         // even if we have only a single stream, we should
1435         // switch to non-interleaved to get correct timestamps
1436         if (last_pos == pos)
1437             avi->non_interleaved = 1;
1438         if (last_idx != pos && len) {
1439             av_add_index_entry(st, pos, ast->cum_len, len, 0,
1440                                (flags & AVIIF_INDEX) ? AVINDEX_KEYFRAME : 0);
1441             last_idx= pos;
1442         }
1443         ast->cum_len += get_duration(ast, len);
1444         last_pos      = pos;
1445         anykey       |= flags&AVIIF_INDEX;
1446     }
1447     if (!anykey) {
1448         for (index = 0; index < s->nb_streams; index++) {
1449             st = s->streams[index];
1450             if (st->nb_index_entries)
1451                 st->index_entries[0].flags |= AVINDEX_KEYFRAME;
1452         }
1453     }
1454     return 0;
1455 }
1456
1457 static int guess_ni_flag(AVFormatContext *s)
1458 {
1459     int i;
1460     int64_t last_start = 0;
1461     int64_t first_end  = INT64_MAX;
1462     int64_t oldpos     = avio_tell(s->pb);
1463     int *idx;
1464     int64_t min_pos, pos;
1465
1466     for (i = 0; i < s->nb_streams; i++) {
1467         AVStream *st = s->streams[i];
1468         int n        = st->nb_index_entries;
1469         unsigned int size;
1470
1471         if (n <= 0)
1472             continue;
1473
1474         if (n >= 2) {
1475             int64_t pos = st->index_entries[0].pos;
1476             avio_seek(s->pb, pos + 4, SEEK_SET);
1477             size = avio_rl32(s->pb);
1478             if (pos + size > st->index_entries[1].pos)
1479                 last_start = INT64_MAX;
1480         }
1481
1482         if (st->index_entries[0].pos > last_start)
1483             last_start = st->index_entries[0].pos;
1484         if (st->index_entries[n - 1].pos < first_end)
1485             first_end = st->index_entries[n - 1].pos;
1486     }
1487     avio_seek(s->pb, oldpos, SEEK_SET);
1488     if (last_start > first_end)
1489         return 1;
1490     idx= av_calloc(s->nb_streams, sizeof(*idx));
1491     if (!idx)
1492         return 0;
1493     for (min_pos=pos=0; min_pos!=INT64_MAX; pos= min_pos+1LU) {
1494         int64_t max_dts = INT64_MIN/2, min_dts= INT64_MAX/2;
1495         min_pos = INT64_MAX;
1496
1497         for (i=0; i<s->nb_streams; i++) {
1498             AVStream *st = s->streams[i];
1499             AVIStream *ast = st->priv_data;
1500             int n= st->nb_index_entries;
1501             while (idx[i]<n && st->index_entries[idx[i]].pos < pos)
1502                 idx[i]++;
1503             if (idx[i] < n) {
1504                 min_dts = FFMIN(min_dts, av_rescale_q(st->index_entries[idx[i]].timestamp/FFMAX(ast->sample_size, 1), st->time_base, AV_TIME_BASE_Q));
1505                 min_pos = FFMIN(min_pos, st->index_entries[idx[i]].pos);
1506             }
1507             if (idx[i])
1508                 max_dts = FFMAX(max_dts, av_rescale_q(st->index_entries[idx[i]-1].timestamp/FFMAX(ast->sample_size, 1), st->time_base, AV_TIME_BASE_Q));
1509         }
1510         if (max_dts - min_dts > 2*AV_TIME_BASE) {
1511             av_free(idx);
1512             return 1;
1513         }
1514     }
1515     av_free(idx);
1516     return 0;
1517 }
1518
1519 static int avi_load_index(AVFormatContext *s)
1520 {
1521     AVIContext *avi = s->priv_data;
1522     AVIOContext *pb = s->pb;
1523     uint32_t tag, size;
1524     int64_t pos = avio_tell(pb);
1525     int64_t next;
1526     int ret     = -1;
1527
1528     if (avio_seek(pb, avi->movi_end, SEEK_SET) < 0)
1529         goto the_end; // maybe truncated file
1530     av_dlog(s, "movi_end=0x%"PRIx64"\n", avi->movi_end);
1531     for (;;) {
1532         tag  = avio_rl32(pb);
1533         size = avio_rl32(pb);
1534         if (url_feof(pb))
1535             break;
1536         next = avio_tell(pb) + size + (size & 1);
1537
1538         av_dlog(s, "tag=%c%c%c%c size=0x%x\n",
1539                  tag        & 0xff,
1540                 (tag >>  8) & 0xff,
1541                 (tag >> 16) & 0xff,
1542                 (tag >> 24) & 0xff,
1543                 size);
1544
1545         if (tag == MKTAG('i', 'd', 'x', '1') &&
1546             avi_read_idx1(s, size) >= 0) {
1547             avi->index_loaded=2;
1548             ret = 0;
1549         }else if (tag == MKTAG('L', 'I', 'S', 'T')) {
1550             uint32_t tag1 = avio_rl32(pb);
1551
1552             if (tag1 == MKTAG('I', 'N', 'F', 'O'))
1553                 ff_read_riff_info(s, size - 4);
1554         }else if (!ret)
1555             break;
1556
1557         if (avio_seek(pb, next, SEEK_SET) < 0)
1558             break; // something is wrong here
1559     }
1560
1561 the_end:
1562     avio_seek(pb, pos, SEEK_SET);
1563     return ret;
1564 }
1565
1566 static void seek_subtitle(AVStream *st, AVStream *st2, int64_t timestamp)
1567 {
1568     AVIStream *ast2 = st2->priv_data;
1569     int64_t ts2     = av_rescale_q(timestamp, st->time_base, st2->time_base);
1570     av_free_packet(&ast2->sub_pkt);
1571     if (avformat_seek_file(ast2->sub_ctx, 0, INT64_MIN, ts2, ts2, 0) >= 0 ||
1572         avformat_seek_file(ast2->sub_ctx, 0, ts2, ts2, INT64_MAX, 0) >= 0)
1573         ff_read_packet(ast2->sub_ctx, &ast2->sub_pkt);
1574 }
1575
1576 static int avi_read_seek(AVFormatContext *s, int stream_index,
1577                          int64_t timestamp, int flags)
1578 {
1579     AVIContext *avi = s->priv_data;
1580     AVStream *st;
1581     int i, index;
1582     int64_t pos, pos_min;
1583     AVIStream *ast;
1584
1585     /* Does not matter which stream is requested dv in avi has the
1586      * stream information in the first video stream.
1587      */
1588     if (avi->dv_demux)
1589         stream_index = 0;
1590
1591     if (!avi->index_loaded) {
1592         /* we only load the index on demand */
1593         avi_load_index(s);
1594         avi->index_loaded |= 1;
1595     }
1596     av_assert0(stream_index >= 0);
1597
1598     st    = s->streams[stream_index];
1599     ast   = st->priv_data;
1600     index = av_index_search_timestamp(st,
1601                                       timestamp * FFMAX(ast->sample_size, 1),
1602                                       flags);
1603     if (index < 0) {
1604         if (st->nb_index_entries > 0)
1605             av_log(s, AV_LOG_DEBUG, "Failed to find timestamp %"PRId64 " in index %"PRId64 " .. %"PRId64 "\n",
1606                    timestamp * FFMAX(ast->sample_size, 1),
1607                    st->index_entries[0].timestamp,
1608                    st->index_entries[st->nb_index_entries - 1].timestamp);
1609         return AVERROR_INVALIDDATA;
1610     }
1611
1612     /* find the position */
1613     pos       = st->index_entries[index].pos;
1614     timestamp = st->index_entries[index].timestamp / FFMAX(ast->sample_size, 1);
1615
1616     av_dlog(s, "XX %"PRId64" %d %"PRId64"\n",
1617             timestamp, index, st->index_entries[index].timestamp);
1618
1619     if (CONFIG_DV_DEMUXER && avi->dv_demux) {
1620         /* One and only one real stream for DV in AVI, and it has video  */
1621         /* offsets. Calling with other stream indexes should have failed */
1622         /* the av_index_search_timestamp call above.                     */
1623
1624         if (avio_seek(s->pb, pos, SEEK_SET) < 0)
1625             return -1;
1626
1627         /* Feed the DV video stream version of the timestamp to the */
1628         /* DV demux so it can synthesize correct timestamps.        */
1629         ff_dv_offset_reset(avi->dv_demux, timestamp);
1630
1631         avi->stream_index = -1;
1632         return 0;
1633     }
1634
1635     pos_min = pos;
1636     for (i = 0; i < s->nb_streams; i++) {
1637         AVStream *st2   = s->streams[i];
1638         AVIStream *ast2 = st2->priv_data;
1639
1640         ast2->packet_size =
1641         ast2->remaining   = 0;
1642
1643         if (ast2->sub_ctx) {
1644             seek_subtitle(st, st2, timestamp);
1645             continue;
1646         }
1647
1648         if (st2->nb_index_entries <= 0)
1649             continue;
1650
1651 //        av_assert1(st2->codec->block_align);
1652         av_assert0((int64_t)st2->time_base.num * ast2->rate ==
1653                    (int64_t)st2->time_base.den * ast2->scale);
1654         index = av_index_search_timestamp(st2,
1655                                           av_rescale_q(timestamp,
1656                                                        st->time_base,
1657                                                        st2->time_base) *
1658                                           FFMAX(ast2->sample_size, 1),
1659                                           flags |
1660                                           AVSEEK_FLAG_BACKWARD |
1661                                           (st2->codec->codec_type != AVMEDIA_TYPE_VIDEO ? AVSEEK_FLAG_ANY : 0));
1662         if (index < 0)
1663             index = 0;
1664         ast2->seek_pos = st2->index_entries[index].pos;
1665         pos_min = FFMIN(pos_min,ast2->seek_pos);
1666     }
1667     for (i = 0; i < s->nb_streams; i++) {
1668         AVStream *st2 = s->streams[i];
1669         AVIStream *ast2 = st2->priv_data;
1670
1671         if (ast2->sub_ctx || st2->nb_index_entries <= 0)
1672             continue;
1673
1674         index = av_index_search_timestamp(
1675                 st2,
1676                 av_rescale_q(timestamp, st->time_base, st2->time_base) * FFMAX(ast2->sample_size, 1),
1677                 flags | AVSEEK_FLAG_BACKWARD | (st2->codec->codec_type != AVMEDIA_TYPE_VIDEO ? AVSEEK_FLAG_ANY : 0));
1678         if (index < 0)
1679             index = 0;
1680         while (!avi->non_interleaved && index>0 && st2->index_entries[index-1].pos >= pos_min)
1681             index--;
1682         ast2->frame_offset = st2->index_entries[index].timestamp;
1683     }
1684
1685     /* do the seek */
1686     if (avio_seek(s->pb, pos_min, SEEK_SET) < 0) {
1687         av_log(s, AV_LOG_ERROR, "Seek failed\n");
1688         return -1;
1689     }
1690     avi->stream_index = -1;
1691     avi->dts_max      = INT_MIN;
1692     return 0;
1693 }
1694
1695 static int avi_read_close(AVFormatContext *s)
1696 {
1697     int i;
1698     AVIContext *avi = s->priv_data;
1699
1700     for (i = 0; i < s->nb_streams; i++) {
1701         AVStream *st   = s->streams[i];
1702         AVIStream *ast = st->priv_data;
1703         if (ast) {
1704             if (ast->sub_ctx) {
1705                 av_freep(&ast->sub_ctx->pb);
1706                 avformat_close_input(&ast->sub_ctx);
1707             }
1708             av_free(ast->sub_buffer);
1709             av_free_packet(&ast->sub_pkt);
1710         }
1711     }
1712
1713     av_free(avi->dv_demux);
1714
1715     return 0;
1716 }
1717
1718 static int avi_probe(AVProbeData *p)
1719 {
1720     int i;
1721
1722     /* check file header */
1723     for (i = 0; avi_headers[i][0]; i++)
1724         if (!memcmp(p->buf,     avi_headers[i],     4) &&
1725             !memcmp(p->buf + 8, avi_headers[i] + 4, 4))
1726             return AVPROBE_SCORE_MAX;
1727
1728     return 0;
1729 }
1730
1731 AVInputFormat ff_avi_demuxer = {
1732     .name           = "avi",
1733     .long_name      = NULL_IF_CONFIG_SMALL("AVI (Audio Video Interleaved)"),
1734     .priv_data_size = sizeof(AVIContext),
1735     .read_probe     = avi_probe,
1736     .read_header    = avi_read_header,
1737     .read_packet    = avi_read_packet,
1738     .read_close     = avi_read_close,
1739     .read_seek      = avi_read_seek,
1740     .priv_class = &demuxer_class,
1741 };