]> git.sesse.net Git - ffmpeg/blob - libavformat/asfdec_o.c
avformat/kvag: allow seeking to start
[ffmpeg] / libavformat / asfdec_o.c
1 /*
2  * Microsoft Advanced Streaming Format demuxer
3  * Copyright (c) 2014 Alexandra Hájková
4  *
5  * This file is part of FFmpeg.
6  *
7  * FFmpeg is free software; you can redistribute it and/or
8  * modify it under the terms of the GNU Lesser General Public
9  * License as published by the Free Software Foundation; either
10  * version 2.1 of the License, or (at your option) any later version.
11  *
12  * FFmpeg is distributed in the hope that it will be useful,
13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
15  * Lesser General Public License for more details.
16  *
17  * You should have received a copy of the GNU Lesser General Public
18  * License along with FFmpeg; if not, write to the Free Software
19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
20  */
21
22 #include "libavutil/attributes.h"
23 #include "libavutil/avstring.h"
24 #include "libavutil/bswap.h"
25 #include "libavutil/common.h"
26 #include "libavutil/dict.h"
27 #include "libavutil/internal.h"
28 #include "libavutil/mathematics.h"
29 #include "libavutil/opt.h"
30 #include "libavutil/time_internal.h"
31
32 #include "avformat.h"
33 #include "avio_internal.h"
34 #include "avlanguage.h"
35 #include "id3v2.h"
36 #include "internal.h"
37 #include "riff.h"
38 #include "asf.h"
39 #include "asfcrypt.h"
40
41 #define ASF_BOOL                              0x2
42 #define ASF_WORD                              0x5
43 #define ASF_GUID                              0x6
44 #define ASF_DWORD                             0x3
45 #define ASF_QWORD                             0x4
46 #define ASF_UNICODE                           0x0
47 #define ASF_FLAG_BROADCAST                    0x1
48 #define ASF_BYTE_ARRAY                        0x1
49 #define ASF_TYPE_AUDIO                        0x2
50 #define ASF_TYPE_VIDEO                        0x1
51 #define ASF_STREAM_NUM                        0x7F
52 #define ASF_MAX_STREAMS                       128
53 #define BMP_HEADER_SIZE                       40
54 #define ASF_NUM_OF_PAYLOADS                   0x3F
55 #define ASF_ERROR_CORRECTION_LENGTH_TYPE      0x60
56 #define ASF_PACKET_ERROR_CORRECTION_DATA_SIZE 0x2
57
58 typedef struct GUIDParseTable {
59     const char *name;
60     ff_asf_guid guid;
61     int (*read_object)(AVFormatContext *, const struct GUIDParseTable *);
62     int is_subobject;
63 } GUIDParseTable;
64
65 typedef struct ASFPacket {
66     AVPacket *avpkt;
67     int64_t dts;
68     uint32_t frame_num; // ASF payloads with the same number are parts of the same frame
69     int flags;
70     int data_size;
71     int duration;
72     int size_left;
73     uint8_t stream_index;
74 } ASFPacket;
75
76 typedef struct ASFStream {
77     uint8_t stream_index; // from packet header
78     int index;  // stream index in AVFormatContext, set in asf_read_stream_properties
79     int type;
80     int indexed; // added index entries from the Simple Index Object or not
81     int8_t span;   // for deinterleaving
82     uint16_t virtual_pkt_len;
83     uint16_t virtual_chunk_len;
84     int16_t lang_idx;
85     ASFPacket pkt;
86 } ASFStream;
87
88 typedef struct ASFStreamData{
89     char langs[32];
90     AVDictionary *asf_met; // for storing per-stream metadata
91     AVRational aspect_ratio;
92 } ASFStreamData;
93
94 typedef struct ASFContext {
95     int data_reached;
96     int is_simple_index; // is simple index present or not 1/0
97     int is_header;
98
99     uint64_t preroll;
100     uint64_t nb_packets; // ASF packets
101     uint32_t packet_size;
102     int64_t send_time;
103     int duration;
104
105     uint32_t b_flags;    // flags with broadcast flag
106     uint32_t prop_flags; // file properties object flags
107
108     uint64_t data_size; // data object size
109     uint64_t unknown_size; // size of the unknown object
110
111     int64_t offset; // offset of the current object
112
113     int64_t data_offset;
114     int64_t first_packet_offset; // packet offset
115     int64_t unknown_offset;   // for top level header objects or subobjects without specified behavior
116
117     // ASF file must not contain more than 128 streams according to the specification
118     ASFStream *asf_st[ASF_MAX_STREAMS];
119     ASFStreamData asf_sd[ASF_MAX_STREAMS];
120     int nb_streams;
121
122     int stream_index; // from packet header, for the subpayload case
123
124     // packet parameters
125     uint64_t sub_header_offset; // offset of subpayload header
126     int64_t sub_dts;
127     uint8_t dts_delta; // for subpayloads
128     uint32_t packet_size_internal; // packet size stored inside ASFPacket, can be 0
129     int64_t packet_offset; // offset of the current packet inside Data Object
130     uint32_t pad_len; // padding after payload
131     uint32_t rep_data_len;
132
133     // packet state
134     uint64_t sub_left;  // subpayloads left or not
135     unsigned int nb_sub; // number of subpayloads read so far from the current ASF packet
136     uint16_t mult_sub_len; // total length of subpayloads array inside multiple payload
137     uint64_t nb_mult_left; // multiple payloads left
138     int return_subpayload;
139     enum {
140         PARSE_PACKET_HEADER,
141         READ_SINGLE,
142         READ_MULTI,
143         READ_MULTI_SUB
144     } state;
145 } ASFContext;
146
147 static int detect_unknown_subobject(AVFormatContext *s, int64_t offset, int64_t size);
148 static const GUIDParseTable *find_guid(ff_asf_guid guid);
149
150 static int asf_probe(const AVProbeData *pd)
151 {
152     /* check file header */
153     if (!ff_guidcmp(pd->buf, &ff_asf_header))
154         return AVPROBE_SCORE_MAX/2;
155     else
156         return 0;
157 }
158
159 static void swap_guid(ff_asf_guid guid)
160 {
161     FFSWAP(unsigned char, guid[0], guid[3]);
162     FFSWAP(unsigned char, guid[1], guid[2]);
163     FFSWAP(unsigned char, guid[4], guid[5]);
164     FFSWAP(unsigned char, guid[6], guid[7]);
165 }
166
167 static void align_position(AVIOContext *pb,  int64_t offset, uint64_t size)
168 {
169     if (size < INT64_MAX - offset && avio_tell(pb) != offset + size)
170         avio_seek(pb, offset + size, SEEK_SET);
171 }
172
173 static int asf_read_unknown(AVFormatContext *s, const GUIDParseTable *g)
174 {
175     ASFContext *asf = s->priv_data;
176     AVIOContext *pb = s->pb;
177     uint64_t size   = avio_rl64(pb);
178     int ret;
179
180     if (size > INT64_MAX)
181         return AVERROR_INVALIDDATA;
182
183     if (asf->is_header)
184         asf->unknown_size = size;
185     asf->is_header = 0;
186     if (!g->is_subobject) {
187         if (!(ret = strcmp(g->name, "Header Extension")))
188             avio_skip(pb, 22); // skip reserved fields and Data Size
189         if ((ret = detect_unknown_subobject(s, asf->unknown_offset,
190                                             asf->unknown_size)) < 0)
191             return ret;
192     } else {
193         if (size < 24) {
194             av_log(s, AV_LOG_ERROR, "Too small size %"PRIu64" (< 24).\n", size);
195             return AVERROR_INVALIDDATA;
196         }
197         avio_skip(pb, size - 24);
198     }
199
200     return 0;
201 }
202
203 static int get_asf_string(AVIOContext *pb, int maxlen, char *buf, int buflen)
204 {
205     char *q = buf;
206     int ret = 0;
207     if (buflen <= 0)
208         return AVERROR(EINVAL);
209     while (ret + 1 < maxlen) {
210         uint8_t tmp;
211         uint32_t ch;
212         GET_UTF16(ch, (ret += 2) <= maxlen ? avio_rl16(pb) : 0, break;);
213         PUT_UTF8(ch, tmp, if (q - buf < buflen - 1) *q++ = tmp;)
214     }
215     *q = 0;
216
217     return ret;
218 }
219
220 static int asf_read_marker(AVFormatContext *s, const GUIDParseTable *g)
221 {
222     ASFContext *asf = s->priv_data;
223     AVIOContext *pb = s->pb;
224     uint64_t size   = avio_rl64(pb);
225     int i, nb_markers, ret;
226     size_t len;
227     char name[1024];
228
229     avio_skip(pb, 8);
230     avio_skip(pb, 8); // skip reserved GUID
231     nb_markers = avio_rl32(pb);
232     avio_skip(pb, 2); // skip reserved field
233     len = avio_rl16(pb);
234     for (i = 0; i < len; i++)
235         avio_skip(pb, 1);
236
237     for (i = 0; i < nb_markers; i++) {
238         int64_t pts;
239
240         avio_skip(pb, 8);
241         pts = avio_rl64(pb);
242         pts -= asf->preroll * 10000;
243         avio_skip(pb, 2); // entry length
244         avio_skip(pb, 4); // send time
245         avio_skip(pb, 4); // flags
246         len = avio_rl32(pb);
247
248         if (avio_feof(pb))
249             return AVERROR_INVALIDDATA;
250
251         if ((ret = avio_get_str16le(pb, len, name,
252                                     sizeof(name))) < len)
253             avio_skip(pb, len - ret);
254         avpriv_new_chapter(s, i, (AVRational) { 1, 10000000 }, pts,
255                            AV_NOPTS_VALUE, name);
256     }
257     align_position(pb, asf->offset, size);
258
259     return 0;
260 }
261
262 static int asf_read_metadata(AVFormatContext *s, const char *title, uint16_t len,
263                              unsigned char *ch, uint16_t buflen)
264 {
265     AVIOContext *pb = s->pb;
266
267     avio_get_str16le(pb, len, ch, buflen);
268     if (ch[0]) {
269         if (av_dict_set(&s->metadata, title, ch, 0) < 0)
270             av_log(s, AV_LOG_WARNING, "av_dict_set failed.\n");
271     }
272
273     return 0;
274 }
275
276 static int asf_read_value(AVFormatContext *s, const uint8_t *name,
277                           uint16_t val_len, int type, AVDictionary **met)
278 {
279     int ret;
280     uint8_t *value;
281     uint16_t buflen = 2 * val_len + 1;
282     AVIOContext *pb = s->pb;
283
284     value = av_malloc(buflen);
285     if (!value)
286         return AVERROR(ENOMEM);
287     if (type == ASF_UNICODE) {
288         // get_asf_string reads UTF-16 and converts it to UTF-8 which needs longer buffer
289         if ((ret = get_asf_string(pb, val_len, value, buflen)) < 0)
290             goto failed;
291         if (av_dict_set(met, name, value, 0) < 0)
292             av_log(s, AV_LOG_WARNING, "av_dict_set failed.\n");
293     } else {
294         char buf[256];
295         if (val_len > sizeof(buf)) {
296             ret = AVERROR_INVALIDDATA;
297             goto failed;
298         }
299         if ((ret = avio_read(pb, value, val_len)) < 0)
300             goto failed;
301         if (ret < 2 * val_len)
302             value[ret] = '\0';
303         else
304             value[2 * val_len - 1] = '\0';
305         snprintf(buf, sizeof(buf), "%s", value);
306         if (av_dict_set(met, name, buf, 0) < 0)
307             av_log(s, AV_LOG_WARNING, "av_dict_set failed.\n");
308     }
309     av_freep(&value);
310
311     return 0;
312
313 failed:
314     av_freep(&value);
315     return ret;
316 }
317 static int asf_read_generic_value(AVIOContext *pb, int type, uint64_t *value)
318 {
319
320     switch (type) {
321     case ASF_BOOL:
322         *value = avio_rl16(pb);
323         break;
324     case ASF_DWORD:
325         *value = avio_rl32(pb);
326         break;
327     case ASF_QWORD:
328         *value = avio_rl64(pb);
329         break;
330     case ASF_WORD:
331         *value = avio_rl16(pb);
332         break;
333     default:
334         return AVERROR_INVALIDDATA;
335     }
336
337     return 0;
338 }
339
340 static int asf_set_metadata(AVFormatContext *s, const uint8_t *name,
341                             int type, AVDictionary **met)
342 {
343     AVIOContext *pb = s->pb;
344     uint64_t value;
345     char buf[32];
346     int ret;
347
348     ret = asf_read_generic_value(pb, type, &value);
349     if (ret < 0)
350         return ret;
351
352     snprintf(buf, sizeof(buf), "%"PRIu64, value);
353     if (av_dict_set(met, name, buf, 0) < 0)
354         av_log(s, AV_LOG_WARNING, "av_dict_set failed.\n");
355
356     return 0;
357 }
358
359 /* MSDN claims that this should be "compatible with the ID3 frame, APIC",
360  * but in reality this is only loosely similar */
361 static int asf_read_picture(AVFormatContext *s, int len)
362 {
363     AVPacket pkt          = { 0 };
364     const CodecMime *mime = ff_id3v2_mime_tags;
365     enum  AVCodecID id    = AV_CODEC_ID_NONE;
366     char mimetype[64];
367     uint8_t  *desc = NULL;
368     AVStream   *st = NULL;
369     int ret, type, picsize, desc_len;
370
371     /* type + picsize + mime + desc */
372     if (len < 1 + 4 + 2 + 2) {
373         av_log(s, AV_LOG_ERROR, "Invalid attached picture size: %d.\n", len);
374         return AVERROR_INVALIDDATA;
375     }
376
377     /* picture type */
378     type = avio_r8(s->pb);
379     len--;
380     if (type >= FF_ARRAY_ELEMS(ff_id3v2_picture_types) || type < 0) {
381         av_log(s, AV_LOG_WARNING, "Unknown attached picture type: %d.\n", type);
382         type = 0;
383     }
384
385     /* picture data size */
386     picsize = avio_rl32(s->pb);
387     len    -= 4;
388
389     /* picture MIME type */
390     len -= avio_get_str16le(s->pb, len, mimetype, sizeof(mimetype));
391     while (mime->id != AV_CODEC_ID_NONE) {
392         if (!strncmp(mime->str, mimetype, sizeof(mimetype))) {
393             id = mime->id;
394             break;
395         }
396         mime++;
397     }
398     if (id == AV_CODEC_ID_NONE) {
399         av_log(s, AV_LOG_ERROR, "Unknown attached picture mimetype: %s.\n",
400                mimetype);
401         return 0;
402     }
403
404     if (picsize >= len) {
405         av_log(s, AV_LOG_ERROR, "Invalid attached picture data size: %d >= %d.\n",
406                picsize, len);
407         return AVERROR_INVALIDDATA;
408     }
409
410     /* picture description */
411     desc_len = (len - picsize) * 2 + 1;
412     desc     = av_malloc(desc_len);
413     if (!desc)
414         return AVERROR(ENOMEM);
415     len -= avio_get_str16le(s->pb, len - picsize, desc, desc_len);
416
417     ret = av_get_packet(s->pb, &pkt, picsize);
418     if (ret < 0)
419         goto fail;
420
421     st  = avformat_new_stream(s, NULL);
422     if (!st) {
423         ret = AVERROR(ENOMEM);
424         goto fail;
425     }
426
427     st->disposition              |= AV_DISPOSITION_ATTACHED_PIC;
428     st->codecpar->codec_type      = AVMEDIA_TYPE_VIDEO;
429     st->codecpar->codec_id        = id;
430     st->attached_pic              = pkt;
431     st->attached_pic.stream_index = st->index;
432     st->attached_pic.flags       |= AV_PKT_FLAG_KEY;
433
434     if (*desc) {
435         if (av_dict_set(&st->metadata, "title", desc, AV_DICT_DONT_STRDUP_VAL) < 0)
436             av_log(s, AV_LOG_WARNING, "av_dict_set failed.\n");
437     } else
438         av_freep(&desc);
439
440     if (av_dict_set(&st->metadata, "comment", ff_id3v2_picture_types[type], 0) < 0)
441         av_log(s, AV_LOG_WARNING, "av_dict_set failed.\n");
442
443     return 0;
444
445 fail:
446     av_freep(&desc);
447     av_packet_unref(&pkt);
448     return ret;
449 }
450
451 static void get_id3_tag(AVFormatContext *s, int len)
452 {
453     ID3v2ExtraMeta *id3v2_extra_meta = NULL;
454
455     ff_id3v2_read(s, ID3v2_DEFAULT_MAGIC, &id3v2_extra_meta, len);
456     if (id3v2_extra_meta) {
457         ff_id3v2_parse_apic(s, id3v2_extra_meta);
458         ff_id3v2_parse_chapters(s, id3v2_extra_meta);
459     }
460     ff_id3v2_free_extra_meta(&id3v2_extra_meta);
461 }
462
463 static int process_metadata(AVFormatContext *s, const uint8_t *name, uint16_t name_len,
464                             uint16_t val_len, uint16_t type, AVDictionary **met)
465 {
466     int ret;
467     ff_asf_guid guid;
468
469     if (val_len) {
470         switch (type) {
471         case ASF_UNICODE:
472             asf_read_value(s, name, val_len, type, met);
473             break;
474         case ASF_BYTE_ARRAY:
475             if (!strcmp(name, "WM/Picture")) // handle cover art
476                 asf_read_picture(s, val_len);
477             else if (!strcmp(name, "ID3")) // handle ID3 tag
478                 get_id3_tag(s, val_len);
479             else
480                 asf_read_value(s, name, val_len, type, met);
481             break;
482         case ASF_GUID:
483             ff_get_guid(s->pb, &guid);
484             break;
485         default:
486             if ((ret = asf_set_metadata(s, name, type, met)) < 0)
487                 return ret;
488             break;
489         }
490     }
491
492     return 0;
493 }
494
495 static int asf_read_ext_content(AVFormatContext *s, const GUIDParseTable *g)
496 {
497     ASFContext *asf  = s->priv_data;
498     AVIOContext *pb  = s->pb;
499     uint64_t size    = avio_rl64(pb);
500     uint16_t nb_desc = avio_rl16(pb);
501     int i, ret;
502
503     for (i = 0; i < nb_desc; i++) {
504         uint16_t name_len, type, val_len;
505         uint8_t *name = NULL;
506
507         name_len = avio_rl16(pb);
508         if (!name_len)
509             return AVERROR_INVALIDDATA;
510         name = av_malloc(name_len);
511         if (!name)
512             return AVERROR(ENOMEM);
513         avio_get_str16le(pb, name_len, name,
514                          name_len);
515         type    = avio_rl16(pb);
516         // BOOL values are 16 bits long in the Metadata Object
517         // but 32 bits long in the Extended Content Description Object
518         if (type == ASF_BOOL)
519             type = ASF_DWORD;
520         val_len = avio_rl16(pb);
521
522         ret = process_metadata(s, name, name_len, val_len, type, &s->metadata);
523         av_freep(&name);
524         if (ret < 0)
525             return ret;
526     }
527
528     align_position(pb, asf->offset, size);
529     return 0;
530 }
531
532 static AVStream *find_stream(AVFormatContext *s, uint16_t st_num)
533 {
534     AVStream *st = NULL;
535     ASFContext *asf = s->priv_data;
536     int i;
537
538     for (i = 0; i < asf->nb_streams; i++) {
539         if (asf->asf_st[i]->stream_index == st_num) {
540             st = s->streams[asf->asf_st[i]->index];
541             break;
542         }
543     }
544
545     return st;
546 }
547
548 static int asf_store_aspect_ratio(AVFormatContext *s, uint8_t st_num, uint8_t *name, int type)
549 {
550     ASFContext *asf   = s->priv_data;
551     AVIOContext *pb   = s->pb;
552     uint64_t value = 0;
553     int ret;
554
555     ret = asf_read_generic_value(pb, type, &value);
556     if (ret < 0)
557         return ret;
558
559     if (st_num < ASF_MAX_STREAMS) {
560         if (!strcmp(name, "AspectRatioX"))
561             asf->asf_sd[st_num].aspect_ratio.num = value;
562         else
563             asf->asf_sd[st_num].aspect_ratio.den = value;
564     }
565     return 0;
566 }
567
568 static int asf_read_metadata_obj(AVFormatContext *s, const GUIDParseTable *g)
569 {
570     ASFContext *asf   = s->priv_data;
571     AVIOContext *pb   = s->pb;
572     uint64_t size     = avio_rl64(pb);
573     uint16_t nb_recs  = avio_rl16(pb); // number of records in the Description Records list
574     int i, ret;
575
576     for (i = 0; i < nb_recs; i++) {
577         uint16_t name_len, buflen, type, val_len, st_num;
578         uint8_t *name = NULL;
579
580         avio_skip(pb, 2); // skip reserved field
581         st_num   = avio_rl16(pb);
582         name_len = avio_rl16(pb);
583         buflen   = 2 * name_len + 1;
584         if (!name_len)
585             break;
586         type     = avio_rl16(pb);
587         val_len  = avio_rl32(pb);
588         name     = av_malloc(buflen);
589         if (!name)
590             return AVERROR(ENOMEM);
591         avio_get_str16le(pb, name_len, name,
592                          buflen);
593         if (!strcmp(name, "AspectRatioX") || !strcmp(name, "AspectRatioY")) {
594             ret = asf_store_aspect_ratio(s, st_num, name, type);
595             if (ret < 0) {
596                 av_freep(&name);
597                 break;
598             }
599         } else {
600             if (st_num < ASF_MAX_STREAMS) {
601                 if ((ret = process_metadata(s, name, name_len, val_len, type,
602                                             st_num ? &asf->asf_sd[st_num].asf_met
603                                                    : &s->metadata)) < 0) {
604                     av_freep(&name);
605                     break;
606                 }
607             }
608         }
609         av_freep(&name);
610     }
611
612     align_position(pb, asf->offset, size);
613     return 0;
614 }
615
616 static int asf_read_content_desc(AVFormatContext *s, const GUIDParseTable *g)
617 {
618     ASFContext *asf = s->priv_data;
619     AVIOContext *pb = s->pb;
620     int i;
621     static const char *const titles[] =
622     { "Title", "Author", "Copyright", "Description", "Rate" };
623     uint16_t len[5], buflen[5] = { 0 };
624     uint8_t *ch;
625     uint64_t size = avio_rl64(pb);
626
627     for (i = 0; i < 5; i++) {
628         len[i]  = avio_rl16(pb);
629         // utf8 string should be <= 2 * utf16 string, extra byte for the terminator
630         buflen[i]  = 2 * len[i] + 1;
631     }
632
633     for (i = 0; i < 5; i++) {
634         ch = av_malloc(buflen[i]);
635         if (!ch)
636             return(AVERROR(ENOMEM));
637         asf_read_metadata(s, titles[i], len[i], ch, buflen[i]);
638         av_freep(&ch);
639     }
640     align_position(pb, asf->offset, size);
641
642     return 0;
643 }
644
645 static int asf_read_properties(AVFormatContext *s, const GUIDParseTable *g)
646 {
647     ASFContext *asf = s->priv_data;
648     AVIOContext *pb = s->pb;
649     time_t creation_time;
650
651     avio_rl64(pb); // read object size
652     avio_skip(pb, 16); // skip File ID
653     avio_skip(pb, 8);  // skip File size
654     creation_time = avio_rl64(pb);
655     if (!(asf->b_flags & ASF_FLAG_BROADCAST)) {
656         struct tm tmbuf;
657         struct tm *tm;
658         char buf[64];
659
660         // creation date is in 100 ns units from 1 Jan 1601, conversion to s
661         creation_time /= 10000000;
662         // there are 11644473600 seconds between 1 Jan 1601 and 1 Jan 1970
663         creation_time -= 11644473600;
664         tm = gmtime_r(&creation_time, &tmbuf);
665         if (tm) {
666             if (!strftime(buf, sizeof(buf), "%Y-%m-%d %H:%M:%S", tm))
667                 buf[0] = '\0';
668         } else
669             buf[0] = '\0';
670         if (buf[0]) {
671             if (av_dict_set(&s->metadata, "creation_time", buf, 0) < 0)
672                 av_log(s, AV_LOG_WARNING, "av_dict_set failed.\n");
673         }
674     }
675     asf->nb_packets  = avio_rl64(pb);
676     asf->duration    = avio_rl64(pb) / 10000; // stream duration
677     avio_skip(pb, 8); // skip send duration
678     asf->preroll     = avio_rl64(pb);
679     asf->duration   -= asf->preroll;
680     asf->b_flags     = avio_rl32(pb);
681     avio_skip(pb, 4); // skip minimal packet size
682     asf->packet_size  = avio_rl32(pb);
683     avio_skip(pb, 4); // skip max_bitrate
684
685     return 0;
686 }
687
688 static int parse_video_info(AVIOContext *pb, AVStream *st)
689 {
690     uint16_t size_asf; // ASF-specific Format Data size
691     uint32_t size_bmp; // BMP_HEADER-specific Format Data size
692     unsigned int tag;
693
694     st->codecpar->width  = avio_rl32(pb);
695     st->codecpar->height = avio_rl32(pb);
696     avio_skip(pb, 1); // skip reserved flags
697     size_asf = avio_rl16(pb);
698     tag = ff_get_bmp_header(pb, st, &size_bmp);
699     st->codecpar->codec_tag = tag;
700     st->codecpar->codec_id  = ff_codec_get_id(ff_codec_bmp_tags, tag);
701     size_bmp = FFMAX(size_asf, size_bmp);
702
703     if (size_bmp > BMP_HEADER_SIZE &&
704         size_bmp < INT_MAX - AV_INPUT_BUFFER_PADDING_SIZE) {
705         int ret;
706         st->codecpar->extradata_size  = size_bmp - BMP_HEADER_SIZE;
707         if (!(st->codecpar->extradata = av_malloc(st->codecpar->extradata_size +
708                                                AV_INPUT_BUFFER_PADDING_SIZE))) {
709             st->codecpar->extradata_size = 0;
710             return AVERROR(ENOMEM);
711         }
712         memset(st->codecpar->extradata + st->codecpar->extradata_size , 0,
713                AV_INPUT_BUFFER_PADDING_SIZE);
714         if ((ret = avio_read(pb, st->codecpar->extradata,
715                              st->codecpar->extradata_size)) < 0)
716             return ret;
717     }
718     return 0;
719 }
720
721 static int asf_read_stream_properties(AVFormatContext *s, const GUIDParseTable *g)
722 {
723     ASFContext *asf = s->priv_data;
724     AVIOContext *pb = s->pb;
725     uint64_t size;
726     uint32_t err_data_len, ts_data_len; // type specific data length
727     uint16_t flags;
728     ff_asf_guid stream_type;
729     enum AVMediaType type;
730     int i, ret;
731     uint8_t stream_index;
732     AVStream *st;
733     ASFStream *asf_st;
734
735     // ASF file must not contain more than 128 streams according to the specification
736     if (asf->nb_streams >= ASF_MAX_STREAMS)
737         return AVERROR_INVALIDDATA;
738
739     size = avio_rl64(pb);
740     ff_get_guid(pb, &stream_type);
741     if (!ff_guidcmp(&stream_type, &ff_asf_audio_stream))
742         type = AVMEDIA_TYPE_AUDIO;
743     else if (!ff_guidcmp(&stream_type, &ff_asf_video_stream))
744         type = AVMEDIA_TYPE_VIDEO;
745     else if (!ff_guidcmp(&stream_type, &ff_asf_jfif_media))
746         type = AVMEDIA_TYPE_VIDEO;
747     else if (!ff_guidcmp(&stream_type, &ff_asf_command_stream))
748         type = AVMEDIA_TYPE_DATA;
749     else if (!ff_guidcmp(&stream_type,
750                          &ff_asf_ext_stream_embed_stream_header))
751         type = AVMEDIA_TYPE_UNKNOWN;
752     else
753         return AVERROR_INVALIDDATA;
754
755     ff_get_guid(pb, &stream_type); // error correction type
756     avio_skip(pb, 8); // skip the time offset
757     ts_data_len      = avio_rl32(pb);
758     err_data_len     = avio_rl32(pb);
759     flags            = avio_rl16(pb); // bit 15 - Encrypted Content
760
761     stream_index = flags & ASF_STREAM_NUM;
762     for (i = 0; i < asf->nb_streams; i++)
763         if (stream_index == asf->asf_st[i]->stream_index) {
764             av_log(s, AV_LOG_WARNING,
765                    "Duplicate stream found, this stream will be ignored.\n");
766             align_position(pb, asf->offset, size);
767             return 0;
768         }
769
770     st = avformat_new_stream(s, NULL);
771     if (!st)
772         return AVERROR(ENOMEM);
773     avpriv_set_pts_info(st, 32, 1, 1000); // pts should be dword, in milliseconds
774     st->codecpar->codec_type = type;
775     asf->asf_st[asf->nb_streams] = av_mallocz(sizeof(*asf_st));
776     if (!asf->asf_st[asf->nb_streams])
777         return AVERROR(ENOMEM);
778     asf_st                       = asf->asf_st[asf->nb_streams];
779     asf->nb_streams++;
780     asf_st->stream_index         = stream_index;
781     asf_st->index                = st->index;
782     asf_st->indexed              = 0;
783     st->id                       = flags & ASF_STREAM_NUM;
784     asf_st->pkt.data_size        = 0;
785     asf_st->pkt.avpkt = av_packet_alloc();
786     if (!asf_st->pkt.avpkt)
787         return AVERROR(ENOMEM);
788     avio_skip(pb, 4); // skip reserved field
789
790     switch (type) {
791     case AVMEDIA_TYPE_AUDIO:
792         asf_st->type = AVMEDIA_TYPE_AUDIO;
793         if ((ret = ff_get_wav_header(s, pb, st->codecpar, ts_data_len, 0)) < 0)
794             return ret;
795         break;
796     case AVMEDIA_TYPE_VIDEO:
797         asf_st->type = AVMEDIA_TYPE_VIDEO;
798         if ((ret = parse_video_info(pb, st)) < 0)
799             return ret;
800         break;
801     default:
802         avio_skip(pb, ts_data_len);
803         break;
804     }
805
806     if (err_data_len) {
807         if (type == AVMEDIA_TYPE_AUDIO) {
808             uint8_t span = avio_r8(pb);
809             if (span > 1) {
810                 asf_st->span              = span;
811                 asf_st->virtual_pkt_len   = avio_rl16(pb);
812                 asf_st->virtual_chunk_len = avio_rl16(pb);
813                 if (!asf_st->virtual_chunk_len || !asf_st->virtual_pkt_len)
814                     return AVERROR_INVALIDDATA;
815                 avio_skip(pb, err_data_len - 5);
816             } else
817                 avio_skip(pb, err_data_len - 1);
818         } else
819             avio_skip(pb, err_data_len);
820     }
821
822     align_position(pb, asf->offset, size);
823
824     return 0;
825 }
826
827 static void set_language(AVFormatContext *s, const char *rfc1766, AVDictionary **met)
828 {
829     // language abbr should contain at least 2 chars
830     if (rfc1766 && strlen(rfc1766) > 1) {
831         const char primary_tag[3] = { rfc1766[0], rfc1766[1], '\0' }; // ignore country code if any
832         const char *iso6392       = ff_convert_lang_to(primary_tag,
833                                                        AV_LANG_ISO639_2_BIBL);
834         if (iso6392)
835             if (av_dict_set(met, "language", iso6392, 0) < 0)
836                 av_log(s, AV_LOG_WARNING, "av_dict_set failed.\n");
837     }
838 }
839
840 static int asf_read_ext_stream_properties(AVFormatContext *s, const GUIDParseTable *g)
841 {
842     ASFContext *asf = s->priv_data;
843     AVIOContext *pb = s->pb;
844     AVStream *st    = NULL;
845     ff_asf_guid guid;
846     uint16_t nb_st_name, nb_pay_exts, st_num, lang_idx;
847     int i, ret;
848     uint32_t bitrate;
849     uint64_t start_time, end_time, time_per_frame;
850     uint64_t size = avio_rl64(pb);
851
852     start_time = avio_rl64(pb);
853     end_time   = avio_rl64(pb);
854     bitrate    = avio_rl32(pb);
855     avio_skip(pb, 28); // skip some unused values
856     st_num     = avio_rl16(pb);
857     st_num    &= ASF_STREAM_NUM;
858     lang_idx   = avio_rl16(pb); // Stream Language ID Index
859     if (lang_idx >= ASF_MAX_STREAMS)
860         return AVERROR_INVALIDDATA;
861     for (i = 0; i < asf->nb_streams; i++) {
862         if (st_num == asf->asf_st[i]->stream_index) {
863             st                       = s->streams[asf->asf_st[i]->index];
864             asf->asf_st[i]->lang_idx = lang_idx;
865             break;
866         }
867     }
868     time_per_frame = avio_rl64(pb); // average time per frame
869     if (st) {
870         st->start_time           = start_time;
871         st->duration             = end_time - start_time;
872         st->codecpar->bit_rate   = bitrate;
873         st->avg_frame_rate.num   = 10000000;
874         st->avg_frame_rate.den   = time_per_frame;
875     }
876     nb_st_name = avio_rl16(pb);
877     nb_pay_exts   = avio_rl16(pb);
878     for (i = 0; i < nb_st_name; i++) {
879         uint16_t len;
880
881         avio_rl16(pb); // Language ID Index
882         len = avio_rl16(pb);
883         avio_skip(pb, len);
884     }
885
886     for (i = 0; i < nb_pay_exts; i++) {
887         uint32_t len;
888         avio_skip(pb, 16); // Extension System ID
889         avio_skip(pb, 2);  // Extension Data Size
890         len = avio_rl32(pb);
891         avio_skip(pb, len);
892     }
893
894     if ((ret = ff_get_guid(pb, &guid)) < 0) {
895         align_position(pb, asf->offset, size);
896
897         return 0;
898     }
899
900     g = find_guid(guid);
901     if (g && !(strcmp(g->name, "Stream Properties"))) {
902         if ((ret = g->read_object(s, g)) < 0)
903             return ret;
904     }
905
906     align_position(pb, asf->offset, size);
907     return 0;
908 }
909
910 static int asf_read_language_list(AVFormatContext *s, const GUIDParseTable *g)
911 {
912     ASFContext *asf   = s->priv_data;
913     AVIOContext *pb   = s->pb;
914     int i, ret;
915     uint64_t size     = avio_rl64(pb);
916     uint16_t nb_langs = avio_rl16(pb);
917
918     if (nb_langs < ASF_MAX_STREAMS) {
919         for (i = 0; i < nb_langs; i++) {
920             size_t len;
921             len = avio_r8(pb);
922             if (!len)
923                 len = 6;
924             if ((ret = get_asf_string(pb, len, asf->asf_sd[i].langs,
925                                       sizeof(asf->asf_sd[i].langs))) < 0) {
926                 return ret;
927             }
928         }
929     }
930
931     align_position(pb, asf->offset, size);
932     return 0;
933 }
934
935 // returns data object offset when reading this object for the first time
936 static int asf_read_data(AVFormatContext *s, const GUIDParseTable *g)
937 {
938     ASFContext *asf = s->priv_data;
939     AVIOContext *pb = s->pb;
940     uint64_t size   = asf->data_size = avio_rl64(pb);
941     int i;
942
943     if (!asf->data_reached) {
944         asf->data_reached       = 1;
945         asf->data_offset        = asf->offset;
946     }
947
948     for (i = 0; i < asf->nb_streams; i++) {
949         if (!(asf->b_flags & ASF_FLAG_BROADCAST))
950             s->streams[i]->duration = asf->duration;
951     }
952     asf->nb_mult_left           = 0;
953     asf->sub_left               = 0;
954     asf->state                  = PARSE_PACKET_HEADER;
955     asf->return_subpayload      = 0;
956     asf->packet_size_internal   = 0;
957     avio_skip(pb, 16); // skip File ID
958     size = avio_rl64(pb); // Total Data Packets
959     if (size != asf->nb_packets)
960         av_log(s, AV_LOG_WARNING,
961                "Number of Packets from File Properties Object is not equal to Total"
962                "Datapackets value! num of packets %"PRIu64" total num %"PRIu64".\n",
963                size, asf->nb_packets);
964     avio_skip(pb, 2); // skip reserved field
965     asf->first_packet_offset = avio_tell(pb);
966     if ((pb->seekable & AVIO_SEEKABLE_NORMAL) && !(asf->b_flags & ASF_FLAG_BROADCAST))
967         align_position(pb, asf->offset, asf->data_size);
968
969     return 0;
970 }
971
972 static int asf_read_simple_index(AVFormatContext *s, const GUIDParseTable *g)
973 {
974     ASFContext *asf = s->priv_data;
975     AVIOContext *pb = s->pb;
976     AVStream *st    = NULL;
977     uint64_t interval; // index entry time interval in 100 ns units, usually it's 1s
978     uint32_t pkt_num, nb_entries;
979     int32_t prev_pkt_num = -1;
980     int i;
981     int64_t offset;
982     uint64_t size = avio_rl64(pb);
983
984     // simple index objects should be ordered by stream number, this loop tries to find
985     // the first not indexed video stream
986     for (i = 0; i < asf->nb_streams; i++) {
987         if ((asf->asf_st[i]->type == AVMEDIA_TYPE_VIDEO) && !asf->asf_st[i]->indexed) {
988             asf->asf_st[i]->indexed = 1;
989             st = s->streams[asf->asf_st[i]->index];
990             break;
991         }
992     }
993     if (!st) {
994         avio_skip(pb, size - 24); // if there's no video stream, skip index object
995         return 0;
996     }
997     avio_skip(pb, 16); // skip File ID
998     interval = avio_rl64(pb);
999     avio_skip(pb, 4);
1000     nb_entries = avio_rl32(pb);
1001     for (i = 0; i < nb_entries; i++) {
1002         pkt_num = avio_rl32(pb);
1003         offset = avio_skip(pb, 2);
1004         if (offset < 0) {
1005             av_log(s, AV_LOG_ERROR, "Skipping failed in asf_read_simple_index.\n");
1006             return offset;
1007         }
1008         if (prev_pkt_num != pkt_num) {
1009             av_add_index_entry(st, asf->first_packet_offset + asf->packet_size *
1010                                pkt_num, av_rescale(interval, i, 10000),
1011                                asf->packet_size, 0, AVINDEX_KEYFRAME);
1012             prev_pkt_num = pkt_num;
1013         }
1014     }
1015     asf->is_simple_index = 1;
1016     align_position(pb, asf->offset, size);
1017
1018     return 0;
1019 }
1020
1021 static const GUIDParseTable gdef[] = {
1022     { "Data",                         { 0x75, 0xB2, 0x26, 0x36, 0x66, 0x8E, 0x11, 0xCF, 0xA6, 0xD9, 0x00, 0xAA, 0x00, 0x62, 0xCE, 0x6C }, asf_read_data, 1 },
1023     { "Simple Index",                 { 0x33, 0x00, 0x08, 0x90, 0xE5, 0xB1, 0x11, 0xCF, 0x89, 0xF4, 0x00, 0xA0, 0xC9, 0x03, 0x49, 0xCB }, asf_read_simple_index, 1 },
1024     { "Content Description",          { 0x75, 0xB2, 0x26, 0x33, 0x66 ,0x8E, 0x11, 0xCF, 0xA6, 0xD9, 0x00, 0xAA, 0x00, 0x62, 0xCE, 0x6C }, asf_read_content_desc, 1 },
1025     { "Extended Content Description", { 0xD2, 0xD0, 0xA4, 0x40, 0xE3, 0x07, 0x11, 0xD2, 0x97, 0xF0, 0x00, 0xA0, 0xC9, 0x5e, 0xA8, 0x50 }, asf_read_ext_content, 1 },
1026     { "Stream Bitrate Properties",    { 0x7B, 0xF8, 0x75, 0xCE, 0x46, 0x8D, 0x11, 0xD1, 0x8D, 0x82, 0x00, 0x60, 0x97, 0xC9, 0xA2, 0xB2 }, asf_read_unknown, 1 },
1027     { "File Properties",              { 0x8C, 0xAB, 0xDC, 0xA1, 0xA9, 0x47, 0x11, 0xCF, 0x8E, 0xE4, 0x00, 0xC0, 0x0C, 0x20, 0x53, 0x65 }, asf_read_properties, 1 },
1028     { "Header Extension",             { 0x5F, 0xBF, 0x03, 0xB5, 0xA9, 0x2E, 0x11, 0xCF, 0x8E, 0xE3, 0x00, 0xC0, 0x0C, 0x20, 0x53, 0x65 }, asf_read_unknown, 0 },
1029     { "Stream Properties",            { 0xB7, 0xDC, 0x07, 0x91, 0xA9, 0xB7, 0x11, 0xCF, 0x8E, 0xE6, 0x00, 0xC0, 0x0C, 0x20, 0x53, 0x65 }, asf_read_stream_properties, 1 },
1030     { "Codec List",                   { 0x86, 0xD1, 0x52, 0x40, 0x31, 0x1D, 0x11, 0xD0, 0xA3, 0xA4, 0x00, 0xA0, 0xC9, 0x03, 0x48, 0xF6 }, asf_read_unknown, 1 },
1031     { "Marker",                       { 0xF4, 0x87, 0xCD, 0x01, 0xA9, 0x51, 0x11, 0xCF, 0x8E, 0xE6, 0x00, 0xC0, 0x0C, 0x20, 0x53, 0x65 }, asf_read_marker, 1 },
1032     { "Script Command",               { 0x1E, 0xFB, 0x1A, 0x30, 0x0B, 0x62, 0x11, 0xD0, 0xA3, 0x9B, 0x00, 0xA0, 0xC9, 0x03, 0x48, 0xF6 }, asf_read_unknown, 1 },
1033     { "Language List",                { 0x7C, 0x43, 0x46, 0xa9, 0xef, 0xe0, 0x4B, 0xFC, 0xB2, 0x29, 0x39, 0x3e, 0xde, 0x41, 0x5c, 0x85 }, asf_read_language_list, 1},
1034     { "Padding",                      { 0x18, 0x06, 0xD4, 0x74, 0xCA, 0xDF, 0x45, 0x09, 0xA4, 0xBA, 0x9A, 0xAB, 0xCB, 0x96, 0xAA, 0xE8 }, asf_read_unknown, 1 },
1035     { "DRMv1 Header",                 { 0x22, 0x11, 0xB3, 0xFB, 0xBD, 0x23, 0x11, 0xD2, 0xB4, 0xB7, 0x00, 0xA0, 0xC9, 0x55, 0xFC, 0x6E }, asf_read_unknown, 1 },
1036     { "DRMv2 Header",                 { 0x29, 0x8A, 0xE6, 0x14, 0x26, 0x22, 0x4C, 0x17, 0xB9, 0x35, 0xDA, 0xE0, 0x7E, 0xE9, 0x28, 0x9c }, asf_read_unknown, 1 },
1037     { "Index",                        { 0xD6, 0xE2, 0x29, 0xD3, 0x35, 0xDA, 0x11, 0xD1, 0x90, 0x34, 0x00, 0xA0, 0xC9, 0x03, 0x49, 0xBE }, asf_read_unknown, 1 },
1038     { "Media Object Index",           { 0xFE, 0xB1, 0x03, 0xF8, 0x12, 0xAD, 0x4C, 0x64, 0x84, 0x0F, 0x2A, 0x1D, 0x2F, 0x7A, 0xD4, 0x8C }, asf_read_unknown, 1 },
1039     { "Timecode Index",               { 0x3C, 0xB7, 0x3F, 0xD0, 0x0C, 0x4A, 0x48, 0x03, 0x95, 0x3D, 0xED, 0xF7, 0xB6, 0x22, 0x8F, 0x0C }, asf_read_unknown, 0 },
1040     { "Bitrate_Mutual_Exclusion",     { 0xD6, 0xE2, 0x29, 0xDC, 0x35, 0xDA, 0x11, 0xD1, 0x90, 0x34, 0x00, 0xA0, 0xC9, 0x03, 0x49, 0xBE }, asf_read_unknown, 1 },
1041     { "Error Correction",             { 0x75, 0xB2, 0x26, 0x35, 0x66, 0x8E, 0x11, 0xCF, 0xA6, 0xD9, 0x00, 0xAA, 0x00, 0x62, 0xCE, 0x6C }, asf_read_unknown, 1 },
1042     { "Content Branding",             { 0x22, 0x11, 0xB3, 0xFA, 0xBD, 0x23, 0x11, 0xD2, 0xB4, 0xB7, 0x00, 0xA0, 0xC9, 0x55, 0xFC, 0x6E }, asf_read_unknown, 1 },
1043     { "Content Encryption",           { 0x22, 0x11, 0xB3, 0xFB, 0xBD, 0x23, 0x11, 0xD2, 0xB4, 0xB7, 0x00, 0xA0, 0xC9, 0x55, 0xFC, 0x6E }, asf_read_unknown, 1 },
1044     { "Extended Content Encryption",  { 0x29, 0x8A, 0xE6, 0x14, 0x26, 0x22, 0x4C, 0x17, 0xB9, 0x35, 0xDA, 0xE0, 0x7E, 0xE9, 0x28, 0x9C }, asf_read_unknown, 1 },
1045     { "Digital Signature",            { 0x22, 0x11, 0xB3, 0xFC, 0xBD, 0x23, 0x11, 0xD2, 0xB4, 0xB7, 0x00, 0xA0, 0xC9, 0x55, 0xFC, 0x6E }, asf_read_unknown, 1 },
1046     { "Extended Stream Properties",   { 0x14, 0xE6, 0xA5, 0xCB, 0xC6, 0x72, 0x43, 0x32, 0x83, 0x99, 0xA9, 0x69, 0x52, 0x06, 0x5B, 0x5A }, asf_read_ext_stream_properties, 1 },
1047     { "Advanced Mutual Exclusion",    { 0xA0, 0x86, 0x49, 0xCF, 0x47, 0x75, 0x46, 0x70, 0x8A, 0x16, 0x6E, 0x35, 0x35, 0x75, 0x66, 0xCD }, asf_read_unknown, 1 },
1048     { "Group Mutual Exclusion",       { 0xD1, 0x46, 0x5A, 0x40, 0x5A, 0x79, 0x43, 0x38, 0xB7, 0x1B, 0xE3, 0x6B, 0x8F, 0xD6, 0xC2, 0x49 }, asf_read_unknown, 1},
1049     { "Stream Prioritization",        { 0xD4, 0xFE, 0xD1, 0x5B, 0x88, 0xD3, 0x45, 0x4F, 0x81, 0xF0, 0xED, 0x5C, 0x45, 0x99, 0x9E, 0x24 }, asf_read_unknown, 1 },
1050     { "Bandwidth Sharing Object",     { 0xA6, 0x96, 0x09, 0xE6, 0x51, 0x7B, 0x11, 0xD2, 0xB6, 0xAF, 0x00, 0xC0, 0x4F, 0xD9, 0x08, 0xE9 }, asf_read_unknown, 1 },
1051     { "Metadata",                     { 0xC5, 0xF8, 0xCB, 0xEA, 0x5B, 0xAF, 0x48, 0x77, 0x84, 0x67, 0xAA, 0x8C, 0x44, 0xFA, 0x4C, 0xCA }, asf_read_metadata_obj, 1 },
1052     { "Metadata Library",             { 0x44, 0x23, 0x1C, 0x94, 0x94, 0x98, 0x49, 0xD1, 0xA1, 0x41, 0x1D, 0x13, 0x4E, 0x45, 0x70, 0x54 }, asf_read_metadata_obj, 1 },
1053     { "Audio Spread",                 { 0xBF, 0xC3, 0xCD, 0x50, 0x61, 0x8F, 0x11, 0xCF, 0x8B, 0xB2, 0x00, 0xAA, 0x00, 0xB4, 0xE2, 0x20 }, asf_read_unknown, 1 },
1054     { "Index Parameters",             { 0xD6, 0xE2, 0x29, 0xDF, 0x35, 0xDA, 0x11, 0xD1, 0x90, 0x34, 0x00, 0xA0, 0xC9, 0x03, 0x49, 0xBE }, asf_read_unknown, 1 },
1055     { "Content Encryption System Windows Media DRM Network Devices",
1056                                       { 0x7A, 0x07, 0x9B, 0xB6, 0xDA, 0XA4, 0x4e, 0x12, 0xA5, 0xCA, 0x91, 0xD3, 0x8D, 0xC1, 0x1A, 0x8D }, asf_read_unknown, 1 },
1057     { "Mutex Language",               { 0xD6, 0xE2, 0x2A, 0x00, 0x25, 0xDA, 0x11, 0xD1, 0x90, 0x34, 0x00, 0xA0, 0xC9, 0x03, 0x49, 0xBE }, asf_read_unknown, 1 },
1058     { "Mutex Bitrate",                { 0xD6, 0xE2, 0x2A, 0x01, 0x25, 0xDA, 0x11, 0xD1, 0x90, 0x34, 0x00, 0xA0, 0xC9, 0x03, 0x49, 0xBE }, asf_read_unknown, 1 },
1059     { "Mutex Unknown",                { 0xD6, 0xE2, 0x2A, 0x02, 0x25, 0xDA, 0x11, 0xD1, 0x90, 0x34, 0x00, 0xA0, 0xC9, 0x03, 0x49, 0xBE }, asf_read_unknown, 1 },
1060     { "Bandwidth Sharing Exclusive",  { 0xAF, 0x60, 0x60, 0xAA, 0x51, 0x97, 0x11, 0xD2, 0xB6, 0xAF, 0x00, 0xC0, 0x4F, 0xD9, 0x08, 0xE9 }, asf_read_unknown, 1 },
1061     { "Bandwidth Sharing Partial",    { 0xAF, 0x60, 0x60, 0xAB, 0x51, 0x97, 0x11, 0xD2, 0xB6, 0xAF, 0x00, 0xC0, 0x4F, 0xD9, 0x08, 0xE9 }, asf_read_unknown, 1 },
1062     { "Payload Extension System Timecode", { 0x39, 0x95, 0x95, 0xEC, 0x86, 0x67, 0x4E, 0x2D, 0x8F, 0xDB, 0x98, 0x81, 0x4C, 0xE7, 0x6C, 0x1E }, asf_read_unknown, 1 },
1063     { "Payload Extension System File Name", { 0xE1, 0x65, 0xEC, 0x0E, 0x19, 0xED, 0x45, 0xD7, 0xB4, 0xA7, 0x25, 0xCB, 0xD1, 0xE2, 0x8E, 0x9B }, asf_read_unknown, 1 },
1064     { "Payload Extension System Content Type", { 0xD5, 0x90, 0xDC, 0x20, 0x07, 0xBC, 0x43, 0x6C, 0x9C, 0xF7, 0xF3, 0xBB, 0xFB, 0xF1, 0xA4, 0xDC }, asf_read_unknown, 1 },
1065     { "Payload Extension System Pixel Aspect Ratio", { 0x1, 0x1E, 0xE5, 0x54, 0xF9, 0xEA, 0x4B, 0xC8, 0x82, 0x1A, 0x37, 0x6B, 0x74, 0xE4, 0xC4, 0xB8 }, asf_read_unknown, 1 },
1066     { "Payload Extension System Sample Duration", { 0xC6, 0xBD, 0x94, 0x50, 0x86, 0x7F, 0x49, 0x07, 0x83, 0xA3, 0xC7, 0x79, 0x21, 0xB7, 0x33, 0xAD }, asf_read_unknown, 1 },
1067     { "Payload Extension System Encryption Sample ID", { 0x66, 0x98, 0xB8, 0x4E, 0x0A, 0xFA, 0x43, 0x30, 0xAE, 0xB2, 0x1C, 0x0A, 0x98, 0xD7, 0xA4, 0x4D }, asf_read_unknown, 1 },
1068     { "Payload Extension System Degradable JPEG", { 0x00, 0xE1, 0xAF, 0x06, 0x7B, 0xEC, 0x11, 0xD1, 0xA5, 0x82, 0x00, 0xC0, 0x4F, 0xC2, 0x9C, 0xFB }, asf_read_unknown, 1 },
1069 };
1070
1071 #define READ_LEN(flag, name, len)            \
1072     do {                                     \
1073         if ((flag) == name ## IS_BYTE)       \
1074             len = avio_r8(pb);               \
1075         else if ((flag) == name ## IS_WORD)  \
1076             len = avio_rl16(pb);             \
1077         else if ((flag) == name ## IS_DWORD) \
1078             len = avio_rl32(pb);             \
1079         else                                 \
1080             len = 0;                         \
1081     } while(0)
1082
1083 static int asf_read_subpayload(AVFormatContext *s, AVPacket *pkt, int is_header)
1084 {
1085     ASFContext *asf = s->priv_data;
1086     AVIOContext *pb = s->pb;
1087     uint8_t sub_len;
1088     int ret, i;
1089
1090     if (is_header) {
1091         asf->dts_delta = avio_r8(pb);
1092         if (asf->nb_mult_left) {
1093             asf->mult_sub_len = avio_rl16(pb); // total
1094         }
1095         asf->sub_header_offset = avio_tell(pb);
1096         asf->nb_sub = 0;
1097         asf->sub_left = 1;
1098     }
1099     sub_len = avio_r8(pb);
1100     if ((ret = av_get_packet(pb, pkt, sub_len)) < 0) // each subpayload is entire frame
1101         return ret;
1102     for (i = 0; i < asf->nb_streams; i++) {
1103         if (asf->stream_index == asf->asf_st[i]->stream_index) {
1104             pkt->stream_index  = asf->asf_st[i]->index;
1105             break;
1106         }
1107     }
1108     asf->return_subpayload = 1;
1109     if (!sub_len)
1110         asf->return_subpayload = 0;
1111
1112     if (sub_len)
1113         asf->nb_sub++;
1114     pkt->dts = asf->sub_dts + (asf->nb_sub - 1) * asf->dts_delta - asf->preroll;
1115     if (asf->nb_mult_left && (avio_tell(pb) >=
1116                               (asf->sub_header_offset + asf->mult_sub_len))) {
1117         asf->sub_left = 0;
1118         asf->nb_mult_left--;
1119     }
1120     if (avio_tell(pb) >= asf->packet_offset + asf->packet_size - asf->pad_len) {
1121         asf->sub_left = 0;
1122         if (!asf->nb_mult_left) {
1123             avio_skip(pb, asf->pad_len);
1124             if (avio_tell(pb) != asf->packet_offset + asf->packet_size) {
1125                 if (!asf->packet_size)
1126                     return AVERROR_INVALIDDATA;
1127                 av_log(s, AV_LOG_WARNING,
1128                        "Position %"PRId64" wrong, should be %"PRId64"\n",
1129                        avio_tell(pb), asf->packet_offset + asf->packet_size);
1130                 avio_seek(pb, asf->packet_offset + asf->packet_size, SEEK_SET);
1131             }
1132         }
1133     }
1134
1135     return 0;
1136 }
1137
1138 static void reset_packet(ASFPacket *asf_pkt)
1139 {
1140     asf_pkt->size_left = 0;
1141     asf_pkt->data_size = 0;
1142     asf_pkt->duration  = 0;
1143     asf_pkt->flags     = 0;
1144     asf_pkt->dts       = 0;
1145     av_packet_unref(asf_pkt->avpkt);
1146 }
1147
1148 static int asf_read_replicated_data(AVFormatContext *s, ASFPacket *asf_pkt)
1149 {
1150     ASFContext *asf = s->priv_data;
1151     AVIOContext *pb = s->pb;
1152     int ret, data_size;
1153
1154     if (!asf_pkt->data_size) {
1155         data_size = avio_rl32(pb); // read media object size
1156         if (data_size <= 0)
1157             return AVERROR_INVALIDDATA;
1158         if ((ret = av_new_packet(asf_pkt->avpkt, data_size)) < 0)
1159             return ret;
1160         asf_pkt->data_size = asf_pkt->size_left = data_size;
1161     } else
1162         avio_skip(pb, 4); // reading of media object size is already done
1163     asf_pkt->dts = avio_rl32(pb); // read presentation time
1164     if (asf->rep_data_len >= 8)
1165         avio_skip(pb, asf->rep_data_len - 8); // skip replicated data
1166
1167     return 0;
1168 }
1169
1170 static int asf_read_multiple_payload(AVFormatContext *s, AVPacket *pkt,
1171                                  ASFPacket *asf_pkt)
1172 {
1173     ASFContext *asf = s->priv_data;
1174     AVIOContext *pb = s->pb;
1175     uint16_t pay_len;
1176     unsigned char *p;
1177     int ret;
1178     int skip = 0;
1179
1180     // if replicated length is 1, subpayloads are present
1181     if (asf->rep_data_len == 1) {
1182         asf->sub_left = 1;
1183         asf->state = READ_MULTI_SUB;
1184         pkt->flags = asf_pkt->flags;
1185         if ((ret = asf_read_subpayload(s, pkt, 1)) < 0)
1186             return ret;
1187     } else {
1188         if (asf->rep_data_len)
1189             if ((ret = asf_read_replicated_data(s, asf_pkt)) < 0)
1190                 return ret;
1191         pay_len = avio_rl16(pb); // payload length should be WORD
1192         if (pay_len > asf->packet_size) {
1193             av_log(s, AV_LOG_ERROR,
1194                    "Error: invalid data packet size, pay_len %"PRIu16", "
1195                    "asf->packet_size %"PRIu32", offset %"PRId64".\n",
1196                    pay_len, asf->packet_size, avio_tell(pb));
1197             return AVERROR_INVALIDDATA;
1198         }
1199         p = asf_pkt->avpkt->data + asf_pkt->data_size - asf_pkt->size_left;
1200         if (pay_len > asf_pkt->size_left) {
1201             av_log(s, AV_LOG_ERROR,
1202                    "Error: invalid buffer size, pay_len %d, data size left %d.\n",
1203             pay_len, asf_pkt->size_left);
1204             skip = pay_len - asf_pkt->size_left;
1205             pay_len = asf_pkt->size_left;
1206         }
1207         if (asf_pkt->size_left <= 0)
1208             return AVERROR_INVALIDDATA;
1209         if ((ret = avio_read(pb, p, pay_len)) < 0)
1210             return ret;
1211         if (s->key && s->keylen == 20)
1212             ff_asfcrypt_dec(s->key, p, ret);
1213         avio_skip(pb, skip);
1214         asf_pkt->size_left -= pay_len;
1215         asf->nb_mult_left--;
1216     }
1217
1218     return 0;
1219 }
1220
1221 static int asf_read_single_payload(AVFormatContext *s, ASFPacket *asf_pkt)
1222 {
1223     ASFContext *asf = s->priv_data;
1224     AVIOContext *pb = s->pb;
1225     int64_t  offset;
1226     uint64_t size;
1227     unsigned char *p;
1228     int ret, data_size;
1229
1230     if (!asf_pkt->data_size) {
1231         data_size = avio_rl32(pb); // read media object size
1232         if (data_size <= 0)
1233             return AVERROR_EOF;
1234         if ((ret = av_new_packet(asf_pkt->avpkt, data_size)) < 0)
1235             return ret;
1236         asf_pkt->data_size = asf_pkt->size_left = data_size;
1237     } else
1238         avio_skip(pb, 4); // skip media object size
1239     asf_pkt->dts = avio_rl32(pb); // read presentation time
1240     if (asf->rep_data_len >= 8)
1241         avio_skip(pb, asf->rep_data_len - 8); // skip replicated data
1242     offset = avio_tell(pb);
1243
1244     // size of the payload - size of the packet without header and padding
1245     if (asf->packet_size_internal)
1246         size = asf->packet_size_internal - offset + asf->packet_offset - asf->pad_len;
1247     else
1248         size = asf->packet_size - offset + asf->packet_offset - asf->pad_len;
1249     if (size > asf->packet_size) {
1250         av_log(s, AV_LOG_ERROR,
1251                "Error: invalid data packet size, offset %"PRId64".\n",
1252                avio_tell(pb));
1253         return AVERROR_INVALIDDATA;
1254     }
1255     p = asf_pkt->avpkt->data + asf_pkt->data_size - asf_pkt->size_left;
1256     if (size > asf_pkt->size_left || asf_pkt->size_left <= 0)
1257         return AVERROR_INVALIDDATA;
1258     if (asf_pkt->size_left > size)
1259         asf_pkt->size_left -= size;
1260     else
1261         asf_pkt->size_left = 0;
1262     if ((ret = avio_read(pb, p, size)) < 0)
1263         return ret;
1264     if (s->key && s->keylen == 20)
1265             ff_asfcrypt_dec(s->key, p, ret);
1266     if (asf->packet_size_internal)
1267         avio_skip(pb, asf->packet_size - asf->packet_size_internal);
1268     avio_skip(pb, asf->pad_len); // skip padding
1269
1270     return 0;
1271 }
1272
1273 static int asf_read_payload(AVFormatContext *s, AVPacket *pkt)
1274 {
1275     ASFContext *asf = s->priv_data;
1276     AVIOContext *pb = s->pb;
1277     int ret, i;
1278     ASFPacket *asf_pkt = NULL;
1279
1280     if (!asf->sub_left) {
1281         uint32_t off_len, media_len;
1282         uint8_t stream_num;
1283
1284         stream_num = avio_r8(pb);
1285         asf->stream_index = stream_num & ASF_STREAM_NUM;
1286         for (i = 0; i < asf->nb_streams; i++) {
1287             if (asf->stream_index == asf->asf_st[i]->stream_index) {
1288                 asf_pkt               = &asf->asf_st[i]->pkt;
1289                 asf_pkt->stream_index = asf->asf_st[i]->index;
1290                 break;
1291             }
1292         }
1293         if (!asf_pkt) {
1294             if (asf->packet_offset + asf->packet_size <= asf->data_offset + asf->data_size) {
1295                 if (!asf->packet_size) {
1296                     av_log(s, AV_LOG_ERROR, "Invalid packet size 0.\n");
1297                     return AVERROR_INVALIDDATA;
1298                 }
1299                 avio_seek(pb, asf->packet_offset + asf->packet_size, SEEK_SET);
1300                 av_log(s, AV_LOG_WARNING, "Skipping the stream with the invalid stream index %d.\n",
1301                        asf->stream_index);
1302                 return AVERROR(EAGAIN);
1303             } else
1304                 return AVERROR_INVALIDDATA;
1305         }
1306
1307         if (stream_num >> 7)
1308             asf_pkt->flags |= AV_PKT_FLAG_KEY;
1309         READ_LEN(asf->prop_flags & ASF_PL_MASK_MEDIA_OBJECT_NUMBER_LENGTH_FIELD_SIZE,
1310                  ASF_PL_FLAG_MEDIA_OBJECT_NUMBER_LENGTH_FIELD_, media_len);
1311         READ_LEN(asf->prop_flags & ASF_PL_MASK_OFFSET_INTO_MEDIA_OBJECT_LENGTH_FIELD_SIZE,
1312                  ASF_PL_FLAG_OFFSET_INTO_MEDIA_OBJECT_LENGTH_FIELD_, off_len);
1313         READ_LEN(asf->prop_flags & ASF_PL_MASK_REPLICATED_DATA_LENGTH_FIELD_SIZE,
1314                  ASF_PL_FLAG_REPLICATED_DATA_LENGTH_FIELD_, asf->rep_data_len);
1315         if (asf_pkt->size_left && (asf_pkt->frame_num != media_len)) {
1316             av_log(s, AV_LOG_WARNING, "Unfinished frame will be ignored\n");
1317             reset_packet(asf_pkt);
1318         }
1319         asf_pkt->frame_num = media_len;
1320         asf->sub_dts = off_len;
1321         if (asf->nb_mult_left) {
1322             if ((ret = asf_read_multiple_payload(s, pkt, asf_pkt)) < 0)
1323                 return ret;
1324         } else if (asf->rep_data_len == 1) {
1325             asf->sub_left = 1;
1326             asf->state    = READ_SINGLE;
1327             pkt->flags    = asf_pkt->flags;
1328             if ((ret = asf_read_subpayload(s, pkt, 1)) < 0)
1329                 return ret;
1330         } else {
1331             if ((ret = asf_read_single_payload(s, asf_pkt)) < 0)
1332                 return ret;
1333         }
1334     } else {
1335         for (i = 0; i <= asf->nb_streams; i++) {
1336             if (asf->stream_index == asf->asf_st[i]->stream_index) {
1337                 asf_pkt = &asf->asf_st[i]->pkt;
1338                 break;
1339             }
1340         }
1341         if (!asf_pkt)
1342             return AVERROR_INVALIDDATA;
1343         pkt->flags         = asf_pkt->flags;
1344         pkt->dts           = asf_pkt->dts;
1345         pkt->stream_index  = asf->asf_st[i]->index;
1346         if ((ret = asf_read_subpayload(s, pkt, 0)) < 0) // read subpayload without its header
1347             return ret;
1348     }
1349
1350     return 0;
1351 }
1352
1353 static int asf_read_packet_header(AVFormatContext *s)
1354 {
1355     ASFContext *asf = s->priv_data;
1356     AVIOContext *pb = s->pb;
1357     uint64_t size;
1358     uint32_t av_unused seq;
1359     unsigned char error_flags, len_flags, pay_flags;
1360
1361     asf->packet_offset = avio_tell(pb);
1362     error_flags = avio_r8(pb); // read Error Correction Flags
1363     if (error_flags & ASF_PACKET_FLAG_ERROR_CORRECTION_PRESENT) {
1364         if (!(error_flags & ASF_ERROR_CORRECTION_LENGTH_TYPE)) {
1365             size = error_flags & ASF_PACKET_ERROR_CORRECTION_DATA_SIZE;
1366             avio_skip(pb, size);
1367         }
1368         len_flags       = avio_r8(pb);
1369     } else
1370         len_flags = error_flags;
1371     asf->prop_flags = avio_r8(pb);
1372     READ_LEN(len_flags & ASF_PPI_MASK_PACKET_LENGTH_FIELD_SIZE,
1373              ASF_PPI_FLAG_PACKET_LENGTH_FIELD_, asf->packet_size_internal);
1374     READ_LEN(len_flags & ASF_PPI_MASK_SEQUENCE_FIELD_SIZE,
1375              ASF_PPI_FLAG_SEQUENCE_FIELD_, seq);
1376     READ_LEN(len_flags & ASF_PPI_MASK_PADDING_LENGTH_FIELD_SIZE,
1377              ASF_PPI_FLAG_PADDING_LENGTH_FIELD_, asf->pad_len );
1378     asf->send_time = avio_rl32(pb); // send time
1379     avio_skip(pb, 2); // skip duration
1380     if (len_flags & ASF_PPI_FLAG_MULTIPLE_PAYLOADS_PRESENT) { // Multiple Payloads present
1381         pay_flags = avio_r8(pb);
1382         asf->nb_mult_left = (pay_flags & ASF_NUM_OF_PAYLOADS);
1383     }
1384
1385     return 0;
1386 }
1387
1388 static int asf_deinterleave(AVFormatContext *s, ASFPacket *asf_pkt, int st_num)
1389 {
1390     ASFContext *asf    = s->priv_data;
1391     ASFStream *asf_st  = asf->asf_st[st_num];
1392     unsigned char *p   = asf_pkt->avpkt->data;
1393     uint16_t pkt_len   = asf->asf_st[st_num]->virtual_pkt_len;
1394     uint16_t chunk_len = asf->asf_st[st_num]->virtual_chunk_len;
1395     int nchunks        = pkt_len / chunk_len;
1396     uint8_t *data;
1397     int pos = 0, j, l, ret;
1398
1399
1400     data = av_malloc(asf_pkt->data_size + AV_INPUT_BUFFER_PADDING_SIZE);
1401     if (!data)
1402         return AVERROR(ENOMEM);
1403     memset(data + asf_pkt->data_size, 0, AV_INPUT_BUFFER_PADDING_SIZE);
1404
1405     while (asf_pkt->data_size >= asf_st->span * pkt_len + pos) {
1406         if (pos >= asf_pkt->data_size) {
1407             break;
1408         }
1409         for (l = 0; l < pkt_len; l++) {
1410             if (pos >= asf_pkt->data_size) {
1411                 break;
1412             }
1413             for (j = 0; j < asf_st->span; j++) {
1414                 if ((pos + chunk_len) >= asf_pkt->data_size)
1415                     break;
1416                 memcpy(data + pos,
1417                        p + (j * nchunks + l) * chunk_len,
1418                        chunk_len);
1419                 pos += chunk_len;
1420             }
1421         }
1422         p += asf_st->span * pkt_len;
1423         if (p > asf_pkt->avpkt->data + asf_pkt->data_size)
1424             break;
1425     }
1426     av_packet_unref(asf_pkt->avpkt);
1427     ret = av_packet_from_data(asf_pkt->avpkt, data, asf_pkt->data_size);
1428     if (ret < 0)
1429         av_free(data);
1430
1431     return ret;
1432 }
1433
1434 static int asf_read_packet(AVFormatContext *s, AVPacket *pkt)
1435 {
1436     ASFContext *asf = s->priv_data;
1437     AVIOContext *pb = s->pb;
1438     int ret, i;
1439
1440     if ((avio_tell(pb) >= asf->data_offset + asf->data_size) &&
1441         !(asf->b_flags & ASF_FLAG_BROADCAST))
1442         return AVERROR_EOF;
1443     while (!pb->eof_reached) {
1444         if (asf->state == PARSE_PACKET_HEADER) {
1445             asf_read_packet_header(s);
1446             if (pb->eof_reached)
1447                 break;
1448             if (!asf->nb_mult_left)
1449                 asf->state = READ_SINGLE;
1450             else
1451                 asf->state = READ_MULTI;
1452         }
1453         ret = asf_read_payload(s, pkt);
1454         if (ret == AVERROR(EAGAIN)) {
1455             asf->state = PARSE_PACKET_HEADER;
1456             continue;
1457         }
1458         else if (ret < 0)
1459             return ret;
1460
1461         switch (asf->state) {
1462         case READ_SINGLE:
1463             if (!asf->sub_left)
1464                 asf->state = PARSE_PACKET_HEADER;
1465             break;
1466         case READ_MULTI_SUB:
1467             if (!asf->sub_left && !asf->nb_mult_left) {
1468                 asf->state = PARSE_PACKET_HEADER;
1469                 if (!asf->return_subpayload &&
1470                     (avio_tell(pb) <= asf->packet_offset +
1471                      asf->packet_size - asf->pad_len))
1472                     avio_skip(pb, asf->pad_len); // skip padding
1473                 if (asf->packet_offset + asf->packet_size > avio_tell(pb))
1474                     avio_seek(pb, asf->packet_offset + asf->packet_size, SEEK_SET);
1475             } else if (!asf->sub_left)
1476                 asf->state = READ_MULTI;
1477             break;
1478         case READ_MULTI:
1479             if (!asf->nb_mult_left) {
1480                 asf->state = PARSE_PACKET_HEADER;
1481                 if (!asf->return_subpayload &&
1482                     (avio_tell(pb) <= asf->packet_offset +
1483                      asf->packet_size - asf->pad_len))
1484                     avio_skip(pb, asf->pad_len); // skip padding
1485                 if (asf->packet_offset + asf->packet_size > avio_tell(pb))
1486                     avio_seek(pb, asf->packet_offset + asf->packet_size, SEEK_SET);
1487             }
1488             break;
1489         }
1490         if (asf->return_subpayload) {
1491             asf->return_subpayload = 0;
1492             return 0;
1493         }
1494         for (i = 0; i < asf->nb_streams; i++) {
1495             ASFPacket *asf_pkt = &asf->asf_st[i]->pkt;
1496             if (asf_pkt && !asf_pkt->size_left && asf_pkt->data_size) {
1497                 if (asf->asf_st[i]->span > 1 &&
1498                     asf->asf_st[i]->type == AVMEDIA_TYPE_AUDIO)
1499                     if ((ret = asf_deinterleave(s, asf_pkt, i)) < 0)
1500                         return ret;
1501                 av_packet_move_ref(pkt, asf_pkt->avpkt);
1502                 pkt->stream_index  = asf->asf_st[i]->index;
1503                 pkt->flags         = asf_pkt->flags;
1504                 pkt->dts           = asf_pkt->dts - asf->preroll;
1505                 asf_pkt->data_size = 0;
1506                 asf_pkt->frame_num = 0;
1507                 return 0;
1508             }
1509         }
1510     }
1511
1512     if (pb->eof_reached)
1513         return AVERROR_EOF;
1514
1515     return 0;
1516 }
1517
1518 static int asf_read_close(AVFormatContext *s)
1519 {
1520     ASFContext *asf = s->priv_data;
1521     int i;
1522
1523     for (i = 0; i < ASF_MAX_STREAMS; i++) {
1524         av_dict_free(&asf->asf_sd[i].asf_met);
1525         if (i < asf->nb_streams) {
1526             av_packet_free(&asf->asf_st[i]->pkt.avpkt);
1527             av_freep(&asf->asf_st[i]);
1528         }
1529     }
1530
1531     asf->nb_streams = 0;
1532     return 0;
1533 }
1534
1535 static void reset_packet_state(AVFormatContext *s)
1536 {
1537     ASFContext *asf        = s->priv_data;
1538     int i;
1539
1540     asf->state             = PARSE_PACKET_HEADER;
1541     asf->offset            = 0;
1542     asf->return_subpayload = 0;
1543     asf->sub_left          = 0;
1544     asf->sub_header_offset = 0;
1545     asf->packet_offset     = asf->first_packet_offset;
1546     asf->pad_len           = 0;
1547     asf->rep_data_len      = 0;
1548     asf->dts_delta         = 0;
1549     asf->mult_sub_len      = 0;
1550     asf->nb_mult_left      = 0;
1551     asf->nb_sub            = 0;
1552     asf->prop_flags        = 0;
1553     asf->sub_dts           = 0;
1554     for (i = 0; i < asf->nb_streams; i++) {
1555         ASFPacket *pkt = &asf->asf_st[i]->pkt;
1556         reset_packet(pkt);
1557     }
1558 }
1559
1560 /*
1561  * Find a timestamp for the requested position within the payload
1562  * where the pos (position) is the offset inside the Data Object.
1563  * When position is not on the packet boundary, asf_read_timestamp tries
1564  * to find the closest packet offset after this position. If this packet
1565  * is a key frame, this packet timestamp is read and an index entry is created
1566  * for the packet. If this packet belongs to the requested stream,
1567  * asf_read_timestamp upgrades pos to the packet beginning offset and
1568  * returns this packet's dts. So returned dts is the dts of the first key frame with
1569  * matching stream number after given position.
1570  */
1571 static int64_t asf_read_timestamp(AVFormatContext *s, int stream_index,
1572                                   int64_t *pos, int64_t pos_limit)
1573 {
1574     ASFContext *asf = s->priv_data;
1575     int64_t pkt_pos = *pos, pkt_offset, dts = AV_NOPTS_VALUE, data_end;
1576     AVPacket *pkt = av_packet_alloc();
1577     int n;
1578
1579     if (!pkt)
1580         return AVERROR(ENOMEM);
1581
1582     data_end = asf->data_offset + asf->data_size;
1583
1584     n = (pkt_pos - asf->first_packet_offset + asf->packet_size - 1) /
1585         asf->packet_size;
1586     n = av_clip(n, 0, ((data_end - asf->first_packet_offset) / asf->packet_size - 1));
1587     pkt_pos = asf->first_packet_offset +  n * asf->packet_size;
1588
1589     avio_seek(s->pb, pkt_pos, SEEK_SET);
1590     pkt_offset = pkt_pos;
1591
1592     reset_packet_state(s);
1593     while (avio_tell(s->pb) < data_end) {
1594
1595         int i, ret, st_found;
1596
1597         pkt_offset = avio_tell(s->pb);
1598         if ((ret = asf_read_packet(s, pkt)) < 0) {
1599             av_packet_free(&pkt);
1600             dts = AV_NOPTS_VALUE;
1601             return ret;
1602         }
1603         // ASFPacket may contain fragments of packets belonging to different streams,
1604         // pkt_offset is the offset of the first fragment within it.
1605         if ((pkt_offset >= (pkt_pos + asf->packet_size)))
1606             pkt_pos += asf->packet_size;
1607         for (i = 0; i < asf->nb_streams; i++) {
1608             ASFStream *st = asf->asf_st[i];
1609
1610             st_found = 0;
1611             if (pkt->flags & AV_PKT_FLAG_KEY) {
1612                 dts = pkt->dts;
1613                 if (dts) {
1614                     av_add_index_entry(s->streams[pkt->stream_index], pkt_pos,
1615                                        dts, pkt->size, 0, AVINDEX_KEYFRAME);
1616                     if (stream_index == st->index) {
1617                         st_found = 1;
1618                         break;
1619                     }
1620                 }
1621             }
1622         }
1623         if (st_found)
1624             break;
1625         av_packet_unref(pkt);
1626     }
1627     *pos = pkt_pos;
1628
1629     av_packet_free(&pkt);
1630     return dts;
1631 }
1632
1633 static int asf_read_seek(AVFormatContext *s, int stream_index,
1634                          int64_t timestamp, int flags)
1635 {
1636     ASFContext *asf = s->priv_data;
1637     int idx, ret;
1638
1639     if (s->streams[stream_index]->internal->nb_index_entries && asf->is_simple_index) {
1640         idx = av_index_search_timestamp(s->streams[stream_index], timestamp, flags);
1641         if (idx < 0 || idx >= s->streams[stream_index]->internal->nb_index_entries)
1642             return AVERROR_INVALIDDATA;
1643         avio_seek(s->pb, s->streams[stream_index]->internal->index_entries[idx].pos, SEEK_SET);
1644     } else {
1645         if ((ret = ff_seek_frame_binary(s, stream_index, timestamp, flags)) < 0)
1646             return ret;
1647     }
1648
1649     reset_packet_state(s);
1650
1651     return 0;
1652 }
1653
1654 static const GUIDParseTable *find_guid(ff_asf_guid guid)
1655 {
1656     int j, ret;
1657     const GUIDParseTable *g;
1658
1659     swap_guid(guid);
1660     g = gdef;
1661     for (j = 0; j < FF_ARRAY_ELEMS(gdef); j++) {
1662         if (!(ret = memcmp(guid, g->guid, sizeof(g->guid))))
1663             return g;
1664         g++;
1665     }
1666
1667     return NULL;
1668 }
1669
1670 static int detect_unknown_subobject(AVFormatContext *s, int64_t offset, int64_t size)
1671 {
1672     ASFContext *asf = s->priv_data;
1673     AVIOContext *pb = s->pb;
1674     const GUIDParseTable *g = NULL;
1675     ff_asf_guid guid;
1676     int ret;
1677
1678     if (offset > INT64_MAX - size)
1679         return AVERROR_INVALIDDATA;
1680
1681     while (avio_tell(pb) <= offset + size) {
1682         if (avio_tell(pb) == asf->offset)
1683             break;
1684         asf->offset = avio_tell(pb);
1685         if ((ret = ff_get_guid(pb, &guid)) < 0)
1686             return ret;
1687         g = find_guid(guid);
1688         if (g) {
1689             if ((ret = g->read_object(s, g)) < 0)
1690                 return ret;
1691         } else {
1692             GUIDParseTable g2;
1693
1694             g2.name         = "Unknown";
1695             g2.is_subobject = 1;
1696             asf_read_unknown(s, &g2);
1697         }
1698     }
1699
1700     return 0;
1701 }
1702
1703 static int asf_read_header(AVFormatContext *s)
1704 {
1705     ASFContext *asf         = s->priv_data;
1706     AVIOContext *pb         = s->pb;
1707     const GUIDParseTable *g = NULL;
1708     ff_asf_guid guid;
1709     int i, ret;
1710     uint64_t size;
1711
1712     asf->preroll         = 0;
1713     asf->is_simple_index = 0;
1714     ff_get_guid(pb, &guid);
1715     if (ff_guidcmp(&guid, &ff_asf_header))
1716         return AVERROR_INVALIDDATA;
1717     avio_skip(pb, 8); // skip header object size
1718     avio_skip(pb, 6); // skip number of header objects and 2 reserved bytes
1719     asf->data_reached = 0;
1720
1721     /* 1  is here instead of pb->eof_reached because (when not streaming), Data are skipped
1722      * for the first time,
1723      * Index object is processed and got eof and then seeking back to the Data is performed.
1724      */
1725     while (1) {
1726         // for the cases when object size is invalid
1727         if (avio_tell(pb) == asf->offset)
1728             break;
1729         asf->offset = avio_tell(pb);
1730         if ((ret = ff_get_guid(pb, &guid)) < 0) {
1731             if (ret == AVERROR_EOF && asf->data_reached)
1732                 break;
1733             else
1734                 goto failed;
1735         }
1736         g = find_guid(guid);
1737         if (g) {
1738             asf->unknown_offset = asf->offset;
1739             asf->is_header = 1;
1740             if ((ret = g->read_object(s, g)) < 0)
1741                 goto failed;
1742         } else {
1743             size = avio_rl64(pb);
1744             align_position(pb, asf->offset, size);
1745         }
1746         if (asf->data_reached &&
1747             (!(pb->seekable & AVIO_SEEKABLE_NORMAL) ||
1748              (asf->b_flags & ASF_FLAG_BROADCAST)))
1749             break;
1750     }
1751
1752     if (!asf->data_reached) {
1753         av_log(s, AV_LOG_ERROR, "Data Object was not found.\n");
1754         ret = AVERROR_INVALIDDATA;
1755         goto failed;
1756     }
1757     if (pb->seekable & AVIO_SEEKABLE_NORMAL)
1758         avio_seek(pb, asf->first_packet_offset, SEEK_SET);
1759
1760     for (i = 0; i < asf->nb_streams; i++) {
1761         const char *rfc1766 = asf->asf_sd[asf->asf_st[i]->lang_idx].langs;
1762         AVStream *st        = s->streams[asf->asf_st[i]->index];
1763         set_language(s, rfc1766, &st->metadata);
1764     }
1765
1766     for (i = 0; i < ASF_MAX_STREAMS; i++) {
1767         AVStream *st = NULL;
1768
1769         st = find_stream(s, i);
1770         if (st) {
1771             av_dict_copy(&st->metadata, asf->asf_sd[i].asf_met, AV_DICT_IGNORE_SUFFIX);
1772             if (asf->asf_sd[i].aspect_ratio.num > 0 && asf->asf_sd[i].aspect_ratio.den > 0) {
1773                 st->sample_aspect_ratio.num = asf->asf_sd[i].aspect_ratio.num;
1774                 st->sample_aspect_ratio.den = asf->asf_sd[i].aspect_ratio.den;
1775             }
1776         }
1777     }
1778
1779     return 0;
1780
1781 failed:
1782     asf_read_close(s);
1783     return ret;
1784 }
1785
1786 AVInputFormat ff_asf_o_demuxer = {
1787     .name           = "asf_o",
1788     .long_name      = NULL_IF_CONFIG_SMALL("ASF (Advanced / Active Streaming Format)"),
1789     .priv_data_size = sizeof(ASFContext),
1790     .read_probe     = asf_probe,
1791     .read_header    = asf_read_header,
1792     .read_packet    = asf_read_packet,
1793     .read_close     = asf_read_close,
1794     .read_timestamp = asf_read_timestamp,
1795     .read_seek      = asf_read_seek,
1796     .flags          = AVFMT_NOBINSEARCH | AVFMT_NOGENSEARCH,
1797 };