git.sesse.net Git - ffmpeg/blob - libavformat/nsvdec.c

   1 /*
   2  * NSV demuxer
   3  * Copyright (c) 2004 The Libav Project
   4  *
   5  * first version by Francois Revol <revol@free.fr>
   6  *
   7  * This file is part of Libav.
   8  *
   9  * Libav is free software; you can redistribute it and/or
  10  * modify it under the terms of the GNU Lesser General Public
  11  * License as published by the Free Software Foundation; either
  12  * version 2.1 of the License, or (at your option) any later version.
  13  *
  14  * Libav is distributed in the hope that it will be useful,
  15  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  16  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  17  * Lesser General Public License for more details.
  18  *
  19  * You should have received a copy of the GNU Lesser General Public
  20  * License along with Libav; if not, write to the Free Software
  21  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
  22  */
  23
  24 #include "libavutil/attributes.h"
  25 #include "libavutil/mathematics.h"
  26 #include "avformat.h"
  27 #include "internal.h"
  28 #include "libavutil/dict.h"
  29
  30 /* max bytes to crawl for trying to resync
  31  * stupid streaming servers don't start at chunk boundaries...
  32  */
  33 #define NSV_MAX_RESYNC (500*1024)
  34 #define NSV_MAX_RESYNC_TRIES 300
  35
  36 /*
  37  * References:
  38  * (1) http://www.multimedia.cx/nsv-format.txt
  39  * seems someone came to the same conclusions as me, and updated it:
  40  * (2) http://www.stud.ktu.lt/~vitslav/nsv/nsv-format.txt
  41  *     http://www.stud.ktu.lt/~vitslav/nsv/
  42  * official docs
  43  * (3) http://ultravox.aol.com/NSVFormat.rtf
  44  * Sample files:
  45  * (S1) http://www.nullsoft.com/nsv/samples/
  46  * http://www.nullsoft.com/nsv/samples/faster.nsv
  47  * http://streamripper.sourceforge.net/openbb/read.php?TID=492&page=4
  48  */
  49
  50 /*
  51  * notes on the header (Francois Revol):
  52  *
  53  * It is followed by strings, then a table, but nothing tells
  54  * where the table begins according to (1). After checking faster.nsv,
  55  * I believe NVSf[16-19] gives the size of the strings data
  56  * (that is the offset of the data table after the header).
  57  * After checking all samples from (S1) all confirms this.
  58  *
  59  * Then, about NSVf[12-15], faster.nsf has 179700. When viewing it in VLC,
  60  * I noticed there was about 1 NVSs chunk/s, so I ran
  61  * strings faster.nsv | grep NSVs | wc -l
  62  * which gave me 180. That leads me to think that NSVf[12-15] might be the
  63  * file length in milliseconds.
  64  * Let's try that:
  65  * for f in *.nsv; do HTIME="$(od -t x4 "$f" | head -1 | sed 's/.* //')"; echo "'$f' $((0x$HTIME))s = $((0x$HTIME/1000/60)):$((0x$HTIME/1000%60))"; done
  66  * except for nsvtrailer (which doesn't have an NSVf header), it reports correct time.
  67  *
  68  * nsvtrailer.nsv (S1) does not have any NSVf header, only NSVs chunks,
  69  * so the header seems to not be mandatory. (for streaming).
  70  *
  71  * index slice duration check (excepts nsvtrailer.nsv):
  72  * for f in [^n]*.nsv; do
  73  *     DUR="$(avconv -i "$f" 2> /dev/null | grep 'NSVf duration' | cut -d ' ' -f 4)"
  74  *     IC="$(avconv -i "$f" 2> /dev/null | grep 'INDEX ENTRIES' | cut -d ' ' -f 2)"
  75  *     echo "duration $DUR, slite time $(($DUR/$IC))"
  76  * done
  77  */
  78
  79 /*
  80  * TODO:
  81  * - handle timestamps !!!
  82  * - use index
  83  * - mime-type in probe()
  84  * - seek
  85  */
  86
  87 #if 0
  88 struct NSVf_header {
  89     uint32_t chunk_tag; /* 'NSVf' */
  90     uint32_t chunk_size;
  91     uint32_t file_size; /* max 4GB ??? no one learns anything it seems :^) */
  92     uint32_t file_length; //unknown1;  /* what about MSB of file_size ? */
  93     uint32_t info_strings_size; /* size of the info strings */ //unknown2;
  94     uint32_t table_entries;
  95     uint32_t table_entries_used; /* the left ones should be -1 */
  96 };
  97
  98 struct NSVs_header {
  99     uint32_t chunk_tag; /* 'NSVs' */
 100     uint32_t v4cc;      /* or 'NONE' */
 101     uint32_t a4cc;      /* or 'NONE' */
 102     uint16_t vwidth;    /* assert(vwidth%16==0) */
 103     uint16_t vheight;   /* assert(vheight%16==0) */
 104     uint8_t framerate;  /* value = (framerate&0x80)?frtable[frameratex0x7f]:framerate */
 105     uint16_t unknown;
 106 };
 107
 108 struct nsv_avchunk_header {
 109     uint8_t vchunk_size_lsb;
 110     uint16_t vchunk_size_msb; /* value = (vchunk_size_msb << 4) | (vchunk_size_lsb >> 4) */
 111     uint16_t achunk_size;
 112 };
 113
 114 struct nsv_pcm_header {
 115     uint8_t bits_per_sample;
 116     uint8_t channel_count;
 117     uint16_t sample_rate;
 118 };
 119 #endif
 120
 121 /* variation from avi.h */
 122 /*typedef struct CodecTag {
 123     int id;
 124     unsigned int tag;
 125 } CodecTag;*/
 126
 127 /* tags */
 128
 129 #define T_NSVF MKTAG('N', 'S', 'V', 'f') /* file header */
 130 #define T_NSVS MKTAG('N', 'S', 'V', 's') /* chunk header */
 131 #define T_TOC2 MKTAG('T', 'O', 'C', '2') /* extra index marker */
 132 #define T_NONE MKTAG('N', 'O', 'N', 'E') /* null a/v 4CC */
 133 #define T_SUBT MKTAG('S', 'U', 'B', 'T') /* subtitle aux data */
 134 #define T_ASYN MKTAG('A', 'S', 'Y', 'N') /* async a/v aux marker */
 135 #define T_KEYF MKTAG('K', 'E', 'Y', 'F') /* video keyframe aux marker (addition) */
 136
 137 #define TB_NSVF MKBETAG('N', 'S', 'V', 'f')
 138 #define TB_NSVS MKBETAG('N', 'S', 'V', 's')
 139
 140 /* hardcoded stream indexes */
 141 #define NSV_ST_VIDEO 0
 142 #define NSV_ST_AUDIO 1
 143 #define NSV_ST_SUBT 2
 144
 145 enum NSVStatus {
 146     NSV_UNSYNC,
 147     NSV_FOUND_NSVF,
 148     NSV_HAS_READ_NSVF,
 149     NSV_FOUND_NSVS,
 150     NSV_HAS_READ_NSVS,
 151     NSV_FOUND_BEEF,
 152     NSV_GOT_VIDEO,
 153     NSV_GOT_AUDIO,
 154 };
 155
 156 typedef struct NSVStream {
 157     int frame_offset; /* current frame (video) or byte (audio) counter
 158                          (used to compute the pts) */
 159     int scale;
 160     int rate;
 161     int sample_size; /* audio only data */
 162     int start;
 163
 164     int new_frame_offset; /* temporary storage (used during seek) */
 165     int cum_len; /* temporary storage (used during seek) */
 166 } NSVStream;
 167
 168 typedef struct NSVContext {
 169     int  base_offset;
 170     int  NSVf_end;
 171     uint32_t *nsvs_file_offset;
 172     int index_entries;
 173     enum NSVStatus state;
 174     AVPacket ahead[2]; /* [v, a] if .data is !NULL there is something */
 175     /* cached */
 176     int64_t duration;
 177     uint32_t vtag, atag;
 178     uint16_t vwidth, vheight;
 179     int16_t avsync;
 180     AVRational framerate;
 181     uint32_t *nsvs_timestamps;
 182 } NSVContext;
 183
 184 static const AVCodecTag nsv_codec_video_tags[] = {
 185     { AV_CODEC_ID_VP3, MKTAG('V', 'P', '3', ' ') },
 186     { AV_CODEC_ID_VP3, MKTAG('V', 'P', '3', '0') },
 187     { AV_CODEC_ID_VP3, MKTAG('V', 'P', '3', '1') },
 188     { AV_CODEC_ID_VP5, MKTAG('V', 'P', '5', ' ') },
 189     { AV_CODEC_ID_VP5, MKTAG('V', 'P', '5', '0') },
 190     { AV_CODEC_ID_VP6, MKTAG('V', 'P', '6', ' ') },
 191     { AV_CODEC_ID_VP6, MKTAG('V', 'P', '6', '0') },
 192     { AV_CODEC_ID_VP6, MKTAG('V', 'P', '6', '1') },
 193     { AV_CODEC_ID_VP6, MKTAG('V', 'P', '6', '2') },
 194 /*
 195     { AV_CODEC_ID_VP4, MKTAG('V', 'P', '4', ' ') },
 196     { AV_CODEC_ID_VP4, MKTAG('V', 'P', '4', '0') },
 197 */
 198     { AV_CODEC_ID_MPEG4, MKTAG('X', 'V', 'I', 'D') }, /* cf sample xvid decoder from nsv_codec_sdk.zip */
 199     { AV_CODEC_ID_RAWVIDEO, MKTAG('R', 'G', 'B', '3') },
 200     { AV_CODEC_ID_NONE, 0 },
 201 };
 202
 203 static const AVCodecTag nsv_codec_audio_tags[] = {
 204     { AV_CODEC_ID_MP3,       MKTAG('M', 'P', '3', ' ') },
 205     { AV_CODEC_ID_AAC,       MKTAG('A', 'A', 'C', ' ') },
 206     { AV_CODEC_ID_AAC,       MKTAG('A', 'A', 'C', 'P') },
 207     { AV_CODEC_ID_SPEEX,     MKTAG('S', 'P', 'X', ' ') },
 208     { AV_CODEC_ID_PCM_U16LE, MKTAG('P', 'C', 'M', ' ') },
 209     { AV_CODEC_ID_NONE,      0 },
 210 };
 211
 212 //static int nsv_load_index(AVFormatContext *s);
 213 static int nsv_read_chunk(AVFormatContext *s, int fill_header);
 214
 215 /* try to find something we recognize, and set the state accordingly */
 216 static int nsv_resync(AVFormatContext *s)
 217 {
 218     NSVContext *nsv = s->priv_data;
 219     AVIOContext *pb = s->pb;
 220     uint32_t v = 0;
 221     int i;
 222
 223     for (i = 0; i < NSV_MAX_RESYNC; i++) {
 224         if (pb->eof_reached) {
 225             av_log(s, AV_LOG_TRACE, "NSV EOF\n");
 226             nsv->state = NSV_UNSYNC;
 227             return -1;
 228         }
 229         v <<= 8;
 230         v |= avio_r8(pb);
 231         if (i < 8) {
 232             av_log(s, AV_LOG_TRACE, "NSV resync: [%d] = %02"PRIx32"\n", i, v & 0x0FF);
 233         }
 234
 235         if ((v & 0x0000ffff) == 0xefbe) { /* BEEF */
 236             av_log(s, AV_LOG_TRACE, "NSV resynced on BEEF after %d bytes\n", i+1);
 237             nsv->state = NSV_FOUND_BEEF;
 238             return 0;
 239         }
 240         /* we read as big-endian, thus the MK*BE* */
 241         if (v == TB_NSVF) { /* NSVf */
 242             av_log(s, AV_LOG_TRACE, "NSV resynced on NSVf after %d bytes\n", i+1);
 243             nsv->state = NSV_FOUND_NSVF;
 244             return 0;
 245         }
 246         if (v == MKBETAG('N', 'S', 'V', 's')) { /* NSVs */
 247             av_log(s, AV_LOG_TRACE, "NSV resynced on NSVs after %d bytes\n", i+1);
 248             nsv->state = NSV_FOUND_NSVS;
 249             return 0;
 250         }
 251
 252     }
 253     av_log(s, AV_LOG_TRACE, "NSV sync lost\n");
 254     return -1;
 255 }
 256
 257 static int nsv_parse_NSVf_header(AVFormatContext *s)
 258 {
 259     NSVContext *nsv = s->priv_data;
 260     AVIOContext *pb = s->pb;
 261     unsigned int av_unused file_size;
 262     unsigned int size;
 263     int64_t duration;
 264     int strings_size;
 265     int table_entries;
 266     int table_entries_used;
 267
 268     nsv->state = NSV_UNSYNC; /* in case we fail */
 269
 270     size = avio_rl32(pb);
 271     if (size < 28)
 272         return -1;
 273     nsv->NSVf_end = size;
 274
 275     file_size = (uint32_t)avio_rl32(pb);
 276     av_log(s, AV_LOG_TRACE, "NSV NSVf chunk_size %u\n", size);
 277     av_log(s, AV_LOG_TRACE, "NSV NSVf file_size %u\n", file_size);
 278
 279     nsv->duration = duration = avio_rl32(pb); /* in ms */
 280     av_log(s, AV_LOG_TRACE, "NSV NSVf duration %"PRId64" ms\n", duration);
 281     // XXX: store it in AVStreams
 282
 283     strings_size = avio_rl32(pb);
 284     table_entries = avio_rl32(pb);
 285     table_entries_used = avio_rl32(pb);
 286     av_log(s, AV_LOG_TRACE, "NSV NSVf info-strings size: %d, table entries: %d, bis %d\n",
 287             strings_size, table_entries, table_entries_used);
 288     if (pb->eof_reached)
 289         return -1;
 290
 291     av_log(s, AV_LOG_TRACE, "NSV got header; filepos %"PRId64"\n", avio_tell(pb));
 292
 293     if (strings_size > 0) {
 294         char *strings; /* last byte will be '\0' to play safe with str*() */
 295         char *p, *endp;
 296         char *token, *value;
 297         char quote;
 298
 299         p = strings = av_mallocz((size_t)strings_size + 1);
 300         if (!p)
 301             return AVERROR(ENOMEM);
 302         endp = strings + strings_size;
 303         avio_read(pb, strings, strings_size);
 304         while (p < endp) {
 305             while (*p == ' ')
 306                 p++; /* strip out spaces */
 307             if (p >= endp-2)
 308                 break;
 309             token = p;
 310             p = strchr(p, '=');
 311             if (!p || p >= endp-2)
 312                 break;
 313             *p++ = '\0';
 314             quote = *p++;
 315             value = p;
 316             p = strchr(p, quote);
 317             if (!p || p >= endp)
 318                 break;
 319             *p++ = '\0';
 320             av_log(s, AV_LOG_TRACE, "NSV NSVf INFO: %s='%s'\n", token, value);
 321             av_dict_set(&s->metadata, token, value, 0);
 322         }
 323         av_free(strings);
 324     }
 325     if (pb->eof_reached)
 326         return -1;
 327
 328     av_log(s, AV_LOG_TRACE, "NSV got infos; filepos %"PRId64"\n", avio_tell(pb));
 329
 330     if (table_entries_used > 0) {
 331         int i;
 332         nsv->index_entries = table_entries_used;
 333         if((unsigned)table_entries_used >= UINT_MAX / sizeof(uint32_t))
 334             return -1;
 335         nsv->nsvs_file_offset = av_malloc((unsigned)table_entries_used * sizeof(uint32_t));
 336         if (!nsv->nsvs_file_offset)
 337             return AVERROR(ENOMEM);
 338
 339         for(i=0;i<table_entries_used;i++)
 340             nsv->nsvs_file_offset[i] = avio_rl32(pb) + size;
 341
 342         if(table_entries > table_entries_used &&
 343            avio_rl32(pb) == MKTAG('T','O','C','2')) {
 344             nsv->nsvs_timestamps = av_malloc((unsigned)table_entries_used*sizeof(uint32_t));
 345             if (!nsv->nsvs_timestamps)
 346                 return AVERROR(ENOMEM);
 347             for(i=0;i<table_entries_used;i++) {
 348                 nsv->nsvs_timestamps[i] = avio_rl32(pb);
 349             }
 350         }
 351     }
 352
 353     av_log(s, AV_LOG_TRACE, "NSV got index; filepos %"PRId64"\n", avio_tell(pb));
 354
 355     avio_seek(pb, nsv->base_offset + size, SEEK_SET); /* required for dumbdriving-271.nsv (2 extra bytes) */
 356
 357     if (pb->eof_reached)
 358         return -1;
 359     nsv->state = NSV_HAS_READ_NSVF;
 360     return 0;
 361 }
 362
 363 static int nsv_parse_NSVs_header(AVFormatContext *s)
 364 {
 365     NSVContext *nsv = s->priv_data;
 366     AVIOContext *pb = s->pb;
 367     uint32_t vtag, atag;
 368     uint16_t vwidth, vheight;
 369     AVRational framerate;
 370     int i;
 371     AVStream *st;
 372     NSVStream *nst;
 373
 374     vtag = avio_rl32(pb);
 375     atag = avio_rl32(pb);
 376     vwidth = avio_rl16(pb);
 377     vheight = avio_rl16(pb);
 378     i = avio_r8(pb);
 379
 380     av_log(s, AV_LOG_TRACE, "NSV NSVs framerate code %2x\n", i);
 381     if(i&0x80) { /* odd way of giving native framerates from docs */
 382         int t=(i & 0x7F)>>2;
 383         if(t<16) framerate = (AVRational){1, t+1};
 384         else     framerate = (AVRational){t-15, 1};
 385
 386         if(i&1){
 387             framerate.num *= 1000;
 388             framerate.den *= 1001;
 389         }
 390
 391         if((i&3)==3)      framerate.num *= 24;
 392         else if((i&3)==2) framerate.num *= 25;
 393         else              framerate.num *= 30;
 394     }
 395     else
 396         framerate= (AVRational){i, 1};
 397
 398     nsv->avsync = avio_rl16(pb);
 399     nsv->framerate = framerate;
 400
 401     av_log(s, AV_LOG_TRACE, "NSV NSVs vsize %"PRIu16"x%"PRIu16"\n",
 402            vwidth, vheight);
 403
 404     /* XXX change to ap != NULL ? */
 405     if (s->nb_streams == 0) { /* streams not yet published, let's do that */
 406         nsv->vtag = vtag;
 407         nsv->atag = atag;
 408         nsv->vwidth = vwidth;
 409         nsv->vheight = vwidth;
 410         if (vtag != T_NONE) {
 411             int i;
 412             st = avformat_new_stream(s, NULL);
 413             if (!st)
 414                 goto fail;
 415
 416             st->id = NSV_ST_VIDEO;
 417             nst = av_mallocz(sizeof(NSVStream));
 418             if (!nst)
 419                 goto fail;
 420             st->priv_data = nst;
 421             st->codecpar->codec_type = AVMEDIA_TYPE_VIDEO;
 422             st->codecpar->codec_tag = vtag;
 423             st->codecpar->codec_id = ff_codec_get_id(nsv_codec_video_tags, vtag);
 424             st->codecpar->width = vwidth;
 425             st->codecpar->height = vheight;
 426             st->codecpar->bits_per_coded_sample = 24; /* depth XXX */
 427
 428             avpriv_set_pts_info(st, 64, framerate.den, framerate.num);
 429             st->start_time = 0;
 430             st->duration = av_rescale(nsv->duration, framerate.num, 1000*framerate.den);
 431
 432             for(i=0;i<nsv->index_entries;i++) {
 433                 if(nsv->nsvs_timestamps) {
 434                     av_add_index_entry(st, nsv->nsvs_file_offset[i], nsv->nsvs_timestamps[i],
 435                                        0, 0, AVINDEX_KEYFRAME);
 436                 } else {
 437                     int64_t ts = av_rescale(i*nsv->duration/nsv->index_entries, framerate.num, 1000*framerate.den);
 438                     av_add_index_entry(st, nsv->nsvs_file_offset[i], ts, 0, 0, AVINDEX_KEYFRAME);
 439                 }
 440             }
 441         }
 442         if (atag != T_NONE) {
 443             st = avformat_new_stream(s, NULL);
 444             if (!st)
 445                 goto fail;
 446
 447             st->id = NSV_ST_AUDIO;
 448             nst = av_mallocz(sizeof(NSVStream));
 449             if (!nst)
 450                 goto fail;
 451             st->priv_data = nst;
 452             st->codecpar->codec_type = AVMEDIA_TYPE_AUDIO;
 453             st->codecpar->codec_tag = atag;
 454             st->codecpar->codec_id = ff_codec_get_id(nsv_codec_audio_tags, atag);
 455
 456             st->need_parsing = AVSTREAM_PARSE_FULL; /* for PCM we will read a chunk later and put correct info */
 457
 458             /* set timebase to common denominator of ms and framerate */
 459             avpriv_set_pts_info(st, 64, 1, framerate.num*1000);
 460             st->start_time = 0;
 461             st->duration = (int64_t)nsv->duration * framerate.num;
 462         }
 463     } else {
 464         if (nsv->vtag != vtag || nsv->atag != atag || nsv->vwidth != vwidth || nsv->vheight != vwidth) {
 465             av_log(s, AV_LOG_TRACE, "NSV NSVs header values differ from the first one!!!\n");
 466             //return -1;
 467         }
 468     }
 469
 470     nsv->state = NSV_HAS_READ_NSVS;
 471     return 0;
 472 fail:
 473     /* XXX */
 474     nsv->state = NSV_UNSYNC;
 475     return -1;
 476 }
 477
 478 static int nsv_read_header(AVFormatContext *s)
 479 {
 480     NSVContext *nsv = s->priv_data;
 481     int i, err;
 482
 483     nsv->state = NSV_UNSYNC;
 484     nsv->ahead[0].data = nsv->ahead[1].data = NULL;
 485
 486     for (i = 0; i < NSV_MAX_RESYNC_TRIES; i++) {
 487         if (nsv_resync(s) < 0)
 488             return -1;
 489         if (nsv->state == NSV_FOUND_NSVF) {
 490             err = nsv_parse_NSVf_header(s);
 491             if (err < 0)
 492                 return err;
 493         }
 494             /* we need the first NSVs also... */
 495         if (nsv->state == NSV_FOUND_NSVS) {
 496             err = nsv_parse_NSVs_header(s);
 497             if (err < 0)
 498                 return err;
 499             break; /* we just want the first one */
 500         }
 501     }
 502     if (s->nb_streams < 1) /* no luck so far */
 503         return -1;
 504     /* now read the first chunk, so we can attempt to decode more info */
 505     err = nsv_read_chunk(s, 1);
 506
 507     av_log(s, AV_LOG_TRACE, "parsed header\n");
 508     return err;
 509 }
 510
 511 static int nsv_read_chunk(AVFormatContext *s, int fill_header)
 512 {
 513     NSVContext *nsv = s->priv_data;
 514     AVIOContext *pb = s->pb;
 515     AVStream *st[2] = {NULL, NULL};
 516     NSVStream *nst;
 517     AVPacket *pkt;
 518     int i, err = 0;
 519     uint8_t auxcount; /* number of aux metadata, also 4 bits of vsize */
 520     uint32_t vsize;
 521     uint16_t asize;
 522     uint16_t auxsize;
 523     int ret;
 524
 525     if (nsv->ahead[0].data || nsv->ahead[1].data)
 526         return 0; //-1; /* hey! eat what you've in your plate first! */
 527
 528 null_chunk_retry:
 529     if (pb->eof_reached)
 530         return -1;
 531
 532     for (i = 0; i < NSV_MAX_RESYNC_TRIES && nsv->state < NSV_FOUND_NSVS && !err; i++)
 533         err = nsv_resync(s);
 534     if (err < 0)
 535         return err;
 536     if (nsv->state == NSV_FOUND_NSVS)
 537         err = nsv_parse_NSVs_header(s);
 538     if (err < 0)
 539         return err;
 540     if (nsv->state != NSV_HAS_READ_NSVS && nsv->state != NSV_FOUND_BEEF)
 541         return -1;
 542
 543     auxcount = avio_r8(pb);
 544     vsize = avio_rl16(pb);
 545     asize = avio_rl16(pb);
 546     vsize = (vsize << 4) | (auxcount >> 4);
 547     auxcount &= 0x0f;
 548     av_log(s, AV_LOG_TRACE, "NSV CHUNK %"PRIu8" aux, %"PRIu32" bytes video, %"PRIu16" bytes audio\n",
 549            auxcount, vsize, asize);
 550     /* skip aux stuff */
 551     for (i = 0; i < auxcount; i++) {
 552         uint32_t av_unused auxtag;
 553         auxsize = avio_rl16(pb);
 554         auxtag = avio_rl32(pb);
 555         avio_skip(pb, auxsize);
 556         vsize -= auxsize + sizeof(uint16_t) + sizeof(uint32_t); /* that's becoming brain-dead */
 557     }
 558
 559     if (pb->eof_reached)
 560         return -1;
 561     if (!vsize && !asize) {
 562         nsv->state = NSV_UNSYNC;
 563         goto null_chunk_retry;
 564     }
 565
 566     /* map back streams to v,a */
 567     if (s->nb_streams > 0)
 568         st[s->streams[0]->id] = s->streams[0];
 569     if (s->nb_streams > 1)
 570         st[s->streams[1]->id] = s->streams[1];
 571
 572     if (vsize && st[NSV_ST_VIDEO]) {
 573         nst = st[NSV_ST_VIDEO]->priv_data;
 574         pkt = &nsv->ahead[NSV_ST_VIDEO];
 575         if ((ret = av_get_packet(pb, pkt, vsize)) < 0)
 576             return ret;
 577         pkt->stream_index = st[NSV_ST_VIDEO]->index;//NSV_ST_VIDEO;
 578         pkt->dts = nst->frame_offset;
 579         pkt->flags |= nsv->state == NSV_HAS_READ_NSVS ? AV_PKT_FLAG_KEY : 0; /* keyframe only likely on a sync frame */
 580         for (i = 0; i < FFMIN(8, vsize); i++)
 581             av_log(s, AV_LOG_TRACE, "NSV video: [%d] = %02"PRIx8"\n",
 582                    i, pkt->data[i]);
 583     }
 584     if(st[NSV_ST_VIDEO])
 585         ((NSVStream*)st[NSV_ST_VIDEO]->priv_data)->frame_offset++;
 586
 587     if (asize && st[NSV_ST_AUDIO]) {
 588         nst = st[NSV_ST_AUDIO]->priv_data;
 589         pkt = &nsv->ahead[NSV_ST_AUDIO];
 590         /* read raw audio specific header on the first audio chunk... */
 591         /* on ALL audio chunks ?? seems so! */
 592         if (asize && st[NSV_ST_AUDIO]->codecpar->codec_tag == MKTAG('P', 'C', 'M', ' ')/* && fill_header*/) {
 593             uint8_t bps;
 594             uint8_t channels;
 595             uint16_t samplerate;
 596             bps = avio_r8(pb);
 597             channels = avio_r8(pb);
 598             samplerate = avio_rl16(pb);
 599             if (!channels || !samplerate)
 600                 return AVERROR_INVALIDDATA;
 601             asize-=4;
 602             av_log(s, AV_LOG_TRACE, "NSV RAWAUDIO: bps %"PRIu8", nchan %"PRIu8", srate %"PRIu16"\n",
 603                    bps, channels, samplerate);
 604             if (fill_header) {
 605                 st[NSV_ST_AUDIO]->need_parsing = AVSTREAM_PARSE_NONE; /* we know everything */
 606                 if (bps != 16) {
 607                     av_log(s, AV_LOG_TRACE, "NSV AUDIO bit/sample != 16 (%"PRIu8")!!!\n", bps);
 608                 }
 609                 bps /= channels; // ???
 610                 if (bps == 8)
 611                     st[NSV_ST_AUDIO]->codecpar->codec_id = AV_CODEC_ID_PCM_U8;
 612                 samplerate /= 4;/* UGH ??? XXX */
 613                 channels = 1;
 614                 st[NSV_ST_AUDIO]->codecpar->channels = channels;
 615                 st[NSV_ST_AUDIO]->codecpar->sample_rate = samplerate;
 616                 av_log(s, AV_LOG_TRACE, "NSV RAWAUDIO: bps %"PRIu8", nchan %"PRIu8", srate %"PRIu16"\n",
 617                        bps, channels, samplerate);
 618             }
 619         }
 620         if ((ret = av_get_packet(pb, pkt, asize)) < 0)
 621             return ret;
 622         pkt->stream_index = st[NSV_ST_AUDIO]->index;//NSV_ST_AUDIO;
 623         pkt->flags |= nsv->state == NSV_HAS_READ_NSVS ? AV_PKT_FLAG_KEY : 0; /* keyframe only likely on a sync frame */
 624         if( nsv->state == NSV_HAS_READ_NSVS && st[NSV_ST_VIDEO] ) {
 625             /* on a nsvs frame we have new information on a/v sync */
 626             pkt->dts = (((NSVStream*)st[NSV_ST_VIDEO]->priv_data)->frame_offset-1);
 627             pkt->dts *= (int64_t)1000        * nsv->framerate.den;
 628             pkt->dts += (int64_t)nsv->avsync * nsv->framerate.num;
 629             av_log(s, AV_LOG_TRACE, "NSV AUDIO: sync:%"PRId16", dts:%"PRId64,
 630                    nsv->avsync, pkt->dts);
 631         }
 632         nst->frame_offset++;
 633     }
 634
 635     nsv->state = NSV_UNSYNC;
 636     return 0;
 637 }
 638
 639
 640 static int nsv_read_packet(AVFormatContext *s, AVPacket *pkt)
 641 {
 642     NSVContext *nsv = s->priv_data;
 643     int i, err = 0;
 644
 645     /* in case we don't already have something to eat ... */
 646     if (!nsv->ahead[0].data && !nsv->ahead[1].data)
 647         err = nsv_read_chunk(s, 0);
 648     if (err < 0)
 649         return err;
 650
 651     /* now pick one of the plates */
 652     for (i = 0; i < 2; i++) {
 653         if (nsv->ahead[i].data) {
 654             /* avoid the cost of new_packet + memcpy(->data) */
 655             memcpy(pkt, &nsv->ahead[i], sizeof(AVPacket));
 656             nsv->ahead[i].data = NULL; /* we ate that one */
 657             return pkt->size;
 658         }
 659     }
 660
 661     /* this restaurant is not provisioned :^] */
 662     return -1;
 663 }
 664
 665 static int nsv_read_seek(AVFormatContext *s, int stream_index, int64_t timestamp, int flags)
 666 {
 667     NSVContext *nsv = s->priv_data;
 668     AVStream *st = s->streams[stream_index];
 669     NSVStream *nst = st->priv_data;
 670     int index;
 671
 672     index = av_index_search_timestamp(st, timestamp, flags);
 673     if(index < 0)
 674         return -1;
 675
 676     if (avio_seek(s->pb, st->index_entries[index].pos, SEEK_SET) < 0)
 677         return -1;
 678
 679     nst->frame_offset = st->index_entries[index].timestamp;
 680     nsv->state = NSV_UNSYNC;
 681     return 0;
 682 }
 683
 684 static int nsv_read_close(AVFormatContext *s)
 685 {
 686     NSVContext *nsv = s->priv_data;
 687
 688     av_freep(&nsv->nsvs_file_offset);
 689     av_freep(&nsv->nsvs_timestamps);
 690     if (nsv->ahead[0].data)
 691         av_packet_unref(&nsv->ahead[0]);
 692     if (nsv->ahead[1].data)
 693         av_packet_unref(&nsv->ahead[1]);
 694     return 0;
 695 }
 696
 697 static int nsv_probe(AVProbeData *p)
 698 {
 699     int i;
 700     int score;
 701     int vsize, asize, auxcount;
 702     score = 0;
 703     av_log(NULL, AV_LOG_TRACE, "nsv_probe(), buf_size %d\n", p->buf_size);
 704     /* check file header */
 705     /* streamed files might not have any header */
 706     if (p->buf[0] == 'N' && p->buf[1] == 'S' &&
 707         p->buf[2] == 'V' && (p->buf[3] == 'f' || p->buf[3] == 's'))
 708         return AVPROBE_SCORE_MAX;
 709     /* XXX: do streamed files always start at chunk boundary ?? */
 710     /* or do we need to search NSVs in the byte stream ? */
 711     /* seems the servers don't bother starting clean chunks... */
 712     /* sometimes even the first header is at 9KB or something :^) */
 713     for (i = 1; i < p->buf_size - 3; i++) {
 714         if (p->buf[i+0] == 'N' && p->buf[i+1] == 'S' &&
 715             p->buf[i+2] == 'V' && p->buf[i+3] == 's') {
 716             score = AVPROBE_SCORE_MAX/5;
 717             /* Get the chunk size and check if at the end we are getting 0xBEEF */
 718             auxcount = p->buf[i+19];
 719             vsize = p->buf[i+20]  | p->buf[i+21] << 8;
 720             asize = p->buf[i+22]  | p->buf[i+23] << 8;
 721             vsize = (vsize << 4) | (auxcount >> 4);
 722             if ((asize + vsize + i + 23) <  p->buf_size - 2) {
 723                 if (p->buf[i+23+asize+vsize+1] == 0xEF &&
 724                     p->buf[i+23+asize+vsize+2] == 0xBE)
 725                     return AVPROBE_SCORE_MAX-20;
 726             }
 727         }
 728     }
 729     /* so we'll have more luck on extension... */
 730     if (av_match_ext(p->filename, "nsv"))
 731         return AVPROBE_SCORE_EXTENSION;
 732     /* FIXME: add mime-type check */
 733     return score;
 734 }
 735
 736 AVInputFormat ff_nsv_demuxer = {
 737     .name           = "nsv",
 738     .long_name      = NULL_IF_CONFIG_SMALL("Nullsoft Streaming Video"),
 739     .priv_data_size = sizeof(NSVContext),
 740     .read_probe     = nsv_probe,
 741     .read_header    = nsv_read_header,
 742     .read_packet    = nsv_read_packet,
 743     .read_close     = nsv_read_close,
 744     .read_seek      = nsv_read_seek,
 745 };