git.sesse.net Git - ffmpeg/blob - libavformat/rmdec.c

   1 /*
   2  * "Real" compatible demuxer.
   3  * Copyright (c) 2000, 2001 Fabrice Bellard
   4  *
   5  * This file is part of FFmpeg.
   6  *
   7  * FFmpeg is free software; you can redistribute it and/or
   8  * modify it under the terms of the GNU Lesser General Public
   9  * License as published by the Free Software Foundation; either
  10  * version 2.1 of the License, or (at your option) any later version.
  11  *
  12  * FFmpeg is distributed in the hope that it will be useful,
  13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  15  * Lesser General Public License for more details.
  16  *
  17  * You should have received a copy of the GNU Lesser General Public
  18  * License along with FFmpeg; if not, write to the Free Software
  19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
  20  */
  21
  22 #include "libavutil/avassert.h"
  23 #include "libavutil/avstring.h"
  24 #include "libavutil/channel_layout.h"
  25 #include "libavutil/internal.h"
  26 #include "libavutil/intreadwrite.h"
  27 #include "libavutil/dict.h"
  28 #include "avformat.h"
  29 #include "avio_internal.h"
  30 #include "internal.h"
  31 #include "rmsipr.h"
  32 #include "rm.h"
  33
  34 #define DEINT_ID_GENR MKTAG('g', 'e', 'n', 'r') ///< interleaving for Cooker/ATRAC
  35 #define DEINT_ID_INT0 MKTAG('I', 'n', 't', '0') ///< no interleaving needed
  36 #define DEINT_ID_INT4 MKTAG('I', 'n', 't', '4') ///< interleaving for 28.8
  37 #define DEINT_ID_SIPR MKTAG('s', 'i', 'p', 'r') ///< interleaving for Sipro
  38 #define DEINT_ID_VBRF MKTAG('v', 'b', 'r', 'f') ///< VBR case for AAC
  39 #define DEINT_ID_VBRS MKTAG('v', 'b', 'r', 's') ///< VBR case for AAC
  40
  41 struct RMStream {
  42     AVPacket pkt;      ///< place to store merged video frame / reordered audio data
  43     int videobufsize;  ///< current assembled frame size
  44     int videobufpos;   ///< position for the next slice in the video buffer
  45     int curpic_num;    ///< picture number of current frame
  46     int cur_slice, slices;
  47     int64_t pktpos;    ///< first slice position in file
  48     /// Audio descrambling matrix parameters
  49     int64_t audiotimestamp; ///< Audio packet timestamp
  50     int sub_packet_cnt; // Subpacket counter, used while reading
  51     int sub_packet_size, sub_packet_h, coded_framesize; ///< Descrambling parameters from container
  52     int audio_framesize; /// Audio frame size from container
  53     int sub_packet_lengths[16]; /// Length of each subpacket
  54     int32_t deint_id;  ///< deinterleaver used in audio stream
  55 };
  56
  57 typedef struct {
  58     int nb_packets;
  59     int old_format;
  60     int current_stream;
  61     int remaining_len;
  62     int audio_stream_num; ///< Stream number for audio packets
  63     int audio_pkt_cnt; ///< Output packet counter
  64 } RMDemuxContext;
  65
  66 static inline void get_strl(AVIOContext *pb, char *buf, int buf_size, int len)
  67 {
  68     int i;
  69     char *q, r;
  70
  71     q = buf;
  72     for(i=0;i<len;i++) {
  73         r = avio_r8(pb);
  74         if (i < buf_size - 1)
  75             *q++ = r;
  76     }
  77     if (buf_size > 0) *q = '\0';
  78 }
  79
  80 static void get_str8(AVIOContext *pb, char *buf, int buf_size)
  81 {
  82     get_strl(pb, buf, buf_size, avio_r8(pb));
  83 }
  84
  85 static int rm_read_extradata(AVIOContext *pb, AVCodecContext *avctx, unsigned size)
  86 {
  87     if (size >= 1<<24)
  88         return -1;
  89     if (ff_alloc_extradata(avctx, size))
  90         return AVERROR(ENOMEM);
  91     avctx->extradata_size = avio_read(pb, avctx->extradata, size);
  92     if (avctx->extradata_size != size)
  93         return AVERROR(EIO);
  94     return 0;
  95 }
  96
  97 static void rm_read_metadata(AVFormatContext *s, AVIOContext *pb, int wide)
  98 {
  99     char buf[1024];
 100     int i;
 101
 102     for (i=0; i<FF_ARRAY_ELEMS(ff_rm_metadata); i++) {
 103         int len = wide ? avio_rb16(pb) : avio_r8(pb);
 104         get_strl(pb, buf, sizeof(buf), len);
 105         av_dict_set(&s->metadata, ff_rm_metadata[i], buf, 0);
 106     }
 107 }
 108
 109 RMStream *ff_rm_alloc_rmstream (void)
 110 {
 111     RMStream *rms = av_mallocz(sizeof(RMStream));
 112     rms->curpic_num = -1;
 113     return rms;
 114 }
 115
 116 void ff_rm_free_rmstream (RMStream *rms)
 117 {
 118     av_free_packet(&rms->pkt);
 119 }
 120
 121 static int rm_read_audio_stream_info(AVFormatContext *s, AVIOContext *pb,
 122                                      AVStream *st, RMStream *ast, int read_all)
 123 {
 124     char buf[256];
 125     uint32_t version;
 126     int ret;
 127
 128     /* ra type header */
 129     version = avio_rb16(pb); /* version */
 130     if (version == 3) {
 131         unsigned bytes_per_minute;
 132         int header_size = avio_rb16(pb);
 133         int64_t startpos = avio_tell(pb);
 134         avio_skip(pb, 8);
 135         bytes_per_minute = avio_rb16(pb);
 136         avio_skip(pb, 4);
 137         rm_read_metadata(s, pb, 0);
 138         if ((startpos + header_size) >= avio_tell(pb) + 2) {
 139             // fourcc (should always be "lpcJ")
 140             avio_r8(pb);
 141             get_str8(pb, buf, sizeof(buf));
 142         }
 143         // Skip extra header crap (this should never happen)
 144         if ((startpos + header_size) > avio_tell(pb))
 145             avio_skip(pb, header_size + startpos - avio_tell(pb));
 146         if (bytes_per_minute)
 147             st->codec->bit_rate = 8LL * bytes_per_minute / 60;
 148         st->codec->sample_rate = 8000;
 149         st->codec->channels = 1;
 150         st->codec->channel_layout = AV_CH_LAYOUT_MONO;
 151         st->codec->codec_type = AVMEDIA_TYPE_AUDIO;
 152         st->codec->codec_id = AV_CODEC_ID_RA_144;
 153         ast->deint_id = DEINT_ID_INT0;
 154     } else {
 155         int flavor, sub_packet_h, coded_framesize, sub_packet_size;
 156         int codecdata_length;
 157         unsigned bytes_per_minute;
 158         /* old version (4) */
 159         avio_skip(pb, 2); /* unused */
 160         avio_rb32(pb); /* .ra4 */
 161         avio_rb32(pb); /* data size */
 162         avio_rb16(pb); /* version2 */
 163         avio_rb32(pb); /* header size */
 164         flavor= avio_rb16(pb); /* add codec info / flavor */
 165         ast->coded_framesize = coded_framesize = avio_rb32(pb); /* coded frame size */
 166         avio_rb32(pb); /* ??? */
 167         bytes_per_minute = avio_rb32(pb);
 168         if (version == 4) {
 169             if (bytes_per_minute)
 170                 st->codec->bit_rate = 8LL * bytes_per_minute / 60;
 171         }
 172         avio_rb32(pb); /* ??? */
 173         ast->sub_packet_h = sub_packet_h = avio_rb16(pb); /* 1 */
 174         st->codec->block_align= avio_rb16(pb); /* frame size */
 175         ast->sub_packet_size = sub_packet_size = avio_rb16(pb); /* sub packet size */
 176         avio_rb16(pb); /* ??? */
 177         if (version == 5) {
 178             avio_rb16(pb); avio_rb16(pb); avio_rb16(pb);
 179         }
 180         st->codec->sample_rate = avio_rb16(pb);
 181         avio_rb32(pb);
 182         st->codec->channels = avio_rb16(pb);
 183         if (version == 5) {
 184             ast->deint_id = avio_rl32(pb);
 185             avio_read(pb, buf, 4);
 186             buf[4] = 0;
 187         } else {
 188             AV_WL32(buf, 0);
 189             get_str8(pb, buf, sizeof(buf)); /* desc */
 190             ast->deint_id = AV_RL32(buf);
 191             get_str8(pb, buf, sizeof(buf)); /* desc */
 192         }
 193         st->codec->codec_type = AVMEDIA_TYPE_AUDIO;
 194         st->codec->codec_tag  = AV_RL32(buf);
 195         st->codec->codec_id   = ff_codec_get_id(ff_rm_codec_tags,
 196                                                 st->codec->codec_tag);
 197
 198         switch (st->codec->codec_id) {
 199         case AV_CODEC_ID_AC3:
 200             st->need_parsing = AVSTREAM_PARSE_FULL;
 201             break;
 202         case AV_CODEC_ID_RA_288:
 203             st->codec->extradata_size= 0;
 204             ast->audio_framesize = st->codec->block_align;
 205             st->codec->block_align = coded_framesize;
 206             break;
 207         case AV_CODEC_ID_COOK:
 208             st->need_parsing = AVSTREAM_PARSE_HEADERS;
 209         case AV_CODEC_ID_ATRAC3:
 210         case AV_CODEC_ID_SIPR:
 211             if (read_all) {
 212                 codecdata_length = 0;
 213             } else {
 214                 avio_rb16(pb); avio_r8(pb);
 215                 if (version == 5)
 216                     avio_r8(pb);
 217                 codecdata_length = avio_rb32(pb);
 218                 if(codecdata_length + FF_INPUT_BUFFER_PADDING_SIZE <= (unsigned)codecdata_length){
 219                     av_log(s, AV_LOG_ERROR, "codecdata_length too large\n");
 220                     return -1;
 221                 }
 222             }
 223
 224             ast->audio_framesize = st->codec->block_align;
 225             if (st->codec->codec_id == AV_CODEC_ID_SIPR) {
 226                 if (flavor > 3) {
 227                     av_log(s, AV_LOG_ERROR, "bad SIPR file flavor %d\n",
 228                            flavor);
 229                     return -1;
 230                 }
 231                 st->codec->block_align = ff_sipr_subpk_size[flavor];
 232             } else {
 233                 if(sub_packet_size <= 0){
 234                     av_log(s, AV_LOG_ERROR, "sub_packet_size is invalid\n");
 235                     return -1;
 236                 }
 237                 st->codec->block_align = ast->sub_packet_size;
 238             }
 239             if ((ret = rm_read_extradata(pb, st->codec, codecdata_length)) < 0)
 240                 return ret;
 241
 242             break;
 243         case AV_CODEC_ID_AAC:
 244             avio_rb16(pb); avio_r8(pb);
 245             if (version == 5)
 246                 avio_r8(pb);
 247             codecdata_length = avio_rb32(pb);
 248             if(codecdata_length + FF_INPUT_BUFFER_PADDING_SIZE <= (unsigned)codecdata_length){
 249                 av_log(s, AV_LOG_ERROR, "codecdata_length too large\n");
 250                 return -1;
 251             }
 252             if (codecdata_length >= 1) {
 253                 avio_r8(pb);
 254                 if ((ret = rm_read_extradata(pb, st->codec, codecdata_length - 1)) < 0)
 255                     return ret;
 256             }
 257             break;
 258         default:
 259             av_strlcpy(st->codec->codec_name, buf, sizeof(st->codec->codec_name));
 260         }
 261         if (ast->deint_id == DEINT_ID_INT4 ||
 262             ast->deint_id == DEINT_ID_GENR ||
 263             ast->deint_id == DEINT_ID_SIPR) {
 264             if (st->codec->block_align <= 0 ||
 265                 ast->audio_framesize * sub_packet_h > (unsigned)INT_MAX ||
 266                 ast->audio_framesize * sub_packet_h < st->codec->block_align)
 267                 return AVERROR_INVALIDDATA;
 268             if (av_new_packet(&ast->pkt, ast->audio_framesize * sub_packet_h) < 0)
 269                 return AVERROR(ENOMEM);
 270         }
 271         switch (ast->deint_id) {
 272         case DEINT_ID_INT4:
 273             if (ast->coded_framesize > ast->audio_framesize ||
 274                 sub_packet_h <= 1 ||
 275                 ast->coded_framesize * sub_packet_h > (2 + (sub_packet_h & 1)) * ast->audio_framesize)
 276                 return AVERROR_INVALIDDATA;
 277             break;
 278         case DEINT_ID_GENR:
 279             if (ast->sub_packet_size <= 0 ||
 280                 ast->sub_packet_size > ast->audio_framesize)
 281                 return AVERROR_INVALIDDATA;
 282             break;
 283         case DEINT_ID_SIPR:
 284         case DEINT_ID_INT0:
 285         case DEINT_ID_VBRS:
 286         case DEINT_ID_VBRF:
 287             break;
 288         default:
 289             av_log(s, AV_LOG_ERROR, "Unknown interleaver %X\n", ast->deint_id);
 290             return AVERROR_INVALIDDATA;
 291         }
 292
 293         if (read_all) {
 294             avio_r8(pb);
 295             avio_r8(pb);
 296             avio_r8(pb);
 297             rm_read_metadata(s, pb, 0);
 298         }
 299     }
 300     return 0;
 301 }
 302
 303 int
 304 ff_rm_read_mdpr_codecdata (AVFormatContext *s, AVIOContext *pb,
 305                            AVStream *st, RMStream *rst, int codec_data_size, const uint8_t *mime)
 306 {
 307     unsigned int v;
 308     int size;
 309     int64_t codec_pos;
 310     int ret;
 311
 312     avpriv_set_pts_info(st, 64, 1, 1000);
 313     codec_pos = avio_tell(pb);
 314     v = avio_rb32(pb);
 315     if (v == MKTAG(0xfd, 'a', 'r', '.')) {
 316         /* ra type header */
 317         if (rm_read_audio_stream_info(s, pb, st, rst, 0))
 318             return -1;
 319     } else if (v == MKBETAG('L', 'S', 'D', ':')) {
 320         avio_seek(pb, -4, SEEK_CUR);
 321         if ((ret = rm_read_extradata(pb, st->codec, codec_data_size)) < 0)
 322             return ret;
 323
 324         st->codec->codec_type = AVMEDIA_TYPE_AUDIO;
 325         st->codec->codec_tag  = AV_RL32(st->codec->extradata);
 326         st->codec->codec_id   = ff_codec_get_id(ff_rm_codec_tags,
 327                                                 st->codec->codec_tag);
 328     } else if(mime && !strcmp(mime, "logical-fileinfo")){
 329         int stream_count, rule_count, property_count, i;
 330         ff_free_stream(s, st);
 331         if (avio_rb16(pb) != 0) {
 332             av_log(s, AV_LOG_WARNING, "Unsupported version\n");
 333             goto skip;
 334         }
 335         stream_count = avio_rb16(pb);
 336         avio_skip(pb, 6*stream_count);
 337         rule_count = avio_rb16(pb);
 338         avio_skip(pb, 2*rule_count);
 339         property_count = avio_rb16(pb);
 340         for(i=0; i<property_count; i++){
 341             uint8_t name[128], val[128];
 342             avio_rb32(pb);
 343             if (avio_rb16(pb) != 0) {
 344                 av_log(s, AV_LOG_WARNING, "Unsupported Name value property version\n");
 345                 goto skip; //FIXME skip just this one
 346             }
 347             get_str8(pb, name, sizeof(name));
 348             switch(avio_rb32(pb)) {
 349             case 2: get_strl(pb, val, sizeof(val), avio_rb16(pb));
 350                 av_dict_set(&s->metadata, name, val, 0);
 351                 break;
 352             default: avio_skip(pb, avio_rb16(pb));
 353             }
 354         }
 355     } else {
 356         int fps;
 357         if (avio_rl32(pb) != MKTAG('V', 'I', 'D', 'O')) {
 358         fail1:
 359             av_log(s, AV_LOG_WARNING, "Unsupported stream type %08x\n", v);
 360             goto skip;
 361         }
 362         st->codec->codec_tag = avio_rl32(pb);
 363         st->codec->codec_id  = ff_codec_get_id(ff_rm_codec_tags,
 364                                                st->codec->codec_tag);
 365         av_dlog(s, "%X %X\n", st->codec->codec_tag, MKTAG('R', 'V', '2', '0'));
 366         if (st->codec->codec_id == AV_CODEC_ID_NONE)
 367             goto fail1;
 368         st->codec->width  = avio_rb16(pb);
 369         st->codec->height = avio_rb16(pb);
 370         avio_skip(pb, 2); // looks like bits per sample
 371         avio_skip(pb, 4); // always zero?
 372         st->codec->codec_type = AVMEDIA_TYPE_VIDEO;
 373         st->need_parsing = AVSTREAM_PARSE_TIMESTAMPS;
 374         fps = avio_rb32(pb);
 375
 376         if ((ret = rm_read_extradata(pb, st->codec, codec_data_size - (avio_tell(pb) - codec_pos))) < 0)
 377             return ret;
 378
 379         if (fps > 0) {
 380             av_reduce(&st->avg_frame_rate.den, &st->avg_frame_rate.num,
 381                       0x10000, fps, (1 << 30) - 1);
 382 #if FF_API_R_FRAME_RATE
 383             st->r_frame_rate = st->avg_frame_rate;
 384 #endif
 385         } else if (s->error_recognition & AV_EF_EXPLODE) {
 386             av_log(s, AV_LOG_ERROR, "Invalid framerate\n");
 387             return AVERROR_INVALIDDATA;
 388         }
 389     }
 390
 391 skip:
 392     /* skip codec info */
 393     size = avio_tell(pb) - codec_pos;
 394     avio_skip(pb, codec_data_size - size);
 395
 396     return 0;
 397 }
 398
 399 /** this function assumes that the demuxer has already seeked to the start
 400  * of the INDX chunk, and will bail out if not. */
 401 static int rm_read_index(AVFormatContext *s)
 402 {
 403     AVIOContext *pb = s->pb;
 404     unsigned int size, n_pkts, str_id, next_off, n, pos, pts;
 405     AVStream *st;
 406
 407     do {
 408         if (avio_rl32(pb) != MKTAG('I','N','D','X'))
 409             return -1;
 410         size     = avio_rb32(pb);
 411         if (size < 20)
 412             return -1;
 413         avio_skip(pb, 2);
 414         n_pkts   = avio_rb32(pb);
 415         str_id   = avio_rb16(pb);
 416         next_off = avio_rb32(pb);
 417         for (n = 0; n < s->nb_streams; n++)
 418             if (s->streams[n]->id == str_id) {
 419                 st = s->streams[n];
 420                 break;
 421             }
 422         if (n == s->nb_streams) {
 423             av_log(s, AV_LOG_ERROR,
 424                    "Invalid stream index %d for index at pos %"PRId64"\n",
 425                    str_id, avio_tell(pb));
 426             goto skip;
 427         } else if ((avio_size(pb) - avio_tell(pb)) / 14 < n_pkts) {
 428             av_log(s, AV_LOG_ERROR,
 429                    "Nr. of packets in packet index for stream index %d "
 430                    "exceeds filesize (%"PRId64" at %"PRId64" = %"PRId64")\n",
 431                    str_id, avio_size(pb), avio_tell(pb),
 432                    (avio_size(pb) - avio_tell(pb)) / 14);
 433             goto skip;
 434         }
 435
 436         for (n = 0; n < n_pkts; n++) {
 437             avio_skip(pb, 2);
 438             pts = avio_rb32(pb);
 439             pos = avio_rb32(pb);
 440             avio_skip(pb, 4); /* packet no. */
 441
 442             av_add_index_entry(st, pos, pts, 0, 0, AVINDEX_KEYFRAME);
 443         }
 444
 445 skip:
 446         if (next_off && avio_tell(pb) < next_off &&
 447             avio_seek(pb, next_off, SEEK_SET) < 0) {
 448             av_log(s, AV_LOG_ERROR,
 449                    "Non-linear index detected, not supported\n");
 450             return -1;
 451         }
 452     } while (next_off);
 453
 454     return 0;
 455 }
 456
 457 static int rm_read_header_old(AVFormatContext *s)
 458 {
 459     RMDemuxContext *rm = s->priv_data;
 460     AVStream *st;
 461
 462     rm->old_format = 1;
 463     st = avformat_new_stream(s, NULL);
 464     if (!st)
 465         return -1;
 466     st->priv_data = ff_rm_alloc_rmstream();
 467     return rm_read_audio_stream_info(s, s->pb, st, st->priv_data, 1);
 468 }
 469
 470 static int rm_read_header(AVFormatContext *s)
 471 {
 472     RMDemuxContext *rm = s->priv_data;
 473     AVStream *st;
 474     AVIOContext *pb = s->pb;
 475     unsigned int tag;
 476     int tag_size;
 477     unsigned int start_time, duration;
 478     unsigned int data_off = 0, indx_off = 0;
 479     char buf[128], mime[128];
 480     int flags = 0;
 481
 482     tag = avio_rl32(pb);
 483     if (tag == MKTAG('.', 'r', 'a', 0xfd)) {
 484         /* very old .ra format */
 485         return rm_read_header_old(s);
 486     } else if (tag != MKTAG('.', 'R', 'M', 'F')) {
 487         return AVERROR(EIO);
 488     }
 489
 490     tag_size = avio_rb32(pb);
 491     avio_skip(pb, tag_size - 8);
 492
 493     for(;;) {
 494         if (url_feof(pb))
 495             return -1;
 496         tag = avio_rl32(pb);
 497         tag_size = avio_rb32(pb);
 498         avio_rb16(pb);
 499         av_dlog(s, "tag=%c%c%c%c (%08x) size=%d\n",
 500                 (tag      ) & 0xff,
 501                 (tag >>  8) & 0xff,
 502                 (tag >> 16) & 0xff,
 503                 (tag >> 24) & 0xff,
 504                 tag,
 505                 tag_size);
 506         if (tag_size < 10 && tag != MKTAG('D', 'A', 'T', 'A'))
 507             return -1;
 508         switch(tag) {
 509         case MKTAG('P', 'R', 'O', 'P'):
 510             /* file header */
 511             avio_rb32(pb); /* max bit rate */
 512             avio_rb32(pb); /* avg bit rate */
 513             avio_rb32(pb); /* max packet size */
 514             avio_rb32(pb); /* avg packet size */
 515             avio_rb32(pb); /* nb packets */
 516             duration = avio_rb32(pb); /* duration */
 517             s->duration = av_rescale(duration, AV_TIME_BASE, 1000);
 518             avio_rb32(pb); /* preroll */
 519             indx_off = avio_rb32(pb); /* index offset */
 520             data_off = avio_rb32(pb); /* data offset */
 521             avio_rb16(pb); /* nb streams */
 522             flags = avio_rb16(pb); /* flags */
 523             break;
 524         case MKTAG('C', 'O', 'N', 'T'):
 525             rm_read_metadata(s, pb, 1);
 526             break;
 527         case MKTAG('M', 'D', 'P', 'R'):
 528             st = avformat_new_stream(s, NULL);
 529             if (!st)
 530                 return AVERROR(ENOMEM);
 531             st->id = avio_rb16(pb);
 532             avio_rb32(pb); /* max bit rate */
 533             st->codec->bit_rate = avio_rb32(pb); /* bit rate */
 534             avio_rb32(pb); /* max packet size */
 535             avio_rb32(pb); /* avg packet size */
 536             start_time = avio_rb32(pb); /* start time */
 537             avio_rb32(pb); /* preroll */
 538             duration = avio_rb32(pb); /* duration */
 539             st->start_time = start_time;
 540             st->duration = duration;
 541             if(duration>0)
 542                 s->duration = AV_NOPTS_VALUE;
 543             get_str8(pb, buf, sizeof(buf)); /* desc */
 544             get_str8(pb, mime, sizeof(mime)); /* mimetype */
 545             st->codec->codec_type = AVMEDIA_TYPE_DATA;
 546             st->priv_data = ff_rm_alloc_rmstream();
 547             if (ff_rm_read_mdpr_codecdata(s, s->pb, st, st->priv_data,
 548                                           avio_rb32(pb), mime) < 0)
 549                 return -1;
 550             break;
 551         case MKTAG('D', 'A', 'T', 'A'):
 552             goto header_end;
 553         default:
 554             /* unknown tag: skip it */
 555             avio_skip(pb, tag_size - 10);
 556             break;
 557         }
 558     }
 559  header_end:
 560     rm->nb_packets = avio_rb32(pb); /* number of packets */
 561     if (!rm->nb_packets && (flags & 4))
 562         rm->nb_packets = 3600 * 25;
 563     avio_rb32(pb); /* next data header */
 564
 565     if (!data_off)
 566         data_off = avio_tell(pb) - 18;
 567     if (indx_off && pb->seekable && !(s->flags & AVFMT_FLAG_IGNIDX) &&
 568         avio_seek(pb, indx_off, SEEK_SET) >= 0) {
 569         rm_read_index(s);
 570         avio_seek(pb, data_off + 18, SEEK_SET);
 571     }
 572
 573     return 0;
 574 }
 575
 576 static int get_num(AVIOContext *pb, int *len)
 577 {
 578     int n, n1;
 579
 580     n = avio_rb16(pb);
 581     (*len)-=2;
 582     n &= 0x7FFF;
 583     if (n >= 0x4000) {
 584         return n - 0x4000;
 585     } else {
 586         n1 = avio_rb16(pb);
 587         (*len)-=2;
 588         return (n << 16) | n1;
 589     }
 590 }
 591
 592 /* multiple of 20 bytes for ra144 (ugly) */
 593 #define RAW_PACKET_SIZE 1000
 594
 595 static int sync(AVFormatContext *s, int64_t *timestamp, int *flags, int *stream_index, int64_t *pos){
 596     RMDemuxContext *rm = s->priv_data;
 597     AVIOContext *pb = s->pb;
 598     AVStream *st;
 599     uint32_t state=0xFFFFFFFF;
 600
 601     while(!url_feof(pb)){
 602         int len, num, i;
 603         *pos= avio_tell(pb) - 3;
 604         if(rm->remaining_len > 0){
 605             num= rm->current_stream;
 606             len= rm->remaining_len;
 607             *timestamp = AV_NOPTS_VALUE;
 608             *flags= 0;
 609         }else{
 610             state= (state<<8) + avio_r8(pb);
 611
 612             if(state == MKBETAG('I', 'N', 'D', 'X')){
 613                 int n_pkts, expected_len;
 614                 len = avio_rb32(pb);
 615                 avio_skip(pb, 2);
 616                 n_pkts = avio_rb32(pb);
 617                 expected_len = 20 + n_pkts * 14;
 618                 if (len == 20)
 619                     /* some files don't add index entries to chunk size... */
 620                     len = expected_len;
 621                 else if (len != expected_len)
 622                     av_log(s, AV_LOG_WARNING,
 623                            "Index size %d (%d pkts) is wrong, should be %d.\n",
 624                            len, n_pkts, expected_len);
 625                 len -= 14; // we already read part of the index header
 626                 if(len<0)
 627                     continue;
 628                 goto skip;
 629             } else if (state == MKBETAG('D','A','T','A')) {
 630                 av_log(s, AV_LOG_WARNING,
 631                        "DATA tag in middle of chunk, file may be broken.\n");
 632             }
 633
 634             if(state > (unsigned)0xFFFF || state <= 12)
 635                 continue;
 636             len=state - 12;
 637             state= 0xFFFFFFFF;
 638
 639             num = avio_rb16(pb);
 640             *timestamp = avio_rb32(pb);
 641             avio_r8(pb); /* reserved */
 642             *flags = avio_r8(pb); /* flags */
 643         }
 644         for(i=0;i<s->nb_streams;i++) {
 645             st = s->streams[i];
 646             if (num == st->id)
 647                 break;
 648         }
 649         if (i == s->nb_streams) {
 650 skip:
 651             /* skip packet if unknown number */
 652             avio_skip(pb, len);
 653             rm->remaining_len = 0;
 654             continue;
 655         }
 656         *stream_index= i;
 657
 658         return len;
 659     }
 660     return -1;
 661 }
 662
 663 static int rm_assemble_video_frame(AVFormatContext *s, AVIOContext *pb,
 664                                    RMDemuxContext *rm, RMStream *vst,
 665                                    AVPacket *pkt, int len, int *pseq,
 666                                    int64_t *timestamp)
 667 {
 668     int hdr;
 669     int seq = 0, pic_num = 0, len2 = 0, pos = 0; //init to silcense compiler warning
 670     int type;
 671     int ret;
 672
 673     hdr = avio_r8(pb); len--;
 674     type = hdr >> 6;
 675
 676     if(type != 3){  // not frame as a part of packet
 677         seq = avio_r8(pb); len--;
 678     }
 679     if(type != 1){  // not whole frame
 680         len2 = get_num(pb, &len);
 681         pos  = get_num(pb, &len);
 682         pic_num = avio_r8(pb); len--;
 683     }
 684     if(len<0) {
 685         av_log(s, AV_LOG_ERROR, "Insufficient data\n");
 686         return -1;
 687     }
 688     rm->remaining_len = len;
 689     if(type&1){     // frame, not slice
 690         if(type == 3){  // frame as a part of packet
 691             len= len2;
 692             *timestamp = pos;
 693         }
 694         if(rm->remaining_len < len) {
 695             av_log(s, AV_LOG_ERROR, "Insufficient remaining len\n");
 696             return -1;
 697         }
 698         rm->remaining_len -= len;
 699         if(av_new_packet(pkt, len + 9) < 0)
 700             return AVERROR(EIO);
 701         pkt->data[0] = 0;
 702         AV_WL32(pkt->data + 1, 1);
 703         AV_WL32(pkt->data + 5, 0);
 704         if ((ret = avio_read(pb, pkt->data + 9, len)) != len) {
 705             av_free_packet(pkt);
 706             av_log(s, AV_LOG_ERROR, "Failed to read %d bytes\n", len);
 707             return ret < 0 ? ret : AVERROR(EIO);
 708         }
 709         return 0;
 710     }
 711     //now we have to deal with single slice
 712
 713     *pseq = seq;
 714     if((seq & 0x7F) == 1 || vst->curpic_num != pic_num){
 715         if (len2 > ffio_limit(pb, len2)) {
 716             av_log(s, AV_LOG_ERROR, "Impossibly sized packet\n");
 717             return AVERROR_INVALIDDATA;
 718         }
 719         vst->slices = ((hdr & 0x3F) << 1) + 1;
 720         vst->videobufsize = len2 + 8*vst->slices + 1;
 721         av_free_packet(&vst->pkt); //FIXME this should be output.
 722         if(av_new_packet(&vst->pkt, vst->videobufsize) < 0)
 723             return AVERROR(ENOMEM);
 724         memset(vst->pkt.data, 0, vst->pkt.size);
 725         vst->videobufpos = 8*vst->slices + 1;
 726         vst->cur_slice = 0;
 727         vst->curpic_num = pic_num;
 728         vst->pktpos = avio_tell(pb);
 729     }
 730     if(type == 2)
 731         len = FFMIN(len, pos);
 732
 733     if(++vst->cur_slice > vst->slices) {
 734         av_log(s, AV_LOG_ERROR, "cur slice %d, too large\n", vst->cur_slice);
 735         return 1;
 736     }
 737     if(!vst->pkt.data)
 738         return AVERROR(ENOMEM);
 739     AV_WL32(vst->pkt.data - 7 + 8*vst->cur_slice, 1);
 740     AV_WL32(vst->pkt.data - 3 + 8*vst->cur_slice, vst->videobufpos - 8*vst->slices - 1);
 741     if(vst->videobufpos + len > vst->videobufsize) {
 742         av_log(s, AV_LOG_ERROR, "outside videobufsize\n");
 743         return 1;
 744     }
 745     if (avio_read(pb, vst->pkt.data + vst->videobufpos, len) != len)
 746         return AVERROR(EIO);
 747     vst->videobufpos += len;
 748     rm->remaining_len-= len;
 749
 750     if (type == 2 || vst->videobufpos == vst->videobufsize) {
 751         vst->pkt.data[0] = vst->cur_slice-1;
 752         *pkt= vst->pkt;
 753         vst->pkt.data= NULL;
 754         vst->pkt.size= 0;
 755         vst->pkt.buf = NULL;
 756 #if FF_API_DESTRUCT_PACKET
 757 FF_DISABLE_DEPRECATION_WARNINGS
 758         vst->pkt.destruct = NULL;
 759 FF_ENABLE_DEPRECATION_WARNINGS
 760 #endif
 761         if(vst->slices != vst->cur_slice) //FIXME find out how to set slices correct from the begin
 762             memmove(pkt->data + 1 + 8*vst->cur_slice, pkt->data + 1 + 8*vst->slices,
 763                 vst->videobufpos - 1 - 8*vst->slices);
 764         pkt->size = vst->videobufpos + 8*(vst->cur_slice - vst->slices);
 765         pkt->pts = AV_NOPTS_VALUE;
 766         pkt->pos = vst->pktpos;
 767         vst->slices = 0;
 768         return 0;
 769     }
 770
 771     return 1;
 772 }
 773
 774 static inline void
 775 rm_ac3_swap_bytes (AVStream *st, AVPacket *pkt)
 776 {
 777     uint8_t *ptr;
 778     int j;
 779
 780     if (st->codec->codec_id == AV_CODEC_ID_AC3) {
 781         ptr = pkt->data;
 782         for (j=0;j<pkt->size;j+=2) {
 783             FFSWAP(int, ptr[0], ptr[1]);
 784             ptr += 2;
 785         }
 786     }
 787 }
 788
 789 int
 790 ff_rm_parse_packet (AVFormatContext *s, AVIOContext *pb,
 791                     AVStream *st, RMStream *ast, int len, AVPacket *pkt,
 792                     int *seq, int flags, int64_t timestamp)
 793 {
 794     RMDemuxContext *rm = s->priv_data;
 795     int ret;
 796
 797     if (st->codec->codec_type == AVMEDIA_TYPE_VIDEO) {
 798         rm->current_stream= st->id;
 799         ret = rm_assemble_video_frame(s, pb, rm, ast, pkt, len, seq, &timestamp);
 800         if(ret)
 801             return ret < 0 ? ret : -1; //got partial frame or error
 802     } else if (st->codec->codec_type == AVMEDIA_TYPE_AUDIO) {
 803         if ((ast->deint_id == DEINT_ID_GENR) ||
 804             (ast->deint_id == DEINT_ID_INT4) ||
 805             (ast->deint_id == DEINT_ID_SIPR)) {
 806             int x;
 807             int sps = ast->sub_packet_size;
 808             int cfs = ast->coded_framesize;
 809             int h = ast->sub_packet_h;
 810             int y = ast->sub_packet_cnt;
 811             int w = ast->audio_framesize;
 812
 813             if (flags & 2)
 814                 y = ast->sub_packet_cnt = 0;
 815             if (!y)
 816                 ast->audiotimestamp = timestamp;
 817
 818             switch (ast->deint_id) {
 819                 case DEINT_ID_INT4:
 820                     for (x = 0; x < h/2; x++)
 821                         avio_read(pb, ast->pkt.data+x*2*w+y*cfs, cfs);
 822                     break;
 823                 case DEINT_ID_GENR:
 824                     for (x = 0; x < w/sps; x++)
 825                         avio_read(pb, ast->pkt.data+sps*(h*x+((h+1)/2)*(y&1)+(y>>1)), sps);
 826                     break;
 827                 case DEINT_ID_SIPR:
 828                     avio_read(pb, ast->pkt.data + y * w, w);
 829                     break;
 830             }
 831
 832             if (++(ast->sub_packet_cnt) < h)
 833                 return -1;
 834             if (ast->deint_id == DEINT_ID_SIPR)
 835                 ff_rm_reorder_sipr_data(ast->pkt.data, h, w);
 836
 837              ast->sub_packet_cnt = 0;
 838              rm->audio_stream_num = st->index;
 839              rm->audio_pkt_cnt = h * w / st->codec->block_align;
 840         } else if ((ast->deint_id == DEINT_ID_VBRF) ||
 841                    (ast->deint_id == DEINT_ID_VBRS)) {
 842             int x;
 843             rm->audio_stream_num = st->index;
 844             ast->sub_packet_cnt = (avio_rb16(pb) & 0xf0) >> 4;
 845             if (ast->sub_packet_cnt) {
 846                 for (x = 0; x < ast->sub_packet_cnt; x++)
 847                     ast->sub_packet_lengths[x] = avio_rb16(pb);
 848                 rm->audio_pkt_cnt = ast->sub_packet_cnt;
 849                 ast->audiotimestamp = timestamp;
 850             } else
 851                 return -1;
 852         } else {
 853             av_get_packet(pb, pkt, len);
 854             rm_ac3_swap_bytes(st, pkt);
 855         }
 856     } else
 857         av_get_packet(pb, pkt, len);
 858
 859     pkt->stream_index = st->index;
 860
 861 #if 0
 862     if (st->codec->codec_type == AVMEDIA_TYPE_VIDEO) {
 863         if(st->codec->codec_id == AV_CODEC_ID_RV20){
 864             int seq= 128*(pkt->data[2]&0x7F) + (pkt->data[3]>>1);
 865             av_log(s, AV_LOG_DEBUG, "%d %"PRId64" %d\n", *timestamp, *timestamp*512LL/25, seq);
 866
 867             seq |= (timestamp&~0x3FFF);
 868             if(seq - timestamp >  0x2000) seq -= 0x4000;
 869             if(seq - timestamp < -0x2000) seq += 0x4000;
 870         }
 871     }
 872 #endif
 873
 874     pkt->pts = timestamp;
 875     if (flags & 2)
 876         pkt->flags |= AV_PKT_FLAG_KEY;
 877
 878     return st->codec->codec_type == AVMEDIA_TYPE_AUDIO ? rm->audio_pkt_cnt : 0;
 879 }
 880
 881 int
 882 ff_rm_retrieve_cache (AVFormatContext *s, AVIOContext *pb,
 883                       AVStream *st, RMStream *ast, AVPacket *pkt)
 884 {
 885     RMDemuxContext *rm = s->priv_data;
 886
 887     av_assert0 (rm->audio_pkt_cnt > 0);
 888
 889     if (ast->deint_id == DEINT_ID_VBRF ||
 890         ast->deint_id == DEINT_ID_VBRS)
 891         av_get_packet(pb, pkt, ast->sub_packet_lengths[ast->sub_packet_cnt - rm->audio_pkt_cnt]);
 892     else {
 893         if(av_new_packet(pkt, st->codec->block_align) < 0)
 894             return AVERROR(ENOMEM);
 895         memcpy(pkt->data, ast->pkt.data + st->codec->block_align * //FIXME avoid this
 896                (ast->sub_packet_h * ast->audio_framesize / st->codec->block_align - rm->audio_pkt_cnt),
 897                st->codec->block_align);
 898     }
 899     rm->audio_pkt_cnt--;
 900     if ((pkt->pts = ast->audiotimestamp) != AV_NOPTS_VALUE) {
 901         ast->audiotimestamp = AV_NOPTS_VALUE;
 902         pkt->flags = AV_PKT_FLAG_KEY;
 903     } else
 904         pkt->flags = 0;
 905     pkt->stream_index = st->index;
 906
 907     return rm->audio_pkt_cnt;
 908 }
 909
 910 static int rm_read_packet(AVFormatContext *s, AVPacket *pkt)
 911 {
 912     RMDemuxContext *rm = s->priv_data;
 913     AVStream *st = NULL; // init to silence compiler warning
 914     int i, len, res, seq = 1;
 915     int64_t timestamp, pos;
 916     int flags;
 917
 918     for (;;) {
 919         if (rm->audio_pkt_cnt) {
 920             // If there are queued audio packet return them first
 921             st = s->streams[rm->audio_stream_num];
 922             res = ff_rm_retrieve_cache(s, s->pb, st, st->priv_data, pkt);
 923             if(res < 0)
 924                 return res;
 925             flags = 0;
 926         } else {
 927             if (rm->old_format) {
 928                 RMStream *ast;
 929
 930                 st = s->streams[0];
 931                 ast = st->priv_data;
 932                 timestamp = AV_NOPTS_VALUE;
 933                 len = !ast->audio_framesize ? RAW_PACKET_SIZE :
 934                     ast->coded_framesize * ast->sub_packet_h / 2;
 935                 flags = (seq++ == 1) ? 2 : 0;
 936                 pos = avio_tell(s->pb);
 937             } else {
 938                 len=sync(s, &timestamp, &flags, &i, &pos);
 939                 if (len > 0)
 940                     st = s->streams[i];
 941             }
 942
 943             if(len<0 || url_feof(s->pb))
 944                 return AVERROR(EIO);
 945
 946             res = ff_rm_parse_packet (s, s->pb, st, st->priv_data, len, pkt,
 947                                       &seq, flags, timestamp);
 948             if (res < -1)
 949                 return res;
 950             if((flags&2) && (seq&0x7F) == 1)
 951                 av_add_index_entry(st, pos, timestamp, 0, 0, AVINDEX_KEYFRAME);
 952             if (res)
 953                 continue;
 954         }
 955
 956         if(  (st->discard >= AVDISCARD_NONKEY && !(flags&2))
 957            || st->discard >= AVDISCARD_ALL){
 958             av_free_packet(pkt);
 959         } else
 960             break;
 961     }
 962
 963     return 0;
 964 }
 965
 966 static int rm_read_close(AVFormatContext *s)
 967 {
 968     int i;
 969
 970     for (i=0;i<s->nb_streams;i++)
 971         ff_rm_free_rmstream(s->streams[i]->priv_data);
 972
 973     return 0;
 974 }
 975
 976 static int rm_probe(AVProbeData *p)
 977 {
 978     /* check file header */
 979     if ((p->buf[0] == '.' && p->buf[1] == 'R' &&
 980          p->buf[2] == 'M' && p->buf[3] == 'F' &&
 981          p->buf[4] == 0 && p->buf[5] == 0) ||
 982         (p->buf[0] == '.' && p->buf[1] == 'r' &&
 983          p->buf[2] == 'a' && p->buf[3] == 0xfd))
 984         return AVPROBE_SCORE_MAX;
 985     else
 986         return 0;
 987 }
 988
 989 static int64_t rm_read_dts(AVFormatContext *s, int stream_index,
 990                                int64_t *ppos, int64_t pos_limit)
 991 {
 992     RMDemuxContext *rm = s->priv_data;
 993     int64_t pos, dts;
 994     int stream_index2, flags, len, h;
 995
 996     pos = *ppos;
 997
 998     if(rm->old_format)
 999         return AV_NOPTS_VALUE;
1000
1001     if (avio_seek(s->pb, pos, SEEK_SET) < 0)
1002         return AV_NOPTS_VALUE;
1003
1004     rm->remaining_len=0;
1005     for(;;){
1006         int seq=1;
1007         AVStream *st;
1008
1009         len=sync(s, &dts, &flags, &stream_index2, &pos);
1010         if(len<0)
1011             return AV_NOPTS_VALUE;
1012
1013         st = s->streams[stream_index2];
1014         if (st->codec->codec_type == AVMEDIA_TYPE_VIDEO) {
1015             h= avio_r8(s->pb); len--;
1016             if(!(h & 0x40)){
1017                 seq = avio_r8(s->pb); len--;
1018             }
1019         }
1020
1021         if((flags&2) && (seq&0x7F) == 1){
1022             av_dlog(s, "%d %d-%d %"PRId64" %d\n",
1023                     flags, stream_index2, stream_index, dts, seq);
1024             av_add_index_entry(st, pos, dts, 0, 0, AVINDEX_KEYFRAME);
1025             if(stream_index2 == stream_index)
1026                 break;
1027         }
1028
1029         avio_skip(s->pb, len);
1030     }
1031     *ppos = pos;
1032     return dts;
1033 }
1034
1035 static int rm_read_seek(AVFormatContext *s, int stream_index,
1036                         int64_t pts, int flags)
1037 {
1038     RMDemuxContext *rm = s->priv_data;
1039
1040     if (ff_seek_frame_binary(s, stream_index, pts, flags) < 0)
1041         return -1;
1042     rm->audio_pkt_cnt = 0;
1043     return 0;
1044 }
1045
1046
1047 AVInputFormat ff_rm_demuxer = {
1048     .name           = "rm",
1049     .long_name      = NULL_IF_CONFIG_SMALL("RealMedia"),
1050     .priv_data_size = sizeof(RMDemuxContext),
1051     .read_probe     = rm_probe,
1052     .read_header    = rm_read_header,
1053     .read_packet    = rm_read_packet,
1054     .read_close     = rm_read_close,
1055     .read_timestamp = rm_read_dts,
1056     .read_seek      = rm_read_seek,
1057 };
1058
1059 AVInputFormat ff_rdt_demuxer = {
1060     .name           = "rdt",
1061     .long_name      = NULL_IF_CONFIG_SMALL("RDT demuxer"),
1062     .priv_data_size = sizeof(RMDemuxContext),
1063     .read_close     = rm_read_close,
1064     .flags          = AVFMT_NOFILE,
1065 };