git.sesse.net Git - ffmpeg/blob - libavformat/aviobuf.c

   1 /*
   2  * Buffered I/O for ffmpeg system
   3  * Copyright (c) 2000,2001 Fabrice Bellard
   4  *
   5  * This file is part of FFmpeg.
   6  *
   7  * FFmpeg is free software; you can redistribute it and/or
   8  * modify it under the terms of the GNU Lesser General Public
   9  * License as published by the Free Software Foundation; either
  10  * version 2.1 of the License, or (at your option) any later version.
  11  *
  12  * FFmpeg is distributed in the hope that it will be useful,
  13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  15  * Lesser General Public License for more details.
  16  *
  17  * You should have received a copy of the GNU Lesser General Public
  18  * License along with FFmpeg; if not, write to the Free Software
  19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
  20  */
  21
  22 #include "libavutil/crc.h"
  23 #include "libavutil/intreadwrite.h"
  24 #include "avformat.h"
  25 #include "avio.h"
  26 #include "avio_internal.h"
  27 #include "internal.h"
  28 #include "url.h"
  29 #include <stdarg.h>
  30
  31 #define IO_BUFFER_SIZE 32768
  32
  33 /**
  34  * Do seeks within this distance ahead of the current buffer by skipping
  35  * data instead of calling the protocol seek function, for seekable
  36  * protocols.
  37  */
  38 #define SHORT_SEEK_THRESHOLD 4096
  39
  40 static void fill_buffer(AVIOContext *s);
  41 static int url_resetbuf(AVIOContext *s, int flags);
  42
  43 int ffio_init_context(AVIOContext *s,
  44                   unsigned char *buffer,
  45                   int buffer_size,
  46                   int write_flag,
  47                   void *opaque,
  48                   int (*read_packet)(void *opaque, uint8_t *buf, int buf_size),
  49                   int (*write_packet)(void *opaque, uint8_t *buf, int buf_size),
  50                   int64_t (*seek)(void *opaque, int64_t offset, int whence))
  51 {
  52     s->buffer = buffer;
  53     s->buffer_size = buffer_size;
  54     s->buf_ptr = buffer;
  55     s->opaque = opaque;
  56     url_resetbuf(s, write_flag ? AVIO_FLAG_WRITE : AVIO_FLAG_READ);
  57     s->write_packet = write_packet;
  58     s->read_packet = read_packet;
  59     s->seek = seek;
  60     s->pos = 0;
  61     s->must_flush = 0;
  62     s->eof_reached = 0;
  63     s->error = 0;
  64 #if FF_API_OLD_AVIO
  65     s->is_streamed = 0;
  66 #endif
  67     s->seekable = AVIO_SEEKABLE_NORMAL;
  68     s->max_packet_size = 0;
  69     s->update_checksum= NULL;
  70     if(!read_packet && !write_flag){
  71         s->pos = buffer_size;
  72         s->buf_end = s->buffer + buffer_size;
  73     }
  74     s->read_pause = NULL;
  75     s->read_seek  = NULL;
  76     return 0;
  77 }
  78
  79 #if FF_API_OLD_AVIO
  80 int init_put_byte(AVIOContext *s,
  81                   unsigned char *buffer,
  82                   int buffer_size,
  83                   int write_flag,
  84                   void *opaque,
  85                   int (*read_packet)(void *opaque, uint8_t *buf, int buf_size),
  86                   int (*write_packet)(void *opaque, uint8_t *buf, int buf_size),
  87                   int64_t (*seek)(void *opaque, int64_t offset, int whence))
  88 {
  89     return ffio_init_context(s, buffer, buffer_size, write_flag, opaque,
  90                                 read_packet, write_packet, seek);
  91 }
  92 AVIOContext *av_alloc_put_byte(
  93                   unsigned char *buffer,
  94                   int buffer_size,
  95                   int write_flag,
  96                   void *opaque,
  97                   int (*read_packet)(void *opaque, uint8_t *buf, int buf_size),
  98                   int (*write_packet)(void *opaque, uint8_t *buf, int buf_size),
  99                   int64_t (*seek)(void *opaque, int64_t offset, int whence))
 100 {
 101     return avio_alloc_context(buffer, buffer_size, write_flag, opaque,
 102                               read_packet, write_packet, seek);
 103 }
 104 #endif
 105
 106 AVIOContext *avio_alloc_context(
 107                   unsigned char *buffer,
 108                   int buffer_size,
 109                   int write_flag,
 110                   void *opaque,
 111                   int (*read_packet)(void *opaque, uint8_t *buf, int buf_size),
 112                   int (*write_packet)(void *opaque, uint8_t *buf, int buf_size),
 113                   int64_t (*seek)(void *opaque, int64_t offset, int whence))
 114 {
 115     AVIOContext *s = av_mallocz(sizeof(AVIOContext));
 116     if (!s)
 117         return NULL;
 118     ffio_init_context(s, buffer, buffer_size, write_flag, opaque,
 119                   read_packet, write_packet, seek);
 120     return s;
 121 }
 122
 123 static void flush_buffer(AVIOContext *s)
 124 {
 125     if (s->buf_ptr > s->buffer) {
 126         if (s->write_packet && !s->error){
 127             int ret= s->write_packet(s->opaque, s->buffer, s->buf_ptr - s->buffer);
 128             if(ret < 0){
 129                 s->error = ret;
 130             }
 131         }
 132         if(s->update_checksum){
 133             s->checksum= s->update_checksum(s->checksum, s->checksum_ptr, s->buf_ptr - s->checksum_ptr);
 134             s->checksum_ptr= s->buffer;
 135         }
 136         s->pos += s->buf_ptr - s->buffer;
 137     }
 138     s->buf_ptr = s->buffer;
 139 }
 140
 141 void avio_w8(AVIOContext *s, int b)
 142 {
 143     *(s->buf_ptr)++ = b;
 144     if (s->buf_ptr >= s->buf_end)
 145         flush_buffer(s);
 146 }
 147
 148 void ffio_fill(AVIOContext *s, int b, int count)
 149 {
 150     while (count > 0) {
 151         int len = FFMIN(s->buf_end - s->buf_ptr, count);
 152         memset(s->buf_ptr, b, len);
 153         s->buf_ptr += len;
 154
 155         if (s->buf_ptr >= s->buf_end)
 156             flush_buffer(s);
 157
 158         count -= len;
 159     }
 160 }
 161
 162 void avio_write(AVIOContext *s, const unsigned char *buf, int size)
 163 {
 164     while (size > 0) {
 165         int len = FFMIN(s->buf_end - s->buf_ptr, size);
 166         memcpy(s->buf_ptr, buf, len);
 167         s->buf_ptr += len;
 168
 169         if (s->buf_ptr >= s->buf_end)
 170             flush_buffer(s);
 171
 172         buf += len;
 173         size -= len;
 174     }
 175 }
 176
 177 void avio_flush(AVIOContext *s)
 178 {
 179     flush_buffer(s);
 180     s->must_flush = 0;
 181 }
 182
 183 int64_t avio_seek(AVIOContext *s, int64_t offset, int whence)
 184 {
 185     int64_t offset1;
 186     int64_t pos;
 187     int force = whence & AVSEEK_FORCE;
 188     whence &= ~AVSEEK_FORCE;
 189
 190     if(!s)
 191         return AVERROR(EINVAL);
 192
 193     pos = s->pos - (s->write_flag ? 0 : (s->buf_end - s->buffer));
 194
 195     if (whence != SEEK_CUR && whence != SEEK_SET)
 196         return AVERROR(EINVAL);
 197
 198     if (whence == SEEK_CUR) {
 199         offset1 = pos + (s->buf_ptr - s->buffer);
 200         if (offset == 0)
 201             return offset1;
 202         offset += offset1;
 203     }
 204     offset1 = offset - pos;
 205     if (!s->must_flush &&
 206         offset1 >= 0 && offset1 <= (s->buf_end - s->buffer)) {
 207         /* can do the seek inside the buffer */
 208         s->buf_ptr = s->buffer + offset1;
 209     } else if ((!s->seekable ||
 210                offset1 <= s->buf_end + SHORT_SEEK_THRESHOLD - s->buffer) &&
 211                !s->write_flag && offset1 >= 0 &&
 212               (whence != SEEK_END || force)) {
 213         while(s->pos < offset && !s->eof_reached)
 214             fill_buffer(s);
 215         if (s->eof_reached)
 216             return AVERROR_EOF;
 217         s->buf_ptr = s->buf_end + offset - s->pos;
 218     } else {
 219         int64_t res;
 220
 221 #if CONFIG_MUXERS || CONFIG_NETWORK
 222         if (s->write_flag) {
 223             flush_buffer(s);
 224             s->must_flush = 1;
 225         }
 226 #endif /* CONFIG_MUXERS || CONFIG_NETWORK */
 227         if (!s->seek)
 228             return AVERROR(EPIPE);
 229         if ((res = s->seek(s->opaque, offset, SEEK_SET)) < 0)
 230             return res;
 231         if (!s->write_flag)
 232             s->buf_end = s->buffer;
 233         s->buf_ptr = s->buffer;
 234         s->pos = offset;
 235     }
 236     s->eof_reached = 0;
 237     return offset;
 238 }
 239
 240 int64_t avio_skip(AVIOContext *s, int64_t offset)
 241 {
 242     return avio_seek(s, offset, SEEK_CUR);
 243 }
 244
 245 #if FF_API_OLD_AVIO
 246 int url_fskip(AVIOContext *s, int64_t offset)
 247 {
 248     int64_t ret = avio_seek(s, offset, SEEK_CUR);
 249     return ret < 0 ? ret : 0;
 250 }
 251
 252 int64_t url_ftell(AVIOContext *s)
 253 {
 254     return avio_seek(s, 0, SEEK_CUR);
 255 }
 256 #endif
 257
 258 int64_t avio_size(AVIOContext *s)
 259 {
 260     int64_t size;
 261
 262     if(!s)
 263         return AVERROR(EINVAL);
 264
 265     if (!s->seek)
 266         return AVERROR(ENOSYS);
 267     size = s->seek(s->opaque, 0, AVSEEK_SIZE);
 268     if(size<0){
 269         if ((size = s->seek(s->opaque, -1, SEEK_END)) < 0)
 270             return size;
 271         size++;
 272         s->seek(s->opaque, s->pos, SEEK_SET);
 273     }
 274     return size;
 275 }
 276
 277 int url_feof(AVIOContext *s)
 278 {
 279     if(!s)
 280         return 0;
 281     if(s->eof_reached){
 282         s->eof_reached=0;
 283         fill_buffer(s);
 284     }
 285     return s->eof_reached;
 286 }
 287
 288 #if FF_API_OLD_AVIO
 289 int url_ferror(AVIOContext *s)
 290 {
 291     if(!s)
 292         return 0;
 293     return s->error;
 294 }
 295 #endif
 296
 297 void avio_wl32(AVIOContext *s, unsigned int val)
 298 {
 299     avio_w8(s, val);
 300     avio_w8(s, val >> 8);
 301     avio_w8(s, val >> 16);
 302     avio_w8(s, val >> 24);
 303 }
 304
 305 void avio_wb32(AVIOContext *s, unsigned int val)
 306 {
 307     avio_w8(s, val >> 24);
 308     avio_w8(s, val >> 16);
 309     avio_w8(s, val >> 8);
 310     avio_w8(s, val);
 311 }
 312
 313 #if FF_API_OLD_AVIO
 314 void put_strz(AVIOContext *s, const char *str)
 315 {
 316     avio_put_str(s, str);
 317 }
 318
 319 #define GET(name, type) \
 320     type get_be ##name(AVIOContext *s) \
 321 {\
 322     return avio_rb ##name(s);\
 323 }\
 324     type get_le ##name(AVIOContext *s) \
 325 {\
 326     return avio_rl ##name(s);\
 327 }
 328
 329 GET(16, unsigned int)
 330 GET(24, unsigned int)
 331 GET(32, unsigned int)
 332 GET(64, uint64_t)
 333
 334 #undef GET
 335
 336 #define PUT(name, type ) \
 337     void put_le ##name(AVIOContext *s, type val)\
 338 {\
 339         avio_wl ##name(s, val);\
 340 }\
 341     void put_be ##name(AVIOContext *s, type val)\
 342 {\
 343         avio_wb ##name(s, val);\
 344 }
 345
 346 PUT(16, unsigned int)
 347 PUT(24, unsigned int)
 348 PUT(32, unsigned int)
 349 PUT(64, uint64_t)
 350 #undef PUT
 351
 352 int get_byte(AVIOContext *s)
 353 {
 354    return avio_r8(s);
 355 }
 356 int get_buffer(AVIOContext *s, unsigned char *buf, int size)
 357 {
 358     return avio_read(s, buf, size);
 359 }
 360 int get_partial_buffer(AVIOContext *s, unsigned char *buf, int size)
 361 {
 362     return ffio_read_partial(s, buf, size);
 363 }
 364 void put_byte(AVIOContext *s, int val)
 365 {
 366     avio_w8(s, val);
 367 }
 368 void put_buffer(AVIOContext *s, const unsigned char *buf, int size)
 369 {
 370     avio_write(s, buf, size);
 371 }
 372 void put_nbyte(AVIOContext *s, int b, int count)
 373 {
 374     ffio_fill(s, b, count);
 375 }
 376
 377 int url_fopen(AVIOContext **s, const char *filename, int flags)
 378 {
 379     return avio_open(s, filename, flags);
 380 }
 381 int url_fclose(AVIOContext *s)
 382 {
 383     return avio_close(s);
 384 }
 385 int64_t url_fseek(AVIOContext *s, int64_t offset, int whence)
 386 {
 387     return avio_seek(s, offset, whence);
 388 }
 389 int64_t url_fsize(AVIOContext *s)
 390 {
 391     return avio_size(s);
 392 }
 393 int url_setbufsize(AVIOContext *s, int buf_size)
 394 {
 395     return ffio_set_buf_size(s, buf_size);
 396 }
 397 int url_fprintf(AVIOContext *s, const char *fmt, ...)
 398 {
 399     va_list ap;
 400     char buf[4096];
 401     int ret;
 402
 403     va_start(ap, fmt);
 404     ret = vsnprintf(buf, sizeof(buf), fmt, ap);
 405     va_end(ap);
 406     avio_write(s, buf, strlen(buf));
 407     return ret;
 408 }
 409 void put_flush_packet(AVIOContext *s)
 410 {
 411     avio_flush(s);
 412 }
 413 int av_url_read_fpause(AVIOContext *s, int pause)
 414 {
 415     return avio_pause(s, pause);
 416 }
 417 int64_t av_url_read_fseek(AVIOContext *s, int stream_index,
 418                          int64_t timestamp, int flags)
 419 {
 420     return avio_seek_time(s, stream_index, timestamp, flags);
 421 }
 422 void init_checksum(AVIOContext *s,
 423                    unsigned long (*update_checksum)(unsigned long c, const uint8_t *p, unsigned int len),
 424                    unsigned long checksum)
 425 {
 426     ffio_init_checksum(s, update_checksum, checksum);
 427 }
 428 unsigned long get_checksum(AVIOContext *s)
 429 {
 430     return ffio_get_checksum(s);
 431 }
 432 int url_open_dyn_buf(AVIOContext **s)
 433 {
 434     return avio_open_dyn_buf(s);
 435 }
 436 int url_open_dyn_packet_buf(AVIOContext **s, int max_packet_size)
 437 {
 438     return ffio_open_dyn_packet_buf(s, max_packet_size);
 439 }
 440 int url_close_dyn_buf(AVIOContext *s, uint8_t **pbuffer)
 441 {
 442     return avio_close_dyn_buf(s, pbuffer);
 443 }
 444 int url_fdopen(AVIOContext **s, URLContext *h)
 445 {
 446     return ffio_fdopen(s, h);
 447 }
 448 #endif
 449
 450 int avio_put_str(AVIOContext *s, const char *str)
 451 {
 452     int len = 1;
 453     if (str) {
 454         len += strlen(str);
 455         avio_write(s, (const unsigned char *) str, len);
 456     } else
 457         avio_w8(s, 0);
 458     return len;
 459 }
 460
 461 int avio_put_str16le(AVIOContext *s, const char *str)
 462 {
 463     const uint8_t *q = str;
 464     int ret = 0;
 465
 466     while (*q) {
 467         uint32_t ch;
 468         uint16_t tmp;
 469
 470         GET_UTF8(ch, *q++, break;)
 471         PUT_UTF16(ch, tmp, avio_wl16(s, tmp);ret += 2;)
 472     }
 473     avio_wl16(s, 0);
 474     ret += 2;
 475     return ret;
 476 }
 477
 478 int ff_get_v_length(uint64_t val){
 479     int i=1;
 480
 481     while(val>>=7)
 482         i++;
 483
 484     return i;
 485 }
 486
 487 void ff_put_v(AVIOContext *bc, uint64_t val){
 488     int i= ff_get_v_length(val);
 489
 490     while(--i>0)
 491         avio_w8(bc, 128 | (val>>(7*i)));
 492
 493     avio_w8(bc, val&127);
 494 }
 495
 496 void avio_wl64(AVIOContext *s, uint64_t val)
 497 {
 498     avio_wl32(s, (uint32_t)(val & 0xffffffff));
 499     avio_wl32(s, (uint32_t)(val >> 32));
 500 }
 501
 502 void avio_wb64(AVIOContext *s, uint64_t val)
 503 {
 504     avio_wb32(s, (uint32_t)(val >> 32));
 505     avio_wb32(s, (uint32_t)(val & 0xffffffff));
 506 }
 507
 508 void avio_wl16(AVIOContext *s, unsigned int val)
 509 {
 510     avio_w8(s, val);
 511     avio_w8(s, val >> 8);
 512 }
 513
 514 void avio_wb16(AVIOContext *s, unsigned int val)
 515 {
 516     avio_w8(s, val >> 8);
 517     avio_w8(s, val);
 518 }
 519
 520 void avio_wl24(AVIOContext *s, unsigned int val)
 521 {
 522     avio_wl16(s, val & 0xffff);
 523     avio_w8(s, val >> 16);
 524 }
 525
 526 void avio_wb24(AVIOContext *s, unsigned int val)
 527 {
 528     avio_wb16(s, val >> 8);
 529     avio_w8(s, val);
 530 }
 531
 532 #if FF_API_OLD_AVIO
 533 void put_tag(AVIOContext *s, const char *tag)
 534 {
 535     while (*tag) {
 536         avio_w8(s, *tag++);
 537     }
 538 }
 539 #endif
 540
 541 /* Input stream */
 542
 543 static void fill_buffer(AVIOContext *s)
 544 {
 545     uint8_t *dst= !s->max_packet_size && s->buf_end - s->buffer < s->buffer_size ? s->buf_end : s->buffer;
 546     int len= s->buffer_size - (dst - s->buffer);
 547     int max_buffer_size = s->max_packet_size ? s->max_packet_size : IO_BUFFER_SIZE;
 548
 549     /* no need to do anything if EOF already reached */
 550     if (s->eof_reached)
 551         return;
 552
 553     if(s->update_checksum && dst == s->buffer){
 554         if(s->buf_end > s->checksum_ptr)
 555             s->checksum= s->update_checksum(s->checksum, s->checksum_ptr, s->buf_end - s->checksum_ptr);
 556         s->checksum_ptr= s->buffer;
 557     }
 558
 559     /* make buffer smaller in case it ended up large after probing */
 560     if (s->read_packet && s->buffer_size > max_buffer_size) {
 561         ffio_set_buf_size(s, max_buffer_size);
 562
 563         s->checksum_ptr = dst = s->buffer;
 564         len = s->buffer_size;
 565     }
 566
 567     if(s->read_packet)
 568         len = s->read_packet(s->opaque, dst, len);
 569     else
 570         len = 0;
 571     if (len <= 0) {
 572         /* do not modify buffer if EOF reached so that a seek back can
 573            be done without rereading data */
 574         s->eof_reached = 1;
 575         if(len<0)
 576             s->error= len;
 577     } else {
 578         s->pos += len;
 579         s->buf_ptr = dst;
 580         s->buf_end = dst + len;
 581     }
 582 }
 583
 584 unsigned long ff_crc04C11DB7_update(unsigned long checksum, const uint8_t *buf,
 585                                     unsigned int len)
 586 {
 587     return av_crc(av_crc_get_table(AV_CRC_32_IEEE), checksum, buf, len);
 588 }
 589
 590 unsigned long ffio_get_checksum(AVIOContext *s)
 591 {
 592     s->checksum= s->update_checksum(s->checksum, s->checksum_ptr, s->buf_ptr - s->checksum_ptr);
 593     s->update_checksum= NULL;
 594     return s->checksum;
 595 }
 596
 597 void ffio_init_checksum(AVIOContext *s,
 598                    unsigned long (*update_checksum)(unsigned long c, const uint8_t *p, unsigned int len),
 599                    unsigned long checksum)
 600 {
 601     s->update_checksum= update_checksum;
 602     if(s->update_checksum){
 603         s->checksum= checksum;
 604         s->checksum_ptr= s->buf_ptr;
 605     }
 606 }
 607
 608 /* XXX: put an inline version */
 609 int avio_r8(AVIOContext *s)
 610 {
 611     if (s->buf_ptr >= s->buf_end)
 612         fill_buffer(s);
 613     if (s->buf_ptr < s->buf_end)
 614         return *s->buf_ptr++;
 615     return 0;
 616 }
 617
 618 #if FF_API_OLD_AVIO
 619 int url_fgetc(AVIOContext *s)
 620 {
 621     if (s->buf_ptr >= s->buf_end)
 622         fill_buffer(s);
 623     if (s->buf_ptr < s->buf_end)
 624         return *s->buf_ptr++;
 625     return URL_EOF;
 626 }
 627 #endif
 628
 629 int avio_read(AVIOContext *s, unsigned char *buf, int size)
 630 {
 631     int len, size1;
 632
 633     size1 = size;
 634     while (size > 0) {
 635         len = s->buf_end - s->buf_ptr;
 636         if (len > size)
 637             len = size;
 638         if (len == 0) {
 639             if(size > s->buffer_size && !s->update_checksum){
 640                 if(s->read_packet)
 641                     len = s->read_packet(s->opaque, buf, size);
 642                 if (len <= 0) {
 643                     /* do not modify buffer if EOF reached so that a seek back can
 644                     be done without rereading data */
 645                     s->eof_reached = 1;
 646                     if(len<0)
 647                         s->error= len;
 648                     break;
 649                 } else {
 650                     s->pos += len;
 651                     size -= len;
 652                     buf += len;
 653                     s->buf_ptr = s->buffer;
 654                     s->buf_end = s->buffer/* + len*/;
 655                 }
 656             }else{
 657                 fill_buffer(s);
 658                 len = s->buf_end - s->buf_ptr;
 659                 if (len == 0)
 660                     break;
 661             }
 662         } else {
 663             memcpy(buf, s->buf_ptr, len);
 664             buf += len;
 665             s->buf_ptr += len;
 666             size -= len;
 667         }
 668     }
 669     if (size1 == size) {
 670         if (s->error)      return s->error;
 671         if (url_feof(s))   return AVERROR_EOF;
 672     }
 673     return size1 - size;
 674 }
 675
 676 int ffio_read_partial(AVIOContext *s, unsigned char *buf, int size)
 677 {
 678     int len;
 679
 680     if(size<0)
 681         return -1;
 682
 683     len = s->buf_end - s->buf_ptr;
 684     if (len == 0) {
 685         fill_buffer(s);
 686         len = s->buf_end - s->buf_ptr;
 687     }
 688     if (len > size)
 689         len = size;
 690     memcpy(buf, s->buf_ptr, len);
 691     s->buf_ptr += len;
 692     if (!len) {
 693         if (s->error)      return s->error;
 694         if (url_feof(s))   return AVERROR_EOF;
 695     }
 696     return len;
 697 }
 698
 699 unsigned int avio_rl16(AVIOContext *s)
 700 {
 701     unsigned int val;
 702     val = avio_r8(s);
 703     val |= avio_r8(s) << 8;
 704     return val;
 705 }
 706
 707 unsigned int avio_rl24(AVIOContext *s)
 708 {
 709     unsigned int val;
 710     val = avio_rl16(s);
 711     val |= avio_r8(s) << 16;
 712     return val;
 713 }
 714
 715 unsigned int avio_rl32(AVIOContext *s)
 716 {
 717     unsigned int val;
 718     val = avio_rl16(s);
 719     val |= avio_rl16(s) << 16;
 720     return val;
 721 }
 722
 723 uint64_t avio_rl64(AVIOContext *s)
 724 {
 725     uint64_t val;
 726     val = (uint64_t)avio_rl32(s);
 727     val |= (uint64_t)avio_rl32(s) << 32;
 728     return val;
 729 }
 730
 731 unsigned int avio_rb16(AVIOContext *s)
 732 {
 733     unsigned int val;
 734     val = avio_r8(s) << 8;
 735     val |= avio_r8(s);
 736     return val;
 737 }
 738
 739 unsigned int avio_rb24(AVIOContext *s)
 740 {
 741     unsigned int val;
 742     val = avio_rb16(s) << 8;
 743     val |= avio_r8(s);
 744     return val;
 745 }
 746 unsigned int avio_rb32(AVIOContext *s)
 747 {
 748     unsigned int val;
 749     val = avio_rb16(s) << 16;
 750     val |= avio_rb16(s);
 751     return val;
 752 }
 753
 754 #if FF_API_OLD_AVIO
 755 char *get_strz(AVIOContext *s, char *buf, int maxlen)
 756 {
 757     avio_get_str(s, INT_MAX, buf, maxlen);
 758     return buf;
 759 }
 760 #endif
 761
 762 int ff_get_line(AVIOContext *s, char *buf, int maxlen)
 763 {
 764     int i = 0;
 765     char c;
 766
 767     do {
 768         c = avio_r8(s);
 769         if (c && i < maxlen-1)
 770             buf[i++] = c;
 771     } while (c != '\n' && c);
 772
 773     buf[i] = 0;
 774     return i;
 775 }
 776
 777 int avio_get_str(AVIOContext *s, int maxlen, char *buf, int buflen)
 778 {
 779     int i;
 780
 781     if (buflen <= 0)
 782         return AVERROR(EINVAL);
 783     // reserve 1 byte for terminating 0
 784     buflen = FFMIN(buflen - 1, maxlen);
 785     for (i = 0; i < buflen; i++)
 786         if (!(buf[i] = avio_r8(s)))
 787             return i + 1;
 788     buf[i] = 0;
 789     for (; i < maxlen; i++)
 790         if (!avio_r8(s))
 791             return i + 1;
 792     return maxlen;
 793 }
 794
 795 #define GET_STR16(type, read) \
 796     int avio_get_str16 ##type(AVIOContext *pb, int maxlen, char *buf, int buflen)\
 797 {\
 798     char* q = buf;\
 799     int ret = 0;\
 800     if (buflen <= 0) \
 801         return AVERROR(EINVAL); \
 802     while (ret + 1 < maxlen) {\
 803         uint8_t tmp;\
 804         uint32_t ch;\
 805         GET_UTF16(ch, (ret += 2) <= maxlen ? read(pb) : 0, break;)\
 806         if (!ch)\
 807             break;\
 808         PUT_UTF8(ch, tmp, if (q - buf < buflen - 1) *q++ = tmp;)\
 809     }\
 810     *q = 0;\
 811     return ret;\
 812 }\
 813
 814 GET_STR16(le, avio_rl16)
 815 GET_STR16(be, avio_rb16)
 816
 817 #undef GET_STR16
 818
 819 uint64_t avio_rb64(AVIOContext *s)
 820 {
 821     uint64_t val;
 822     val = (uint64_t)avio_rb32(s) << 32;
 823     val |= (uint64_t)avio_rb32(s);
 824     return val;
 825 }
 826
 827 uint64_t ffio_read_varlen(AVIOContext *bc){
 828     uint64_t val = 0;
 829     int tmp;
 830
 831     do{
 832         tmp = avio_r8(bc);
 833         val= (val<<7) + (tmp&127);
 834     }while(tmp&128);
 835     return val;
 836 }
 837
 838 int ffio_fdopen(AVIOContext **s, URLContext *h)
 839 {
 840     uint8_t *buffer;
 841     int buffer_size, max_packet_size;
 842
 843     max_packet_size = h->max_packet_size;
 844     if (max_packet_size) {
 845         buffer_size = max_packet_size; /* no need to bufferize more than one packet */
 846     } else {
 847         buffer_size = IO_BUFFER_SIZE;
 848     }
 849     buffer = av_malloc(buffer_size);
 850     if (!buffer)
 851         return AVERROR(ENOMEM);
 852
 853     *s = avio_alloc_context(buffer, buffer_size, h->flags & AVIO_FLAG_WRITE, h,
 854                             ffurl_read, ffurl_write, ffurl_seek);
 855     if (!*s) {
 856         av_free(buffer);
 857         return AVERROR(ENOMEM);
 858     }
 859
 860 #if FF_API_OLD_AVIO
 861     (*s)->is_streamed = h->is_streamed;
 862 #endif
 863     (*s)->seekable = h->is_streamed ? 0 : AVIO_SEEKABLE_NORMAL;
 864     (*s)->max_packet_size = max_packet_size;
 865     if(h->prot) {
 866         (*s)->read_pause = (int (*)(void *, int))h->prot->url_read_pause;
 867         (*s)->read_seek  = (int64_t (*)(void *, int, int64_t, int))h->prot->url_read_seek;
 868     }
 869     return 0;
 870 }
 871
 872 int ffio_set_buf_size(AVIOContext *s, int buf_size)
 873 {
 874     uint8_t *buffer;
 875     buffer = av_malloc(buf_size);
 876     if (!buffer)
 877         return AVERROR(ENOMEM);
 878
 879     av_free(s->buffer);
 880     s->buffer = buffer;
 881     s->buffer_size = buf_size;
 882     s->buf_ptr = buffer;
 883     url_resetbuf(s, s->write_flag ? AVIO_FLAG_WRITE : AVIO_FLAG_READ);
 884     return 0;
 885 }
 886
 887 static int url_resetbuf(AVIOContext *s, int flags)
 888 {
 889     assert(flags == AVIO_FLAG_WRITE || flags == AVIO_FLAG_READ);
 890
 891     if (flags & AVIO_FLAG_WRITE) {
 892         s->buf_end = s->buffer + s->buffer_size;
 893         s->write_flag = 1;
 894     } else {
 895         s->buf_end = s->buffer;
 896         s->write_flag = 0;
 897     }
 898     return 0;
 899 }
 900
 901 int ffio_rewind_with_probe_data(AVIOContext *s, unsigned char *buf, int buf_size)
 902 {
 903     int64_t buffer_start;
 904     int buffer_size;
 905     int overlap, new_size, alloc_size;
 906
 907     if (s->write_flag)
 908         return AVERROR(EINVAL);
 909
 910     buffer_size = s->buf_end - s->buffer;
 911
 912     /* the buffers must touch or overlap */
 913     if ((buffer_start = s->pos - buffer_size) > buf_size)
 914         return AVERROR(EINVAL);
 915
 916     overlap = buf_size - buffer_start;
 917     new_size = buf_size + buffer_size - overlap;
 918
 919     alloc_size = FFMAX(s->buffer_size, new_size);
 920     if (alloc_size > buf_size)
 921         if (!(buf = av_realloc_f(buf, 1, alloc_size)))
 922             return AVERROR(ENOMEM);
 923
 924     if (new_size > buf_size) {
 925         memcpy(buf + buf_size, s->buffer + overlap, buffer_size - overlap);
 926         buf_size = new_size;
 927     }
 928
 929     av_free(s->buffer);
 930     s->buf_ptr = s->buffer = buf;
 931     s->buffer_size = alloc_size;
 932     s->pos = buf_size;
 933     s->buf_end = s->buf_ptr + buf_size;
 934     s->eof_reached = 0;
 935     s->must_flush = 0;
 936
 937     return 0;
 938 }
 939
 940 int avio_open(AVIOContext **s, const char *filename, int flags)
 941 {
 942     URLContext *h;
 943     int err;
 944
 945     err = ffurl_open(&h, filename, flags);
 946     if (err < 0)
 947         return err;
 948     err = ffio_fdopen(s, h);
 949     if (err < 0) {
 950         ffurl_close(h);
 951         return err;
 952     }
 953     return 0;
 954 }
 955
 956 int avio_close(AVIOContext *s)
 957 {
 958     URLContext *h = s->opaque;
 959
 960     av_free(s->buffer);
 961     av_free(s);
 962     return ffurl_close(h);
 963 }
 964
 965 #if FF_API_OLD_AVIO
 966 URLContext *url_fileno(AVIOContext *s)
 967 {
 968     return s->opaque;
 969 }
 970 #endif
 971
 972 int avio_printf(AVIOContext *s, const char *fmt, ...)
 973 {
 974     va_list ap;
 975     char buf[4096];
 976     int ret;
 977
 978     va_start(ap, fmt);
 979     ret = vsnprintf(buf, sizeof(buf), fmt, ap);
 980     va_end(ap);
 981     avio_write(s, buf, strlen(buf));
 982     return ret;
 983 }
 984
 985 #if FF_API_OLD_AVIO
 986 char *url_fgets(AVIOContext *s, char *buf, int buf_size)
 987 {
 988     int c;
 989     char *q;
 990
 991     c = avio_r8(s);
 992     if (url_feof(s))
 993         return NULL;
 994     q = buf;
 995     for(;;) {
 996         if (url_feof(s) || c == '\n')
 997             break;
 998         if ((q - buf) < buf_size - 1)
 999             *q++ = c;
1000         c = avio_r8(s);
1001     }
1002     if (buf_size > 0)
1003         *q = '\0';
1004     return buf;
1005 }
1006
1007 int url_fget_max_packet_size(AVIOContext *s)
1008 {
1009     return s->max_packet_size;
1010 }
1011 #endif
1012
1013 int avio_pause(AVIOContext *s, int pause)
1014 {
1015     if (!s->read_pause)
1016         return AVERROR(ENOSYS);
1017     return s->read_pause(s->opaque, pause);
1018 }
1019
1020 int64_t avio_seek_time(AVIOContext *s, int stream_index,
1021                        int64_t timestamp, int flags)
1022 {
1023     URLContext *h = s->opaque;
1024     int64_t ret;
1025     if (!s->read_seek)
1026         return AVERROR(ENOSYS);
1027     ret = s->read_seek(h, stream_index, timestamp, flags);
1028     if(ret >= 0) {
1029         int64_t pos;
1030         s->buf_ptr = s->buf_end; // Flush buffer
1031         pos = s->seek(h, 0, SEEK_CUR);
1032         if (pos >= 0)
1033             s->pos = pos;
1034         else if (pos != AVERROR(ENOSYS))
1035             ret = pos;
1036     }
1037     return ret;
1038 }
1039
1040 /* buffer handling */
1041 #if FF_API_OLD_AVIO
1042 int url_open_buf(AVIOContext **s, uint8_t *buf, int buf_size, int flags)
1043 {
1044     int ret;
1045     *s = av_mallocz(sizeof(AVIOContext));
1046     if(!*s)
1047         return AVERROR(ENOMEM);
1048     ret = ffio_init_context(*s, buf, buf_size,
1049                             flags & AVIO_FLAG_WRITE,
1050                         NULL, NULL, NULL, NULL);
1051     if(ret != 0)
1052         av_freep(s);
1053     return ret;
1054 }
1055
1056 int url_close_buf(AVIOContext *s)
1057 {
1058     avio_flush(s);
1059     return s->buf_ptr - s->buffer;
1060 }
1061 #endif
1062
1063 /* output in a dynamic buffer */
1064
1065 typedef struct DynBuffer {
1066     int pos, size, allocated_size;
1067     uint8_t *buffer;
1068     int io_buffer_size;
1069     uint8_t io_buffer[1];
1070 } DynBuffer;
1071
1072 static int dyn_buf_write(void *opaque, uint8_t *buf, int buf_size)
1073 {
1074     DynBuffer *d = opaque;
1075     unsigned new_size, new_allocated_size;
1076
1077     /* reallocate buffer if needed */
1078     new_size = d->pos + buf_size;
1079     new_allocated_size = d->allocated_size;
1080     if(new_size < d->pos || new_size > INT_MAX/2)
1081         return -1;
1082     while (new_size > new_allocated_size) {
1083         if (!new_allocated_size)
1084             new_allocated_size = new_size;
1085         else
1086             new_allocated_size += new_allocated_size / 2 + 1;
1087     }
1088
1089     if (new_allocated_size > d->allocated_size) {
1090         d->buffer = av_realloc_f(d->buffer, 1, new_allocated_size);
1091         if(d->buffer == NULL)
1092              return AVERROR(ENOMEM);
1093         d->allocated_size = new_allocated_size;
1094     }
1095     memcpy(d->buffer + d->pos, buf, buf_size);
1096     d->pos = new_size;
1097     if (d->pos > d->size)
1098         d->size = d->pos;
1099     return buf_size;
1100 }
1101
1102 static int dyn_packet_buf_write(void *opaque, uint8_t *buf, int buf_size)
1103 {
1104     unsigned char buf1[4];
1105     int ret;
1106
1107     /* packetized write: output the header */
1108     AV_WB32(buf1, buf_size);
1109     ret= dyn_buf_write(opaque, buf1, 4);
1110     if(ret < 0)
1111         return ret;
1112
1113     /* then the data */
1114     return dyn_buf_write(opaque, buf, buf_size);
1115 }
1116
1117 static int64_t dyn_buf_seek(void *opaque, int64_t offset, int whence)
1118 {
1119     DynBuffer *d = opaque;
1120
1121     if (whence == SEEK_CUR)
1122         offset += d->pos;
1123     else if (whence == SEEK_END)
1124         offset += d->size;
1125     if (offset < 0 || offset > 0x7fffffffLL)
1126         return -1;
1127     d->pos = offset;
1128     return 0;
1129 }
1130
1131 static int url_open_dyn_buf_internal(AVIOContext **s, int max_packet_size)
1132 {
1133     DynBuffer *d;
1134     unsigned io_buffer_size = max_packet_size ? max_packet_size : 1024;
1135
1136     if(sizeof(DynBuffer) + io_buffer_size < io_buffer_size)
1137         return -1;
1138     d = av_mallocz(sizeof(DynBuffer) + io_buffer_size);
1139     if (!d)
1140         return AVERROR(ENOMEM);
1141     d->io_buffer_size = io_buffer_size;
1142     *s = avio_alloc_context(d->io_buffer, d->io_buffer_size, 1, d, NULL,
1143                             max_packet_size ? dyn_packet_buf_write : dyn_buf_write,
1144                             max_packet_size ? NULL : dyn_buf_seek);
1145     if(!*s) {
1146         av_free(d);
1147         return AVERROR(ENOMEM);
1148     }
1149     (*s)->max_packet_size = max_packet_size;
1150     return 0;
1151 }
1152
1153 int avio_open_dyn_buf(AVIOContext **s)
1154 {
1155     return url_open_dyn_buf_internal(s, 0);
1156 }
1157
1158 int ffio_open_dyn_packet_buf(AVIOContext **s, int max_packet_size)
1159 {
1160     if (max_packet_size <= 0)
1161         return -1;
1162     return url_open_dyn_buf_internal(s, max_packet_size);
1163 }
1164
1165 int avio_close_dyn_buf(AVIOContext *s, uint8_t **pbuffer)
1166 {
1167     DynBuffer *d = s->opaque;
1168     int size;
1169     static const char padbuf[FF_INPUT_BUFFER_PADDING_SIZE] = {0};
1170     int padding = 0;
1171
1172     /* don't attempt to pad fixed-size packet buffers */
1173     if (!s->max_packet_size) {
1174         avio_write(s, padbuf, sizeof(padbuf));
1175         padding = FF_INPUT_BUFFER_PADDING_SIZE;
1176     }
1177
1178     avio_flush(s);
1179
1180     *pbuffer = d->buffer;
1181     size = d->size;
1182     av_free(d);
1183     av_free(s);
1184     return size - padding;
1185 }