git.sesse.net Git - ffmpeg/blob - libavcodec/h263dec.c

   1 /*
   2  * H.263 decoder
   3  * Copyright (c) 2001 Fabrice Bellard
   4  * Copyright (c) 2002-2004 Michael Niedermayer <michaelni@gmx.at>
   5  *
   6  * This file is part of FFmpeg.
   7  *
   8  * FFmpeg is free software; you can redistribute it and/or
   9  * modify it under the terms of the GNU Lesser General Public
  10  * License as published by the Free Software Foundation; either
  11  * version 2.1 of the License, or (at your option) any later version.
  12  *
  13  * FFmpeg is distributed in the hope that it will be useful,
  14  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  15  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  16  * Lesser General Public License for more details.
  17  *
  18  * You should have received a copy of the GNU Lesser General Public
  19  * License along with FFmpeg; if not, write to the Free Software
  20  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
  21  */
  22
  23 /**
  24  * @file
  25  * H.263 decoder.
  26  */
  27
  28 #define UNCHECKED_BITSTREAM_READER 1
  29
  30 #include "libavutil/cpu.h"
  31 #include "avcodec.h"
  32 #include "error_resilience.h"
  33 #include "flv.h"
  34 #include "h263.h"
  35 #include "h263_parser.h"
  36 #include "internal.h"
  37 #include "mpeg_er.h"
  38 #include "mpeg4video.h"
  39 #include "mpeg4video_parser.h"
  40 #include "mpegvideo.h"
  41 #include "msmpeg4.h"
  42 #include "qpeldsp.h"
  43 #include "vdpau_compat.h"
  44 #include "thread.h"
  45
  46 static enum AVPixelFormat h263_get_format(AVCodecContext *avctx)
  47 {
  48     if (avctx->codec->id == AV_CODEC_ID_MSS2)
  49         return AV_PIX_FMT_YUV420P;
  50
  51     if (CONFIG_GRAY && (avctx->flags & CODEC_FLAG_GRAY)) {
  52         if (avctx->color_range == AVCOL_RANGE_UNSPECIFIED)
  53             avctx->color_range = AVCOL_RANGE_MPEG;
  54         return AV_PIX_FMT_GRAY8;
  55     }
  56
  57     return avctx->pix_fmt = ff_get_format(avctx, avctx->codec->pix_fmts);
  58 }
  59
  60 av_cold int ff_h263_decode_init(AVCodecContext *avctx)
  61 {
  62     MpegEncContext *s = avctx->priv_data;
  63     int ret;
  64
  65     s->out_format      = FMT_H263;
  66
  67     // set defaults
  68     ff_mpv_decode_defaults(s);
  69     ff_mpv_decode_init(s, avctx);
  70
  71     s->quant_precision = 5;
  72     s->decode_mb       = ff_h263_decode_mb;
  73     s->low_delay       = 1;
  74     s->unrestricted_mv = 1;
  75
  76     /* select sub codec */
  77     switch (avctx->codec->id) {
  78     case AV_CODEC_ID_H263:
  79     case AV_CODEC_ID_H263P:
  80         s->unrestricted_mv = 0;
  81         avctx->chroma_sample_location = AVCHROMA_LOC_CENTER;
  82         break;
  83     case AV_CODEC_ID_MPEG4:
  84         break;
  85     case AV_CODEC_ID_MSMPEG4V1:
  86         s->h263_pred       = 1;
  87         s->msmpeg4_version = 1;
  88         break;
  89     case AV_CODEC_ID_MSMPEG4V2:
  90         s->h263_pred       = 1;
  91         s->msmpeg4_version = 2;
  92         break;
  93     case AV_CODEC_ID_MSMPEG4V3:
  94         s->h263_pred       = 1;
  95         s->msmpeg4_version = 3;
  96         break;
  97     case AV_CODEC_ID_WMV1:
  98         s->h263_pred       = 1;
  99         s->msmpeg4_version = 4;
 100         break;
 101     case AV_CODEC_ID_WMV2:
 102         s->h263_pred       = 1;
 103         s->msmpeg4_version = 5;
 104         break;
 105     case AV_CODEC_ID_VC1:
 106     case AV_CODEC_ID_WMV3:
 107     case AV_CODEC_ID_VC1IMAGE:
 108     case AV_CODEC_ID_WMV3IMAGE:
 109     case AV_CODEC_ID_MSS2:
 110         s->h263_pred       = 1;
 111         s->msmpeg4_version = 6;
 112         avctx->chroma_sample_location = AVCHROMA_LOC_LEFT;
 113         break;
 114     case AV_CODEC_ID_H263I:
 115         break;
 116     case AV_CODEC_ID_FLV1:
 117         s->h263_flv = 1;
 118         break;
 119     default:
 120         av_log(avctx, AV_LOG_ERROR, "Unsupported codec %d\n",
 121                avctx->codec->id);
 122         return AVERROR(ENOSYS);
 123     }
 124     s->codec_id    = avctx->codec->id;
 125
 126     if (avctx->codec_tag == AV_RL32("L263") || avctx->codec_tag == AV_RL32("S263"))
 127         if (avctx->extradata_size == 56 && avctx->extradata[0] == 1)
 128             s->ehc_mode = 1;
 129
 130     /* for h263, we allocate the images after having read the header */
 131     if (avctx->codec->id != AV_CODEC_ID_H263 &&
 132         avctx->codec->id != AV_CODEC_ID_H263P &&
 133         avctx->codec->id != AV_CODEC_ID_MPEG4) {
 134         avctx->pix_fmt = h263_get_format(avctx);
 135         ff_mpv_idct_init(s);
 136         if ((ret = ff_mpv_common_init(s)) < 0)
 137             return ret;
 138     }
 139
 140     ff_h263dsp_init(&s->h263dsp);
 141     ff_qpeldsp_init(&s->qdsp);
 142     ff_h263_decode_init_vlc();
 143
 144     return 0;
 145 }
 146
 147 av_cold int ff_h263_decode_end(AVCodecContext *avctx)
 148 {
 149     MpegEncContext *s = avctx->priv_data;
 150
 151     ff_mpv_common_end(s);
 152     return 0;
 153 }
 154
 155 /**
 156  * Return the number of bytes consumed for building the current frame.
 157  */
 158 static int get_consumed_bytes(MpegEncContext *s, int buf_size)
 159 {
 160     int pos = (get_bits_count(&s->gb) + 7) >> 3;
 161
 162     if (s->divx_packed || s->avctx->hwaccel) {
 163         /* We would have to scan through the whole buf to handle the weird
 164          * reordering ... */
 165         return buf_size;
 166     } else if (s->avctx->flags & CODEC_FLAG_TRUNCATED) {
 167         pos -= s->parse_context.last_index;
 168         // padding is not really read so this might be -1
 169         if (pos < 0)
 170             pos = 0;
 171         return pos;
 172     } else {
 173         // avoid infinite loops (maybe not needed...)
 174         if (pos == 0)
 175             pos = 1;
 176         // oops ;)
 177         if (pos + 10 > buf_size)
 178             pos = buf_size;
 179
 180         return pos;
 181     }
 182 }
 183
 184 static int decode_slice(MpegEncContext *s)
 185 {
 186     const int part_mask = s->partitioned_frame
 187                           ? (ER_AC_END | ER_AC_ERROR) : 0x7F;
 188     const int mb_size   = 16 >> s->avctx->lowres;
 189     int ret;
 190
 191     s->last_resync_gb   = s->gb;
 192     s->first_slice_line = 1;
 193     s->resync_mb_x      = s->mb_x;
 194     s->resync_mb_y      = s->mb_y;
 195
 196     ff_set_qscale(s, s->qscale);
 197
 198     if (s->avctx->hwaccel) {
 199         const uint8_t *start = s->gb.buffer + get_bits_count(&s->gb) / 8;
 200         ret = s->avctx->hwaccel->decode_slice(s->avctx, start, s->gb.buffer_end - start);
 201         // ensure we exit decode loop
 202         s->mb_y = s->mb_height;
 203         return ret;
 204     }
 205
 206     if (s->partitioned_frame) {
 207         const int qscale = s->qscale;
 208
 209         if (CONFIG_MPEG4_DECODER && s->codec_id == AV_CODEC_ID_MPEG4)
 210             if ((ret = ff_mpeg4_decode_partitions(s->avctx->priv_data)) < 0)
 211                 return ret;
 212
 213         /* restore variables which were modified */
 214         s->first_slice_line = 1;
 215         s->mb_x             = s->resync_mb_x;
 216         s->mb_y             = s->resync_mb_y;
 217         ff_set_qscale(s, qscale);
 218     }
 219
 220     for (; s->mb_y < s->mb_height; s->mb_y++) {
 221         /* per-row end of slice checks */
 222         if (s->msmpeg4_version) {
 223             if (s->resync_mb_y + s->slice_height == s->mb_y) {
 224                 ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
 225                                 s->mb_x - 1, s->mb_y, ER_MB_END);
 226
 227                 return 0;
 228             }
 229         }
 230
 231         if (s->msmpeg4_version == 1) {
 232             s->last_dc[0] =
 233             s->last_dc[1] =
 234             s->last_dc[2] = 128;
 235         }
 236
 237         ff_init_block_index(s);
 238         for (; s->mb_x < s->mb_width; s->mb_x++) {
 239             int ret;
 240
 241             ff_update_block_index(s);
 242
 243             if (s->resync_mb_x == s->mb_x && s->resync_mb_y + 1 == s->mb_y)
 244                 s->first_slice_line = 0;
 245
 246             /* DCT & quantize */
 247
 248             s->mv_dir  = MV_DIR_FORWARD;
 249             s->mv_type = MV_TYPE_16X16;
 250             ff_dlog(s, "%d %d %06X\n",
 251                     ret, get_bits_count(&s->gb), show_bits(&s->gb, 24));
 252
 253             ff_tlog(NULL, "Decoding MB at %dx%d\n", s->mb_x, s->mb_y);
 254             ret = s->decode_mb(s, s->block);
 255
 256             if (s->pict_type != AV_PICTURE_TYPE_B)
 257                 ff_h263_update_motion_val(s);
 258
 259             if (ret < 0) {
 260                 const int xy = s->mb_x + s->mb_y * s->mb_stride;
 261                 if (ret == SLICE_END) {
 262                     ff_mpv_decode_mb(s, s->block);
 263                     if (s->loop_filter)
 264                         ff_h263_loop_filter(s);
 265
 266                     ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
 267                                     s->mb_x, s->mb_y, ER_MB_END & part_mask);
 268
 269                     s->padding_bug_score--;
 270
 271                     if (++s->mb_x >= s->mb_width) {
 272                         s->mb_x = 0;
 273                         ff_mpeg_draw_horiz_band(s, s->mb_y * mb_size, mb_size);
 274                         ff_mpv_report_decode_progress(s);
 275                         s->mb_y++;
 276                     }
 277                     return 0;
 278                 } else if (ret == SLICE_NOEND) {
 279                     av_log(s->avctx, AV_LOG_ERROR,
 280                            "Slice mismatch at MB: %d\n", xy);
 281                     ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
 282                                     s->mb_x + 1, s->mb_y,
 283                                     ER_MB_END & part_mask);
 284                     return AVERROR_INVALIDDATA;
 285                 }
 286                 av_log(s->avctx, AV_LOG_ERROR, "Error at MB: %d\n", xy);
 287                 ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
 288                                 s->mb_x, s->mb_y, ER_MB_ERROR & part_mask);
 289
 290                 if (s->avctx->err_recognition & AV_EF_IGNORE_ERR)
 291                     continue;
 292                 return AVERROR_INVALIDDATA;
 293             }
 294
 295             ff_mpv_decode_mb(s, s->block);
 296             if (s->loop_filter)
 297                 ff_h263_loop_filter(s);
 298         }
 299
 300         ff_mpeg_draw_horiz_band(s, s->mb_y * mb_size, mb_size);
 301         ff_mpv_report_decode_progress(s);
 302
 303         s->mb_x = 0;
 304     }
 305
 306     av_assert1(s->mb_x == 0 && s->mb_y == s->mb_height);
 307
 308     if (s->codec_id == AV_CODEC_ID_MPEG4         &&
 309         (s->workaround_bugs & FF_BUG_AUTODETECT) &&
 310         get_bits_left(&s->gb) >= 48              &&
 311         show_bits(&s->gb, 24) == 0x4010          &&
 312         !s->data_partitioning)
 313         s->padding_bug_score += 32;
 314
 315     /* try to detect the padding bug */
 316     if (s->codec_id == AV_CODEC_ID_MPEG4         &&
 317         (s->workaround_bugs & FF_BUG_AUTODETECT) &&
 318         get_bits_left(&s->gb) >= 0               &&
 319         get_bits_left(&s->gb) < 137              &&
 320         !s->data_partitioning) {
 321         const int bits_count = get_bits_count(&s->gb);
 322         const int bits_left  = s->gb.size_in_bits - bits_count;
 323
 324         if (bits_left == 0) {
 325             s->padding_bug_score += 16;
 326         } else if (bits_left != 1) {
 327             int v = show_bits(&s->gb, 8);
 328             v |= 0x7F >> (7 - (bits_count & 7));
 329
 330             if (v == 0x7F && bits_left <= 8)
 331                 s->padding_bug_score--;
 332             else if (v == 0x7F && ((get_bits_count(&s->gb) + 8) & 8) &&
 333                      bits_left <= 16)
 334                 s->padding_bug_score += 4;
 335             else
 336                 s->padding_bug_score++;
 337         }
 338     }
 339
 340     if (s->codec_id == AV_CODEC_ID_H263          &&
 341         (s->workaround_bugs & FF_BUG_AUTODETECT) &&
 342         get_bits_left(&s->gb) >= 8               &&
 343         get_bits_left(&s->gb) < 300              &&
 344         s->pict_type == AV_PICTURE_TYPE_I        &&
 345         show_bits(&s->gb, 8) == 0                &&
 346         !s->data_partitioning) {
 347
 348         s->padding_bug_score += 32;
 349     }
 350
 351     if (s->codec_id == AV_CODEC_ID_H263          &&
 352         (s->workaround_bugs & FF_BUG_AUTODETECT) &&
 353         get_bits_left(&s->gb) >= 64              &&
 354         AV_RB64(s->gb.buffer_end - 8) == 0xCDCDCDCDFC7F0000) {
 355
 356         s->padding_bug_score += 32;
 357     }
 358
 359     if (s->workaround_bugs & FF_BUG_AUTODETECT) {
 360         if (
 361             (s->padding_bug_score > -2 && !s->data_partitioning))
 362             s->workaround_bugs |= FF_BUG_NO_PADDING;
 363         else
 364             s->workaround_bugs &= ~FF_BUG_NO_PADDING;
 365     }
 366
 367     // handle formats which don't have unique end markers
 368     if (s->msmpeg4_version || (s->workaround_bugs & FF_BUG_NO_PADDING)) { // FIXME perhaps solve this more cleanly
 369         int left      = get_bits_left(&s->gb);
 370         int max_extra = 7;
 371
 372         /* no markers in M$ crap */
 373         if (s->msmpeg4_version && s->pict_type == AV_PICTURE_TYPE_I)
 374             max_extra += 17;
 375
 376         /* buggy padding but the frame should still end approximately at
 377          * the bitstream end */
 378         if ((s->workaround_bugs & FF_BUG_NO_PADDING) &&
 379             (s->avctx->err_recognition & (AV_EF_BUFFER|AV_EF_AGGRESSIVE)))
 380             max_extra += 48;
 381         else if ((s->workaround_bugs & FF_BUG_NO_PADDING))
 382             max_extra += 256 * 256 * 256 * 64;
 383
 384         if (left > max_extra)
 385             av_log(s->avctx, AV_LOG_ERROR,
 386                    "discarding %d junk bits at end, next would be %X\n",
 387                    left, show_bits(&s->gb, 24));
 388         else if (left < 0)
 389             av_log(s->avctx, AV_LOG_ERROR, "overreading %d bits\n", -left);
 390         else
 391             ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
 392                             s->mb_x - 1, s->mb_y, ER_MB_END);
 393
 394         return 0;
 395     }
 396
 397     av_log(s->avctx, AV_LOG_ERROR,
 398            "slice end not reached but screenspace end (%d left %06X, score= %d)\n",
 399            get_bits_left(&s->gb), show_bits(&s->gb, 24), s->padding_bug_score);
 400
 401     ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y, s->mb_x, s->mb_y,
 402                     ER_MB_END & part_mask);
 403
 404     return AVERROR_INVALIDDATA;
 405 }
 406
 407 int ff_h263_decode_frame(AVCodecContext *avctx, void *data, int *got_frame,
 408                          AVPacket *avpkt)
 409 {
 410     const uint8_t *buf = avpkt->data;
 411     int buf_size       = avpkt->size;
 412     MpegEncContext *s  = avctx->priv_data;
 413     int ret;
 414     int slice_ret = 0;
 415     AVFrame *pict = data;
 416
 417     /* no supplementary picture */
 418     if (buf_size == 0) {
 419         /* special case for last picture */
 420         if (s->low_delay == 0 && s->next_picture_ptr) {
 421             if ((ret = av_frame_ref(pict, s->next_picture_ptr->f)) < 0)
 422                 return ret;
 423             s->next_picture_ptr = NULL;
 424
 425             *got_frame = 1;
 426         }
 427
 428         return 0;
 429     }
 430
 431     if (s->avctx->flags & CODEC_FLAG_TRUNCATED) {
 432         int next;
 433
 434         if (CONFIG_MPEG4_DECODER && s->codec_id == AV_CODEC_ID_MPEG4) {
 435             next = ff_mpeg4_find_frame_end(&s->parse_context, buf, buf_size);
 436         } else if (CONFIG_H263_DECODER && s->codec_id == AV_CODEC_ID_H263) {
 437             next = ff_h263_find_frame_end(&s->parse_context, buf, buf_size);
 438         } else if (CONFIG_H263P_DECODER && s->codec_id == AV_CODEC_ID_H263P) {
 439             next = ff_h263_find_frame_end(&s->parse_context, buf, buf_size);
 440         } else {
 441             av_log(s->avctx, AV_LOG_ERROR,
 442                    "this codec does not support truncated bitstreams\n");
 443             return AVERROR(ENOSYS);
 444         }
 445
 446         if (ff_combine_frame(&s->parse_context, next, (const uint8_t **)&buf,
 447                              &buf_size) < 0)
 448             return buf_size;
 449     }
 450
 451 retry:
 452     if (s->divx_packed && s->bitstream_buffer_size) {
 453         int i;
 454         for(i=0; i < buf_size-3; i++) {
 455             if (buf[i]==0 && buf[i+1]==0 && buf[i+2]==1) {
 456                 if (buf[i+3]==0xB0) {
 457                     av_log(s->avctx, AV_LOG_WARNING, "Discarding excessive bitstream in packed xvid\n");
 458                     s->bitstream_buffer_size = 0;
 459                 }
 460                 break;
 461             }
 462         }
 463     }
 464
 465     if (s->bitstream_buffer_size && (s->divx_packed || buf_size <= MAX_NVOP_SIZE)) // divx 5.01+/xvid frame reorder
 466         ret = init_get_bits8(&s->gb, s->bitstream_buffer,
 467                              s->bitstream_buffer_size);
 468     else
 469         ret = init_get_bits8(&s->gb, buf, buf_size);
 470
 471     s->bitstream_buffer_size = 0;
 472     if (ret < 0)
 473         return ret;
 474
 475     if (!s->context_initialized)
 476         // we need the idct permutaton for reading a custom matrix
 477         ff_mpv_idct_init(s);
 478
 479     /* let's go :-) */
 480     if (CONFIG_WMV2_DECODER && s->msmpeg4_version == 5) {
 481         ret = ff_wmv2_decode_picture_header(s);
 482     } else if (CONFIG_MSMPEG4_DECODER && s->msmpeg4_version) {
 483         ret = ff_msmpeg4_decode_picture_header(s);
 484     } else if (CONFIG_MPEG4_DECODER && avctx->codec_id == AV_CODEC_ID_MPEG4) {
 485         if (s->avctx->extradata_size && s->picture_number == 0) {
 486             GetBitContext gb;
 487
 488             if (init_get_bits8(&gb, s->avctx->extradata, s->avctx->extradata_size) >= 0 )
 489                 ff_mpeg4_decode_picture_header(avctx->priv_data, &gb);
 490         }
 491         ret = ff_mpeg4_decode_picture_header(avctx->priv_data, &s->gb);
 492     } else if (CONFIG_H263I_DECODER && s->codec_id == AV_CODEC_ID_H263I) {
 493         ret = ff_intel_h263_decode_picture_header(s);
 494     } else if (CONFIG_FLV_DECODER && s->h263_flv) {
 495         ret = ff_flv_decode_picture_header(s);
 496     } else {
 497         ret = ff_h263_decode_picture_header(s);
 498     }
 499
 500     if (ret < 0 || ret == FRAME_SKIPPED) {
 501         if (   s->width  != avctx->coded_width
 502             || s->height != avctx->coded_height) {
 503                 av_log(s->avctx, AV_LOG_WARNING, "Reverting picture dimensions change due to header decoding failure\n");
 504                 s->width = avctx->coded_width;
 505                 s->height= avctx->coded_height;
 506         }
 507     }
 508     if (ret == FRAME_SKIPPED)
 509         return get_consumed_bytes(s, buf_size);
 510
 511     /* skip if the header was thrashed */
 512     if (ret < 0) {
 513         av_log(s->avctx, AV_LOG_ERROR, "header damaged\n");
 514         return ret;
 515     }
 516
 517     if (!s->context_initialized) {
 518         avctx->pix_fmt = h263_get_format(avctx);
 519         if ((ret = ff_mpv_common_init(s)) < 0)
 520             return ret;
 521     }
 522
 523     if (!s->current_picture_ptr || s->current_picture_ptr->f->data[0]) {
 524         int i = ff_find_unused_picture(s->avctx, s->picture, 0);
 525         if (i < 0)
 526             return i;
 527         s->current_picture_ptr = &s->picture[i];
 528     }
 529
 530     avctx->has_b_frames = !s->low_delay;
 531
 532     if (CONFIG_MPEG4_DECODER && avctx->codec_id == AV_CODEC_ID_MPEG4) {
 533         if (ff_mpeg4_workaround_bugs(avctx) == 1)
 534             goto retry;
 535     }
 536
 537     /* After H263 & mpeg4 header decode we have the height, width,
 538      * and other parameters. So then we could init the picture.
 539      * FIXME: By the way H263 decoder is evolving it should have
 540      * an H263EncContext */
 541     if (s->width  != avctx->coded_width  ||
 542         s->height != avctx->coded_height ||
 543         s->context_reinit) {
 544         /* H.263 could change picture size any time */
 545         s->context_reinit = 0;
 546
 547         ret = ff_set_dimensions(avctx, s->width, s->height);
 548         if (ret < 0)
 549             return ret;
 550
 551         ff_set_sar(avctx, avctx->sample_aspect_ratio);
 552
 553         if ((ret = ff_mpv_common_frame_size_change(s)))
 554             return ret;
 555
 556         if (avctx->pix_fmt != h263_get_format(avctx)) {
 557             av_log(avctx, AV_LOG_ERROR, "format change not supported\n");
 558             avctx->pix_fmt = AV_PIX_FMT_NONE;
 559             return AVERROR_UNKNOWN;
 560         }
 561     }
 562
 563     if (s->codec_id == AV_CODEC_ID_H263  ||
 564         s->codec_id == AV_CODEC_ID_H263P ||
 565         s->codec_id == AV_CODEC_ID_H263I)
 566         s->gob_index = H263_GOB_HEIGHT(s->height);
 567
 568     // for skipping the frame
 569     s->current_picture.f->pict_type = s->pict_type;
 570     s->current_picture.f->key_frame = s->pict_type == AV_PICTURE_TYPE_I;
 571
 572     /* skip B-frames if we don't have reference frames */
 573     if (!s->last_picture_ptr &&
 574         (s->pict_type == AV_PICTURE_TYPE_B || s->droppable))
 575         return get_consumed_bytes(s, buf_size);
 576     if ((avctx->skip_frame >= AVDISCARD_NONREF &&
 577          s->pict_type == AV_PICTURE_TYPE_B)    ||
 578         (avctx->skip_frame >= AVDISCARD_NONKEY &&
 579          s->pict_type != AV_PICTURE_TYPE_I)    ||
 580         avctx->skip_frame >= AVDISCARD_ALL)
 581         return get_consumed_bytes(s, buf_size);
 582
 583     if (s->next_p_frame_damaged) {
 584         if (s->pict_type == AV_PICTURE_TYPE_B)
 585             return get_consumed_bytes(s, buf_size);
 586         else
 587             s->next_p_frame_damaged = 0;
 588     }
 589
 590     if ((!s->no_rounding) || s->pict_type == AV_PICTURE_TYPE_B) {
 591         s->me.qpel_put = s->qdsp.put_qpel_pixels_tab;
 592         s->me.qpel_avg = s->qdsp.avg_qpel_pixels_tab;
 593     } else {
 594         s->me.qpel_put = s->qdsp.put_no_rnd_qpel_pixels_tab;
 595         s->me.qpel_avg = s->qdsp.avg_qpel_pixels_tab;
 596     }
 597
 598     if ((ret = ff_mpv_frame_start(s, avctx)) < 0)
 599         return ret;
 600
 601     if (!s->divx_packed && !avctx->hwaccel)
 602         ff_thread_finish_setup(avctx);
 603
 604     if (CONFIG_MPEG4_VDPAU_DECODER && (s->avctx->codec->capabilities & CODEC_CAP_HWACCEL_VDPAU)) {
 605         ff_vdpau_mpeg4_decode_picture(avctx->priv_data, s->gb.buffer, s->gb.buffer_end - s->gb.buffer);
 606         goto frame_end;
 607     }
 608
 609     if (avctx->hwaccel) {
 610         ret = avctx->hwaccel->start_frame(avctx, s->gb.buffer,
 611                                           s->gb.buffer_end - s->gb.buffer);
 612         if (ret < 0 )
 613             return ret;
 614     }
 615
 616     ff_mpeg_er_frame_start(s);
 617
 618     /* the second part of the wmv2 header contains the MB skip bits which
 619      * are stored in current_picture->mb_type which is not available before
 620      * ff_mpv_frame_start() */
 621     if (CONFIG_WMV2_DECODER && s->msmpeg4_version == 5) {
 622         ret = ff_wmv2_decode_secondary_picture_header(s);
 623         if (ret < 0)
 624             return ret;
 625         if (ret == 1)
 626             goto frame_end;
 627     }
 628
 629     /* decode each macroblock */
 630     s->mb_x = 0;
 631     s->mb_y = 0;
 632
 633     slice_ret = decode_slice(s);
 634     while (s->mb_y < s->mb_height) {
 635         if (s->msmpeg4_version) {
 636             if (s->slice_height == 0 || s->mb_x != 0 ||
 637                 (s->mb_y % s->slice_height) != 0 || get_bits_left(&s->gb) < 0)
 638                 break;
 639         } else {
 640             int prev_x = s->mb_x, prev_y = s->mb_y;
 641             if (ff_h263_resync(s) < 0)
 642                 break;
 643             if (prev_y * s->mb_width + prev_x < s->mb_y * s->mb_width + s->mb_x)
 644                 s->er.error_occurred = 1;
 645         }
 646
 647         if (s->msmpeg4_version < 4 && s->h263_pred)
 648             ff_mpeg4_clean_buffers(s);
 649
 650         if (decode_slice(s) < 0)
 651             slice_ret = AVERROR_INVALIDDATA;
 652     }
 653
 654     if (s->msmpeg4_version && s->msmpeg4_version < 4 &&
 655         s->pict_type == AV_PICTURE_TYPE_I)
 656         if (!CONFIG_MSMPEG4_DECODER ||
 657             ff_msmpeg4_decode_ext_header(s, buf_size) < 0)
 658             s->er.error_status_table[s->mb_num - 1] = ER_MB_ERROR;
 659
 660     av_assert1(s->bitstream_buffer_size == 0);
 661 frame_end:
 662     ff_er_frame_end(&s->er);
 663
 664     if (avctx->hwaccel) {
 665         ret = avctx->hwaccel->end_frame(avctx);
 666         if (ret < 0)
 667             return ret;
 668     }
 669
 670     ff_mpv_frame_end(s);
 671
 672     if (CONFIG_MPEG4_DECODER && avctx->codec_id == AV_CODEC_ID_MPEG4)
 673         ff_mpeg4_frame_end(avctx, buf, buf_size);
 674
 675     if (!s->divx_packed && avctx->hwaccel)
 676         ff_thread_finish_setup(avctx);
 677
 678     av_assert1(s->current_picture.f->pict_type == s->current_picture_ptr->f->pict_type);
 679     av_assert1(s->current_picture.f->pict_type == s->pict_type);
 680     if (s->pict_type == AV_PICTURE_TYPE_B || s->low_delay) {
 681         if ((ret = av_frame_ref(pict, s->current_picture_ptr->f)) < 0)
 682             return ret;
 683         ff_print_debug_info(s, s->current_picture_ptr, pict);
 684         ff_mpv_export_qp_table(s, pict, s->current_picture_ptr, FF_QSCALE_TYPE_MPEG1);
 685     } else if (s->last_picture_ptr) {
 686         if ((ret = av_frame_ref(pict, s->last_picture_ptr->f)) < 0)
 687             return ret;
 688         ff_print_debug_info(s, s->last_picture_ptr, pict);
 689         ff_mpv_export_qp_table(s, pict, s->last_picture_ptr, FF_QSCALE_TYPE_MPEG1);
 690     }
 691
 692     if (s->last_picture_ptr || s->low_delay) {
 693         if (   pict->format == AV_PIX_FMT_YUV420P
 694             && (s->codec_tag == AV_RL32("GEOV") || s->codec_tag == AV_RL32("GEOX"))) {
 695             int x, y, p;
 696             av_frame_make_writable(pict);
 697             for (p=0; p<3; p++) {
 698                 int w = FF_CEIL_RSHIFT(pict-> width, !!p);
 699                 int h = FF_CEIL_RSHIFT(pict->height, !!p);
 700                 int linesize = pict->linesize[p];
 701                 for (y=0; y<(h>>1); y++)
 702                     for (x=0; x<w; x++)
 703                         FFSWAP(int,
 704                                pict->data[p][x + y*linesize],
 705                                pict->data[p][x + (h-1-y)*linesize]);
 706             }
 707         }
 708         *got_frame = 1;
 709     }
 710
 711     if (slice_ret < 0 && (avctx->err_recognition & AV_EF_EXPLODE))
 712         return ret;
 713     else
 714         return get_consumed_bytes(s, buf_size);
 715 }
 716
 717 const enum AVPixelFormat ff_h263_hwaccel_pixfmt_list_420[] = {
 718 #if CONFIG_H263_VAAPI_HWACCEL || CONFIG_MPEG4_VAAPI_HWACCEL
 719     AV_PIX_FMT_VAAPI_VLD,
 720 #endif
 721 #if CONFIG_H263_VDPAU_HWACCEL || CONFIG_MPEG4_VDPAU_HWACCEL
 722     AV_PIX_FMT_VDPAU,
 723 #endif
 724     AV_PIX_FMT_YUV420P,
 725     AV_PIX_FMT_NONE
 726 };
 727
 728 AVCodec ff_h263_decoder = {
 729     .name           = "h263",
 730     .long_name      = NULL_IF_CONFIG_SMALL("H.263 / H.263-1996, H.263+ / H.263-1998 / H.263 version 2"),
 731     .type           = AVMEDIA_TYPE_VIDEO,
 732     .id             = AV_CODEC_ID_H263,
 733     .priv_data_size = sizeof(MpegEncContext),
 734     .init           = ff_h263_decode_init,
 735     .close          = ff_h263_decode_end,
 736     .decode         = ff_h263_decode_frame,
 737     .capabilities   = CODEC_CAP_DRAW_HORIZ_BAND | CODEC_CAP_DR1 |
 738                       CODEC_CAP_TRUNCATED | CODEC_CAP_DELAY,
 739     .flush          = ff_mpeg_flush,
 740     .max_lowres     = 3,
 741     .pix_fmts       = ff_h263_hwaccel_pixfmt_list_420,
 742 };
 743
 744 AVCodec ff_h263p_decoder = {
 745     .name           = "h263p",
 746     .long_name      = NULL_IF_CONFIG_SMALL("H.263 / H.263-1996, H.263+ / H.263-1998 / H.263 version 2"),
 747     .type           = AVMEDIA_TYPE_VIDEO,
 748     .id             = AV_CODEC_ID_H263P,
 749     .priv_data_size = sizeof(MpegEncContext),
 750     .init           = ff_h263_decode_init,
 751     .close          = ff_h263_decode_end,
 752     .decode         = ff_h263_decode_frame,
 753     .capabilities   = CODEC_CAP_DRAW_HORIZ_BAND | CODEC_CAP_DR1 |
 754                       CODEC_CAP_TRUNCATED | CODEC_CAP_DELAY,
 755     .flush          = ff_mpeg_flush,
 756     .max_lowres     = 3,
 757     .pix_fmts       = ff_h263_hwaccel_pixfmt_list_420,
 758 };