git.sesse.net Git - ffmpeg/blob - libavcodec/h263dec.c

   1 /*
   2  * H.263 decoder
   3  * Copyright (c) 2001 Fabrice Bellard
   4  * Copyright (c) 2002-2004 Michael Niedermayer <michaelni@gmx.at>
   5  *
   6  * This file is part of Libav.
   7  *
   8  * Libav is free software; you can redistribute it and/or
   9  * modify it under the terms of the GNU Lesser General Public
  10  * License as published by the Free Software Foundation; either
  11  * version 2.1 of the License, or (at your option) any later version.
  12  *
  13  * Libav is distributed in the hope that it will be useful,
  14  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  15  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  16  * Lesser General Public License for more details.
  17  *
  18  * You should have received a copy of the GNU Lesser General Public
  19  * License along with Libav; if not, write to the Free Software
  20  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
  21  */
  22
  23 /**
  24  * @file
  25  * H.263 decoder.
  26  */
  27
  28 #include "libavutil/cpu.h"
  29 #include "avcodec.h"
  30 #include "error_resilience.h"
  31 #include "flv.h"
  32 #include "h263.h"
  33 #include "h263_parser.h"
  34 #include "internal.h"
  35 #include "mpeg_er.h"
  36 #include "mpeg4video.h"
  37 #include "mpeg4video_parser.h"
  38 #include "mpegvideo.h"
  39 #include "msmpeg4.h"
  40 #include "qpeldsp.h"
  41 #include "thread.h"
  42
  43 static enum AVPixelFormat h263_get_format(AVCodecContext *avctx)
  44 {
  45     if (avctx->codec->id == AV_CODEC_ID_MSS2)
  46         return AV_PIX_FMT_YUV420P;
  47
  48     return avctx->pix_fmt = ff_get_format(avctx, avctx->codec->pix_fmts);
  49 }
  50
  51 av_cold int ff_h263_decode_init(AVCodecContext *avctx)
  52 {
  53     MpegEncContext *s = avctx->priv_data;
  54     int ret;
  55
  56     s->avctx           = avctx;
  57     s->out_format      = FMT_H263;
  58     s->width           = avctx->coded_width;
  59     s->height          = avctx->coded_height;
  60     s->workaround_bugs = avctx->workaround_bugs;
  61
  62     // set defaults
  63     ff_mpv_decode_defaults(s);
  64     s->quant_precision = 5;
  65     s->decode_mb       = ff_h263_decode_mb;
  66     s->low_delay       = 1;
  67     s->unrestricted_mv = 1;
  68
  69     /* select sub codec */
  70     switch (avctx->codec->id) {
  71     case AV_CODEC_ID_H263:
  72         s->unrestricted_mv = 0;
  73         avctx->chroma_sample_location = AVCHROMA_LOC_CENTER;
  74         break;
  75     case AV_CODEC_ID_MPEG4:
  76         break;
  77     case AV_CODEC_ID_MSMPEG4V1:
  78         s->h263_pred       = 1;
  79         s->msmpeg4_version = 1;
  80         break;
  81     case AV_CODEC_ID_MSMPEG4V2:
  82         s->h263_pred       = 1;
  83         s->msmpeg4_version = 2;
  84         break;
  85     case AV_CODEC_ID_MSMPEG4V3:
  86         s->h263_pred       = 1;
  87         s->msmpeg4_version = 3;
  88         break;
  89     case AV_CODEC_ID_WMV1:
  90         s->h263_pred       = 1;
  91         s->msmpeg4_version = 4;
  92         break;
  93     case AV_CODEC_ID_WMV2:
  94         s->h263_pred       = 1;
  95         s->msmpeg4_version = 5;
  96         break;
  97     case AV_CODEC_ID_VC1:
  98     case AV_CODEC_ID_WMV3:
  99     case AV_CODEC_ID_VC1IMAGE:
 100     case AV_CODEC_ID_WMV3IMAGE:
 101     case AV_CODEC_ID_MSS2:
 102         s->h263_pred       = 1;
 103         s->msmpeg4_version = 6;
 104         avctx->chroma_sample_location = AVCHROMA_LOC_LEFT;
 105         break;
 106     case AV_CODEC_ID_H263I:
 107         break;
 108     case AV_CODEC_ID_FLV1:
 109         s->h263_flv = 1;
 110         break;
 111     default:
 112         av_log(avctx, AV_LOG_ERROR, "Unsupported codec %d\n",
 113                avctx->codec->id);
 114         return AVERROR(ENOSYS);
 115     }
 116     s->codec_id    = avctx->codec->id;
 117
 118     /* for h263, we allocate the images after having read the header */
 119     if (avctx->codec->id != AV_CODEC_ID_H263 &&
 120         avctx->codec->id != AV_CODEC_ID_MPEG4) {
 121         avctx->pix_fmt = h263_get_format(avctx);
 122         ff_mpv_idct_init(s);
 123         if ((ret = ff_mpv_common_init(s)) < 0)
 124             return ret;
 125     }
 126
 127     ff_h263dsp_init(&s->h263dsp);
 128     ff_qpeldsp_init(&s->qdsp);
 129     ff_h263_decode_init_vlc();
 130
 131     return 0;
 132 }
 133
 134 av_cold int ff_h263_decode_end(AVCodecContext *avctx)
 135 {
 136     MpegEncContext *s = avctx->priv_data;
 137
 138     ff_mpv_common_end(s);
 139     return 0;
 140 }
 141
 142 /**
 143  * Return the number of bytes consumed for building the current frame.
 144  */
 145 static int get_consumed_bytes(MpegEncContext *s, int buf_size)
 146 {
 147     int pos = (get_bits_count(&s->gb) + 7) >> 3;
 148
 149     if (s->divx_packed || s->avctx->hwaccel) {
 150         /* We would have to scan through the whole buf to handle the weird
 151          * reordering ... */
 152         return buf_size;
 153     } else if (s->flags & CODEC_FLAG_TRUNCATED) {
 154         pos -= s->parse_context.last_index;
 155         // padding is not really read so this might be -1
 156         if (pos < 0)
 157             pos = 0;
 158         return pos;
 159     } else {
 160         // avoid infinite loops (maybe not needed...)
 161         if (pos == 0)
 162             pos = 1;
 163         // oops ;)
 164         if (pos + 10 > buf_size)
 165             pos = buf_size;
 166
 167         return pos;
 168     }
 169 }
 170
 171 static int decode_slice(MpegEncContext *s)
 172 {
 173     const int part_mask = s->partitioned_frame
 174                           ? (ER_AC_END | ER_AC_ERROR) : 0x7F;
 175     const int mb_size = 16;
 176     int ret;
 177
 178     s->last_resync_gb   = s->gb;
 179     s->first_slice_line = 1;
 180     s->resync_mb_x      = s->mb_x;
 181     s->resync_mb_y      = s->mb_y;
 182
 183     ff_set_qscale(s, s->qscale);
 184
 185     if (s->avctx->hwaccel) {
 186         const uint8_t *start = s->gb.buffer + get_bits_count(&s->gb) / 8;
 187         const uint8_t *end   = ff_h263_find_resync_marker(start + 1,
 188                                                           s->gb.buffer_end);
 189         skip_bits_long(&s->gb, 8 * (end - start));
 190         return s->avctx->hwaccel->decode_slice(s->avctx, start, end - start);
 191     }
 192
 193     if (s->partitioned_frame) {
 194         const int qscale = s->qscale;
 195
 196         if (CONFIG_MPEG4_DECODER && s->codec_id == AV_CODEC_ID_MPEG4)
 197             if ((ret = ff_mpeg4_decode_partitions(s->avctx->priv_data)) < 0)
 198                 return ret;
 199
 200         /* restore variables which were modified */
 201         s->first_slice_line = 1;
 202         s->mb_x             = s->resync_mb_x;
 203         s->mb_y             = s->resync_mb_y;
 204         ff_set_qscale(s, qscale);
 205     }
 206
 207     for (; s->mb_y < s->mb_height; s->mb_y++) {
 208         /* per-row end of slice checks */
 209         if (s->msmpeg4_version) {
 210             if (s->resync_mb_y + s->slice_height == s->mb_y) {
 211                 ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
 212                                 s->mb_x - 1, s->mb_y, ER_MB_END);
 213
 214                 return 0;
 215             }
 216         }
 217
 218         if (s->msmpeg4_version == 1) {
 219             s->last_dc[0] =
 220             s->last_dc[1] =
 221             s->last_dc[2] = 128;
 222         }
 223
 224         ff_init_block_index(s);
 225         for (; s->mb_x < s->mb_width; s->mb_x++) {
 226             int ret;
 227
 228             ff_update_block_index(s);
 229
 230             if (s->resync_mb_x == s->mb_x && s->resync_mb_y + 1 == s->mb_y)
 231                 s->first_slice_line = 0;
 232
 233             /* DCT & quantize */
 234
 235             s->mv_dir  = MV_DIR_FORWARD;
 236             s->mv_type = MV_TYPE_16X16;
 237             av_dlog(s, "%d %d %06X\n",
 238                     ret, get_bits_count(&s->gb), show_bits(&s->gb, 24));
 239             ret = s->decode_mb(s, s->block);
 240
 241             if (s->pict_type != AV_PICTURE_TYPE_B)
 242                 ff_h263_update_motion_val(s);
 243
 244             if (ret < 0) {
 245                 const int xy = s->mb_x + s->mb_y * s->mb_stride;
 246                 if (ret == SLICE_END) {
 247                     ff_mpv_decode_mb(s, s->block);
 248                     if (s->loop_filter)
 249                         ff_h263_loop_filter(s);
 250
 251                     ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
 252                                     s->mb_x, s->mb_y, ER_MB_END & part_mask);
 253
 254                     s->padding_bug_score--;
 255
 256                     if (++s->mb_x >= s->mb_width) {
 257                         s->mb_x = 0;
 258                         ff_mpeg_draw_horiz_band(s, s->mb_y * mb_size, mb_size);
 259                         ff_mpv_report_decode_progress(s);
 260                         s->mb_y++;
 261                     }
 262                     return 0;
 263                 } else if (ret == SLICE_NOEND) {
 264                     av_log(s->avctx, AV_LOG_ERROR,
 265                            "Slice mismatch at MB: %d\n", xy);
 266                     ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
 267                                     s->mb_x + 1, s->mb_y,
 268                                     ER_MB_END & part_mask);
 269                     return AVERROR_INVALIDDATA;
 270                 }
 271                 av_log(s->avctx, AV_LOG_ERROR, "Error at MB: %d\n", xy);
 272                 ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
 273                                 s->mb_x, s->mb_y, ER_MB_ERROR & part_mask);
 274
 275                 return AVERROR_INVALIDDATA;
 276             }
 277
 278             ff_mpv_decode_mb(s, s->block);
 279             if (s->loop_filter)
 280                 ff_h263_loop_filter(s);
 281         }
 282
 283         ff_mpeg_draw_horiz_band(s, s->mb_y * mb_size, mb_size);
 284         ff_mpv_report_decode_progress(s);
 285
 286         s->mb_x = 0;
 287     }
 288
 289     assert(s->mb_x == 0 && s->mb_y == s->mb_height);
 290
 291     if (s->codec_id == AV_CODEC_ID_MPEG4         &&
 292         (s->workaround_bugs & FF_BUG_AUTODETECT) &&
 293         get_bits_left(&s->gb) >= 48              &&
 294         show_bits(&s->gb, 24) == 0x4010          &&
 295         !s->data_partitioning)
 296         s->padding_bug_score += 32;
 297
 298     /* try to detect the padding bug */
 299     if (s->codec_id == AV_CODEC_ID_MPEG4         &&
 300         (s->workaround_bugs & FF_BUG_AUTODETECT) &&
 301         get_bits_left(&s->gb) >= 0               &&
 302         get_bits_left(&s->gb) < 48               &&
 303         !s->data_partitioning) {
 304         const int bits_count = get_bits_count(&s->gb);
 305         const int bits_left  = s->gb.size_in_bits - bits_count;
 306
 307         if (bits_left == 0) {
 308             s->padding_bug_score += 16;
 309         } else if (bits_left != 1) {
 310             int v = show_bits(&s->gb, 8);
 311             v |= 0x7F >> (7 - (bits_count & 7));
 312
 313             if (v == 0x7F && bits_left <= 8)
 314                 s->padding_bug_score--;
 315             else if (v == 0x7F && ((get_bits_count(&s->gb) + 8) & 8) &&
 316                      bits_left <= 16)
 317                 s->padding_bug_score += 4;
 318             else
 319                 s->padding_bug_score++;
 320         }
 321     }
 322
 323     if (s->workaround_bugs & FF_BUG_AUTODETECT) {
 324         if (s->codec_id == AV_CODEC_ID_H263 ||
 325             (s->padding_bug_score > -2 && !s->data_partitioning))
 326             s->workaround_bugs |= FF_BUG_NO_PADDING;
 327         else
 328             s->workaround_bugs &= ~FF_BUG_NO_PADDING;
 329     }
 330
 331     // handle formats which don't have unique end markers
 332     if (s->msmpeg4_version || (s->workaround_bugs & FF_BUG_NO_PADDING)) { // FIXME perhaps solve this more cleanly
 333         int left      = get_bits_left(&s->gb);
 334         int max_extra = 7;
 335
 336         /* no markers in M$ crap */
 337         if (s->msmpeg4_version && s->pict_type == AV_PICTURE_TYPE_I)
 338             max_extra += 17;
 339
 340         /* buggy padding but the frame should still end approximately at
 341          * the bitstream end */
 342         if ((s->workaround_bugs & FF_BUG_NO_PADDING) &&
 343             (s->err_recognition & AV_EF_BUFFER))
 344             max_extra += 48;
 345         else if ((s->workaround_bugs & FF_BUG_NO_PADDING))
 346             max_extra += 256 * 256 * 256 * 64;
 347
 348         if (left > max_extra)
 349             av_log(s->avctx, AV_LOG_ERROR,
 350                    "discarding %d junk bits at end, next would be %X\n",
 351                    left, show_bits(&s->gb, 24));
 352         else if (left < 0)
 353             av_log(s->avctx, AV_LOG_ERROR, "overreading %d bits\n", -left);
 354         else
 355             ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
 356                             s->mb_x - 1, s->mb_y, ER_MB_END);
 357
 358         return 0;
 359     }
 360
 361     av_log(s->avctx, AV_LOG_ERROR,
 362            "slice end not reached but screenspace end (%d left %06X, score= %d)\n",
 363            get_bits_left(&s->gb), show_bits(&s->gb, 24), s->padding_bug_score);
 364
 365     ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y, s->mb_x, s->mb_y,
 366                     ER_MB_END & part_mask);
 367
 368     return AVERROR_INVALIDDATA;
 369 }
 370
 371 int ff_h263_decode_frame(AVCodecContext *avctx, void *data, int *got_frame,
 372                          AVPacket *avpkt)
 373 {
 374     const uint8_t *buf = avpkt->data;
 375     int buf_size       = avpkt->size;
 376     MpegEncContext *s  = avctx->priv_data;
 377     int ret;
 378     AVFrame *pict = data;
 379
 380     s->flags  = avctx->flags;
 381     s->flags2 = avctx->flags2;
 382
 383     /* no supplementary picture */
 384     if (buf_size == 0) {
 385         /* special case for last picture */
 386         if (s->low_delay == 0 && s->next_picture_ptr) {
 387             if ((ret = av_frame_ref(pict, s->next_picture_ptr->f)) < 0)
 388                 return ret;
 389             s->next_picture_ptr = NULL;
 390
 391             *got_frame = 1;
 392         }
 393
 394         return 0;
 395     }
 396
 397     if (s->flags & CODEC_FLAG_TRUNCATED) {
 398         int next;
 399
 400         if (CONFIG_MPEG4_DECODER && s->codec_id == AV_CODEC_ID_MPEG4) {
 401             next = ff_mpeg4_find_frame_end(&s->parse_context, buf, buf_size);
 402         } else if (CONFIG_H263_DECODER && s->codec_id == AV_CODEC_ID_H263) {
 403             next = ff_h263_find_frame_end(&s->parse_context, buf, buf_size);
 404         } else {
 405             av_log(s->avctx, AV_LOG_ERROR,
 406                    "this codec does not support truncated bitstreams\n");
 407             return AVERROR(ENOSYS);
 408         }
 409
 410         if (ff_combine_frame(&s->parse_context, next, (const uint8_t **)&buf,
 411                              &buf_size) < 0)
 412             return buf_size;
 413     }
 414
 415     if (s->bitstream_buffer_size && (s->divx_packed || buf_size < 20)) // divx 5.01+/xvid frame reorder
 416         ret = init_get_bits8(&s->gb, s->bitstream_buffer,
 417                              s->bitstream_buffer_size);
 418     else
 419         ret = init_get_bits8(&s->gb, buf, buf_size);
 420     s->bitstream_buffer_size = 0;
 421
 422     if (ret < 0)
 423         return ret;
 424
 425     if (!s->context_initialized)
 426         // we need the idct permutaton for reading a custom matrix
 427         ff_mpv_idct_init(s);
 428
 429     /* let's go :-) */
 430     if (CONFIG_WMV2_DECODER && s->msmpeg4_version == 5) {
 431         ret = ff_wmv2_decode_picture_header(s);
 432     } else if (CONFIG_MSMPEG4_DECODER && s->msmpeg4_version) {
 433         ret = ff_msmpeg4_decode_picture_header(s);
 434     } else if (CONFIG_MPEG4_DECODER && avctx->codec_id == AV_CODEC_ID_MPEG4) {
 435         if (s->avctx->extradata_size && s->picture_number == 0) {
 436             GetBitContext gb;
 437
 438             ret = init_get_bits8(&gb, s->avctx->extradata,
 439                                  s->avctx->extradata_size);
 440             if (ret < 0)
 441                 return ret;
 442             ff_mpeg4_decode_picture_header(avctx->priv_data, &gb);
 443         }
 444         ret = ff_mpeg4_decode_picture_header(avctx->priv_data, &s->gb);
 445     } else if (CONFIG_H263I_DECODER && s->codec_id == AV_CODEC_ID_H263I) {
 446         ret = ff_intel_h263_decode_picture_header(s);
 447     } else if (CONFIG_FLV_DECODER && s->h263_flv) {
 448         ret = ff_flv_decode_picture_header(s);
 449     } else {
 450         ret = ff_h263_decode_picture_header(s);
 451     }
 452
 453     if (ret == FRAME_SKIPPED)
 454         return get_consumed_bytes(s, buf_size);
 455
 456     /* skip if the header was thrashed */
 457     if (ret < 0) {
 458         av_log(s->avctx, AV_LOG_ERROR, "header damaged\n");
 459         return ret;
 460     }
 461
 462     if (!s->context_initialized) {
 463         avctx->pix_fmt = h263_get_format(avctx);
 464         if ((ret = ff_mpv_common_init(s)) < 0)
 465             return ret;
 466     }
 467
 468     if (!s->current_picture_ptr || s->current_picture_ptr->f->data[0]) {
 469         int i = ff_find_unused_picture(s, 0);
 470         if (i < 0)
 471             return i;
 472         s->current_picture_ptr = &s->picture[i];
 473     }
 474
 475     avctx->has_b_frames = !s->low_delay;
 476
 477 #define SET_QPEL_FUNC(postfix1, postfix2)                           \
 478     s->qdsp.put_        ## postfix1 = ff_put_        ## postfix2;   \
 479     s->qdsp.put_no_rnd_ ## postfix1 = ff_put_no_rnd_ ## postfix2;   \
 480     s->qdsp.avg_        ## postfix1 = ff_avg_        ## postfix2;
 481
 482     if (s->workaround_bugs & FF_BUG_STD_QPEL) {
 483         SET_QPEL_FUNC(qpel_pixels_tab[0][5], qpel16_mc11_old_c)
 484         SET_QPEL_FUNC(qpel_pixels_tab[0][7], qpel16_mc31_old_c)
 485         SET_QPEL_FUNC(qpel_pixels_tab[0][9], qpel16_mc12_old_c)
 486         SET_QPEL_FUNC(qpel_pixels_tab[0][11], qpel16_mc32_old_c)
 487         SET_QPEL_FUNC(qpel_pixels_tab[0][13], qpel16_mc13_old_c)
 488         SET_QPEL_FUNC(qpel_pixels_tab[0][15], qpel16_mc33_old_c)
 489
 490         SET_QPEL_FUNC(qpel_pixels_tab[1][5], qpel8_mc11_old_c)
 491         SET_QPEL_FUNC(qpel_pixels_tab[1][7], qpel8_mc31_old_c)
 492         SET_QPEL_FUNC(qpel_pixels_tab[1][9], qpel8_mc12_old_c)
 493         SET_QPEL_FUNC(qpel_pixels_tab[1][11], qpel8_mc32_old_c)
 494         SET_QPEL_FUNC(qpel_pixels_tab[1][13], qpel8_mc13_old_c)
 495         SET_QPEL_FUNC(qpel_pixels_tab[1][15], qpel8_mc33_old_c)
 496     }
 497
 498     /* After H263 & mpeg4 header decode we have the height, width,
 499      * and other parameters. So then we could init the picture.
 500      * FIXME: By the way H263 decoder is evolving it should have
 501      * an H263EncContext */
 502     if (s->width  != avctx->coded_width  ||
 503         s->height != avctx->coded_height ||
 504         s->context_reinit) {
 505         /* H.263 could change picture size any time */
 506         s->context_reinit = 0;
 507
 508         ret = ff_set_dimensions(avctx, s->width, s->height);
 509         if (ret < 0)
 510             return ret;
 511
 512         ff_set_sar(avctx, avctx->sample_aspect_ratio);
 513
 514         if ((ret = ff_mpv_common_frame_size_change(s)))
 515             return ret;
 516
 517         if (avctx->pix_fmt != h263_get_format(avctx)) {
 518             av_log(avctx, AV_LOG_ERROR, "format change not supported\n");
 519             avctx->pix_fmt = AV_PIX_FMT_NONE;
 520             return AVERROR_UNKNOWN;
 521         }
 522     }
 523
 524     if (s->codec_id == AV_CODEC_ID_H263  ||
 525         s->codec_id == AV_CODEC_ID_H263P ||
 526         s->codec_id == AV_CODEC_ID_H263I)
 527         s->gob_index = ff_h263_get_gob_height(s);
 528
 529     // for skipping the frame
 530     s->current_picture.f->pict_type = s->pict_type;
 531     s->current_picture.f->key_frame = s->pict_type == AV_PICTURE_TYPE_I;
 532
 533     /* skip B-frames if we don't have reference frames */
 534     if (!s->last_picture_ptr &&
 535         (s->pict_type == AV_PICTURE_TYPE_B || s->droppable))
 536         return get_consumed_bytes(s, buf_size);
 537     if ((avctx->skip_frame >= AVDISCARD_NONREF &&
 538          s->pict_type == AV_PICTURE_TYPE_B)    ||
 539         (avctx->skip_frame >= AVDISCARD_NONKEY &&
 540          s->pict_type != AV_PICTURE_TYPE_I)    ||
 541         avctx->skip_frame >= AVDISCARD_ALL)
 542         return get_consumed_bytes(s, buf_size);
 543
 544     if (s->next_p_frame_damaged) {
 545         if (s->pict_type == AV_PICTURE_TYPE_B)
 546             return get_consumed_bytes(s, buf_size);
 547         else
 548             s->next_p_frame_damaged = 0;
 549     }
 550
 551     if ((!s->no_rounding) || s->pict_type == AV_PICTURE_TYPE_B) {
 552         s->me.qpel_put = s->qdsp.put_qpel_pixels_tab;
 553         s->me.qpel_avg = s->qdsp.avg_qpel_pixels_tab;
 554     } else {
 555         s->me.qpel_put = s->qdsp.put_no_rnd_qpel_pixels_tab;
 556         s->me.qpel_avg = s->qdsp.avg_qpel_pixels_tab;
 557     }
 558
 559     if ((ret = ff_mpv_frame_start(s, avctx)) < 0)
 560         return ret;
 561
 562     if (!s->divx_packed && !avctx->hwaccel)
 563         ff_thread_finish_setup(avctx);
 564
 565     if (avctx->hwaccel) {
 566         ret = avctx->hwaccel->start_frame(avctx, s->gb.buffer,
 567                                           s->gb.buffer_end - s->gb.buffer);
 568         if (ret < 0 )
 569             return ret;
 570     }
 571
 572     ff_mpeg_er_frame_start(s);
 573
 574     /* the second part of the wmv2 header contains the MB skip bits which
 575      * are stored in current_picture->mb_type which is not available before
 576      * ff_mpv_frame_start() */
 577     if (CONFIG_WMV2_DECODER && s->msmpeg4_version == 5) {
 578         ret = ff_wmv2_decode_secondary_picture_header(s);
 579         if (ret < 0)
 580             return ret;
 581         if (ret == 1)
 582             goto intrax8_decoded;
 583     }
 584
 585     /* decode each macroblock */
 586     s->mb_x = 0;
 587     s->mb_y = 0;
 588
 589     ret = decode_slice(s);
 590     while (s->mb_y < s->mb_height) {
 591         if (s->msmpeg4_version) {
 592             if (s->slice_height == 0 || s->mb_x != 0 ||
 593                 (s->mb_y % s->slice_height) != 0 || get_bits_left(&s->gb) < 0)
 594                 break;
 595         } else {
 596             int prev_x = s->mb_x, prev_y = s->mb_y;
 597             if (ff_h263_resync(s) < 0)
 598                 break;
 599             if (prev_y * s->mb_width + prev_x < s->mb_y * s->mb_width + s->mb_x)
 600                 s->er.error_occurred = 1;
 601         }
 602
 603         if (s->msmpeg4_version < 4 && s->h263_pred)
 604             ff_mpeg4_clean_buffers(s);
 605
 606         if (decode_slice(s) < 0)
 607             ret = AVERROR_INVALIDDATA;
 608     }
 609
 610     if (s->msmpeg4_version && s->msmpeg4_version < 4 &&
 611         s->pict_type == AV_PICTURE_TYPE_I)
 612         if (!CONFIG_MSMPEG4_DECODER ||
 613             ff_msmpeg4_decode_ext_header(s, buf_size) < 0)
 614             s->er.error_status_table[s->mb_num - 1] = ER_MB_ERROR;
 615
 616     assert(s->bitstream_buffer_size == 0);
 617
 618     if (CONFIG_MPEG4_DECODER && avctx->codec_id == AV_CODEC_ID_MPEG4)
 619         ff_mpeg4_frame_end(avctx, buf, buf_size);
 620
 621 intrax8_decoded:
 622     ff_er_frame_end(&s->er);
 623
 624     if (avctx->hwaccel) {
 625         ret = avctx->hwaccel->end_frame(avctx);
 626         if (ret < 0)
 627             return ret;
 628     }
 629
 630     ff_mpv_frame_end(s);
 631
 632     if (!s->divx_packed && avctx->hwaccel)
 633         ff_thread_finish_setup(avctx);
 634
 635     assert(s->current_picture.f->pict_type ==
 636            s->current_picture_ptr->f->pict_type);
 637     assert(s->current_picture.f->pict_type == s->pict_type);
 638     if (s->pict_type == AV_PICTURE_TYPE_B || s->low_delay) {
 639         if ((ret = av_frame_ref(pict, s->current_picture_ptr->f)) < 0)
 640             return ret;
 641         ff_print_debug_info(s, s->current_picture_ptr);
 642     } else if (s->last_picture_ptr) {
 643         if ((ret = av_frame_ref(pict, s->last_picture_ptr->f)) < 0)
 644             return ret;
 645         ff_print_debug_info(s, s->last_picture_ptr);
 646     }
 647
 648     if (s->last_picture_ptr || s->low_delay)
 649         *got_frame = 1;
 650
 651     if (ret && (avctx->err_recognition & AV_EF_EXPLODE))
 652         return ret;
 653     else
 654         return get_consumed_bytes(s, buf_size);
 655 }
 656
 657 const enum AVPixelFormat ff_h263_hwaccel_pixfmt_list_420[] = {
 658 #if CONFIG_H263_VAAPI_HWACCEL || CONFIG_MPEG4_VAAPI_HWACCEL
 659     AV_PIX_FMT_VAAPI_VLD,
 660 #endif
 661 #if CONFIG_H263_VDPAU_HWACCEL || CONFIG_MPEG4_VDPAU_HWACCEL
 662     AV_PIX_FMT_VDPAU,
 663 #endif
 664     AV_PIX_FMT_YUV420P,
 665     AV_PIX_FMT_NONE
 666 };
 667
 668 AVCodec ff_h263_decoder = {
 669     .name           = "h263",
 670     .long_name      = NULL_IF_CONFIG_SMALL("H.263 / H.263-1996, H.263+ / H.263-1998 / H.263 version 2"),
 671     .type           = AVMEDIA_TYPE_VIDEO,
 672     .id             = AV_CODEC_ID_H263,
 673     .priv_data_size = sizeof(MpegEncContext),
 674     .init           = ff_h263_decode_init,
 675     .close          = ff_h263_decode_end,
 676     .decode         = ff_h263_decode_frame,
 677     .capabilities   = CODEC_CAP_DRAW_HORIZ_BAND | CODEC_CAP_DR1 |
 678                       CODEC_CAP_TRUNCATED | CODEC_CAP_DELAY,
 679     .flush          = ff_mpeg_flush,
 680     .pix_fmts       = ff_h263_hwaccel_pixfmt_list_420,
 681 };