git.sesse.net Git - ffmpeg/blob - libavcodec/h263dec.c

   1 /*
   2  * H.263 decoder
   3  * Copyright (c) 2001 Fabrice Bellard
   4  * Copyright (c) 2002-2004 Michael Niedermayer <michaelni@gmx.at>
   5  *
   6  * This file is part of FFmpeg.
   7  *
   8  * FFmpeg is free software; you can redistribute it and/or
   9  * modify it under the terms of the GNU Lesser General Public
  10  * License as published by the Free Software Foundation; either
  11  * version 2.1 of the License, or (at your option) any later version.
  12  *
  13  * FFmpeg is distributed in the hope that it will be useful,
  14  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  15  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  16  * Lesser General Public License for more details.
  17  *
  18  * You should have received a copy of the GNU Lesser General Public
  19  * License along with FFmpeg; if not, write to the Free Software
  20  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
  21  */
  22
  23 /**
  24  * @file
  25  * H.263 decoder.
  26  */
  27
  28 #define UNCHECKED_BITSTREAM_READER 1
  29
  30 #include "libavutil/cpu.h"
  31 #include "avcodec.h"
  32 #include "error_resilience.h"
  33 #include "flv.h"
  34 #include "h263.h"
  35 #include "h263_parser.h"
  36 #include "hwconfig.h"
  37 #include "internal.h"
  38 #include "mpeg_er.h"
  39 #include "mpeg4video.h"
  40 #include "mpeg4video_parser.h"
  41 #include "mpegutils.h"
  42 #include "mpegvideo.h"
  43 #include "msmpeg4.h"
  44 #include "qpeldsp.h"
  45 #include "thread.h"
  46 #include "wmv2.h"
  47
  48 static enum AVPixelFormat h263_get_format(AVCodecContext *avctx)
  49 {
  50     /* MPEG-4 Studio Profile only, not supported by hardware */
  51     if (avctx->bits_per_raw_sample > 8) {
  52         av_assert1(((MpegEncContext *)avctx->priv_data)->studio_profile);
  53         return avctx->pix_fmt;
  54     }
  55
  56     if (avctx->codec->id == AV_CODEC_ID_MSS2)
  57         return AV_PIX_FMT_YUV420P;
  58
  59     if (CONFIG_GRAY && (avctx->flags & AV_CODEC_FLAG_GRAY)) {
  60         if (avctx->color_range == AVCOL_RANGE_UNSPECIFIED)
  61             avctx->color_range = AVCOL_RANGE_MPEG;
  62         return AV_PIX_FMT_GRAY8;
  63     }
  64
  65     return avctx->pix_fmt = ff_get_format(avctx, avctx->codec->pix_fmts);
  66 }
  67
  68 av_cold int ff_h263_decode_init(AVCodecContext *avctx)
  69 {
  70     MpegEncContext *s = avctx->priv_data;
  71     int ret;
  72
  73     s->out_format      = FMT_H263;
  74
  75     // set defaults
  76     ff_mpv_decode_init(s, avctx);
  77
  78     s->quant_precision = 5;
  79     s->decode_mb       = ff_h263_decode_mb;
  80     s->low_delay       = 1;
  81     s->unrestricted_mv = 1;
  82
  83     /* select sub codec */
  84     switch (avctx->codec->id) {
  85     case AV_CODEC_ID_H263:
  86     case AV_CODEC_ID_H263P:
  87         s->unrestricted_mv = 0;
  88         avctx->chroma_sample_location = AVCHROMA_LOC_CENTER;
  89         break;
  90     case AV_CODEC_ID_MPEG4:
  91         break;
  92     case AV_CODEC_ID_MSMPEG4V1:
  93         s->h263_pred       = 1;
  94         s->msmpeg4_version = 1;
  95         break;
  96     case AV_CODEC_ID_MSMPEG4V2:
  97         s->h263_pred       = 1;
  98         s->msmpeg4_version = 2;
  99         break;
 100     case AV_CODEC_ID_MSMPEG4V3:
 101         s->h263_pred       = 1;
 102         s->msmpeg4_version = 3;
 103         break;
 104     case AV_CODEC_ID_WMV1:
 105         s->h263_pred       = 1;
 106         s->msmpeg4_version = 4;
 107         break;
 108     case AV_CODEC_ID_WMV2:
 109         s->h263_pred       = 1;
 110         s->msmpeg4_version = 5;
 111         break;
 112     case AV_CODEC_ID_VC1:
 113     case AV_CODEC_ID_WMV3:
 114     case AV_CODEC_ID_VC1IMAGE:
 115     case AV_CODEC_ID_WMV3IMAGE:
 116     case AV_CODEC_ID_MSS2:
 117         s->h263_pred       = 1;
 118         s->msmpeg4_version = 6;
 119         avctx->chroma_sample_location = AVCHROMA_LOC_LEFT;
 120         break;
 121     case AV_CODEC_ID_H263I:
 122         break;
 123     case AV_CODEC_ID_FLV1:
 124         s->h263_flv = 1;
 125         break;
 126     default:
 127         av_log(avctx, AV_LOG_ERROR, "Unsupported codec %d\n",
 128                avctx->codec->id);
 129         return AVERROR(ENOSYS);
 130     }
 131     s->codec_id    = avctx->codec->id;
 132
 133     if (avctx->codec_tag == AV_RL32("L263") || avctx->codec_tag == AV_RL32("S263"))
 134         if (avctx->extradata_size == 56 && avctx->extradata[0] == 1)
 135             s->ehc_mode = 1;
 136
 137     /* for H.263, we allocate the images after having read the header */
 138     if (avctx->codec->id != AV_CODEC_ID_H263 &&
 139         avctx->codec->id != AV_CODEC_ID_H263P &&
 140         avctx->codec->id != AV_CODEC_ID_MPEG4) {
 141         avctx->pix_fmt = h263_get_format(avctx);
 142         ff_mpv_idct_init(s);
 143         if ((ret = ff_mpv_common_init(s)) < 0)
 144             return ret;
 145     }
 146
 147     ff_h263dsp_init(&s->h263dsp);
 148     ff_qpeldsp_init(&s->qdsp);
 149     ff_h263_decode_init_vlc();
 150
 151     return 0;
 152 }
 153
 154 av_cold int ff_h263_decode_end(AVCodecContext *avctx)
 155 {
 156     MpegEncContext *s = avctx->priv_data;
 157
 158     ff_mpv_common_end(s);
 159     return 0;
 160 }
 161
 162 /**
 163  * Return the number of bytes consumed for building the current frame.
 164  */
 165 static int get_consumed_bytes(MpegEncContext *s, int buf_size)
 166 {
 167     int pos = (get_bits_count(&s->gb) + 7) >> 3;
 168
 169     if (s->divx_packed || s->avctx->hwaccel) {
 170         /* We would have to scan through the whole buf to handle the weird
 171          * reordering ... */
 172         return buf_size;
 173     } else if (s->avctx->flags & AV_CODEC_FLAG_TRUNCATED) {
 174         pos -= s->parse_context.last_index;
 175         // padding is not really read so this might be -1
 176         if (pos < 0)
 177             pos = 0;
 178         return pos;
 179     } else {
 180         // avoid infinite loops (maybe not needed...)
 181         if (pos == 0)
 182             pos = 1;
 183         // oops ;)
 184         if (pos + 10 > buf_size)
 185             pos = buf_size;
 186
 187         return pos;
 188     }
 189 }
 190
 191 static int decode_slice(MpegEncContext *s)
 192 {
 193     const int part_mask = s->partitioned_frame
 194                           ? (ER_AC_END | ER_AC_ERROR) : 0x7F;
 195     const int mb_size   = 16 >> s->avctx->lowres;
 196     int ret;
 197
 198     s->last_resync_gb   = s->gb;
 199     s->first_slice_line = 1;
 200     s->resync_mb_x      = s->mb_x;
 201     s->resync_mb_y      = s->mb_y;
 202
 203     ff_set_qscale(s, s->qscale);
 204
 205     if (s->studio_profile) {
 206         if ((ret = ff_mpeg4_decode_studio_slice_header(s->avctx->priv_data)) < 0)
 207             return ret;
 208     }
 209
 210     if (s->avctx->hwaccel) {
 211         const uint8_t *start = s->gb.buffer + get_bits_count(&s->gb) / 8;
 212         ret = s->avctx->hwaccel->decode_slice(s->avctx, start, s->gb.buffer_end - start);
 213         // ensure we exit decode loop
 214         s->mb_y = s->mb_height;
 215         return ret;
 216     }
 217
 218     if (s->partitioned_frame) {
 219         const int qscale = s->qscale;
 220
 221         if (CONFIG_MPEG4_DECODER && s->codec_id == AV_CODEC_ID_MPEG4)
 222             if ((ret = ff_mpeg4_decode_partitions(s->avctx->priv_data)) < 0)
 223                 return ret;
 224
 225         /* restore variables which were modified */
 226         s->first_slice_line = 1;
 227         s->mb_x             = s->resync_mb_x;
 228         s->mb_y             = s->resync_mb_y;
 229         ff_set_qscale(s, qscale);
 230     }
 231
 232     for (; s->mb_y < s->mb_height; s->mb_y++) {
 233         /* per-row end of slice checks */
 234         if (s->msmpeg4_version) {
 235             if (s->resync_mb_y + s->slice_height == s->mb_y) {
 236                 ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
 237                                 s->mb_x - 1, s->mb_y, ER_MB_END);
 238
 239                 return 0;
 240             }
 241         }
 242
 243         if (s->msmpeg4_version == 1) {
 244             s->last_dc[0] =
 245             s->last_dc[1] =
 246             s->last_dc[2] = 128;
 247         }
 248
 249         ff_init_block_index(s);
 250         for (; s->mb_x < s->mb_width; s->mb_x++) {
 251             int ret;
 252
 253             ff_update_block_index(s);
 254
 255             if (s->resync_mb_x == s->mb_x && s->resync_mb_y + 1 == s->mb_y)
 256                 s->first_slice_line = 0;
 257
 258             /* DCT & quantize */
 259
 260             s->mv_dir  = MV_DIR_FORWARD;
 261             s->mv_type = MV_TYPE_16X16;
 262             ff_dlog(s, "%d %06X\n",
 263                     get_bits_count(&s->gb), show_bits(&s->gb, 24));
 264
 265             ff_tlog(NULL, "Decoding MB at %dx%d\n", s->mb_x, s->mb_y);
 266             ret = s->decode_mb(s, s->block);
 267
 268             if (s->pict_type != AV_PICTURE_TYPE_B)
 269                 ff_h263_update_motion_val(s);
 270
 271             if (ret < 0) {
 272                 const int xy = s->mb_x + s->mb_y * s->mb_stride;
 273                 if (ret == SLICE_END) {
 274                     ff_mpv_reconstruct_mb(s, s->block);
 275                     if (s->loop_filter)
 276                         ff_h263_loop_filter(s);
 277
 278                     ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
 279                                     s->mb_x, s->mb_y, ER_MB_END & part_mask);
 280
 281                     s->padding_bug_score--;
 282
 283                     if (++s->mb_x >= s->mb_width) {
 284                         s->mb_x = 0;
 285                         ff_mpeg_draw_horiz_band(s, s->mb_y * mb_size, mb_size);
 286                         ff_mpv_report_decode_progress(s);
 287                         s->mb_y++;
 288                     }
 289                     return 0;
 290                 } else if (ret == SLICE_NOEND) {
 291                     av_log(s->avctx, AV_LOG_ERROR,
 292                            "Slice mismatch at MB: %d\n", xy);
 293                     ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
 294                                     s->mb_x + 1, s->mb_y,
 295                                     ER_MB_END & part_mask);
 296                     return AVERROR_INVALIDDATA;
 297                 }
 298                 av_log(s->avctx, AV_LOG_ERROR, "Error at MB: %d\n", xy);
 299                 ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
 300                                 s->mb_x, s->mb_y, ER_MB_ERROR & part_mask);
 301
 302                 if (s->avctx->err_recognition & AV_EF_IGNORE_ERR)
 303                     continue;
 304                 return AVERROR_INVALIDDATA;
 305             }
 306
 307             ff_mpv_reconstruct_mb(s, s->block);
 308             if (s->loop_filter)
 309                 ff_h263_loop_filter(s);
 310         }
 311
 312         ff_mpeg_draw_horiz_band(s, s->mb_y * mb_size, mb_size);
 313         ff_mpv_report_decode_progress(s);
 314
 315         s->mb_x = 0;
 316     }
 317
 318     av_assert1(s->mb_x == 0 && s->mb_y == s->mb_height);
 319
 320     // Detect incorrect padding with wrong stuffing codes used by NEC N-02B
 321     if (s->codec_id == AV_CODEC_ID_MPEG4         &&
 322         (s->workaround_bugs & FF_BUG_AUTODETECT) &&
 323         get_bits_left(&s->gb) >= 48              &&
 324         show_bits(&s->gb, 24) == 0x4010          &&
 325         !s->data_partitioning)
 326         s->padding_bug_score += 32;
 327
 328     /* try to detect the padding bug */
 329     if (s->codec_id == AV_CODEC_ID_MPEG4         &&
 330         (s->workaround_bugs & FF_BUG_AUTODETECT) &&
 331         get_bits_left(&s->gb) >= 0               &&
 332         get_bits_left(&s->gb) < 137              &&
 333         !s->data_partitioning) {
 334         const int bits_count = get_bits_count(&s->gb);
 335         const int bits_left  = s->gb.size_in_bits - bits_count;
 336
 337         if (bits_left == 0) {
 338             s->padding_bug_score += 16;
 339         } else if (bits_left != 1) {
 340             int v = show_bits(&s->gb, 8);
 341             v |= 0x7F >> (7 - (bits_count & 7));
 342
 343             if (v == 0x7F && bits_left <= 8)
 344                 s->padding_bug_score--;
 345             else if (v == 0x7F && ((get_bits_count(&s->gb) + 8) & 8) &&
 346                      bits_left <= 16)
 347                 s->padding_bug_score += 4;
 348             else
 349                 s->padding_bug_score++;
 350         }
 351     }
 352
 353     if (s->codec_id == AV_CODEC_ID_H263          &&
 354         (s->workaround_bugs & FF_BUG_AUTODETECT) &&
 355         get_bits_left(&s->gb) >= 8               &&
 356         get_bits_left(&s->gb) < 300              &&
 357         s->pict_type == AV_PICTURE_TYPE_I        &&
 358         show_bits(&s->gb, 8) == 0                &&
 359         !s->data_partitioning) {
 360
 361         s->padding_bug_score += 32;
 362     }
 363
 364     if (s->codec_id == AV_CODEC_ID_H263          &&
 365         (s->workaround_bugs & FF_BUG_AUTODETECT) &&
 366         get_bits_left(&s->gb) >= 64              &&
 367         AV_RB64(s->gb.buffer_end - 8) == 0xCDCDCDCDFC7F0000) {
 368
 369         s->padding_bug_score += 32;
 370     }
 371
 372     if (s->workaround_bugs & FF_BUG_AUTODETECT) {
 373         if (
 374             (s->padding_bug_score > -2 && !s->data_partitioning))
 375             s->workaround_bugs |= FF_BUG_NO_PADDING;
 376         else
 377             s->workaround_bugs &= ~FF_BUG_NO_PADDING;
 378     }
 379
 380     // handle formats which don't have unique end markers
 381     if (s->msmpeg4_version || (s->workaround_bugs & FF_BUG_NO_PADDING)) { // FIXME perhaps solve this more cleanly
 382         int left      = get_bits_left(&s->gb);
 383         int max_extra = 7;
 384
 385         /* no markers in M$ crap */
 386         if (s->msmpeg4_version && s->pict_type == AV_PICTURE_TYPE_I)
 387             max_extra += 17;
 388
 389         /* buggy padding but the frame should still end approximately at
 390          * the bitstream end */
 391         if ((s->workaround_bugs & FF_BUG_NO_PADDING) &&
 392             (s->avctx->err_recognition & (AV_EF_BUFFER|AV_EF_AGGRESSIVE)))
 393             max_extra += 48;
 394         else if ((s->workaround_bugs & FF_BUG_NO_PADDING))
 395             max_extra += 256 * 256 * 256 * 64;
 396
 397         if (left > max_extra)
 398             av_log(s->avctx, AV_LOG_ERROR,
 399                    "discarding %d junk bits at end, next would be %X\n",
 400                    left, show_bits(&s->gb, 24));
 401         else if (left < 0)
 402             av_log(s->avctx, AV_LOG_ERROR, "overreading %d bits\n", -left);
 403         else
 404             ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
 405                             s->mb_x - 1, s->mb_y, ER_MB_END);
 406
 407         return 0;
 408     }
 409
 410     av_log(s->avctx, AV_LOG_ERROR,
 411            "slice end not reached but screenspace end (%d left %06X, score= %d)\n",
 412            get_bits_left(&s->gb), show_bits(&s->gb, 24), s->padding_bug_score);
 413
 414     ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y, s->mb_x, s->mb_y,
 415                     ER_MB_END & part_mask);
 416
 417     return AVERROR_INVALIDDATA;
 418 }
 419
 420 int ff_h263_decode_frame(AVCodecContext *avctx, void *data, int *got_frame,
 421                          AVPacket *avpkt)
 422 {
 423     const uint8_t *buf = avpkt->data;
 424     int buf_size       = avpkt->size;
 425     MpegEncContext *s  = avctx->priv_data;
 426     int ret;
 427     int slice_ret = 0;
 428     AVFrame *pict = data;
 429
 430     /* no supplementary picture */
 431     if (buf_size == 0) {
 432         /* special case for last picture */
 433         if (s->low_delay == 0 && s->next_picture_ptr) {
 434             if ((ret = av_frame_ref(pict, s->next_picture_ptr->f)) < 0)
 435                 return ret;
 436             s->next_picture_ptr = NULL;
 437
 438             *got_frame = 1;
 439         }
 440
 441         return 0;
 442     }
 443
 444     if (s->avctx->flags & AV_CODEC_FLAG_TRUNCATED) {
 445         int next;
 446
 447         if (CONFIG_MPEG4_DECODER && s->codec_id == AV_CODEC_ID_MPEG4) {
 448             next = ff_mpeg4_find_frame_end(&s->parse_context, buf, buf_size);
 449         } else if (CONFIG_H263_DECODER && s->codec_id == AV_CODEC_ID_H263) {
 450             next = ff_h263_find_frame_end(&s->parse_context, buf, buf_size);
 451         } else if (CONFIG_H263P_DECODER && s->codec_id == AV_CODEC_ID_H263P) {
 452             next = ff_h263_find_frame_end(&s->parse_context, buf, buf_size);
 453         } else {
 454             av_log(s->avctx, AV_LOG_ERROR,
 455                    "this codec does not support truncated bitstreams\n");
 456             return AVERROR(ENOSYS);
 457         }
 458
 459         if (ff_combine_frame(&s->parse_context, next, (const uint8_t **)&buf,
 460                              &buf_size) < 0)
 461             return buf_size;
 462     }
 463
 464 retry:
 465     if (s->divx_packed && s->bitstream_buffer_size) {
 466         int i;
 467         for(i=0; i < buf_size-3; i++) {
 468             if (buf[i]==0 && buf[i+1]==0 && buf[i+2]==1) {
 469                 if (buf[i+3]==0xB0) {
 470                     av_log(s->avctx, AV_LOG_WARNING, "Discarding excessive bitstream in packed xvid\n");
 471                     s->bitstream_buffer_size = 0;
 472                 }
 473                 break;
 474             }
 475         }
 476     }
 477
 478     if (s->bitstream_buffer_size && (s->divx_packed || buf_size <= MAX_NVOP_SIZE)) // divx 5.01+/xvid frame reorder
 479         ret = init_get_bits8(&s->gb, s->bitstream_buffer,
 480                              s->bitstream_buffer_size);
 481     else
 482         ret = init_get_bits8(&s->gb, buf, buf_size);
 483
 484     s->bitstream_buffer_size = 0;
 485     if (ret < 0)
 486         return ret;
 487
 488     if (!s->context_initialized)
 489         // we need the idct permutation for reading a custom matrix
 490         ff_mpv_idct_init(s);
 491
 492     /* let's go :-) */
 493     if (CONFIG_WMV2_DECODER && s->msmpeg4_version == 5) {
 494         ret = ff_wmv2_decode_picture_header(s);
 495     } else if (CONFIG_MSMPEG4_DECODER && s->msmpeg4_version) {
 496         ret = ff_msmpeg4_decode_picture_header(s);
 497     } else if (CONFIG_MPEG4_DECODER && avctx->codec_id == AV_CODEC_ID_MPEG4) {
 498         if (s->avctx->extradata_size && s->picture_number == 0) {
 499             GetBitContext gb;
 500
 501             if (init_get_bits8(&gb, s->avctx->extradata, s->avctx->extradata_size) >= 0 )
 502                 ff_mpeg4_decode_picture_header(avctx->priv_data, &gb, 1);
 503         }
 504         ret = ff_mpeg4_decode_picture_header(avctx->priv_data, &s->gb, 0);
 505     } else if (CONFIG_H263I_DECODER && s->codec_id == AV_CODEC_ID_H263I) {
 506         ret = ff_intel_h263_decode_picture_header(s);
 507     } else if (CONFIG_FLV_DECODER && s->h263_flv) {
 508         ret = ff_flv_decode_picture_header(s);
 509     } else {
 510         ret = ff_h263_decode_picture_header(s);
 511     }
 512
 513     if (ret < 0 || ret == FRAME_SKIPPED) {
 514         if (   s->width  != avctx->coded_width
 515             || s->height != avctx->coded_height) {
 516                 av_log(s->avctx, AV_LOG_WARNING, "Reverting picture dimensions change due to header decoding failure\n");
 517                 s->width = avctx->coded_width;
 518                 s->height= avctx->coded_height;
 519         }
 520     }
 521     if (ret == FRAME_SKIPPED)
 522         return get_consumed_bytes(s, buf_size);
 523
 524     /* skip if the header was thrashed */
 525     if (ret < 0) {
 526         av_log(s->avctx, AV_LOG_ERROR, "header damaged\n");
 527         return ret;
 528     }
 529
 530     if (!s->context_initialized) {
 531         avctx->pix_fmt = h263_get_format(avctx);
 532         if ((ret = ff_mpv_common_init(s)) < 0)
 533             return ret;
 534     }
 535
 536     if (!s->current_picture_ptr || s->current_picture_ptr->f->data[0]) {
 537         int i = ff_find_unused_picture(s->avctx, s->picture, 0);
 538         if (i < 0)
 539             return i;
 540         s->current_picture_ptr = &s->picture[i];
 541     }
 542
 543     avctx->has_b_frames = !s->low_delay;
 544
 545     if (CONFIG_MPEG4_DECODER && avctx->codec_id == AV_CODEC_ID_MPEG4) {
 546         if (ff_mpeg4_workaround_bugs(avctx) == 1)
 547             goto retry;
 548         if (s->studio_profile != (s->idsp.idct == NULL))
 549             ff_mpv_idct_init(s);
 550     }
 551
 552     /* After H.263 & MPEG-4 header decode we have the height, width,
 553      * and other parameters. So then we could init the picture.
 554      * FIXME: By the way H.263 decoder is evolving it should have
 555      * an H263EncContext */
 556     if (s->width  != avctx->coded_width  ||
 557         s->height != avctx->coded_height ||
 558         s->context_reinit) {
 559         /* H.263 could change picture size any time */
 560         s->context_reinit = 0;
 561
 562         ret = ff_set_dimensions(avctx, s->width, s->height);
 563         if (ret < 0)
 564             return ret;
 565
 566         ff_set_sar(avctx, avctx->sample_aspect_ratio);
 567
 568         if ((ret = ff_mpv_common_frame_size_change(s)))
 569             return ret;
 570
 571         if (avctx->pix_fmt != h263_get_format(avctx)) {
 572             av_log(avctx, AV_LOG_ERROR, "format change not supported\n");
 573             avctx->pix_fmt = AV_PIX_FMT_NONE;
 574             return AVERROR_UNKNOWN;
 575         }
 576     }
 577
 578     if (s->codec_id == AV_CODEC_ID_H263  ||
 579         s->codec_id == AV_CODEC_ID_H263P ||
 580         s->codec_id == AV_CODEC_ID_H263I)
 581         s->gob_index = H263_GOB_HEIGHT(s->height);
 582
 583     // for skipping the frame
 584     s->current_picture.f->pict_type = s->pict_type;
 585     s->current_picture.f->key_frame = s->pict_type == AV_PICTURE_TYPE_I;
 586
 587     /* skip B-frames if we don't have reference frames */
 588     if (!s->last_picture_ptr &&
 589         (s->pict_type == AV_PICTURE_TYPE_B || s->droppable))
 590         return get_consumed_bytes(s, buf_size);
 591     if ((avctx->skip_frame >= AVDISCARD_NONREF &&
 592          s->pict_type == AV_PICTURE_TYPE_B)    ||
 593         (avctx->skip_frame >= AVDISCARD_NONKEY &&
 594          s->pict_type != AV_PICTURE_TYPE_I)    ||
 595         avctx->skip_frame >= AVDISCARD_ALL)
 596         return get_consumed_bytes(s, buf_size);
 597
 598     if (s->next_p_frame_damaged) {
 599         if (s->pict_type == AV_PICTURE_TYPE_B)
 600             return get_consumed_bytes(s, buf_size);
 601         else
 602             s->next_p_frame_damaged = 0;
 603     }
 604
 605     if ((!s->no_rounding) || s->pict_type == AV_PICTURE_TYPE_B) {
 606         s->me.qpel_put = s->qdsp.put_qpel_pixels_tab;
 607         s->me.qpel_avg = s->qdsp.avg_qpel_pixels_tab;
 608     } else {
 609         s->me.qpel_put = s->qdsp.put_no_rnd_qpel_pixels_tab;
 610         s->me.qpel_avg = s->qdsp.avg_qpel_pixels_tab;
 611     }
 612
 613     if ((ret = ff_mpv_frame_start(s, avctx)) < 0)
 614         return ret;
 615
 616     if (!s->divx_packed && !avctx->hwaccel)
 617         ff_thread_finish_setup(avctx);
 618
 619     if (avctx->hwaccel) {
 620         ret = avctx->hwaccel->start_frame(avctx, s->gb.buffer,
 621                                           s->gb.buffer_end - s->gb.buffer);
 622         if (ret < 0 )
 623             return ret;
 624     }
 625
 626     ff_mpeg_er_frame_start(s);
 627
 628     /* the second part of the wmv2 header contains the MB skip bits which
 629      * are stored in current_picture->mb_type which is not available before
 630      * ff_mpv_frame_start() */
 631     if (CONFIG_WMV2_DECODER && s->msmpeg4_version == 5) {
 632         ret = ff_wmv2_decode_secondary_picture_header(s);
 633         if (ret < 0)
 634             return ret;
 635         if (ret == 1)
 636             goto frame_end;
 637     }
 638
 639     /* decode each macroblock */
 640     s->mb_x = 0;
 641     s->mb_y = 0;
 642
 643     slice_ret = decode_slice(s);
 644     while (s->mb_y < s->mb_height) {
 645         if (s->msmpeg4_version) {
 646             if (s->slice_height == 0 || s->mb_x != 0 || slice_ret < 0 ||
 647                 (s->mb_y % s->slice_height) != 0 || get_bits_left(&s->gb) < 0)
 648                 break;
 649         } else {
 650             int prev_x = s->mb_x, prev_y = s->mb_y;
 651             if (ff_h263_resync(s) < 0)
 652                 break;
 653             if (prev_y * s->mb_width + prev_x < s->mb_y * s->mb_width + s->mb_x)
 654                 s->er.error_occurred = 1;
 655         }
 656
 657         if (s->msmpeg4_version < 4 && s->h263_pred)
 658             ff_mpeg4_clean_buffers(s);
 659
 660         if (decode_slice(s) < 0)
 661             slice_ret = AVERROR_INVALIDDATA;
 662     }
 663
 664     if (s->msmpeg4_version && s->msmpeg4_version < 4 &&
 665         s->pict_type == AV_PICTURE_TYPE_I)
 666         if (!CONFIG_MSMPEG4_DECODER ||
 667             ff_msmpeg4_decode_ext_header(s, buf_size) < 0)
 668             s->er.error_status_table[s->mb_num - 1] = ER_MB_ERROR;
 669
 670     av_assert1(s->bitstream_buffer_size == 0);
 671 frame_end:
 672     if (!s->studio_profile)
 673         ff_er_frame_end(&s->er);
 674
 675     if (avctx->hwaccel) {
 676         ret = avctx->hwaccel->end_frame(avctx);
 677         if (ret < 0)
 678             return ret;
 679     }
 680
 681     ff_mpv_frame_end(s);
 682
 683     if (CONFIG_MPEG4_DECODER && avctx->codec_id == AV_CODEC_ID_MPEG4)
 684         ff_mpeg4_frame_end(avctx, buf, buf_size);
 685
 686     if (!s->divx_packed && avctx->hwaccel)
 687         ff_thread_finish_setup(avctx);
 688
 689     av_assert1(s->current_picture.f->pict_type == s->current_picture_ptr->f->pict_type);
 690     av_assert1(s->current_picture.f->pict_type == s->pict_type);
 691     if (s->pict_type == AV_PICTURE_TYPE_B || s->low_delay) {
 692         if ((ret = av_frame_ref(pict, s->current_picture_ptr->f)) < 0)
 693             return ret;
 694         ff_print_debug_info(s, s->current_picture_ptr, pict);
 695         ff_mpv_export_qp_table(s, pict, s->current_picture_ptr, FF_QSCALE_TYPE_MPEG1);
 696     } else if (s->last_picture_ptr) {
 697         if ((ret = av_frame_ref(pict, s->last_picture_ptr->f)) < 0)
 698             return ret;
 699         ff_print_debug_info(s, s->last_picture_ptr, pict);
 700         ff_mpv_export_qp_table(s, pict, s->last_picture_ptr, FF_QSCALE_TYPE_MPEG1);
 701     }
 702
 703     if (s->last_picture_ptr || s->low_delay) {
 704         if (   pict->format == AV_PIX_FMT_YUV420P
 705             && (s->codec_tag == AV_RL32("GEOV") || s->codec_tag == AV_RL32("GEOX"))) {
 706             int x, y, p;
 707             av_frame_make_writable(pict);
 708             for (p=0; p<3; p++) {
 709                 int w = AV_CEIL_RSHIFT(pict-> width, !!p);
 710                 int h = AV_CEIL_RSHIFT(pict->height, !!p);
 711                 int linesize = pict->linesize[p];
 712                 for (y=0; y<(h>>1); y++)
 713                     for (x=0; x<w; x++)
 714                         FFSWAP(int,
 715                                pict->data[p][x + y*linesize],
 716                                pict->data[p][x + (h-1-y)*linesize]);
 717             }
 718         }
 719         *got_frame = 1;
 720     }
 721
 722     if (slice_ret < 0 && (avctx->err_recognition & AV_EF_EXPLODE))
 723         return slice_ret;
 724     else
 725         return get_consumed_bytes(s, buf_size);
 726 }
 727
 728 const enum AVPixelFormat ff_h263_hwaccel_pixfmt_list_420[] = {
 729 #if CONFIG_H263_VAAPI_HWACCEL || CONFIG_MPEG4_VAAPI_HWACCEL
 730     AV_PIX_FMT_VAAPI,
 731 #endif
 732 #if CONFIG_MPEG4_NVDEC_HWACCEL
 733     AV_PIX_FMT_CUDA,
 734 #endif
 735 #if CONFIG_MPEG4_VDPAU_HWACCEL
 736     AV_PIX_FMT_VDPAU,
 737 #endif
 738 #if CONFIG_H263_VIDEOTOOLBOX_HWACCEL || CONFIG_MPEG4_VIDEOTOOLBOX_HWACCEL
 739     AV_PIX_FMT_VIDEOTOOLBOX,
 740 #endif
 741     AV_PIX_FMT_YUV420P,
 742     AV_PIX_FMT_NONE
 743 };
 744
 745 const AVCodecHWConfigInternal *const ff_h263_hw_config_list[] = {
 746 #if CONFIG_H263_VAAPI_HWACCEL
 747     HWACCEL_VAAPI(h263),
 748 #endif
 749 #if CONFIG_MPEG4_NVDEC_HWACCEL
 750     HWACCEL_NVDEC(mpeg4),
 751 #endif
 752 #if CONFIG_MPEG4_VDPAU_HWACCEL
 753     HWACCEL_VDPAU(mpeg4),
 754 #endif
 755 #if CONFIG_H263_VIDEOTOOLBOX_HWACCEL
 756     HWACCEL_VIDEOTOOLBOX(h263),
 757 #endif
 758     NULL
 759 };
 760
 761 AVCodec ff_h263_decoder = {
 762     .name           = "h263",
 763     .long_name      = NULL_IF_CONFIG_SMALL("H.263 / H.263-1996, H.263+ / H.263-1998 / H.263 version 2"),
 764     .type           = AVMEDIA_TYPE_VIDEO,
 765     .id             = AV_CODEC_ID_H263,
 766     .priv_data_size = sizeof(MpegEncContext),
 767     .init           = ff_h263_decode_init,
 768     .close          = ff_h263_decode_end,
 769     .decode         = ff_h263_decode_frame,
 770     .capabilities   = AV_CODEC_CAP_DRAW_HORIZ_BAND | AV_CODEC_CAP_DR1 |
 771                       AV_CODEC_CAP_TRUNCATED | AV_CODEC_CAP_DELAY,
 772     .caps_internal  = FF_CODEC_CAP_SKIP_FRAME_FILL_PARAM | FF_CODEC_CAP_INIT_CLEANUP,
 773     .flush          = ff_mpeg_flush,
 774     .max_lowres     = 3,
 775     .pix_fmts       = ff_h263_hwaccel_pixfmt_list_420,
 776     .hw_configs     = ff_h263_hw_config_list,
 777 };
 778
 779 AVCodec ff_h263p_decoder = {
 780     .name           = "h263p",
 781     .long_name      = NULL_IF_CONFIG_SMALL("H.263 / H.263-1996, H.263+ / H.263-1998 / H.263 version 2"),
 782     .type           = AVMEDIA_TYPE_VIDEO,
 783     .id             = AV_CODEC_ID_H263P,
 784     .priv_data_size = sizeof(MpegEncContext),
 785     .init           = ff_h263_decode_init,
 786     .close          = ff_h263_decode_end,
 787     .decode         = ff_h263_decode_frame,
 788     .capabilities   = AV_CODEC_CAP_DRAW_HORIZ_BAND | AV_CODEC_CAP_DR1 |
 789                       AV_CODEC_CAP_TRUNCATED | AV_CODEC_CAP_DELAY,
 790     .caps_internal  = FF_CODEC_CAP_SKIP_FRAME_FILL_PARAM | FF_CODEC_CAP_INIT_CLEANUP,
 791     .flush          = ff_mpeg_flush,
 792     .max_lowres     = 3,
 793     .pix_fmts       = ff_h263_hwaccel_pixfmt_list_420,
 794     .hw_configs     = ff_h263_hw_config_list,
 795 };