]> git.sesse.net Git - ffmpeg/blob - libavcodec/h263dec.c
lavc: Add support for increasing hardware frame pool sizes
[ffmpeg] / libavcodec / h263dec.c
1 /*
2  * H.263 decoder
3  * Copyright (c) 2001 Fabrice Bellard
4  * Copyright (c) 2002-2004 Michael Niedermayer <michaelni@gmx.at>
5  *
6  * This file is part of Libav.
7  *
8  * Libav is free software; you can redistribute it and/or
9  * modify it under the terms of the GNU Lesser General Public
10  * License as published by the Free Software Foundation; either
11  * version 2.1 of the License, or (at your option) any later version.
12  *
13  * Libav is distributed in the hope that it will be useful,
14  * but WITHOUT ANY WARRANTY; without even the implied warranty of
15  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
16  * Lesser General Public License for more details.
17  *
18  * You should have received a copy of the GNU Lesser General Public
19  * License along with Libav; if not, write to the Free Software
20  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
21  */
22
23 /**
24  * @file
25  * H.263 decoder.
26  */
27
28 #include "libavutil/cpu.h"
29 #include "avcodec.h"
30 #include "error_resilience.h"
31 #include "flv.h"
32 #include "h263.h"
33 #include "h263_parser.h"
34 #include "hwaccel.h"
35 #include "internal.h"
36 #include "mpeg_er.h"
37 #include "mpeg4video.h"
38 #include "mpeg4video_parser.h"
39 #include "mpegutils.h"
40 #include "mpegvideo.h"
41 #include "msmpeg4.h"
42 #include "qpeldsp.h"
43 #include "thread.h"
44 #include "wmv2.h"
45
46 static enum AVPixelFormat h263_get_format(AVCodecContext *avctx)
47 {
48     if (avctx->codec->id == AV_CODEC_ID_MSS2)
49         return AV_PIX_FMT_YUV420P;
50
51     return avctx->pix_fmt = ff_get_format(avctx, avctx->codec->pix_fmts);
52 }
53
54 av_cold int ff_h263_decode_init(AVCodecContext *avctx)
55 {
56     MpegEncContext *s = avctx->priv_data;
57     int ret;
58
59     s->avctx           = avctx;
60     s->out_format      = FMT_H263;
61     s->width           = avctx->coded_width;
62     s->height          = avctx->coded_height;
63     s->workaround_bugs = avctx->workaround_bugs;
64
65     // set defaults
66     ff_mpv_decode_defaults(s);
67     s->quant_precision = 5;
68     s->decode_mb       = ff_h263_decode_mb;
69     s->low_delay       = 1;
70     s->unrestricted_mv = 1;
71
72     /* select sub codec */
73     switch (avctx->codec->id) {
74     case AV_CODEC_ID_H263:
75         s->unrestricted_mv = 0;
76         avctx->chroma_sample_location = AVCHROMA_LOC_CENTER;
77         break;
78     case AV_CODEC_ID_MPEG4:
79         break;
80     case AV_CODEC_ID_MSMPEG4V1:
81         s->h263_pred       = 1;
82         s->msmpeg4_version = 1;
83         break;
84     case AV_CODEC_ID_MSMPEG4V2:
85         s->h263_pred       = 1;
86         s->msmpeg4_version = 2;
87         break;
88     case AV_CODEC_ID_MSMPEG4V3:
89         s->h263_pred       = 1;
90         s->msmpeg4_version = 3;
91         break;
92     case AV_CODEC_ID_WMV1:
93         s->h263_pred       = 1;
94         s->msmpeg4_version = 4;
95         break;
96     case AV_CODEC_ID_WMV2:
97         s->h263_pred       = 1;
98         s->msmpeg4_version = 5;
99         break;
100     case AV_CODEC_ID_VC1:
101     case AV_CODEC_ID_WMV3:
102     case AV_CODEC_ID_VC1IMAGE:
103     case AV_CODEC_ID_WMV3IMAGE:
104     case AV_CODEC_ID_MSS2:
105         s->h263_pred       = 1;
106         s->msmpeg4_version = 6;
107         avctx->chroma_sample_location = AVCHROMA_LOC_LEFT;
108         break;
109     case AV_CODEC_ID_H263I:
110         break;
111     case AV_CODEC_ID_FLV1:
112         s->h263_flv = 1;
113         break;
114     default:
115         av_log(avctx, AV_LOG_ERROR, "Unsupported codec %d\n",
116                avctx->codec->id);
117         return AVERROR(ENOSYS);
118     }
119     s->codec_id    = avctx->codec->id;
120
121     /* for H.263, we allocate the images after having read the header */
122     if (avctx->codec->id != AV_CODEC_ID_H263 &&
123         avctx->codec->id != AV_CODEC_ID_MPEG4) {
124         avctx->pix_fmt = h263_get_format(avctx);
125         ff_mpv_idct_init(s);
126         if ((ret = ff_mpv_common_init(s)) < 0)
127             return ret;
128     }
129
130     ff_h263dsp_init(&s->h263dsp);
131     ff_qpeldsp_init(&s->qdsp);
132     ff_h263_decode_init_vlc();
133
134     return 0;
135 }
136
137 av_cold int ff_h263_decode_end(AVCodecContext *avctx)
138 {
139     MpegEncContext *s = avctx->priv_data;
140
141     ff_mpv_common_end(s);
142     return 0;
143 }
144
145 /**
146  * Return the number of bytes consumed for building the current frame.
147  */
148 static int get_consumed_bytes(MpegEncContext *s, int buf_size)
149 {
150     int pos = (get_bits_count(&s->gb) + 7) >> 3;
151
152     if (s->divx_packed || s->avctx->hwaccel) {
153         /* We would have to scan through the whole buf to handle the weird
154          * reordering ... */
155         return buf_size;
156     } else if (s->avctx->flags & AV_CODEC_FLAG_TRUNCATED) {
157         pos -= s->parse_context.last_index;
158         // padding is not really read so this might be -1
159         if (pos < 0)
160             pos = 0;
161         return pos;
162     } else {
163         // avoid infinite loops (maybe not needed...)
164         if (pos == 0)
165             pos = 1;
166         // oops ;)
167         if (pos + 10 > buf_size)
168             pos = buf_size;
169
170         return pos;
171     }
172 }
173
174 static int decode_slice(MpegEncContext *s)
175 {
176     const int part_mask = s->partitioned_frame
177                           ? (ER_AC_END | ER_AC_ERROR) : 0x7F;
178     const int mb_size = 16;
179     int ret;
180
181     s->last_resync_gb   = s->gb;
182     s->first_slice_line = 1;
183     s->resync_mb_x      = s->mb_x;
184     s->resync_mb_y      = s->mb_y;
185
186     ff_set_qscale(s, s->qscale);
187
188     if (s->avctx->hwaccel) {
189         const uint8_t *start = s->gb.buffer + get_bits_count(&s->gb) / 8;
190         const uint8_t *end   = ff_h263_find_resync_marker(start + 1,
191                                                           s->gb.buffer_end);
192         skip_bits_long(&s->gb, 8 * (end - start));
193         return s->avctx->hwaccel->decode_slice(s->avctx, start, end - start);
194     }
195
196     if (s->partitioned_frame) {
197         const int qscale = s->qscale;
198
199         if (CONFIG_MPEG4_DECODER && s->codec_id == AV_CODEC_ID_MPEG4)
200             if ((ret = ff_mpeg4_decode_partitions(s->avctx->priv_data)) < 0)
201                 return ret;
202
203         /* restore variables which were modified */
204         s->first_slice_line = 1;
205         s->mb_x             = s->resync_mb_x;
206         s->mb_y             = s->resync_mb_y;
207         ff_set_qscale(s, qscale);
208     }
209
210     for (; s->mb_y < s->mb_height; s->mb_y++) {
211         /* per-row end of slice checks */
212         if (s->msmpeg4_version) {
213             if (s->resync_mb_y + s->slice_height == s->mb_y) {
214                 ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
215                                 s->mb_x - 1, s->mb_y, ER_MB_END);
216
217                 return 0;
218             }
219         }
220
221         if (s->msmpeg4_version == 1) {
222             s->last_dc[0] =
223             s->last_dc[1] =
224             s->last_dc[2] = 128;
225         }
226
227         ff_init_block_index(s);
228         for (; s->mb_x < s->mb_width; s->mb_x++) {
229             int ret;
230
231             ff_update_block_index(s);
232
233             if (s->resync_mb_x == s->mb_x && s->resync_mb_y + 1 == s->mb_y)
234                 s->first_slice_line = 0;
235
236             /* DCT & quantize */
237
238             s->mv_dir  = MV_DIR_FORWARD;
239             s->mv_type = MV_TYPE_16X16;
240             ff_dlog(s, "%d %06X\n",
241                     get_bits_count(&s->gb), show_bits(&s->gb, 24));
242             ret = s->decode_mb(s, s->block);
243
244             if (s->pict_type != AV_PICTURE_TYPE_B)
245                 ff_h263_update_motion_val(s);
246
247             if (ret < 0) {
248                 const int xy = s->mb_x + s->mb_y * s->mb_stride;
249                 if (ret == SLICE_END) {
250                     ff_mpv_decode_mb(s, s->block);
251                     if (s->loop_filter)
252                         ff_h263_loop_filter(s);
253
254                     ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
255                                     s->mb_x, s->mb_y, ER_MB_END & part_mask);
256
257                     s->padding_bug_score--;
258
259                     if (++s->mb_x >= s->mb_width) {
260                         s->mb_x = 0;
261                         ff_mpeg_draw_horiz_band(s, s->mb_y * mb_size, mb_size);
262                         ff_mpv_report_decode_progress(s);
263                         s->mb_y++;
264                     }
265                     return 0;
266                 } else if (ret == SLICE_NOEND) {
267                     av_log(s->avctx, AV_LOG_ERROR,
268                            "Slice mismatch at MB: %d\n", xy);
269                     ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
270                                     s->mb_x + 1, s->mb_y,
271                                     ER_MB_END & part_mask);
272                     return AVERROR_INVALIDDATA;
273                 }
274                 av_log(s->avctx, AV_LOG_ERROR, "Error at MB: %d\n", xy);
275                 ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
276                                 s->mb_x, s->mb_y, ER_MB_ERROR & part_mask);
277
278                 return AVERROR_INVALIDDATA;
279             }
280
281             ff_mpv_decode_mb(s, s->block);
282             if (s->loop_filter)
283                 ff_h263_loop_filter(s);
284         }
285
286         ff_mpeg_draw_horiz_band(s, s->mb_y * mb_size, mb_size);
287         ff_mpv_report_decode_progress(s);
288
289         s->mb_x = 0;
290     }
291
292     assert(s->mb_x == 0 && s->mb_y == s->mb_height);
293
294     if (s->codec_id == AV_CODEC_ID_MPEG4         &&
295         (s->workaround_bugs & FF_BUG_AUTODETECT) &&
296         get_bits_left(&s->gb) >= 48              &&
297         show_bits(&s->gb, 24) == 0x4010          &&
298         !s->data_partitioning)
299         s->padding_bug_score += 32;
300
301     /* try to detect the padding bug */
302     if (s->codec_id == AV_CODEC_ID_MPEG4         &&
303         (s->workaround_bugs & FF_BUG_AUTODETECT) &&
304         get_bits_left(&s->gb) >= 0               &&
305         get_bits_left(&s->gb) < 48               &&
306         !s->data_partitioning) {
307         const int bits_count = get_bits_count(&s->gb);
308         const int bits_left  = s->gb.size_in_bits - bits_count;
309
310         if (bits_left == 0) {
311             s->padding_bug_score += 16;
312         } else if (bits_left != 1) {
313             int v = show_bits(&s->gb, 8);
314             v |= 0x7F >> (7 - (bits_count & 7));
315
316             if (v == 0x7F && bits_left <= 8)
317                 s->padding_bug_score--;
318             else if (v == 0x7F && ((get_bits_count(&s->gb) + 8) & 8) &&
319                      bits_left <= 16)
320                 s->padding_bug_score += 4;
321             else
322                 s->padding_bug_score++;
323         }
324     }
325
326     if (s->workaround_bugs & FF_BUG_AUTODETECT) {
327         if (s->codec_id == AV_CODEC_ID_H263 ||
328             (s->padding_bug_score > -2 && !s->data_partitioning))
329             s->workaround_bugs |= FF_BUG_NO_PADDING;
330         else
331             s->workaround_bugs &= ~FF_BUG_NO_PADDING;
332     }
333
334     // handle formats which don't have unique end markers
335     if (s->msmpeg4_version || (s->workaround_bugs & FF_BUG_NO_PADDING)) { // FIXME perhaps solve this more cleanly
336         int left      = get_bits_left(&s->gb);
337         int max_extra = 7;
338
339         /* no markers in M$ crap */
340         if (s->msmpeg4_version && s->pict_type == AV_PICTURE_TYPE_I)
341             max_extra += 17;
342
343         /* buggy padding but the frame should still end approximately at
344          * the bitstream end */
345         if ((s->workaround_bugs & FF_BUG_NO_PADDING) &&
346             (s->avctx->err_recognition & AV_EF_BUFFER))
347             max_extra += 48;
348         else if ((s->workaround_bugs & FF_BUG_NO_PADDING))
349             max_extra += 256 * 256 * 256 * 64;
350
351         if (left > max_extra)
352             av_log(s->avctx, AV_LOG_ERROR,
353                    "discarding %d junk bits at end, next would be %X\n",
354                    left, show_bits(&s->gb, 24));
355         else if (left < 0)
356             av_log(s->avctx, AV_LOG_ERROR, "overreading %d bits\n", -left);
357         else
358             ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
359                             s->mb_x - 1, s->mb_y, ER_MB_END);
360
361         return 0;
362     }
363
364     av_log(s->avctx, AV_LOG_ERROR,
365            "slice end not reached but screenspace end (%d left %06X, score= %d)\n",
366            get_bits_left(&s->gb), show_bits(&s->gb, 24), s->padding_bug_score);
367
368     ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y, s->mb_x, s->mb_y,
369                     ER_MB_END & part_mask);
370
371     return AVERROR_INVALIDDATA;
372 }
373
374 int ff_h263_decode_frame(AVCodecContext *avctx, void *data, int *got_frame,
375                          AVPacket *avpkt)
376 {
377     const uint8_t *buf = avpkt->data;
378     int buf_size       = avpkt->size;
379     MpegEncContext *s  = avctx->priv_data;
380     int ret;
381     AVFrame *pict = data;
382
383     /* no supplementary picture */
384     if (buf_size == 0) {
385         /* special case for last picture */
386         if (s->low_delay == 0 && s->next_picture_ptr) {
387             if ((ret = av_frame_ref(pict, s->next_picture_ptr->f)) < 0)
388                 return ret;
389             s->next_picture_ptr = NULL;
390
391             *got_frame = 1;
392         }
393
394         return 0;
395     }
396
397     if (s->avctx->flags & AV_CODEC_FLAG_TRUNCATED) {
398         int next;
399
400         if (CONFIG_MPEG4_DECODER && s->codec_id == AV_CODEC_ID_MPEG4) {
401             next = ff_mpeg4_find_frame_end(&s->parse_context, buf, buf_size);
402         } else if (CONFIG_H263_DECODER && s->codec_id == AV_CODEC_ID_H263) {
403             next = ff_h263_find_frame_end(&s->parse_context, buf, buf_size);
404         } else {
405             av_log(s->avctx, AV_LOG_ERROR,
406                    "this codec does not support truncated bitstreams\n");
407             return AVERROR(ENOSYS);
408         }
409
410         if (ff_combine_frame(&s->parse_context, next, (const uint8_t **)&buf,
411                              &buf_size) < 0)
412             return buf_size;
413     }
414
415     if (s->bitstream_buffer_size && (s->divx_packed || buf_size < 20)) // divx 5.01+/xvid frame reorder
416         ret = init_get_bits8(&s->gb, s->bitstream_buffer,
417                              s->bitstream_buffer_size);
418     else
419         ret = init_get_bits8(&s->gb, buf, buf_size);
420     s->bitstream_buffer_size = 0;
421
422     if (ret < 0)
423         return ret;
424
425     if (!s->context_initialized)
426         // we need the idct permutation for reading a custom matrix
427         ff_mpv_idct_init(s);
428
429     /* let's go :-) */
430     if (CONFIG_WMV2_DECODER && s->msmpeg4_version == 5) {
431         ret = ff_wmv2_decode_picture_header(s);
432     } else if (CONFIG_MSMPEG4_DECODER && s->msmpeg4_version) {
433         ret = ff_msmpeg4_decode_picture_header(s);
434     } else if (CONFIG_MPEG4_DECODER && avctx->codec_id == AV_CODEC_ID_MPEG4) {
435         if (s->avctx->extradata_size && s->picture_number == 0) {
436             GetBitContext gb;
437
438             ret = init_get_bits8(&gb, s->avctx->extradata,
439                                  s->avctx->extradata_size);
440             if (ret < 0)
441                 return ret;
442             ff_mpeg4_decode_picture_header(avctx->priv_data, &gb);
443         }
444         ret = ff_mpeg4_decode_picture_header(avctx->priv_data, &s->gb);
445     } else if (CONFIG_H263I_DECODER && s->codec_id == AV_CODEC_ID_H263I) {
446         ret = ff_intel_h263_decode_picture_header(s);
447     } else if (CONFIG_FLV_DECODER && s->h263_flv) {
448         ret = ff_flv_decode_picture_header(s);
449     } else {
450         ret = ff_h263_decode_picture_header(s);
451     }
452
453     if (ret == FRAME_SKIPPED)
454         return get_consumed_bytes(s, buf_size);
455
456     /* skip if the header was thrashed */
457     if (ret < 0) {
458         av_log(s->avctx, AV_LOG_ERROR, "header damaged\n");
459         return ret;
460     }
461
462     if (!s->context_initialized) {
463         avctx->pix_fmt = h263_get_format(avctx);
464         if ((ret = ff_mpv_common_init(s)) < 0)
465             return ret;
466     }
467
468     if (!s->current_picture_ptr || s->current_picture_ptr->f->data[0]) {
469         int i = ff_find_unused_picture(s->avctx, s->picture, 0);
470         if (i < 0)
471             return i;
472         s->current_picture_ptr = &s->picture[i];
473     }
474
475     avctx->has_b_frames = !s->low_delay;
476
477 #define SET_QPEL_FUNC(postfix1, postfix2)                           \
478     s->qdsp.put_        ## postfix1 = ff_put_        ## postfix2;   \
479     s->qdsp.put_no_rnd_ ## postfix1 = ff_put_no_rnd_ ## postfix2;   \
480     s->qdsp.avg_        ## postfix1 = ff_avg_        ## postfix2;
481
482     if (s->workaround_bugs & FF_BUG_STD_QPEL) {
483         SET_QPEL_FUNC(qpel_pixels_tab[0][5], qpel16_mc11_old_c)
484         SET_QPEL_FUNC(qpel_pixels_tab[0][7], qpel16_mc31_old_c)
485         SET_QPEL_FUNC(qpel_pixels_tab[0][9], qpel16_mc12_old_c)
486         SET_QPEL_FUNC(qpel_pixels_tab[0][11], qpel16_mc32_old_c)
487         SET_QPEL_FUNC(qpel_pixels_tab[0][13], qpel16_mc13_old_c)
488         SET_QPEL_FUNC(qpel_pixels_tab[0][15], qpel16_mc33_old_c)
489
490         SET_QPEL_FUNC(qpel_pixels_tab[1][5], qpel8_mc11_old_c)
491         SET_QPEL_FUNC(qpel_pixels_tab[1][7], qpel8_mc31_old_c)
492         SET_QPEL_FUNC(qpel_pixels_tab[1][9], qpel8_mc12_old_c)
493         SET_QPEL_FUNC(qpel_pixels_tab[1][11], qpel8_mc32_old_c)
494         SET_QPEL_FUNC(qpel_pixels_tab[1][13], qpel8_mc13_old_c)
495         SET_QPEL_FUNC(qpel_pixels_tab[1][15], qpel8_mc33_old_c)
496     }
497
498     /* After H.263 & MPEG-4 header decode we have the height, width,
499      * and other parameters. So then we could init the picture.
500      * FIXME: By the way H.263 decoder is evolving it should have
501      * an H263EncContext */
502     if (s->width  != avctx->coded_width  ||
503         s->height != avctx->coded_height ||
504         s->context_reinit) {
505         /* H.263 could change picture size any time */
506         s->context_reinit = 0;
507
508         ret = ff_set_dimensions(avctx, s->width, s->height);
509         if (ret < 0)
510             return ret;
511
512         ff_set_sar(avctx, avctx->sample_aspect_ratio);
513
514         if ((ret = ff_mpv_common_frame_size_change(s)))
515             return ret;
516
517         if (avctx->pix_fmt != h263_get_format(avctx)) {
518             av_log(avctx, AV_LOG_ERROR, "format change not supported\n");
519             avctx->pix_fmt = AV_PIX_FMT_NONE;
520             return AVERROR_UNKNOWN;
521         }
522     }
523
524     if (s->codec_id == AV_CODEC_ID_H263  ||
525         s->codec_id == AV_CODEC_ID_H263P ||
526         s->codec_id == AV_CODEC_ID_H263I)
527         s->gob_index = H263_GOB_HEIGHT(s->height);
528
529     // for skipping the frame
530     s->current_picture.f->pict_type = s->pict_type;
531     s->current_picture.f->key_frame = s->pict_type == AV_PICTURE_TYPE_I;
532
533     /* skip B-frames if we don't have reference frames */
534     if (!s->last_picture_ptr &&
535         (s->pict_type == AV_PICTURE_TYPE_B || s->droppable))
536         return get_consumed_bytes(s, buf_size);
537     if ((avctx->skip_frame >= AVDISCARD_NONREF &&
538          s->pict_type == AV_PICTURE_TYPE_B)    ||
539         (avctx->skip_frame >= AVDISCARD_NONKEY &&
540          s->pict_type != AV_PICTURE_TYPE_I)    ||
541         avctx->skip_frame >= AVDISCARD_ALL)
542         return get_consumed_bytes(s, buf_size);
543
544     if (s->next_p_frame_damaged) {
545         if (s->pict_type == AV_PICTURE_TYPE_B)
546             return get_consumed_bytes(s, buf_size);
547         else
548             s->next_p_frame_damaged = 0;
549     }
550
551     if ((!s->no_rounding) || s->pict_type == AV_PICTURE_TYPE_B) {
552         s->me.qpel_put = s->qdsp.put_qpel_pixels_tab;
553         s->me.qpel_avg = s->qdsp.avg_qpel_pixels_tab;
554     } else {
555         s->me.qpel_put = s->qdsp.put_no_rnd_qpel_pixels_tab;
556         s->me.qpel_avg = s->qdsp.avg_qpel_pixels_tab;
557     }
558
559     if ((ret = ff_mpv_frame_start(s, avctx)) < 0)
560         return ret;
561
562     if (!s->divx_packed)
563         ff_thread_finish_setup(avctx);
564
565     if (avctx->hwaccel) {
566         ret = avctx->hwaccel->start_frame(avctx, s->gb.buffer,
567                                           s->gb.buffer_end - s->gb.buffer);
568         if (ret < 0 )
569             return ret;
570     }
571
572     ff_mpeg_er_frame_start(s);
573
574     /* the second part of the wmv2 header contains the MB skip bits which
575      * are stored in current_picture->mb_type which is not available before
576      * ff_mpv_frame_start() */
577     if (CONFIG_WMV2_DECODER && s->msmpeg4_version == 5) {
578         ret = ff_wmv2_decode_secondary_picture_header(s);
579         if (ret < 0)
580             return ret;
581         if (ret == 1)
582             goto intrax8_decoded;
583     }
584
585     /* decode each macroblock */
586     s->mb_x = 0;
587     s->mb_y = 0;
588
589     ret = decode_slice(s);
590     while (s->mb_y < s->mb_height) {
591         if (s->msmpeg4_version) {
592             if (s->slice_height == 0 || s->mb_x != 0 ||
593                 (s->mb_y % s->slice_height) != 0 || get_bits_left(&s->gb) < 0)
594                 break;
595         } else {
596             int prev_x = s->mb_x, prev_y = s->mb_y;
597             if (ff_h263_resync(s) < 0)
598                 break;
599             if (prev_y * s->mb_width + prev_x < s->mb_y * s->mb_width + s->mb_x)
600                 s->er.error_occurred = 1;
601         }
602
603         if (s->msmpeg4_version < 4 && s->h263_pred)
604             ff_mpeg4_clean_buffers(s);
605
606         if (decode_slice(s) < 0)
607             ret = AVERROR_INVALIDDATA;
608     }
609
610     if (s->msmpeg4_version && s->msmpeg4_version < 4 &&
611         s->pict_type == AV_PICTURE_TYPE_I)
612         if (!CONFIG_MSMPEG4_DECODER ||
613             ff_msmpeg4_decode_ext_header(s, buf_size) < 0)
614             s->er.error_status_table[s->mb_num - 1] = ER_MB_ERROR;
615
616     assert(s->bitstream_buffer_size == 0);
617
618     if (CONFIG_MPEG4_DECODER && avctx->codec_id == AV_CODEC_ID_MPEG4)
619         ff_mpeg4_frame_end(avctx, buf, buf_size);
620
621 intrax8_decoded:
622     ff_er_frame_end(&s->er);
623
624     if (avctx->hwaccel) {
625         ret = avctx->hwaccel->end_frame(avctx);
626         if (ret < 0)
627             return ret;
628     }
629
630     ff_mpv_frame_end(s);
631
632     if (!s->divx_packed && avctx->hwaccel)
633         ff_thread_finish_setup(avctx);
634
635     assert(s->current_picture.f->pict_type ==
636            s->current_picture_ptr->f->pict_type);
637     assert(s->current_picture.f->pict_type == s->pict_type);
638     if (s->pict_type == AV_PICTURE_TYPE_B || s->low_delay) {
639         if ((ret = av_frame_ref(pict, s->current_picture_ptr->f)) < 0)
640             return ret;
641         ff_print_debug_info(s, s->current_picture_ptr);
642     } else if (s->last_picture_ptr) {
643         if ((ret = av_frame_ref(pict, s->last_picture_ptr->f)) < 0)
644             return ret;
645         ff_print_debug_info(s, s->last_picture_ptr);
646     }
647
648     if (s->last_picture_ptr || s->low_delay)
649         *got_frame = 1;
650
651     if (ret && (avctx->err_recognition & AV_EF_EXPLODE))
652         return ret;
653     else
654         return get_consumed_bytes(s, buf_size);
655 }
656
657 const enum AVPixelFormat ff_h263_hwaccel_pixfmt_list_420[] = {
658 #if CONFIG_H263_VAAPI_HWACCEL || CONFIG_MPEG4_VAAPI_HWACCEL
659     AV_PIX_FMT_VAAPI,
660 #endif
661 #if CONFIG_MPEG4_VDPAU_HWACCEL
662     AV_PIX_FMT_VDPAU,
663 #endif
664     AV_PIX_FMT_YUV420P,
665     AV_PIX_FMT_NONE
666 };
667
668 AVCodec ff_h263_decoder = {
669     .name           = "h263",
670     .long_name      = NULL_IF_CONFIG_SMALL("H.263 / H.263-1996, H.263+ / H.263-1998 / H.263 version 2"),
671     .type           = AVMEDIA_TYPE_VIDEO,
672     .id             = AV_CODEC_ID_H263,
673     .priv_data_size = sizeof(MpegEncContext),
674     .init           = ff_h263_decode_init,
675     .close          = ff_h263_decode_end,
676     .decode         = ff_h263_decode_frame,
677     .capabilities   = AV_CODEC_CAP_DRAW_HORIZ_BAND | AV_CODEC_CAP_DR1 |
678                       AV_CODEC_CAP_TRUNCATED | AV_CODEC_CAP_DELAY,
679     .flush          = ff_mpeg_flush,
680     .pix_fmts       = ff_h263_hwaccel_pixfmt_list_420,
681     .hw_configs     = (const AVCodecHWConfigInternal*[]) {
682 #if CONFIG_H263_VAAPI_HWACCEL
683                         HWACCEL_VAAPI(h263),
684 #endif
685 #if CONFIG_MPEG4_VDPAU_HWACCEL
686                         HWACCEL_VDPAU(mpeg4),
687 #endif
688                         NULL
689                     },
690 };