git.sesse.net Git - ffmpeg/blob - libavcodec/mpeg12dec.c

   1 /*
   2  * MPEG-1/2 decoder
   3  * Copyright (c) 2000, 2001 Fabrice Bellard
   4  * Copyright (c) 2002-2013 Michael Niedermayer <michaelni@gmx.at>
   5  *
   6  * This file is part of FFmpeg.
   7  *
   8  * FFmpeg is free software; you can redistribute it and/or
   9  * modify it under the terms of the GNU Lesser General Public
  10  * License as published by the Free Software Foundation; either
  11  * version 2.1 of the License, or (at your option) any later version.
  12  *
  13  * FFmpeg is distributed in the hope that it will be useful,
  14  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  15  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  16  * Lesser General Public License for more details.
  17  *
  18  * You should have received a copy of the GNU Lesser General Public
  19  * License along with FFmpeg; if not, write to the Free Software
  20  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
  21  */
  22
  23 /**
  24  * @file
  25  * MPEG-1/2 decoder
  26  */
  27
  28 #define UNCHECKED_BITSTREAM_READER 1
  29 #include <inttypes.h>
  30
  31 #include "libavutil/attributes.h"
  32 #include "libavutil/imgutils.h"
  33 #include "libavutil/internal.h"
  34 #include "libavutil/stereo3d.h"
  35
  36 #include "avcodec.h"
  37 #include "bytestream.h"
  38 #include "error_resilience.h"
  39 #include "hwconfig.h"
  40 #include "idctdsp.h"
  41 #include "internal.h"
  42 #include "mpeg_er.h"
  43 #include "mpeg12.h"
  44 #include "mpeg12data.h"
  45 #include "mpegutils.h"
  46 #include "mpegvideo.h"
  47 #include "mpegvideodata.h"
  48 #include "profiles.h"
  49 #include "thread.h"
  50 #include "version.h"
  51 #include "xvmc_internal.h"
  52
  53 typedef struct Mpeg1Context {
  54     MpegEncContext mpeg_enc_ctx;
  55     int mpeg_enc_ctx_allocated; /* true if decoding context allocated */
  56     int repeat_field;           /* true if we must repeat the field */
  57     AVPanScan pan_scan;         /* some temporary storage for the panscan */
  58     AVStereo3D stereo3d;
  59     int has_stereo3d;
  60     AVBufferRef *a53_buf_ref;
  61     uint8_t afd;
  62     int has_afd;
  63     int slice_count;
  64     AVRational save_aspect;
  65     int save_width, save_height, save_progressive_seq;
  66     int rc_buffer_size;
  67     AVRational frame_rate_ext;  /* MPEG-2 specific framerate modificator */
  68     int sync;                   /* Did we reach a sync point like a GOP/SEQ/KEYFrame? */
  69     int tmpgexs;
  70     int first_slice;
  71     int extradata_decoded;
  72 } Mpeg1Context;
  73
  74 #define MB_TYPE_ZERO_MV   0x20000000
  75
  76 static const uint32_t ptype2mb_type[7] = {
  77                     MB_TYPE_INTRA,
  78                     MB_TYPE_L0 | MB_TYPE_CBP | MB_TYPE_ZERO_MV | MB_TYPE_16x16,
  79                     MB_TYPE_L0,
  80                     MB_TYPE_L0 | MB_TYPE_CBP,
  81     MB_TYPE_QUANT | MB_TYPE_INTRA,
  82     MB_TYPE_QUANT | MB_TYPE_L0 | MB_TYPE_CBP | MB_TYPE_ZERO_MV | MB_TYPE_16x16,
  83     MB_TYPE_QUANT | MB_TYPE_L0 | MB_TYPE_CBP,
  84 };
  85
  86 static const uint32_t btype2mb_type[11] = {
  87                     MB_TYPE_INTRA,
  88                     MB_TYPE_L1,
  89                     MB_TYPE_L1   | MB_TYPE_CBP,
  90                     MB_TYPE_L0,
  91                     MB_TYPE_L0   | MB_TYPE_CBP,
  92                     MB_TYPE_L0L1,
  93                     MB_TYPE_L0L1 | MB_TYPE_CBP,
  94     MB_TYPE_QUANT | MB_TYPE_INTRA,
  95     MB_TYPE_QUANT | MB_TYPE_L1   | MB_TYPE_CBP,
  96     MB_TYPE_QUANT | MB_TYPE_L0   | MB_TYPE_CBP,
  97     MB_TYPE_QUANT | MB_TYPE_L0L1 | MB_TYPE_CBP,
  98 };
  99
 100 /* as H.263, but only 17 codes */
 101 static int mpeg_decode_motion(MpegEncContext *s, int fcode, int pred)
 102 {
 103     int code, sign, val, shift;
 104
 105     code = get_vlc2(&s->gb, ff_mv_vlc.table, MV_VLC_BITS, 2);
 106     if (code == 0)
 107         return pred;
 108     if (code < 0)
 109         return 0xffff;
 110
 111     sign  = get_bits1(&s->gb);
 112     shift = fcode - 1;
 113     val   = code;
 114     if (shift) {
 115         val  = (val - 1) << shift;
 116         val |= get_bits(&s->gb, shift);
 117         val++;
 118     }
 119     if (sign)
 120         val = -val;
 121     val += pred;
 122
 123     /* modulo decoding */
 124     return sign_extend(val, 5 + shift);
 125 }
 126
 127 #define MAX_INDEX (64 - 1)
 128 #define check_scantable_index(ctx, x)                                         \
 129     do {                                                                      \
 130         if ((x) > MAX_INDEX) {                                                \
 131             av_log(ctx->avctx, AV_LOG_ERROR, "ac-tex damaged at %d %d\n",     \
 132                    ctx->mb_x, ctx->mb_y);                                     \
 133             return AVERROR_INVALIDDATA;                                       \
 134         }                                                                     \
 135     } while (0)
 136
 137 static inline int mpeg1_decode_block_inter(MpegEncContext *s,
 138                                            int16_t *block, int n)
 139 {
 140     int level, i, j, run;
 141     RLTable *rl                  = &ff_rl_mpeg1;
 142     uint8_t *const scantable     = s->intra_scantable.permutated;
 143     const uint16_t *quant_matrix = s->inter_matrix;
 144     const int qscale             = s->qscale;
 145
 146     {
 147         OPEN_READER(re, &s->gb);
 148         i = -1;
 149         // special case for first coefficient, no need to add second VLC table
 150         UPDATE_CACHE(re, &s->gb);
 151         if (((int32_t) GET_CACHE(re, &s->gb)) < 0) {
 152             level = (3 * qscale * quant_matrix[0]) >> 5;
 153             level = (level - 1) | 1;
 154             if (GET_CACHE(re, &s->gb) & 0x40000000)
 155                 level = -level;
 156             block[0] = level;
 157             i++;
 158             SKIP_BITS(re, &s->gb, 2);
 159             if (((int32_t) GET_CACHE(re, &s->gb)) <= (int32_t) 0xBFFFFFFF)
 160                 goto end;
 161         }
 162         /* now quantify & encode AC coefficients */
 163         for (;;) {
 164             GET_RL_VLC(level, run, re, &s->gb, rl->rl_vlc[0],
 165                        TEX_VLC_BITS, 2, 0);
 166
 167             if (level != 0) {
 168                 i += run;
 169                 if (i > MAX_INDEX)
 170                     break;
 171                 j = scantable[i];
 172                 level = ((level * 2 + 1) * qscale * quant_matrix[j]) >> 5;
 173                 level = (level - 1) | 1;
 174                 level = (level ^ SHOW_SBITS(re, &s->gb, 1)) -
 175                         SHOW_SBITS(re, &s->gb, 1);
 176                 SKIP_BITS(re, &s->gb, 1);
 177             } else {
 178                 /* escape */
 179                 run = SHOW_UBITS(re, &s->gb, 6) + 1;
 180                 LAST_SKIP_BITS(re, &s->gb, 6);
 181                 UPDATE_CACHE(re, &s->gb);
 182                 level = SHOW_SBITS(re, &s->gb, 8);
 183                 SKIP_BITS(re, &s->gb, 8);
 184                 if (level == -128) {
 185                     level = SHOW_UBITS(re, &s->gb, 8) - 256;
 186                     SKIP_BITS(re, &s->gb, 8);
 187                 } else if (level == 0) {
 188                     level = SHOW_UBITS(re, &s->gb, 8);
 189                     SKIP_BITS(re, &s->gb, 8);
 190                 }
 191                 i += run;
 192                 if (i > MAX_INDEX)
 193                     break;
 194                 j = scantable[i];
 195                 if (level < 0) {
 196                     level = -level;
 197                     level = ((level * 2 + 1) * qscale * quant_matrix[j]) >> 5;
 198                     level = (level - 1) | 1;
 199                     level = -level;
 200                 } else {
 201                     level = ((level * 2 + 1) * qscale * quant_matrix[j]) >> 5;
 202                     level = (level - 1) | 1;
 203                 }
 204             }
 205
 206             block[j] = level;
 207             if (((int32_t) GET_CACHE(re, &s->gb)) <= (int32_t) 0xBFFFFFFF)
 208                 break;
 209             UPDATE_CACHE(re, &s->gb);
 210         }
 211 end:
 212         LAST_SKIP_BITS(re, &s->gb, 2);
 213         CLOSE_READER(re, &s->gb);
 214     }
 215
 216     check_scantable_index(s, i);
 217
 218     s->block_last_index[n] = i;
 219     return 0;
 220 }
 221
 222 /**
 223  * Changing this would eat up any speed benefits it has.
 224  * Do not use "fast" flag if you need the code to be robust.
 225  */
 226 static inline int mpeg1_fast_decode_block_inter(MpegEncContext *s,
 227                                                 int16_t *block, int n)
 228 {
 229     int level, i, j, run;
 230     RLTable *rl              = &ff_rl_mpeg1;
 231     uint8_t *const scantable = s->intra_scantable.permutated;
 232     const int qscale         = s->qscale;
 233
 234     {
 235         OPEN_READER(re, &s->gb);
 236         i = -1;
 237         // Special case for first coefficient, no need to add second VLC table.
 238         UPDATE_CACHE(re, &s->gb);
 239         if (((int32_t) GET_CACHE(re, &s->gb)) < 0) {
 240             level = (3 * qscale) >> 1;
 241             level = (level - 1) | 1;
 242             if (GET_CACHE(re, &s->gb) & 0x40000000)
 243                 level = -level;
 244             block[0] = level;
 245             i++;
 246             SKIP_BITS(re, &s->gb, 2);
 247             if (((int32_t) GET_CACHE(re, &s->gb)) <= (int32_t) 0xBFFFFFFF)
 248                 goto end;
 249         }
 250
 251         /* now quantify & encode AC coefficients */
 252         for (;;) {
 253             GET_RL_VLC(level, run, re, &s->gb, rl->rl_vlc[0],
 254                        TEX_VLC_BITS, 2, 0);
 255
 256             if (level != 0) {
 257                 i += run;
 258                 if (i > MAX_INDEX)
 259                     break;
 260                 j = scantable[i];
 261                 level = ((level * 2 + 1) * qscale) >> 1;
 262                 level = (level - 1) | 1;
 263                 level = (level ^ SHOW_SBITS(re, &s->gb, 1)) -
 264                         SHOW_SBITS(re, &s->gb, 1);
 265                 SKIP_BITS(re, &s->gb, 1);
 266             } else {
 267                 /* escape */
 268                 run = SHOW_UBITS(re, &s->gb, 6) + 1;
 269                 LAST_SKIP_BITS(re, &s->gb, 6);
 270                 UPDATE_CACHE(re, &s->gb);
 271                 level = SHOW_SBITS(re, &s->gb, 8);
 272                 SKIP_BITS(re, &s->gb, 8);
 273                 if (level == -128) {
 274                     level = SHOW_UBITS(re, &s->gb, 8) - 256;
 275                     SKIP_BITS(re, &s->gb, 8);
 276                 } else if (level == 0) {
 277                     level = SHOW_UBITS(re, &s->gb, 8);
 278                     SKIP_BITS(re, &s->gb, 8);
 279                 }
 280                 i += run;
 281                 if (i > MAX_INDEX)
 282                     break;
 283                 j = scantable[i];
 284                 if (level < 0) {
 285                     level = -level;
 286                     level = ((level * 2 + 1) * qscale) >> 1;
 287                     level = (level - 1) | 1;
 288                     level = -level;
 289                 } else {
 290                     level = ((level * 2 + 1) * qscale) >> 1;
 291                     level = (level - 1) | 1;
 292                 }
 293             }
 294
 295             block[j] = level;
 296             if (((int32_t) GET_CACHE(re, &s->gb)) <= (int32_t) 0xBFFFFFFF)
 297                 break;
 298             UPDATE_CACHE(re, &s->gb);
 299         }
 300 end:
 301         LAST_SKIP_BITS(re, &s->gb, 2);
 302         CLOSE_READER(re, &s->gb);
 303     }
 304
 305     check_scantable_index(s, i);
 306
 307     s->block_last_index[n] = i;
 308     return 0;
 309 }
 310
 311 static inline int mpeg2_decode_block_non_intra(MpegEncContext *s,
 312                                                int16_t *block, int n)
 313 {
 314     int level, i, j, run;
 315     RLTable *rl = &ff_rl_mpeg1;
 316     uint8_t *const scantable = s->intra_scantable.permutated;
 317     const uint16_t *quant_matrix;
 318     const int qscale = s->qscale;
 319     int mismatch;
 320
 321     mismatch = 1;
 322
 323     {
 324         OPEN_READER(re, &s->gb);
 325         i = -1;
 326         if (n < 4)
 327             quant_matrix = s->inter_matrix;
 328         else
 329             quant_matrix = s->chroma_inter_matrix;
 330
 331         // Special case for first coefficient, no need to add second VLC table.
 332         UPDATE_CACHE(re, &s->gb);
 333         if (((int32_t) GET_CACHE(re, &s->gb)) < 0) {
 334             level = (3 * qscale * quant_matrix[0]) >> 5;
 335             if (GET_CACHE(re, &s->gb) & 0x40000000)
 336                 level = -level;
 337             block[0]  = level;
 338             mismatch ^= level;
 339             i++;
 340             SKIP_BITS(re, &s->gb, 2);
 341             if (((int32_t) GET_CACHE(re, &s->gb)) <= (int32_t) 0xBFFFFFFF)
 342                 goto end;
 343         }
 344
 345         /* now quantify & encode AC coefficients */
 346         for (;;) {
 347             GET_RL_VLC(level, run, re, &s->gb, rl->rl_vlc[0],
 348                        TEX_VLC_BITS, 2, 0);
 349
 350             if (level != 0) {
 351                 i += run;
 352                 if (i > MAX_INDEX)
 353                     break;
 354                 j = scantable[i];
 355                 level = ((level * 2 + 1) * qscale * quant_matrix[j]) >> 5;
 356                 level = (level ^ SHOW_SBITS(re, &s->gb, 1)) -
 357                         SHOW_SBITS(re, &s->gb, 1);
 358                 SKIP_BITS(re, &s->gb, 1);
 359             } else {
 360                 /* escape */
 361                 run = SHOW_UBITS(re, &s->gb, 6) + 1;
 362                 LAST_SKIP_BITS(re, &s->gb, 6);
 363                 UPDATE_CACHE(re, &s->gb);
 364                 level = SHOW_SBITS(re, &s->gb, 12);
 365                 SKIP_BITS(re, &s->gb, 12);
 366
 367                 i += run;
 368                 if (i > MAX_INDEX)
 369                     break;
 370                 j = scantable[i];
 371                 if (level < 0) {
 372                     level = ((-level * 2 + 1) * qscale * quant_matrix[j]) >> 5;
 373                     level = -level;
 374                 } else {
 375                     level = ((level * 2 + 1) * qscale * quant_matrix[j]) >> 5;
 376                 }
 377             }
 378
 379             mismatch ^= level;
 380             block[j]  = level;
 381             if (((int32_t) GET_CACHE(re, &s->gb)) <= (int32_t) 0xBFFFFFFF)
 382                 break;
 383             UPDATE_CACHE(re, &s->gb);
 384         }
 385 end:
 386         LAST_SKIP_BITS(re, &s->gb, 2);
 387         CLOSE_READER(re, &s->gb);
 388     }
 389     block[63] ^= (mismatch & 1);
 390
 391     check_scantable_index(s, i);
 392
 393     s->block_last_index[n] = i;
 394     return 0;
 395 }
 396
 397 /**
 398  * Changing this would eat up any speed benefits it has.
 399  * Do not use "fast" flag if you need the code to be robust.
 400  */
 401 static inline int mpeg2_fast_decode_block_non_intra(MpegEncContext *s,
 402                                                     int16_t *block, int n)
 403 {
 404     int level, i, j, run;
 405     RLTable *rl              = &ff_rl_mpeg1;
 406     uint8_t *const scantable = s->intra_scantable.permutated;
 407     const int qscale         = s->qscale;
 408     OPEN_READER(re, &s->gb);
 409     i = -1;
 410
 411     // special case for first coefficient, no need to add second VLC table
 412     UPDATE_CACHE(re, &s->gb);
 413     if (((int32_t) GET_CACHE(re, &s->gb)) < 0) {
 414         level = (3 * qscale) >> 1;
 415         if (GET_CACHE(re, &s->gb) & 0x40000000)
 416             level = -level;
 417         block[0] = level;
 418         i++;
 419         SKIP_BITS(re, &s->gb, 2);
 420         if (((int32_t) GET_CACHE(re, &s->gb)) <= (int32_t) 0xBFFFFFFF)
 421             goto end;
 422     }
 423
 424     /* now quantify & encode AC coefficients */
 425     for (;;) {
 426         GET_RL_VLC(level, run, re, &s->gb, rl->rl_vlc[0], TEX_VLC_BITS, 2, 0);
 427
 428         if (level != 0) {
 429             i += run;
 430             if (i > MAX_INDEX)
 431                 break;
 432             j = scantable[i];
 433             level = ((level * 2 + 1) * qscale) >> 1;
 434             level = (level ^ SHOW_SBITS(re, &s->gb, 1)) -
 435                     SHOW_SBITS(re, &s->gb, 1);
 436             SKIP_BITS(re, &s->gb, 1);
 437         } else {
 438             /* escape */
 439             run = SHOW_UBITS(re, &s->gb, 6) + 1;
 440             LAST_SKIP_BITS(re, &s->gb, 6);
 441             UPDATE_CACHE(re, &s->gb);
 442             level = SHOW_SBITS(re, &s->gb, 12);
 443             SKIP_BITS(re, &s->gb, 12);
 444
 445             i += run;
 446             if (i > MAX_INDEX)
 447                 break;
 448             j = scantable[i];
 449             if (level < 0) {
 450                 level = ((-level * 2 + 1) * qscale) >> 1;
 451                 level = -level;
 452             } else {
 453                 level = ((level * 2 + 1) * qscale) >> 1;
 454             }
 455         }
 456
 457         block[j] = level;
 458         if (((int32_t) GET_CACHE(re, &s->gb)) <= (int32_t) 0xBFFFFFFF || i > 63)
 459             break;
 460
 461         UPDATE_CACHE(re, &s->gb);
 462     }
 463 end:
 464     LAST_SKIP_BITS(re, &s->gb, 2);
 465     CLOSE_READER(re, &s->gb);
 466
 467     check_scantable_index(s, i);
 468
 469     s->block_last_index[n] = i;
 470     return 0;
 471 }
 472
 473 static inline int mpeg2_decode_block_intra(MpegEncContext *s,
 474                                            int16_t *block, int n)
 475 {
 476     int level, dc, diff, i, j, run;
 477     int component;
 478     RLTable *rl;
 479     uint8_t *const scantable = s->intra_scantable.permutated;
 480     const uint16_t *quant_matrix;
 481     const int qscale = s->qscale;
 482     int mismatch;
 483
 484     /* DC coefficient */
 485     if (n < 4) {
 486         quant_matrix = s->intra_matrix;
 487         component    = 0;
 488     } else {
 489         quant_matrix = s->chroma_intra_matrix;
 490         component    = (n & 1) + 1;
 491     }
 492     diff = decode_dc(&s->gb, component);
 493     if (diff >= 0xffff)
 494         return AVERROR_INVALIDDATA;
 495     dc  = s->last_dc[component];
 496     dc += diff;
 497     s->last_dc[component] = dc;
 498     block[0] = dc * (1 << (3 - s->intra_dc_precision));
 499     ff_tlog(s->avctx, "dc=%d\n", block[0]);
 500     mismatch = block[0] ^ 1;
 501     i = 0;
 502     if (s->intra_vlc_format)
 503         rl = &ff_rl_mpeg2;
 504     else
 505         rl = &ff_rl_mpeg1;
 506
 507     {
 508         OPEN_READER(re, &s->gb);
 509         /* now quantify & encode AC coefficients */
 510         for (;;) {
 511             UPDATE_CACHE(re, &s->gb);
 512             GET_RL_VLC(level, run, re, &s->gb, rl->rl_vlc[0],
 513                        TEX_VLC_BITS, 2, 0);
 514
 515             if (level == 127) {
 516                 break;
 517             } else if (level != 0) {
 518                 i += run;
 519                 if (i > MAX_INDEX)
 520                     break;
 521                 j = scantable[i];
 522                 level = (level * qscale * quant_matrix[j]) >> 4;
 523                 level = (level ^ SHOW_SBITS(re, &s->gb, 1)) -
 524                         SHOW_SBITS(re, &s->gb, 1);
 525                 LAST_SKIP_BITS(re, &s->gb, 1);
 526             } else {
 527                 /* escape */
 528                 run = SHOW_UBITS(re, &s->gb, 6) + 1;
 529                 SKIP_BITS(re, &s->gb, 6);
 530                 level = SHOW_SBITS(re, &s->gb, 12);
 531                 LAST_SKIP_BITS(re, &s->gb, 12);
 532                 i += run;
 533                 if (i > MAX_INDEX)
 534                     break;
 535                 j = scantable[i];
 536                 if (level < 0) {
 537                     level = (-level * qscale * quant_matrix[j]) >> 4;
 538                     level = -level;
 539                 } else {
 540                     level = (level * qscale * quant_matrix[j]) >> 4;
 541                 }
 542             }
 543
 544             mismatch ^= level;
 545             block[j]  = level;
 546         }
 547         CLOSE_READER(re, &s->gb);
 548     }
 549     block[63] ^= mismatch & 1;
 550
 551     check_scantable_index(s, i);
 552
 553     s->block_last_index[n] = i;
 554     return 0;
 555 }
 556
 557 /**
 558  * Changing this would eat up any speed benefits it has.
 559  * Do not use "fast" flag if you need the code to be robust.
 560  */
 561 static inline int mpeg2_fast_decode_block_intra(MpegEncContext *s,
 562                                                 int16_t *block, int n)
 563 {
 564     int level, dc, diff, i, j, run;
 565     int component;
 566     RLTable *rl;
 567     uint8_t *const scantable = s->intra_scantable.permutated;
 568     const uint16_t *quant_matrix;
 569     const int qscale = s->qscale;
 570
 571     /* DC coefficient */
 572     if (n < 4) {
 573         quant_matrix = s->intra_matrix;
 574         component    = 0;
 575     } else {
 576         quant_matrix = s->chroma_intra_matrix;
 577         component    = (n & 1) + 1;
 578     }
 579     diff = decode_dc(&s->gb, component);
 580     if (diff >= 0xffff)
 581         return AVERROR_INVALIDDATA;
 582     dc = s->last_dc[component];
 583     dc += diff;
 584     s->last_dc[component] = dc;
 585     block[0] = dc * (1 << (3 - s->intra_dc_precision));
 586     i = 0;
 587     if (s->intra_vlc_format)
 588         rl = &ff_rl_mpeg2;
 589     else
 590         rl = &ff_rl_mpeg1;
 591
 592     {
 593         OPEN_READER(re, &s->gb);
 594         /* now quantify & encode AC coefficients */
 595         for (;;) {
 596             UPDATE_CACHE(re, &s->gb);
 597             GET_RL_VLC(level, run, re, &s->gb, rl->rl_vlc[0],
 598                        TEX_VLC_BITS, 2, 0);
 599
 600             if (level >= 64 || i > 63) {
 601                 break;
 602             } else if (level != 0) {
 603                 i += run;
 604                 j = scantable[i];
 605                 level = (level * qscale * quant_matrix[j]) >> 4;
 606                 level = (level ^ SHOW_SBITS(re, &s->gb, 1)) -
 607                         SHOW_SBITS(re, &s->gb, 1);
 608                 LAST_SKIP_BITS(re, &s->gb, 1);
 609             } else {
 610                 /* escape */
 611                 run = SHOW_UBITS(re, &s->gb, 6) + 1;
 612                 SKIP_BITS(re, &s->gb, 6);
 613                 level = SHOW_SBITS(re, &s->gb, 12);
 614                 LAST_SKIP_BITS(re, &s->gb, 12);
 615                 i += run;
 616                 j = scantable[i];
 617                 if (level < 0) {
 618                     level = (-level * qscale * quant_matrix[j]) >> 4;
 619                     level = -level;
 620                 } else {
 621                     level = (level * qscale * quant_matrix[j]) >> 4;
 622                 }
 623             }
 624
 625             block[j] = level;
 626         }
 627         CLOSE_READER(re, &s->gb);
 628     }
 629
 630     check_scantable_index(s, i);
 631
 632     s->block_last_index[n] = i;
 633     return 0;
 634 }
 635
 636 /******************************************/
 637 /* decoding */
 638
 639 static inline int get_dmv(MpegEncContext *s)
 640 {
 641     if (get_bits1(&s->gb))
 642         return 1 - (get_bits1(&s->gb) << 1);
 643     else
 644         return 0;
 645 }
 646
 647 /* motion type (for MPEG-2) */
 648 #define MT_FIELD 1
 649 #define MT_FRAME 2
 650 #define MT_16X8  2
 651 #define MT_DMV   3
 652
 653 static int mpeg_decode_mb(MpegEncContext *s, int16_t block[12][64])
 654 {
 655     int i, j, k, cbp, val, mb_type, motion_type;
 656     const int mb_block_count = 4 + (1 << s->chroma_format);
 657     int ret;
 658
 659     ff_tlog(s->avctx, "decode_mb: x=%d y=%d\n", s->mb_x, s->mb_y);
 660
 661     av_assert2(s->mb_skipped == 0);
 662
 663     if (s->mb_skip_run-- != 0) {
 664         if (s->pict_type == AV_PICTURE_TYPE_P) {
 665             s->mb_skipped = 1;
 666             s->current_picture.mb_type[s->mb_x + s->mb_y * s->mb_stride] =
 667                 MB_TYPE_SKIP | MB_TYPE_L0 | MB_TYPE_16x16;
 668         } else {
 669             int mb_type;
 670
 671             if (s->mb_x)
 672                 mb_type = s->current_picture.mb_type[s->mb_x + s->mb_y * s->mb_stride - 1];
 673             else
 674                 // FIXME not sure if this is allowed in MPEG at all
 675                 mb_type = s->current_picture.mb_type[s->mb_width + (s->mb_y - 1) * s->mb_stride - 1];
 676             if (IS_INTRA(mb_type)) {
 677                 av_log(s->avctx, AV_LOG_ERROR, "skip with previntra\n");
 678                 return AVERROR_INVALIDDATA;
 679             }
 680             s->current_picture.mb_type[s->mb_x + s->mb_y * s->mb_stride] =
 681                 mb_type | MB_TYPE_SKIP;
 682
 683             if ((s->mv[0][0][0] | s->mv[0][0][1] | s->mv[1][0][0] | s->mv[1][0][1]) == 0)
 684                 s->mb_skipped = 1;
 685         }
 686
 687         return 0;
 688     }
 689
 690     switch (s->pict_type) {
 691     default:
 692     case AV_PICTURE_TYPE_I:
 693         if (get_bits1(&s->gb) == 0) {
 694             if (get_bits1(&s->gb) == 0) {
 695                 av_log(s->avctx, AV_LOG_ERROR,
 696                        "Invalid mb type in I-frame at %d %d\n",
 697                        s->mb_x, s->mb_y);
 698                 return AVERROR_INVALIDDATA;
 699             }
 700             mb_type = MB_TYPE_QUANT | MB_TYPE_INTRA;
 701         } else {
 702             mb_type = MB_TYPE_INTRA;
 703         }
 704         break;
 705     case AV_PICTURE_TYPE_P:
 706         mb_type = get_vlc2(&s->gb, ff_mb_ptype_vlc.table, MB_PTYPE_VLC_BITS, 1);
 707         if (mb_type < 0) {
 708             av_log(s->avctx, AV_LOG_ERROR,
 709                    "Invalid mb type in P-frame at %d %d\n", s->mb_x, s->mb_y);
 710             return AVERROR_INVALIDDATA;
 711         }
 712         mb_type = ptype2mb_type[mb_type];
 713         break;
 714     case AV_PICTURE_TYPE_B:
 715         mb_type = get_vlc2(&s->gb, ff_mb_btype_vlc.table, MB_BTYPE_VLC_BITS, 1);
 716         if (mb_type < 0) {
 717             av_log(s->avctx, AV_LOG_ERROR,
 718                    "Invalid mb type in B-frame at %d %d\n", s->mb_x, s->mb_y);
 719             return AVERROR_INVALIDDATA;
 720         }
 721         mb_type = btype2mb_type[mb_type];
 722         break;
 723     }
 724     ff_tlog(s->avctx, "mb_type=%x\n", mb_type);
 725 //    motion_type = 0; /* avoid warning */
 726     if (IS_INTRA(mb_type)) {
 727         s->bdsp.clear_blocks(s->block[0]);
 728
 729         if (!s->chroma_y_shift)
 730             s->bdsp.clear_blocks(s->block[6]);
 731
 732         /* compute DCT type */
 733         // FIXME: add an interlaced_dct coded var?
 734         if (s->picture_structure == PICT_FRAME &&
 735             !s->frame_pred_frame_dct)
 736             s->interlaced_dct = get_bits1(&s->gb);
 737
 738         if (IS_QUANT(mb_type))
 739             s->qscale = mpeg_get_qscale(s);
 740
 741         if (s->concealment_motion_vectors) {
 742             /* just parse them */
 743             if (s->picture_structure != PICT_FRAME)
 744                 skip_bits1(&s->gb);  /* field select */
 745
 746             s->mv[0][0][0]      =
 747             s->last_mv[0][0][0] =
 748             s->last_mv[0][1][0] = mpeg_decode_motion(s, s->mpeg_f_code[0][0],
 749                                                      s->last_mv[0][0][0]);
 750             s->mv[0][0][1]      =
 751             s->last_mv[0][0][1] =
 752             s->last_mv[0][1][1] = mpeg_decode_motion(s, s->mpeg_f_code[0][1],
 753                                                      s->last_mv[0][0][1]);
 754
 755             check_marker(s->avctx, &s->gb, "after concealment_motion_vectors");
 756         } else {
 757             /* reset mv prediction */
 758             memset(s->last_mv, 0, sizeof(s->last_mv));
 759         }
 760         s->mb_intra = 1;
 761         // if 1, we memcpy blocks in xvmcvideo
 762         if ((CONFIG_MPEG1_XVMC_HWACCEL || CONFIG_MPEG2_XVMC_HWACCEL) && s->pack_pblocks)
 763             ff_xvmc_pack_pblocks(s, -1); // inter are always full blocks
 764
 765         if (s->codec_id == AV_CODEC_ID_MPEG2VIDEO) {
 766             if (s->avctx->flags2 & AV_CODEC_FLAG2_FAST) {
 767                 for (i = 0; i < 6; i++)
 768                     mpeg2_fast_decode_block_intra(s, *s->pblocks[i], i);
 769             } else {
 770                 for (i = 0; i < mb_block_count; i++)
 771                     if ((ret = mpeg2_decode_block_intra(s, *s->pblocks[i], i)) < 0)
 772                         return ret;
 773             }
 774         } else {
 775             for (i = 0; i < 6; i++) {
 776                 ret = ff_mpeg1_decode_block_intra(&s->gb,
 777                                                   s->intra_matrix,
 778                                                   s->intra_scantable.permutated,
 779                                                   s->last_dc, *s->pblocks[i],
 780                                                   i, s->qscale);
 781                 if (ret < 0) {
 782                     av_log(s->avctx, AV_LOG_ERROR, "ac-tex damaged at %d %d\n",
 783                            s->mb_x, s->mb_y);
 784                     return ret;
 785                 }
 786
 787                 s->block_last_index[i] = ret;
 788             }
 789         }
 790     } else {
 791         if (mb_type & MB_TYPE_ZERO_MV) {
 792             av_assert2(mb_type & MB_TYPE_CBP);
 793
 794             s->mv_dir = MV_DIR_FORWARD;
 795             if (s->picture_structure == PICT_FRAME) {
 796                 if (s->picture_structure == PICT_FRAME
 797                     && !s->frame_pred_frame_dct)
 798                     s->interlaced_dct = get_bits1(&s->gb);
 799                 s->mv_type = MV_TYPE_16X16;
 800             } else {
 801                 s->mv_type            = MV_TYPE_FIELD;
 802                 mb_type              |= MB_TYPE_INTERLACED;
 803                 s->field_select[0][0] = s->picture_structure - 1;
 804             }
 805
 806             if (IS_QUANT(mb_type))
 807                 s->qscale = mpeg_get_qscale(s);
 808
 809             s->last_mv[0][0][0] = 0;
 810             s->last_mv[0][0][1] = 0;
 811             s->last_mv[0][1][0] = 0;
 812             s->last_mv[0][1][1] = 0;
 813             s->mv[0][0][0]      = 0;
 814             s->mv[0][0][1]      = 0;
 815         } else {
 816             av_assert2(mb_type & MB_TYPE_L0L1);
 817             // FIXME decide if MBs in field pictures are MB_TYPE_INTERLACED
 818             /* get additional motion vector type */
 819             if (s->picture_structure == PICT_FRAME && s->frame_pred_frame_dct) {
 820                 motion_type = MT_FRAME;
 821             } else {
 822                 motion_type = get_bits(&s->gb, 2);
 823                 if (s->picture_structure == PICT_FRAME && HAS_CBP(mb_type))
 824                     s->interlaced_dct = get_bits1(&s->gb);
 825             }
 826
 827             if (IS_QUANT(mb_type))
 828                 s->qscale = mpeg_get_qscale(s);
 829
 830             /* motion vectors */
 831             s->mv_dir = (mb_type >> 13) & 3;
 832             ff_tlog(s->avctx, "motion_type=%d\n", motion_type);
 833             switch (motion_type) {
 834             case MT_FRAME: /* or MT_16X8 */
 835                 if (s->picture_structure == PICT_FRAME) {
 836                     mb_type   |= MB_TYPE_16x16;
 837                     s->mv_type = MV_TYPE_16X16;
 838                     for (i = 0; i < 2; i++) {
 839                         if (USES_LIST(mb_type, i)) {
 840                             /* MT_FRAME */
 841                             s->mv[i][0][0]      =
 842                             s->last_mv[i][0][0] =
 843                             s->last_mv[i][1][0] =
 844                                 mpeg_decode_motion(s, s->mpeg_f_code[i][0],
 845                                                    s->last_mv[i][0][0]);
 846                             s->mv[i][0][1]      =
 847                             s->last_mv[i][0][1] =
 848                             s->last_mv[i][1][1] =
 849                                 mpeg_decode_motion(s, s->mpeg_f_code[i][1],
 850                                                    s->last_mv[i][0][1]);
 851                             /* full_pel: only for MPEG-1 */
 852                             if (s->full_pel[i]) {
 853                                 s->mv[i][0][0] *= 2;
 854                                 s->mv[i][0][1] *= 2;
 855                             }
 856                         }
 857                     }
 858                 } else {
 859                     mb_type   |= MB_TYPE_16x8 | MB_TYPE_INTERLACED;
 860                     s->mv_type = MV_TYPE_16X8;
 861                     for (i = 0; i < 2; i++) {
 862                         if (USES_LIST(mb_type, i)) {
 863                             /* MT_16X8 */
 864                             for (j = 0; j < 2; j++) {
 865                                 s->field_select[i][j] = get_bits1(&s->gb);
 866                                 for (k = 0; k < 2; k++) {
 867                                     val = mpeg_decode_motion(s, s->mpeg_f_code[i][k],
 868                                                              s->last_mv[i][j][k]);
 869                                     s->last_mv[i][j][k] = val;
 870                                     s->mv[i][j][k]      = val;
 871                                 }
 872                             }
 873                         }
 874                     }
 875                 }
 876                 break;
 877             case MT_FIELD:
 878                 s->mv_type = MV_TYPE_FIELD;
 879                 if (s->picture_structure == PICT_FRAME) {
 880                     mb_type |= MB_TYPE_16x8 | MB_TYPE_INTERLACED;
 881                     for (i = 0; i < 2; i++) {
 882                         if (USES_LIST(mb_type, i)) {
 883                             for (j = 0; j < 2; j++) {
 884                                 s->field_select[i][j] = get_bits1(&s->gb);
 885                                 val = mpeg_decode_motion(s, s->mpeg_f_code[i][0],
 886                                                          s->last_mv[i][j][0]);
 887                                 s->last_mv[i][j][0] = val;
 888                                 s->mv[i][j][0]      = val;
 889                                 ff_tlog(s->avctx, "fmx=%d\n", val);
 890                                 val = mpeg_decode_motion(s, s->mpeg_f_code[i][1],
 891                                                          s->last_mv[i][j][1] >> 1);
 892                                 s->last_mv[i][j][1] = 2 * val;
 893                                 s->mv[i][j][1]      = val;
 894                                 ff_tlog(s->avctx, "fmy=%d\n", val);
 895                             }
 896                         }
 897                     }
 898                 } else {
 899                     av_assert0(!s->progressive_sequence);
 900                     mb_type |= MB_TYPE_16x16 | MB_TYPE_INTERLACED;
 901                     for (i = 0; i < 2; i++) {
 902                         if (USES_LIST(mb_type, i)) {
 903                             s->field_select[i][0] = get_bits1(&s->gb);
 904                             for (k = 0; k < 2; k++) {
 905                                 val = mpeg_decode_motion(s, s->mpeg_f_code[i][k],
 906                                                          s->last_mv[i][0][k]);
 907                                 s->last_mv[i][0][k] = val;
 908                                 s->last_mv[i][1][k] = val;
 909                                 s->mv[i][0][k]      = val;
 910                             }
 911                         }
 912                     }
 913                 }
 914                 break;
 915             case MT_DMV:
 916                 if (s->progressive_sequence){
 917                     av_log(s->avctx, AV_LOG_ERROR, "MT_DMV in progressive_sequence\n");
 918                     return AVERROR_INVALIDDATA;
 919                 }
 920                 s->mv_type = MV_TYPE_DMV;
 921                 for (i = 0; i < 2; i++) {
 922                     if (USES_LIST(mb_type, i)) {
 923                         int dmx, dmy, mx, my, m;
 924                         const int my_shift = s->picture_structure == PICT_FRAME;
 925
 926                         mx = mpeg_decode_motion(s, s->mpeg_f_code[i][0],
 927                                                 s->last_mv[i][0][0]);
 928                         s->last_mv[i][0][0] = mx;
 929                         s->last_mv[i][1][0] = mx;
 930                         dmx = get_dmv(s);
 931                         my  = mpeg_decode_motion(s, s->mpeg_f_code[i][1],
 932                                                  s->last_mv[i][0][1] >> my_shift);
 933                         dmy = get_dmv(s);
 934
 935
 936                         s->last_mv[i][0][1] = my * (1 << my_shift);
 937                         s->last_mv[i][1][1] = my * (1 << my_shift);
 938
 939                         s->mv[i][0][0] = mx;
 940                         s->mv[i][0][1] = my;
 941                         s->mv[i][1][0] = mx; // not used
 942                         s->mv[i][1][1] = my; // not used
 943
 944                         if (s->picture_structure == PICT_FRAME) {
 945                             mb_type |= MB_TYPE_16x16 | MB_TYPE_INTERLACED;
 946
 947                             // m = 1 + 2 * s->top_field_first;
 948                             m = s->top_field_first ? 1 : 3;
 949
 950                             /* top -> top pred */
 951                             s->mv[i][2][0] = ((mx * m + (mx > 0)) >> 1) + dmx;
 952                             s->mv[i][2][1] = ((my * m + (my > 0)) >> 1) + dmy - 1;
 953                             m = 4 - m;
 954                             s->mv[i][3][0] = ((mx * m + (mx > 0)) >> 1) + dmx;
 955                             s->mv[i][3][1] = ((my * m + (my > 0)) >> 1) + dmy + 1;
 956                         } else {
 957                             mb_type |= MB_TYPE_16x16;
 958
 959                             s->mv[i][2][0] = ((mx + (mx > 0)) >> 1) + dmx;
 960                             s->mv[i][2][1] = ((my + (my > 0)) >> 1) + dmy;
 961                             if (s->picture_structure == PICT_TOP_FIELD)
 962                                 s->mv[i][2][1]--;
 963                             else
 964                                 s->mv[i][2][1]++;
 965                         }
 966                     }
 967                 }
 968                 break;
 969             default:
 970                 av_log(s->avctx, AV_LOG_ERROR,
 971                        "00 motion_type at %d %d\n", s->mb_x, s->mb_y);
 972                 return AVERROR_INVALIDDATA;
 973             }
 974         }
 975
 976         s->mb_intra = 0;
 977         if (HAS_CBP(mb_type)) {
 978             s->bdsp.clear_blocks(s->block[0]);
 979
 980             cbp = get_vlc2(&s->gb, ff_mb_pat_vlc.table, MB_PAT_VLC_BITS, 1);
 981             if (mb_block_count > 6) {
 982                 cbp *= 1 << mb_block_count - 6;
 983                 cbp  |= get_bits(&s->gb, mb_block_count - 6);
 984                 s->bdsp.clear_blocks(s->block[6]);
 985             }
 986             if (cbp <= 0) {
 987                 av_log(s->avctx, AV_LOG_ERROR,
 988                        "invalid cbp %d at %d %d\n", cbp, s->mb_x, s->mb_y);
 989                 return AVERROR_INVALIDDATA;
 990             }
 991
 992             // if 1, we memcpy blocks in xvmcvideo
 993             if ((CONFIG_MPEG1_XVMC_HWACCEL || CONFIG_MPEG2_XVMC_HWACCEL) && s->pack_pblocks)
 994                 ff_xvmc_pack_pblocks(s, cbp);
 995
 996             if (s->codec_id == AV_CODEC_ID_MPEG2VIDEO) {
 997                 if (s->avctx->flags2 & AV_CODEC_FLAG2_FAST) {
 998                     for (i = 0; i < 6; i++) {
 999                         if (cbp & 32)
1000                             mpeg2_fast_decode_block_non_intra(s, *s->pblocks[i], i);
1001                         else
1002                             s->block_last_index[i] = -1;
1003                         cbp += cbp;
1004                     }
1005                 } else {
1006                     cbp <<= 12 - mb_block_count;
1007
1008                     for (i = 0; i < mb_block_count; i++) {
1009                         if (cbp & (1 << 11)) {
1010                             if ((ret = mpeg2_decode_block_non_intra(s, *s->pblocks[i], i)) < 0)
1011                                 return ret;
1012                         } else {
1013                             s->block_last_index[i] = -1;
1014                         }
1015                         cbp += cbp;
1016                     }
1017                 }
1018             } else {
1019                 if (s->avctx->flags2 & AV_CODEC_FLAG2_FAST) {
1020                     for (i = 0; i < 6; i++) {
1021                         if (cbp & 32)
1022                             mpeg1_fast_decode_block_inter(s, *s->pblocks[i], i);
1023                         else
1024                             s->block_last_index[i] = -1;
1025                         cbp += cbp;
1026                     }
1027                 } else {
1028                     for (i = 0; i < 6; i++) {
1029                         if (cbp & 32) {
1030                             if ((ret = mpeg1_decode_block_inter(s, *s->pblocks[i], i)) < 0)
1031                                 return ret;
1032                         } else {
1033                             s->block_last_index[i] = -1;
1034                         }
1035                         cbp += cbp;
1036                     }
1037                 }
1038             }
1039         } else {
1040             for (i = 0; i < 12; i++)
1041                 s->block_last_index[i] = -1;
1042         }
1043     }
1044
1045     s->current_picture.mb_type[s->mb_x + s->mb_y * s->mb_stride] = mb_type;
1046
1047     return 0;
1048 }
1049
1050 static av_cold int mpeg_decode_init(AVCodecContext *avctx)
1051 {
1052     Mpeg1Context *s    = avctx->priv_data;
1053     MpegEncContext *s2 = &s->mpeg_enc_ctx;
1054
1055     ff_mpv_decode_defaults(s2);
1056
1057     if (   avctx->codec_tag != AV_RL32("VCR2")
1058         && avctx->codec_tag != AV_RL32("BW10"))
1059         avctx->coded_width = avctx->coded_height = 0; // do not trust dimensions from input
1060     ff_mpv_decode_init(s2, avctx);
1061
1062     s->mpeg_enc_ctx.avctx  = avctx;
1063
1064     /* we need some permutation to store matrices,
1065      * until the decoder sets the real permutation. */
1066     ff_mpv_idct_init(s2);
1067     ff_mpeg12_common_init(&s->mpeg_enc_ctx);
1068     ff_mpeg12_init_vlcs();
1069
1070     s2->chroma_format              = 1;
1071     s->mpeg_enc_ctx_allocated      = 0;
1072     s->mpeg_enc_ctx.picture_number = 0;
1073     s->repeat_field                = 0;
1074     s->mpeg_enc_ctx.codec_id       = avctx->codec->id;
1075     avctx->color_range             = AVCOL_RANGE_MPEG;
1076     return 0;
1077 }
1078
1079 #if HAVE_THREADS
1080 static int mpeg_decode_update_thread_context(AVCodecContext *avctx,
1081                                              const AVCodecContext *avctx_from)
1082 {
1083     Mpeg1Context *ctx = avctx->priv_data, *ctx_from = avctx_from->priv_data;
1084     MpegEncContext *s = &ctx->mpeg_enc_ctx, *s1 = &ctx_from->mpeg_enc_ctx;
1085     int err;
1086
1087     if (avctx == avctx_from               ||
1088         !ctx_from->mpeg_enc_ctx_allocated ||
1089         !s1->context_initialized)
1090         return 0;
1091
1092     err = ff_mpeg_update_thread_context(avctx, avctx_from);
1093     if (err)
1094         return err;
1095
1096     if (!ctx->mpeg_enc_ctx_allocated)
1097         memcpy(s + 1, s1 + 1, sizeof(Mpeg1Context) - sizeof(MpegEncContext));
1098
1099     if (!(s->pict_type == AV_PICTURE_TYPE_B || s->low_delay))
1100         s->picture_number++;
1101
1102     return 0;
1103 }
1104 #endif
1105
1106 static void quant_matrix_rebuild(uint16_t *matrix, const uint8_t *old_perm,
1107                                  const uint8_t *new_perm)
1108 {
1109     uint16_t temp_matrix[64];
1110     int i;
1111
1112     memcpy(temp_matrix, matrix, 64 * sizeof(uint16_t));
1113
1114     for (i = 0; i < 64; i++)
1115         matrix[new_perm[i]] = temp_matrix[old_perm[i]];
1116 }
1117
1118 static const enum AVPixelFormat mpeg1_hwaccel_pixfmt_list_420[] = {
1119 #if CONFIG_MPEG1_NVDEC_HWACCEL
1120     AV_PIX_FMT_CUDA,
1121 #endif
1122 #if CONFIG_MPEG1_XVMC_HWACCEL
1123     AV_PIX_FMT_XVMC,
1124 #endif
1125 #if CONFIG_MPEG1_VDPAU_HWACCEL
1126     AV_PIX_FMT_VDPAU,
1127 #endif
1128     AV_PIX_FMT_YUV420P,
1129     AV_PIX_FMT_NONE
1130 };
1131
1132 static const enum AVPixelFormat mpeg2_hwaccel_pixfmt_list_420[] = {
1133 #if CONFIG_MPEG2_NVDEC_HWACCEL
1134     AV_PIX_FMT_CUDA,
1135 #endif
1136 #if CONFIG_MPEG2_XVMC_HWACCEL
1137     AV_PIX_FMT_XVMC,
1138 #endif
1139 #if CONFIG_MPEG2_VDPAU_HWACCEL
1140     AV_PIX_FMT_VDPAU,
1141 #endif
1142 #if CONFIG_MPEG2_DXVA2_HWACCEL
1143     AV_PIX_FMT_DXVA2_VLD,
1144 #endif
1145 #if CONFIG_MPEG2_D3D11VA_HWACCEL
1146     AV_PIX_FMT_D3D11VA_VLD,
1147     AV_PIX_FMT_D3D11,
1148 #endif
1149 #if CONFIG_MPEG2_VAAPI_HWACCEL
1150     AV_PIX_FMT_VAAPI,
1151 #endif
1152 #if CONFIG_MPEG2_VIDEOTOOLBOX_HWACCEL
1153     AV_PIX_FMT_VIDEOTOOLBOX,
1154 #endif
1155     AV_PIX_FMT_YUV420P,
1156     AV_PIX_FMT_NONE
1157 };
1158
1159 static const enum AVPixelFormat mpeg12_pixfmt_list_422[] = {
1160     AV_PIX_FMT_YUV422P,
1161     AV_PIX_FMT_NONE
1162 };
1163
1164 static const enum AVPixelFormat mpeg12_pixfmt_list_444[] = {
1165     AV_PIX_FMT_YUV444P,
1166     AV_PIX_FMT_NONE
1167 };
1168
1169 static enum AVPixelFormat mpeg_get_pixelformat(AVCodecContext *avctx)
1170 {
1171     Mpeg1Context *s1  = avctx->priv_data;
1172     MpegEncContext *s = &s1->mpeg_enc_ctx;
1173     const enum AVPixelFormat *pix_fmts;
1174
1175     if (CONFIG_GRAY && (avctx->flags & AV_CODEC_FLAG_GRAY))
1176         return AV_PIX_FMT_GRAY8;
1177
1178     if (s->chroma_format < 2)
1179         pix_fmts = avctx->codec_id == AV_CODEC_ID_MPEG1VIDEO ?
1180                                 mpeg1_hwaccel_pixfmt_list_420 :
1181                                 mpeg2_hwaccel_pixfmt_list_420;
1182     else if (s->chroma_format == 2)
1183         pix_fmts = mpeg12_pixfmt_list_422;
1184     else
1185         pix_fmts = mpeg12_pixfmt_list_444;
1186
1187     return ff_thread_get_format(avctx, pix_fmts);
1188 }
1189
1190 static void setup_hwaccel_for_pixfmt(AVCodecContext *avctx)
1191 {
1192     // until then pix_fmt may be changed right after codec init
1193     if (avctx->hwaccel)
1194         if (avctx->idct_algo == FF_IDCT_AUTO)
1195             avctx->idct_algo = FF_IDCT_NONE;
1196
1197     if (avctx->hwaccel && avctx->pix_fmt == AV_PIX_FMT_XVMC) {
1198         Mpeg1Context *s1 = avctx->priv_data;
1199         MpegEncContext *s = &s1->mpeg_enc_ctx;
1200
1201         s->pack_pblocks = 1;
1202     }
1203 }
1204
1205 /* Call this function when we know all parameters.
1206  * It may be called in different places for MPEG-1 and MPEG-2. */
1207 static int mpeg_decode_postinit(AVCodecContext *avctx)
1208 {
1209     Mpeg1Context *s1  = avctx->priv_data;
1210     MpegEncContext *s = &s1->mpeg_enc_ctx;
1211     uint8_t old_permutation[64];
1212     int ret;
1213
1214     if (avctx->codec_id == AV_CODEC_ID_MPEG1VIDEO) {
1215         // MPEG-1 aspect
1216         AVRational aspect_inv = av_d2q(ff_mpeg1_aspect[s->aspect_ratio_info], 255);
1217         avctx->sample_aspect_ratio = (AVRational) { aspect_inv.den, aspect_inv.num };
1218     } else { // MPEG-2
1219         // MPEG-2 aspect
1220         if (s->aspect_ratio_info > 1) {
1221             AVRational dar =
1222                 av_mul_q(av_div_q(ff_mpeg2_aspect[s->aspect_ratio_info],
1223                                   (AVRational) { s1->pan_scan.width,
1224                                                  s1->pan_scan.height }),
1225                          (AVRational) { s->width, s->height });
1226
1227             /* We ignore the spec here and guess a bit as reality does not
1228              * match the spec, see for example res_change_ffmpeg_aspect.ts
1229              * and sequence-display-aspect.mpg.
1230              * issue1613, 621, 562 */
1231             if ((s1->pan_scan.width == 0) || (s1->pan_scan.height == 0) ||
1232                 (av_cmp_q(dar, (AVRational) { 4, 3 }) &&
1233                  av_cmp_q(dar, (AVRational) { 16, 9 }))) {
1234                 s->avctx->sample_aspect_ratio =
1235                     av_div_q(ff_mpeg2_aspect[s->aspect_ratio_info],
1236                              (AVRational) { s->width, s->height });
1237             } else {
1238                 s->avctx->sample_aspect_ratio =
1239                     av_div_q(ff_mpeg2_aspect[s->aspect_ratio_info],
1240                              (AVRational) { s1->pan_scan.width, s1->pan_scan.height });
1241 // issue1613 4/3 16/9 -> 16/9
1242 // res_change_ffmpeg_aspect.ts 4/3 225/44 ->4/3
1243 // widescreen-issue562.mpg 4/3 16/9 -> 16/9
1244 //                s->avctx->sample_aspect_ratio = av_mul_q(s->avctx->sample_aspect_ratio, (AVRational) {s->width, s->height});
1245                 ff_dlog(avctx, "aspect A %d/%d\n",
1246                         ff_mpeg2_aspect[s->aspect_ratio_info].num,
1247                         ff_mpeg2_aspect[s->aspect_ratio_info].den);
1248                 ff_dlog(avctx, "aspect B %d/%d\n", s->avctx->sample_aspect_ratio.num,
1249                         s->avctx->sample_aspect_ratio.den);
1250             }
1251         } else {
1252             s->avctx->sample_aspect_ratio =
1253                 ff_mpeg2_aspect[s->aspect_ratio_info];
1254         }
1255     } // MPEG-2
1256
1257     if (av_image_check_sar(s->width, s->height,
1258                            avctx->sample_aspect_ratio) < 0) {
1259         av_log(avctx, AV_LOG_WARNING, "ignoring invalid SAR: %u/%u\n",
1260                 avctx->sample_aspect_ratio.num,
1261                 avctx->sample_aspect_ratio.den);
1262         avctx->sample_aspect_ratio = (AVRational){ 0, 1 };
1263     }
1264
1265     if ((s1->mpeg_enc_ctx_allocated == 0)                   ||
1266         avctx->coded_width       != s->width                ||
1267         avctx->coded_height      != s->height               ||
1268         s1->save_width           != s->width                ||
1269         s1->save_height          != s->height               ||
1270         av_cmp_q(s1->save_aspect, s->avctx->sample_aspect_ratio) ||
1271         (s1->save_progressive_seq != s->progressive_sequence && FFALIGN(s->height, 16) != FFALIGN(s->height, 32)) ||
1272         0) {
1273         if (s1->mpeg_enc_ctx_allocated) {
1274             ParseContext pc = s->parse_context;
1275             s->parse_context.buffer = 0;
1276             ff_mpv_common_end(s);
1277             s->parse_context = pc;
1278             s1->mpeg_enc_ctx_allocated = 0;
1279         }
1280
1281         ret = ff_set_dimensions(avctx, s->width, s->height);
1282         if (ret < 0)
1283             return ret;
1284
1285         if (avctx->codec_id == AV_CODEC_ID_MPEG2VIDEO && s->bit_rate) {
1286             avctx->rc_max_rate = s->bit_rate;
1287         } else if (avctx->codec_id == AV_CODEC_ID_MPEG1VIDEO && s->bit_rate &&
1288                    (s->bit_rate != 0x3FFFF*400 || s->vbv_delay != 0xFFFF)) {
1289             avctx->bit_rate = s->bit_rate;
1290         }
1291         s1->save_aspect          = s->avctx->sample_aspect_ratio;
1292         s1->save_width           = s->width;
1293         s1->save_height          = s->height;
1294         s1->save_progressive_seq = s->progressive_sequence;
1295
1296         /* low_delay may be forced, in this case we will have B-frames
1297          * that behave like P-frames. */
1298         avctx->has_b_frames = !s->low_delay;
1299
1300         if (avctx->codec_id == AV_CODEC_ID_MPEG1VIDEO) {
1301             // MPEG-1 fps
1302             avctx->framerate = ff_mpeg12_frame_rate_tab[s->frame_rate_index];
1303             avctx->ticks_per_frame     = 1;
1304
1305             avctx->chroma_sample_location = AVCHROMA_LOC_CENTER;
1306         } else { // MPEG-2
1307             // MPEG-2 fps
1308             av_reduce(&s->avctx->framerate.num,
1309                       &s->avctx->framerate.den,
1310                       ff_mpeg12_frame_rate_tab[s->frame_rate_index].num * s1->frame_rate_ext.num,
1311                       ff_mpeg12_frame_rate_tab[s->frame_rate_index].den * s1->frame_rate_ext.den,
1312                       1 << 30);
1313             avctx->ticks_per_frame = 2;
1314
1315             switch (s->chroma_format) {
1316             case 1: avctx->chroma_sample_location = AVCHROMA_LOC_LEFT; break;
1317             case 2:
1318             case 3: avctx->chroma_sample_location = AVCHROMA_LOC_TOPLEFT; break;
1319             default: av_assert0(0);
1320             }
1321         } // MPEG-2
1322
1323         avctx->pix_fmt = mpeg_get_pixelformat(avctx);
1324         setup_hwaccel_for_pixfmt(avctx);
1325
1326         /* Quantization matrices may need reordering
1327          * if DCT permutation is changed. */
1328         memcpy(old_permutation, s->idsp.idct_permutation, 64 * sizeof(uint8_t));
1329
1330         ff_mpv_idct_init(s);
1331         if ((ret = ff_mpv_common_init(s)) < 0)
1332             return ret;
1333
1334         quant_matrix_rebuild(s->intra_matrix,        old_permutation, s->idsp.idct_permutation);
1335         quant_matrix_rebuild(s->inter_matrix,        old_permutation, s->idsp.idct_permutation);
1336         quant_matrix_rebuild(s->chroma_intra_matrix, old_permutation, s->idsp.idct_permutation);
1337         quant_matrix_rebuild(s->chroma_inter_matrix, old_permutation, s->idsp.idct_permutation);
1338
1339         s1->mpeg_enc_ctx_allocated = 1;
1340     }
1341     return 0;
1342 }
1343
1344 static int mpeg1_decode_picture(AVCodecContext *avctx, const uint8_t *buf,
1345                                 int buf_size)
1346 {
1347     Mpeg1Context *s1  = avctx->priv_data;
1348     MpegEncContext *s = &s1->mpeg_enc_ctx;
1349     int ref, f_code, vbv_delay;
1350
1351     init_get_bits(&s->gb, buf, buf_size * 8);
1352
1353     ref = get_bits(&s->gb, 10); /* temporal ref */
1354     s->pict_type = get_bits(&s->gb, 3);
1355     if (s->pict_type == 0 || s->pict_type > 3)
1356         return AVERROR_INVALIDDATA;
1357
1358     vbv_delay = get_bits(&s->gb, 16);
1359     s->vbv_delay = vbv_delay;
1360     if (s->pict_type == AV_PICTURE_TYPE_P ||
1361         s->pict_type == AV_PICTURE_TYPE_B) {
1362         s->full_pel[0] = get_bits1(&s->gb);
1363         f_code = get_bits(&s->gb, 3);
1364         if (f_code == 0 && (avctx->err_recognition & (AV_EF_BITSTREAM|AV_EF_COMPLIANT)))
1365             return AVERROR_INVALIDDATA;
1366         f_code += !f_code;
1367         s->mpeg_f_code[0][0] = f_code;
1368         s->mpeg_f_code[0][1] = f_code;
1369     }
1370     if (s->pict_type == AV_PICTURE_TYPE_B) {
1371         s->full_pel[1] = get_bits1(&s->gb);
1372         f_code = get_bits(&s->gb, 3);
1373         if (f_code == 0 && (avctx->err_recognition & (AV_EF_BITSTREAM|AV_EF_COMPLIANT)))
1374             return AVERROR_INVALIDDATA;
1375         f_code += !f_code;
1376         s->mpeg_f_code[1][0] = f_code;
1377         s->mpeg_f_code[1][1] = f_code;
1378     }
1379     s->current_picture.f->pict_type = s->pict_type;
1380     s->current_picture.f->key_frame = s->pict_type == AV_PICTURE_TYPE_I;
1381
1382     if (avctx->debug & FF_DEBUG_PICT_INFO)
1383         av_log(avctx, AV_LOG_DEBUG,
1384                "vbv_delay %d, ref %d type:%d\n", vbv_delay, ref, s->pict_type);
1385
1386     s->y_dc_scale = 8;
1387     s->c_dc_scale = 8;
1388     return 0;
1389 }
1390
1391 static void mpeg_decode_sequence_extension(Mpeg1Context *s1)
1392 {
1393     MpegEncContext *s = &s1->mpeg_enc_ctx;
1394     int horiz_size_ext, vert_size_ext;
1395     int bit_rate_ext;
1396     AVCPBProperties *cpb_props;
1397
1398     skip_bits(&s->gb, 1); /* profile and level esc*/
1399     s->avctx->profile       = get_bits(&s->gb, 3);
1400     s->avctx->level         = get_bits(&s->gb, 4);
1401     s->progressive_sequence = get_bits1(&s->gb);   /* progressive_sequence */
1402     s->chroma_format        = get_bits(&s->gb, 2); /* chroma_format 1=420, 2=422, 3=444 */
1403
1404     if (!s->chroma_format) {
1405         s->chroma_format = 1;
1406         av_log(s->avctx, AV_LOG_WARNING, "Chroma format invalid\n");
1407     }
1408
1409     horiz_size_ext          = get_bits(&s->gb, 2);
1410     vert_size_ext           = get_bits(&s->gb, 2);
1411     s->width  |= (horiz_size_ext << 12);
1412     s->height |= (vert_size_ext  << 12);
1413     bit_rate_ext = get_bits(&s->gb, 12);  /* XXX: handle it */
1414     s->bit_rate += (bit_rate_ext << 18) * 400LL;
1415     check_marker(s->avctx, &s->gb, "after bit rate extension");
1416     s1->rc_buffer_size += get_bits(&s->gb, 8) * 1024 * 16 << 10;
1417
1418     s->low_delay = get_bits1(&s->gb);
1419     if (s->avctx->flags & AV_CODEC_FLAG_LOW_DELAY)
1420         s->low_delay = 1;
1421
1422     s1->frame_rate_ext.num = get_bits(&s->gb, 2) + 1;
1423     s1->frame_rate_ext.den = get_bits(&s->gb, 5) + 1;
1424
1425     ff_dlog(s->avctx, "sequence extension\n");
1426     s->codec_id = s->avctx->codec_id = AV_CODEC_ID_MPEG2VIDEO;
1427
1428     if (cpb_props = ff_add_cpb_side_data(s->avctx)) {
1429         cpb_props->buffer_size = s1->rc_buffer_size;
1430         if (s->bit_rate != 0x3FFFF*400)
1431             cpb_props->max_bitrate = s->bit_rate;
1432     }
1433
1434     if (s->avctx->debug & FF_DEBUG_PICT_INFO)
1435         av_log(s->avctx, AV_LOG_DEBUG,
1436                "profile: %d, level: %d ps: %d cf:%d vbv buffer: %d, bitrate:%"PRId64"\n",
1437                s->avctx->profile, s->avctx->level, s->progressive_sequence, s->chroma_format,
1438                s1->rc_buffer_size, s->bit_rate);
1439 }
1440
1441 static void mpeg_decode_sequence_display_extension(Mpeg1Context *s1)
1442 {
1443     MpegEncContext *s = &s1->mpeg_enc_ctx;
1444     int color_description, w, h;
1445
1446     skip_bits(&s->gb, 3); /* video format */
1447     color_description = get_bits1(&s->gb);
1448     if (color_description) {
1449         s->avctx->color_primaries = get_bits(&s->gb, 8);
1450         s->avctx->color_trc       = get_bits(&s->gb, 8);
1451         s->avctx->colorspace      = get_bits(&s->gb, 8);
1452     }
1453     w = get_bits(&s->gb, 14);
1454     skip_bits(&s->gb, 1); // marker
1455     h = get_bits(&s->gb, 14);
1456     // remaining 3 bits are zero padding
1457
1458     s1->pan_scan.width  = 16 * w;
1459     s1->pan_scan.height = 16 * h;
1460
1461     if (s->avctx->debug & FF_DEBUG_PICT_INFO)
1462         av_log(s->avctx, AV_LOG_DEBUG, "sde w:%d, h:%d\n", w, h);
1463 }
1464
1465 static void mpeg_decode_picture_display_extension(Mpeg1Context *s1)
1466 {
1467     MpegEncContext *s = &s1->mpeg_enc_ctx;
1468     int i, nofco;
1469
1470     nofco = 1;
1471     if (s->progressive_sequence) {
1472         if (s->repeat_first_field) {
1473             nofco++;
1474             if (s->top_field_first)
1475                 nofco++;
1476         }
1477     } else {
1478         if (s->picture_structure == PICT_FRAME) {
1479             nofco++;
1480             if (s->repeat_first_field)
1481                 nofco++;
1482         }
1483     }
1484     for (i = 0; i < nofco; i++) {
1485         s1->pan_scan.position[i][0] = get_sbits(&s->gb, 16);
1486         skip_bits(&s->gb, 1); // marker
1487         s1->pan_scan.position[i][1] = get_sbits(&s->gb, 16);
1488         skip_bits(&s->gb, 1); // marker
1489     }
1490
1491     if (s->avctx->debug & FF_DEBUG_PICT_INFO)
1492         av_log(s->avctx, AV_LOG_DEBUG,
1493                "pde (%"PRId16",%"PRId16") (%"PRId16",%"PRId16") (%"PRId16",%"PRId16")\n",
1494                s1->pan_scan.position[0][0], s1->pan_scan.position[0][1],
1495                s1->pan_scan.position[1][0], s1->pan_scan.position[1][1],
1496                s1->pan_scan.position[2][0], s1->pan_scan.position[2][1]);
1497 }
1498
1499 static int load_matrix(MpegEncContext *s, uint16_t matrix0[64],
1500                        uint16_t matrix1[64], int intra)
1501 {
1502     int i;
1503
1504     for (i = 0; i < 64; i++) {
1505         int j = s->idsp.idct_permutation[ff_zigzag_direct[i]];
1506         int v = get_bits(&s->gb, 8);
1507         if (v == 0) {
1508             av_log(s->avctx, AV_LOG_ERROR, "matrix damaged\n");
1509             return AVERROR_INVALIDDATA;
1510         }
1511         if (intra && i == 0 && v != 8) {
1512             av_log(s->avctx, AV_LOG_DEBUG, "intra matrix specifies invalid DC quantizer %d, ignoring\n", v);
1513             v = 8; // needed by pink.mpg / issue1046
1514         }
1515         matrix0[j] = v;
1516         if (matrix1)
1517             matrix1[j] = v;
1518     }
1519     return 0;
1520 }
1521
1522 static void mpeg_decode_quant_matrix_extension(MpegEncContext *s)
1523 {
1524     ff_dlog(s->avctx, "matrix extension\n");
1525
1526     if (get_bits1(&s->gb))
1527         load_matrix(s, s->chroma_intra_matrix, s->intra_matrix, 1);
1528     if (get_bits1(&s->gb))
1529         load_matrix(s, s->chroma_inter_matrix, s->inter_matrix, 0);
1530     if (get_bits1(&s->gb))
1531         load_matrix(s, s->chroma_intra_matrix, NULL, 1);
1532     if (get_bits1(&s->gb))
1533         load_matrix(s, s->chroma_inter_matrix, NULL, 0);
1534 }
1535
1536 static void mpeg_decode_picture_coding_extension(Mpeg1Context *s1)
1537 {
1538     MpegEncContext *s = &s1->mpeg_enc_ctx;
1539
1540     s->full_pel[0]       = s->full_pel[1] = 0;
1541     s->mpeg_f_code[0][0] = get_bits(&s->gb, 4);
1542     s->mpeg_f_code[0][1] = get_bits(&s->gb, 4);
1543     s->mpeg_f_code[1][0] = get_bits(&s->gb, 4);
1544     s->mpeg_f_code[1][1] = get_bits(&s->gb, 4);
1545     if (!s->pict_type && s1->mpeg_enc_ctx_allocated) {
1546         av_log(s->avctx, AV_LOG_ERROR,
1547                "Missing picture start code, guessing missing values\n");
1548         if (s->mpeg_f_code[1][0] == 15 && s->mpeg_f_code[1][1] == 15) {
1549             if (s->mpeg_f_code[0][0] == 15 && s->mpeg_f_code[0][1] == 15)
1550                 s->pict_type = AV_PICTURE_TYPE_I;
1551             else
1552                 s->pict_type = AV_PICTURE_TYPE_P;
1553         } else
1554             s->pict_type = AV_PICTURE_TYPE_B;
1555         s->current_picture.f->pict_type = s->pict_type;
1556         s->current_picture.f->key_frame = s->pict_type == AV_PICTURE_TYPE_I;
1557     }
1558     s->mpeg_f_code[0][0] += !s->mpeg_f_code[0][0];
1559     s->mpeg_f_code[0][1] += !s->mpeg_f_code[0][1];
1560     s->mpeg_f_code[1][0] += !s->mpeg_f_code[1][0];
1561     s->mpeg_f_code[1][1] += !s->mpeg_f_code[1][1];
1562
1563     s->intra_dc_precision         = get_bits(&s->gb, 2);
1564     s->picture_structure          = get_bits(&s->gb, 2);
1565     s->top_field_first            = get_bits1(&s->gb);
1566     s->frame_pred_frame_dct       = get_bits1(&s->gb);
1567     s->concealment_motion_vectors = get_bits1(&s->gb);
1568     s->q_scale_type               = get_bits1(&s->gb);
1569     s->intra_vlc_format           = get_bits1(&s->gb);
1570     s->alternate_scan             = get_bits1(&s->gb);
1571     s->repeat_first_field         = get_bits1(&s->gb);
1572     s->chroma_420_type            = get_bits1(&s->gb);
1573     s->progressive_frame          = get_bits1(&s->gb);
1574
1575     if (s->alternate_scan) {
1576         ff_init_scantable(s->idsp.idct_permutation, &s->inter_scantable, ff_alternate_vertical_scan);
1577         ff_init_scantable(s->idsp.idct_permutation, &s->intra_scantable, ff_alternate_vertical_scan);
1578     } else {
1579         ff_init_scantable(s->idsp.idct_permutation, &s->inter_scantable, ff_zigzag_direct);
1580         ff_init_scantable(s->idsp.idct_permutation, &s->intra_scantable, ff_zigzag_direct);
1581     }
1582
1583     /* composite display not parsed */
1584     ff_dlog(s->avctx, "intra_dc_precision=%d\n", s->intra_dc_precision);
1585     ff_dlog(s->avctx, "picture_structure=%d\n", s->picture_structure);
1586     ff_dlog(s->avctx, "top field first=%d\n", s->top_field_first);
1587     ff_dlog(s->avctx, "repeat first field=%d\n", s->repeat_first_field);
1588     ff_dlog(s->avctx, "conceal=%d\n", s->concealment_motion_vectors);
1589     ff_dlog(s->avctx, "intra_vlc_format=%d\n", s->intra_vlc_format);
1590     ff_dlog(s->avctx, "alternate_scan=%d\n", s->alternate_scan);
1591     ff_dlog(s->avctx, "frame_pred_frame_dct=%d\n", s->frame_pred_frame_dct);
1592     ff_dlog(s->avctx, "progressive_frame=%d\n", s->progressive_frame);
1593 }
1594
1595 static int mpeg_field_start(MpegEncContext *s, const uint8_t *buf, int buf_size)
1596 {
1597     AVCodecContext *avctx = s->avctx;
1598     Mpeg1Context *s1      = (Mpeg1Context *) s;
1599     int ret;
1600
1601     if (!(avctx->flags2 & AV_CODEC_FLAG2_CHUNKS)) {
1602         if (s->mb_width * s->mb_height * 11LL / (33 * 2 * 8) > buf_size)
1603             return AVERROR_INVALIDDATA;
1604     }
1605
1606     /* start frame decoding */
1607     if (s->first_field || s->picture_structure == PICT_FRAME) {
1608         AVFrameSideData *pan_scan;
1609
1610         if ((ret = ff_mpv_frame_start(s, avctx)) < 0)
1611             return ret;
1612
1613         ff_mpeg_er_frame_start(s);
1614
1615         /* first check if we must repeat the frame */
1616         s->current_picture_ptr->f->repeat_pict = 0;
1617         if (s->repeat_first_field) {
1618             if (s->progressive_sequence) {
1619                 if (s->top_field_first)
1620                     s->current_picture_ptr->f->repeat_pict = 4;
1621                 else
1622                     s->current_picture_ptr->f->repeat_pict = 2;
1623             } else if (s->progressive_frame) {
1624                 s->current_picture_ptr->f->repeat_pict = 1;
1625             }
1626         }
1627
1628         pan_scan = av_frame_new_side_data(s->current_picture_ptr->f,
1629                                           AV_FRAME_DATA_PANSCAN,
1630                                           sizeof(s1->pan_scan));
1631         if (!pan_scan)
1632             return AVERROR(ENOMEM);
1633         memcpy(pan_scan->data, &s1->pan_scan, sizeof(s1->pan_scan));
1634
1635         if (s1->a53_buf_ref) {
1636             AVFrameSideData *sd = av_frame_new_side_data_from_buf(
1637                 s->current_picture_ptr->f, AV_FRAME_DATA_A53_CC,
1638                 s1->a53_buf_ref);
1639             if (!sd)
1640                 av_buffer_unref(&s1->a53_buf_ref);
1641             s1->a53_buf_ref = NULL;
1642         }
1643
1644         if (s1->has_stereo3d) {
1645             AVStereo3D *stereo = av_stereo3d_create_side_data(s->current_picture_ptr->f);
1646             if (!stereo)
1647                 return AVERROR(ENOMEM);
1648
1649             *stereo = s1->stereo3d;
1650             s1->has_stereo3d = 0;
1651         }
1652
1653         if (s1->has_afd) {
1654             AVFrameSideData *sd =
1655                 av_frame_new_side_data(s->current_picture_ptr->f,
1656                                        AV_FRAME_DATA_AFD, 1);
1657             if (!sd)
1658                 return AVERROR(ENOMEM);
1659
1660             *sd->data   = s1->afd;
1661             s1->has_afd = 0;
1662         }
1663
1664         if (HAVE_THREADS && (avctx->active_thread_type & FF_THREAD_FRAME))
1665             ff_thread_finish_setup(avctx);
1666     } else { // second field
1667         int i;
1668
1669         if (!s->current_picture_ptr) {
1670             av_log(s->avctx, AV_LOG_ERROR, "first field missing\n");
1671             return AVERROR_INVALIDDATA;
1672         }
1673
1674         if (s->avctx->hwaccel) {
1675             if ((ret = s->avctx->hwaccel->end_frame(s->avctx)) < 0) {
1676                 av_log(avctx, AV_LOG_ERROR,
1677                        "hardware accelerator failed to decode first field\n");
1678                 return ret;
1679             }
1680         }
1681
1682         for (i = 0; i < 4; i++) {
1683             s->current_picture.f->data[i] = s->current_picture_ptr->f->data[i];
1684             if (s->picture_structure == PICT_BOTTOM_FIELD)
1685                 s->current_picture.f->data[i] +=
1686                     s->current_picture_ptr->f->linesize[i];
1687         }
1688     }
1689
1690     if (avctx->hwaccel) {
1691         if ((ret = avctx->hwaccel->start_frame(avctx, buf, buf_size)) < 0)
1692             return ret;
1693     }
1694
1695     return 0;
1696 }
1697
1698 #define DECODE_SLICE_ERROR -1
1699 #define DECODE_SLICE_OK     0
1700
1701 /**
1702  * Decode a slice.
1703  * MpegEncContext.mb_y must be set to the MB row from the startcode.
1704  * @return DECODE_SLICE_ERROR if the slice is damaged,
1705  *         DECODE_SLICE_OK if this slice is OK
1706  */
1707 static int mpeg_decode_slice(MpegEncContext *s, int mb_y,
1708                              const uint8_t **buf, int buf_size)
1709 {
1710     AVCodecContext *avctx = s->avctx;
1711     const int lowres      = s->avctx->lowres;
1712     const int field_pic   = s->picture_structure != PICT_FRAME;
1713     int ret;
1714
1715     s->resync_mb_x =
1716     s->resync_mb_y = -1;
1717
1718     av_assert0(mb_y < s->mb_height);
1719
1720     init_get_bits(&s->gb, *buf, buf_size * 8);
1721     if (s->codec_id != AV_CODEC_ID_MPEG1VIDEO && s->mb_height > 2800/16)
1722         skip_bits(&s->gb, 3);
1723
1724     ff_mpeg1_clean_buffers(s);
1725     s->interlaced_dct = 0;
1726
1727     s->qscale = mpeg_get_qscale(s);
1728
1729     if (s->qscale == 0) {
1730         av_log(s->avctx, AV_LOG_ERROR, "qscale == 0\n");
1731         return AVERROR_INVALIDDATA;
1732     }
1733
1734     /* extra slice info */
1735     if (skip_1stop_8data_bits(&s->gb) < 0)
1736         return AVERROR_INVALIDDATA;
1737
1738     s->mb_x = 0;
1739
1740     if (mb_y == 0 && s->codec_tag == AV_RL32("SLIF")) {
1741         skip_bits1(&s->gb);
1742     } else {
1743         while (get_bits_left(&s->gb) > 0) {
1744             int code = get_vlc2(&s->gb, ff_mbincr_vlc.table,
1745                                 MBINCR_VLC_BITS, 2);
1746             if (code < 0) {
1747                 av_log(s->avctx, AV_LOG_ERROR, "first mb_incr damaged\n");
1748                 return AVERROR_INVALIDDATA;
1749             }
1750             if (code >= 33) {
1751                 if (code == 33)
1752                     s->mb_x += 33;
1753                 /* otherwise, stuffing, nothing to do */
1754             } else {
1755                 s->mb_x += code;
1756                 break;
1757             }
1758         }
1759     }
1760
1761     if (s->mb_x >= (unsigned) s->mb_width) {
1762         av_log(s->avctx, AV_LOG_ERROR, "initial skip overflow\n");
1763         return AVERROR_INVALIDDATA;
1764     }
1765
1766     if (avctx->hwaccel && avctx->hwaccel->decode_slice) {
1767         const uint8_t *buf_end, *buf_start = *buf - 4; /* include start_code */
1768         int start_code = -1;
1769         buf_end = avpriv_find_start_code(buf_start + 2, *buf + buf_size, &start_code);
1770         if (buf_end < *buf + buf_size)
1771             buf_end -= 4;
1772         s->mb_y = mb_y;
1773         if (avctx->hwaccel->decode_slice(avctx, buf_start, buf_end - buf_start) < 0)
1774             return DECODE_SLICE_ERROR;
1775         *buf = buf_end;
1776         return DECODE_SLICE_OK;
1777     }
1778
1779     s->resync_mb_x = s->mb_x;
1780     s->resync_mb_y = s->mb_y = mb_y;
1781     s->mb_skip_run = 0;
1782     ff_init_block_index(s);
1783
1784     if (s->mb_y == 0 && s->mb_x == 0 && (s->first_field || s->picture_structure == PICT_FRAME)) {
1785         if (s->avctx->debug & FF_DEBUG_PICT_INFO) {
1786             av_log(s->avctx, AV_LOG_DEBUG,
1787                    "qp:%d fc:%2d%2d%2d%2d %s %s %s %s %s dc:%d pstruct:%d fdct:%d cmv:%d qtype:%d ivlc:%d rff:%d %s\n",
1788                    s->qscale,
1789                    s->mpeg_f_code[0][0], s->mpeg_f_code[0][1],
1790                    s->mpeg_f_code[1][0], s->mpeg_f_code[1][1],
1791                    s->pict_type  == AV_PICTURE_TYPE_I ? "I" :
1792                    (s->pict_type == AV_PICTURE_TYPE_P ? "P" :
1793                    (s->pict_type == AV_PICTURE_TYPE_B ? "B" : "S")),
1794                    s->progressive_sequence ? "ps"  : "",
1795                    s->progressive_frame    ? "pf"  : "",
1796                    s->alternate_scan       ? "alt" : "",
1797                    s->top_field_first      ? "top" : "",
1798                    s->intra_dc_precision, s->picture_structure,
1799                    s->frame_pred_frame_dct, s->concealment_motion_vectors,
1800                    s->q_scale_type, s->intra_vlc_format,
1801                    s->repeat_first_field, s->chroma_420_type ? "420" : "");
1802         }
1803     }
1804
1805     for (;;) {
1806         // If 1, we memcpy blocks in xvmcvideo.
1807         if ((CONFIG_MPEG1_XVMC_HWACCEL || CONFIG_MPEG2_XVMC_HWACCEL) && s->pack_pblocks)
1808             ff_xvmc_init_block(s); // set s->block
1809
1810         if ((ret = mpeg_decode_mb(s, s->block)) < 0)
1811             return ret;
1812
1813         // Note motion_val is normally NULL unless we want to extract the MVs.
1814         if (s->current_picture.motion_val[0] && !s->encoding) {
1815             const int wrap = s->b8_stride;
1816             int xy         = s->mb_x * 2 + s->mb_y * 2 * wrap;
1817             int b8_xy      = 4 * (s->mb_x + s->mb_y * s->mb_stride);
1818             int motion_x, motion_y, dir, i;
1819
1820             for (i = 0; i < 2; i++) {
1821                 for (dir = 0; dir < 2; dir++) {
1822                     if (s->mb_intra ||
1823                         (dir == 1 && s->pict_type != AV_PICTURE_TYPE_B)) {
1824                         motion_x = motion_y = 0;
1825                     } else if (s->mv_type == MV_TYPE_16X16 ||
1826                                (s->mv_type == MV_TYPE_FIELD && field_pic)) {
1827                         motion_x = s->mv[dir][0][0];
1828                         motion_y = s->mv[dir][0][1];
1829                     } else { /* if ((s->mv_type == MV_TYPE_FIELD) || (s->mv_type == MV_TYPE_16X8)) */
1830                         motion_x = s->mv[dir][i][0];
1831                         motion_y = s->mv[dir][i][1];
1832                     }
1833
1834                     s->current_picture.motion_val[dir][xy][0]     = motion_x;
1835                     s->current_picture.motion_val[dir][xy][1]     = motion_y;
1836                     s->current_picture.motion_val[dir][xy + 1][0] = motion_x;
1837                     s->current_picture.motion_val[dir][xy + 1][1] = motion_y;
1838                     s->current_picture.ref_index [dir][b8_xy]     =
1839                     s->current_picture.ref_index [dir][b8_xy + 1] = s->field_select[dir][i];
1840                     av_assert2(s->field_select[dir][i] == 0 ||
1841                                s->field_select[dir][i] == 1);
1842                 }
1843                 xy    += wrap;
1844                 b8_xy += 2;
1845             }
1846         }
1847
1848         s->dest[0] += 16 >> lowres;
1849         s->dest[1] +=(16 >> lowres) >> s->chroma_x_shift;
1850         s->dest[2] +=(16 >> lowres) >> s->chroma_x_shift;
1851
1852         ff_mpv_reconstruct_mb(s, s->block);
1853
1854         if (++s->mb_x >= s->mb_width) {
1855             const int mb_size = 16 >> s->avctx->lowres;
1856             int left;
1857
1858             ff_mpeg_draw_horiz_band(s, mb_size * (s->mb_y >> field_pic), mb_size);
1859             ff_mpv_report_decode_progress(s);
1860
1861             s->mb_x  = 0;
1862             s->mb_y += 1 << field_pic;
1863
1864             if (s->mb_y >= s->mb_height) {
1865                 int left   = get_bits_left(&s->gb);
1866                 int is_d10 = s->chroma_format == 2 &&
1867                              s->pict_type == AV_PICTURE_TYPE_I &&
1868                              avctx->profile == 0 && avctx->level == 5 &&
1869                              s->intra_dc_precision == 2 &&
1870                              s->q_scale_type == 1 && s->alternate_scan == 0 &&
1871                              s->progressive_frame == 0
1872                              /* vbv_delay == 0xBBB || 0xE10 */;
1873
1874                 if (left >= 32 && !is_d10) {
1875                     GetBitContext gb = s->gb;
1876                     align_get_bits(&gb);
1877                     if (show_bits(&gb, 24) == 0x060E2B) {
1878                         av_log(avctx, AV_LOG_DEBUG, "Invalid MXF data found in video stream\n");
1879                         is_d10 = 1;
1880                     }
1881                     if (left > 32 && show_bits_long(&gb, 32) == 0x201) {
1882                         av_log(avctx, AV_LOG_DEBUG, "skipping m704 alpha (unsupported)\n");
1883                         goto eos;
1884                     }
1885                 }
1886
1887                 if (left < 0 ||
1888                     (left && show_bits(&s->gb, FFMIN(left, 23)) && !is_d10) ||
1889                     ((avctx->err_recognition & (AV_EF_BITSTREAM | AV_EF_AGGRESSIVE)) && left > 8)) {
1890                     av_log(avctx, AV_LOG_ERROR, "end mismatch left=%d %0X at %d %d\n",
1891                            left, left>0 ? show_bits(&s->gb, FFMIN(left, 23)) : 0, s->mb_x, s->mb_y);
1892                     return AVERROR_INVALIDDATA;
1893                 } else
1894                     goto eos;
1895             }
1896             // There are some files out there which are missing the last slice
1897             // in cases where the slice is completely outside the visible
1898             // area, we detect this here instead of running into the end expecting
1899             // more data
1900             left = get_bits_left(&s->gb);
1901             if (s->mb_y >= ((s->height + 15) >> 4) &&
1902                 !s->progressive_sequence &&
1903                 left <= 25 &&
1904                 left >= 0 &&
1905                 s->mb_skip_run == -1 &&
1906                 (!left || show_bits(&s->gb, left) == 0))
1907                 goto eos;
1908
1909             ff_init_block_index(s);
1910         }
1911
1912         /* skip mb handling */
1913         if (s->mb_skip_run == -1) {
1914             /* read increment again */
1915             s->mb_skip_run = 0;
1916             for (;;) {
1917                 int code = get_vlc2(&s->gb, ff_mbincr_vlc.table,
1918                                     MBINCR_VLC_BITS, 2);
1919                 if (code < 0) {
1920                     av_log(s->avctx, AV_LOG_ERROR, "mb incr damaged\n");
1921                     return AVERROR_INVALIDDATA;
1922                 }
1923                 if (code >= 33) {
1924                     if (code == 33) {
1925                         s->mb_skip_run += 33;
1926                     } else if (code == 35) {
1927                         if (s->mb_skip_run != 0 || show_bits(&s->gb, 15) != 0) {
1928                             av_log(s->avctx, AV_LOG_ERROR, "slice mismatch\n");
1929                             return AVERROR_INVALIDDATA;
1930                         }
1931                         goto eos; /* end of slice */
1932                     }
1933                     /* otherwise, stuffing, nothing to do */
1934                 } else {
1935                     s->mb_skip_run += code;
1936                     break;
1937                 }
1938             }
1939             if (s->mb_skip_run) {
1940                 int i;
1941                 if (s->pict_type == AV_PICTURE_TYPE_I) {
1942                     av_log(s->avctx, AV_LOG_ERROR,
1943                            "skipped MB in I-frame at %d %d\n", s->mb_x, s->mb_y);
1944                     return AVERROR_INVALIDDATA;
1945                 }
1946
1947                 /* skip mb */
1948                 s->mb_intra = 0;
1949                 for (i = 0; i < 12; i++)
1950                     s->block_last_index[i] = -1;
1951                 if (s->picture_structure == PICT_FRAME)
1952                     s->mv_type = MV_TYPE_16X16;
1953                 else
1954                     s->mv_type = MV_TYPE_FIELD;
1955                 if (s->pict_type == AV_PICTURE_TYPE_P) {
1956                     /* if P type, zero motion vector is implied */
1957                     s->mv_dir             = MV_DIR_FORWARD;
1958                     s->mv[0][0][0]        = s->mv[0][0][1]      = 0;
1959                     s->last_mv[0][0][0]   = s->last_mv[0][0][1] = 0;
1960                     s->last_mv[0][1][0]   = s->last_mv[0][1][1] = 0;
1961                     s->field_select[0][0] = (s->picture_structure - 1) & 1;
1962                 } else {
1963                     /* if B type, reuse previous vectors and directions */
1964                     s->mv[0][0][0] = s->last_mv[0][0][0];
1965                     s->mv[0][0][1] = s->last_mv[0][0][1];
1966                     s->mv[1][0][0] = s->last_mv[1][0][0];
1967                     s->mv[1][0][1] = s->last_mv[1][0][1];
1968                     s->field_select[0][0] = (s->picture_structure - 1) & 1;
1969                     s->field_select[1][0] = (s->picture_structure - 1) & 1;
1970                 }
1971             }
1972         }
1973     }
1974 eos: // end of slice
1975     if (get_bits_left(&s->gb) < 0) {
1976         av_log(s, AV_LOG_ERROR, "overread %d\n", -get_bits_left(&s->gb));
1977         return AVERROR_INVALIDDATA;
1978     }
1979     *buf += (get_bits_count(&s->gb) - 1) / 8;
1980     ff_dlog(s, "Slice start:%d %d  end:%d %d\n", s->resync_mb_x, s->resync_mb_y, s->mb_x, s->mb_y);
1981     return 0;
1982 }
1983
1984 static int slice_decode_thread(AVCodecContext *c, void *arg)
1985 {
1986     MpegEncContext *s   = *(void **) arg;
1987     const uint8_t *buf  = s->gb.buffer;
1988     int mb_y            = s->start_mb_y;
1989     const int field_pic = s->picture_structure != PICT_FRAME;
1990
1991     s->er.error_count = (3 * (s->end_mb_y - s->start_mb_y) * s->mb_width) >> field_pic;
1992
1993     for (;;) {
1994         uint32_t start_code;
1995         int ret;
1996
1997         ret = mpeg_decode_slice(s, mb_y, &buf, s->gb.buffer_end - buf);
1998         emms_c();
1999         ff_dlog(c, "ret:%d resync:%d/%d mb:%d/%d ts:%d/%d ec:%d\n",
2000                 ret, s->resync_mb_x, s->resync_mb_y, s->mb_x, s->mb_y,
2001                 s->start_mb_y, s->end_mb_y, s->er.error_count);
2002         if (ret < 0) {
2003             if (c->err_recognition & AV_EF_EXPLODE)
2004                 return ret;
2005             if (s->resync_mb_x >= 0 && s->resync_mb_y >= 0)
2006                 ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
2007                                 s->mb_x, s->mb_y,
2008                                 ER_AC_ERROR | ER_DC_ERROR | ER_MV_ERROR);
2009         } else {
2010             ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
2011                             s->mb_x - 1, s->mb_y,
2012                             ER_AC_END | ER_DC_END | ER_MV_END);
2013         }
2014
2015         if (s->mb_y == s->end_mb_y)
2016             return 0;
2017
2018         start_code = -1;
2019         buf        = avpriv_find_start_code(buf, s->gb.buffer_end, &start_code);
2020         if (start_code < SLICE_MIN_START_CODE || start_code > SLICE_MAX_START_CODE)
2021             return AVERROR_INVALIDDATA;
2022         mb_y       = start_code - SLICE_MIN_START_CODE;
2023         if (s->codec_id != AV_CODEC_ID_MPEG1VIDEO && s->mb_height > 2800/16)
2024             mb_y += (*buf&0xE0)<<2;
2025         mb_y <<= field_pic;
2026         if (s->picture_structure == PICT_BOTTOM_FIELD)
2027             mb_y++;
2028         if (mb_y >= s->end_mb_y)
2029             return AVERROR_INVALIDDATA;
2030     }
2031 }
2032
2033 /**
2034  * Handle slice ends.
2035  * @return 1 if it seems to be the last slice
2036  */
2037 static int slice_end(AVCodecContext *avctx, AVFrame *pict)
2038 {
2039     Mpeg1Context *s1  = avctx->priv_data;
2040     MpegEncContext *s = &s1->mpeg_enc_ctx;
2041
2042     if (!s1->mpeg_enc_ctx_allocated || !s->current_picture_ptr)
2043         return 0;
2044
2045     if (s->avctx->hwaccel) {
2046         int ret = s->avctx->hwaccel->end_frame(s->avctx);
2047         if (ret < 0) {
2048             av_log(avctx, AV_LOG_ERROR,
2049                    "hardware accelerator failed to decode picture\n");
2050             return ret;
2051         }
2052     }
2053
2054     /* end of slice reached */
2055     if (/* s->mb_y << field_pic == s->mb_height && */ !s->first_field && !s1->first_slice) {
2056         /* end of image */
2057
2058         ff_er_frame_end(&s->er);
2059
2060         ff_mpv_frame_end(s);
2061
2062         if (s->pict_type == AV_PICTURE_TYPE_B || s->low_delay) {
2063             int ret = av_frame_ref(pict, s->current_picture_ptr->f);
2064             if (ret < 0)
2065                 return ret;
2066             ff_print_debug_info(s, s->current_picture_ptr, pict);
2067             ff_mpv_export_qp_table(s, pict, s->current_picture_ptr, FF_QSCALE_TYPE_MPEG2);
2068         } else {
2069             if (avctx->active_thread_type & FF_THREAD_FRAME)
2070                 s->picture_number++;
2071             /* latency of 1 frame for I- and P-frames */
2072             /* XXX: use another variable than picture_number */
2073             if (s->last_picture_ptr) {
2074                 int ret = av_frame_ref(pict, s->last_picture_ptr->f);
2075                 if (ret < 0)
2076                     return ret;
2077                 ff_print_debug_info(s, s->last_picture_ptr, pict);
2078                 ff_mpv_export_qp_table(s, pict, s->last_picture_ptr, FF_QSCALE_TYPE_MPEG2);
2079             }
2080         }
2081
2082         return 1;
2083     } else {
2084         return 0;
2085     }
2086 }
2087
2088 static int mpeg1_decode_sequence(AVCodecContext *avctx,
2089                                  const uint8_t *buf, int buf_size)
2090 {
2091     Mpeg1Context *s1  = avctx->priv_data;
2092     MpegEncContext *s = &s1->mpeg_enc_ctx;
2093     int width, height;
2094     int i, v, j;
2095
2096     init_get_bits(&s->gb, buf, buf_size * 8);
2097
2098     width  = get_bits(&s->gb, 12);
2099     height = get_bits(&s->gb, 12);
2100     if (width == 0 || height == 0) {
2101         av_log(avctx, AV_LOG_WARNING,
2102                "Invalid horizontal or vertical size value.\n");
2103         if (avctx->err_recognition & (AV_EF_BITSTREAM | AV_EF_COMPLIANT))
2104             return AVERROR_INVALIDDATA;
2105     }
2106     s->aspect_ratio_info = get_bits(&s->gb, 4);
2107     if (s->aspect_ratio_info == 0) {
2108         av_log(avctx, AV_LOG_ERROR, "aspect ratio has forbidden 0 value\n");
2109         if (avctx->err_recognition & (AV_EF_BITSTREAM | AV_EF_COMPLIANT))
2110             return AVERROR_INVALIDDATA;
2111     }
2112     s->frame_rate_index = get_bits(&s->gb, 4);
2113     if (s->frame_rate_index == 0 || s->frame_rate_index > 13) {
2114         av_log(avctx, AV_LOG_WARNING,
2115                "frame_rate_index %d is invalid\n", s->frame_rate_index);
2116         s->frame_rate_index = 1;
2117     }
2118     s->bit_rate = get_bits(&s->gb, 18) * 400LL;
2119     if (check_marker(s->avctx, &s->gb, "in sequence header") == 0) {
2120         return AVERROR_INVALIDDATA;
2121     }
2122
2123     s1->rc_buffer_size = get_bits(&s->gb, 10) * 1024 * 16;
2124     skip_bits(&s->gb, 1);
2125
2126     /* get matrix */
2127     if (get_bits1(&s->gb)) {
2128         load_matrix(s, s->chroma_intra_matrix, s->intra_matrix, 1);
2129     } else {
2130         for (i = 0; i < 64; i++) {
2131             j = s->idsp.idct_permutation[i];
2132             v = ff_mpeg1_default_intra_matrix[i];
2133             s->intra_matrix[j]        = v;
2134             s->chroma_intra_matrix[j] = v;
2135         }
2136     }
2137     if (get_bits1(&s->gb)) {
2138         load_matrix(s, s->chroma_inter_matrix, s->inter_matrix, 0);
2139     } else {
2140         for (i = 0; i < 64; i++) {
2141             int j = s->idsp.idct_permutation[i];
2142             v = ff_mpeg1_default_non_intra_matrix[i];
2143             s->inter_matrix[j]        = v;
2144             s->chroma_inter_matrix[j] = v;
2145         }
2146     }
2147
2148     if (show_bits(&s->gb, 23) != 0) {
2149         av_log(s->avctx, AV_LOG_ERROR, "sequence header damaged\n");
2150         return AVERROR_INVALIDDATA;
2151     }
2152
2153     s->width  = width;
2154     s->height = height;
2155
2156     /* We set MPEG-2 parameters so that it emulates MPEG-1. */
2157     s->progressive_sequence = 1;
2158     s->progressive_frame    = 1;
2159     s->picture_structure    = PICT_FRAME;
2160     s->first_field          = 0;
2161     s->frame_pred_frame_dct = 1;
2162     s->chroma_format        = 1;
2163     s->codec_id             =
2164     s->avctx->codec_id      = AV_CODEC_ID_MPEG1VIDEO;
2165     s->out_format           = FMT_MPEG1;
2166     s->swap_uv              = 0; // AFAIK VCR2 does not have SEQ_HEADER
2167     if (s->avctx->flags & AV_CODEC_FLAG_LOW_DELAY)
2168         s->low_delay = 1;
2169
2170     if (s->avctx->debug & FF_DEBUG_PICT_INFO)
2171         av_log(s->avctx, AV_LOG_DEBUG, "vbv buffer: %d, bitrate:%"PRId64", aspect_ratio_info: %d \n",
2172                s1->rc_buffer_size, s->bit_rate, s->aspect_ratio_info);
2173
2174     return 0;
2175 }
2176
2177 static int vcr2_init_sequence(AVCodecContext *avctx)
2178 {
2179     Mpeg1Context *s1  = avctx->priv_data;
2180     MpegEncContext *s = &s1->mpeg_enc_ctx;
2181     int i, v, ret;
2182
2183     /* start new MPEG-1 context decoding */
2184     s->out_format = FMT_MPEG1;
2185     if (s1->mpeg_enc_ctx_allocated) {
2186         ff_mpv_common_end(s);
2187         s1->mpeg_enc_ctx_allocated = 0;
2188     }
2189     s->width            = avctx->coded_width;
2190     s->height           = avctx->coded_height;
2191     avctx->has_b_frames = 0; // true?
2192     s->low_delay        = 1;
2193
2194     avctx->pix_fmt = mpeg_get_pixelformat(avctx);
2195     setup_hwaccel_for_pixfmt(avctx);
2196
2197     ff_mpv_idct_init(s);
2198     if ((ret = ff_mpv_common_init(s)) < 0)
2199         return ret;
2200     s1->mpeg_enc_ctx_allocated = 1;
2201
2202     for (i = 0; i < 64; i++) {
2203         int j = s->idsp.idct_permutation[i];
2204         v = ff_mpeg1_default_intra_matrix[i];
2205         s->intra_matrix[j]        = v;
2206         s->chroma_intra_matrix[j] = v;
2207
2208         v = ff_mpeg1_default_non_intra_matrix[i];
2209         s->inter_matrix[j]        = v;
2210         s->chroma_inter_matrix[j] = v;
2211     }
2212
2213     s->progressive_sequence  = 1;
2214     s->progressive_frame     = 1;
2215     s->picture_structure     = PICT_FRAME;
2216     s->first_field           = 0;
2217     s->frame_pred_frame_dct  = 1;
2218     s->chroma_format         = 1;
2219     if (s->codec_tag == AV_RL32("BW10")) {
2220         s->codec_id              = s->avctx->codec_id = AV_CODEC_ID_MPEG1VIDEO;
2221     } else {
2222         s->swap_uv = 1; // in case of xvmc we need to swap uv for each MB
2223         s->codec_id              = s->avctx->codec_id = AV_CODEC_ID_MPEG2VIDEO;
2224     }
2225     s1->save_width           = s->width;
2226     s1->save_height          = s->height;
2227     s1->save_progressive_seq = s->progressive_sequence;
2228     return 0;
2229 }
2230
2231 static int mpeg_decode_a53_cc(AVCodecContext *avctx,
2232                               const uint8_t *p, int buf_size)
2233 {
2234     Mpeg1Context *s1 = avctx->priv_data;
2235
2236     if (buf_size >= 6 &&
2237         p[0] == 'G' && p[1] == 'A' && p[2] == '9' && p[3] == '4' &&
2238         p[4] == 3 && (p[5] & 0x40)) {
2239         /* extract A53 Part 4 CC data */
2240         int cc_count = p[5] & 0x1f;
2241         if (cc_count > 0 && buf_size >= 7 + cc_count * 3) {
2242             int old_size = s1->a53_buf_ref ? s1->a53_buf_ref->size : 0;
2243             const uint64_t new_size = (old_size + cc_count
2244                                             * UINT64_C(3));
2245             int ret;
2246
2247             if (new_size > INT_MAX)
2248                 return AVERROR(EINVAL);
2249
2250             ret = av_buffer_realloc(&s1->a53_buf_ref, new_size);
2251             if (ret >= 0)
2252                 memcpy(s1->a53_buf_ref->data + old_size, p + 7, cc_count * UINT64_C(3));
2253
2254             avctx->properties |= FF_CODEC_PROPERTY_CLOSED_CAPTIONS;
2255         }
2256         return 1;
2257     } else if (buf_size >= 2 &&
2258                p[0] == 0x03 && (p[1]&0x7f) == 0x01) {
2259         /* extract SCTE-20 CC data */
2260         GetBitContext gb;
2261         int cc_count = 0;
2262         int i, ret;
2263
2264         init_get_bits(&gb, p + 2, buf_size - 2);
2265         cc_count = get_bits(&gb, 5);
2266         if (cc_count > 0) {
2267             int old_size = s1->a53_buf_ref ? s1->a53_buf_ref->size : 0;
2268             const uint64_t new_size = (old_size + cc_count
2269                                             * UINT64_C(3));
2270             if (new_size > INT_MAX)
2271                 return AVERROR(EINVAL);
2272
2273             ret = av_buffer_realloc(&s1->a53_buf_ref, new_size);
2274             if (ret >= 0) {
2275                 uint8_t field, cc1, cc2;
2276                 uint8_t *cap = s1->a53_buf_ref->data;
2277
2278                 memset(s1->a53_buf_ref->data + old_size, 0, cc_count * 3);
2279                 for (i = 0; i < cc_count && get_bits_left(&gb) >= 26; i++) {
2280                     skip_bits(&gb, 2); // priority
2281                     field = get_bits(&gb, 2);
2282                     skip_bits(&gb, 5); // line_offset
2283                     cc1 = get_bits(&gb, 8);
2284                     cc2 = get_bits(&gb, 8);
2285                     skip_bits(&gb, 1); // marker
2286
2287                     if (!field) { // forbidden
2288                         cap[0] = cap[1] = cap[2] = 0x00;
2289                     } else {
2290                         field = (field == 2 ? 1 : 0);
2291                         if (!s1->mpeg_enc_ctx.top_field_first) field = !field;
2292                         cap[0] = 0x04 | field;
2293                         cap[1] = ff_reverse[cc1];
2294                         cap[2] = ff_reverse[cc2];
2295                     }
2296                     cap += 3;
2297                 }
2298             }
2299             avctx->properties |= FF_CODEC_PROPERTY_CLOSED_CAPTIONS;
2300         }
2301         return 1;
2302     } else if (buf_size >= 11 &&
2303                p[0] == 'C' && p[1] == 'C' && p[2] == 0x01 && p[3] == 0xf8) {
2304         /* extract DVD CC data
2305          *
2306          * uint32_t   user_data_start_code        0x000001B2    (big endian)
2307          * uint16_t   user_identifier             0x4343 "CC"
2308          * uint8_t    user_data_type_code         0x01
2309          * uint8_t    caption_block_size          0xF8
2310          * uint8_t
2311          *   bit 7    caption_odd_field_first     1=odd field (CC1/CC2) first  0=even field (CC3/CC4) first
2312          *   bit 6    caption_filler              0
2313          *   bit 5:1  caption_block_count         number of caption blocks (pairs of caption words = frames). Most DVDs use 15 per start of GOP.
2314          *   bit 0    caption_extra_field_added   1=one additional caption word
2315          *
2316          * struct caption_field_block {
2317          *   uint8_t
2318          *     bit 7:1 caption_filler             0x7F (all 1s)
2319          *     bit 0   caption_field_odd          1=odd field (this is CC1/CC2)  0=even field (this is CC3/CC4)
2320          *   uint8_t   caption_first_byte
2321          *   uint8_t   caption_second_byte
2322          * } caption_block[(caption_block_count * 2) + caption_extra_field_added];
2323          *
2324          * Some DVDs encode caption data for both fields with caption_field_odd=1. The only way to decode the fields
2325          * correctly is to start on the field indicated by caption_odd_field_first and count between odd/even fields.
2326          * Don't assume that the first caption word is the odd field. There do exist MPEG files in the wild that start
2327          * on the even field. There also exist DVDs in the wild that encode an odd field count and the
2328          * caption_extra_field_added/caption_odd_field_first bits change per packet to allow that. */
2329         int cc_count = 0;
2330         int i, ret;
2331         // There is a caption count field in the data, but it is often
2332         // incorrect.  So count the number of captions present.
2333         for (i = 5; i + 6 <= buf_size && ((p[i] & 0xfe) == 0xfe); i += 6)
2334             cc_count++;
2335         // Transform the DVD format into A53 Part 4 format
2336         if (cc_count > 0) {
2337             int old_size = s1->a53_buf_ref ? s1->a53_buf_ref->size : 0;
2338             const uint64_t new_size = (old_size + cc_count
2339                                             * UINT64_C(6));
2340             if (new_size > INT_MAX)
2341                 return AVERROR(EINVAL);
2342
2343             ret = av_buffer_realloc(&s1->a53_buf_ref, new_size);
2344             if (ret >= 0) {
2345                 uint8_t field1 = !!(p[4] & 0x80);
2346                 uint8_t *cap = s1->a53_buf_ref->data;
2347                 p += 5;
2348                 for (i = 0; i < cc_count; i++) {
2349                     cap[0] = (p[0] == 0xff && field1) ? 0xfc : 0xfd;
2350                     cap[1] = p[1];
2351                     cap[2] = p[2];
2352                     cap[3] = (p[3] == 0xff && !field1) ? 0xfc : 0xfd;
2353                     cap[4] = p[4];
2354                     cap[5] = p[5];
2355                     cap += 6;
2356                     p += 6;
2357                 }
2358             }
2359             avctx->properties |= FF_CODEC_PROPERTY_CLOSED_CAPTIONS;
2360         }
2361         return 1;
2362     }
2363     return 0;
2364 }
2365
2366 static void mpeg_decode_user_data(AVCodecContext *avctx,
2367                                   const uint8_t *p, int buf_size)
2368 {
2369     Mpeg1Context *s = avctx->priv_data;
2370     const uint8_t *buf_end = p + buf_size;
2371     Mpeg1Context *s1 = avctx->priv_data;
2372
2373 #if 0
2374     int i;
2375     for(i=0; !(!p[i-2] && !p[i-1] && p[i]==1) && i<buf_size; i++){
2376         av_log(avctx, AV_LOG_ERROR, "%c", p[i]);
2377     }
2378     av_log(avctx, AV_LOG_ERROR, "\n");
2379 #endif
2380
2381     if (buf_size > 29){
2382         int i;
2383         for(i=0; i<20; i++)
2384             if (!memcmp(p+i, "\0TMPGEXS\0", 9)){
2385                 s->tmpgexs= 1;
2386             }
2387     }
2388     /* we parse the DTG active format information */
2389     if (buf_end - p >= 5 &&
2390         p[0] == 'D' && p[1] == 'T' && p[2] == 'G' && p[3] == '1') {
2391         int flags = p[4];
2392         p += 5;
2393         if (flags & 0x80) {
2394             /* skip event id */
2395             p += 2;
2396         }
2397         if (flags & 0x40) {
2398             if (buf_end - p < 1)
2399                 return;
2400             s1->has_afd = 1;
2401             s1->afd     = p[0] & 0x0f;
2402         }
2403     } else if (buf_end - p >= 6 &&
2404                p[0] == 'J' && p[1] == 'P' && p[2] == '3' && p[3] == 'D' &&
2405                p[4] == 0x03) { // S3D_video_format_length
2406         // the 0x7F mask ignores the reserved_bit value
2407         const uint8_t S3D_video_format_type = p[5] & 0x7F;
2408
2409         if (S3D_video_format_type == 0x03 ||
2410             S3D_video_format_type == 0x04 ||
2411             S3D_video_format_type == 0x08 ||
2412             S3D_video_format_type == 0x23) {
2413
2414             s1->has_stereo3d = 1;
2415
2416             switch (S3D_video_format_type) {
2417             case 0x03:
2418                 s1->stereo3d.type = AV_STEREO3D_SIDEBYSIDE;
2419                 break;
2420             case 0x04:
2421                 s1->stereo3d.type = AV_STEREO3D_TOPBOTTOM;
2422                 break;
2423             case 0x08:
2424                 s1->stereo3d.type = AV_STEREO3D_2D;
2425                 break;
2426             case 0x23:
2427                 s1->stereo3d.type = AV_STEREO3D_SIDEBYSIDE_QUINCUNX;
2428                 break;
2429             }
2430         }
2431     } else if (mpeg_decode_a53_cc(avctx, p, buf_size)) {
2432         return;
2433     }
2434 }
2435
2436 static void mpeg_decode_gop(AVCodecContext *avctx,
2437                             const uint8_t *buf, int buf_size)
2438 {
2439     Mpeg1Context *s1  = avctx->priv_data;
2440     MpegEncContext *s = &s1->mpeg_enc_ctx;
2441     int broken_link;
2442     int64_t tc;
2443
2444     init_get_bits(&s->gb, buf, buf_size * 8);
2445
2446     tc = s-> timecode_frame_start = get_bits(&s->gb, 25);
2447
2448 #if FF_API_PRIVATE_OPT
2449 FF_DISABLE_DEPRECATION_WARNINGS
2450     avctx->timecode_frame_start = tc;
2451 FF_ENABLE_DEPRECATION_WARNINGS
2452 #endif
2453
2454     s->closed_gop = get_bits1(&s->gb);
2455     /* broken_link indicates that after editing the
2456      * reference frames of the first B-Frames after GOP I-Frame
2457      * are missing (open gop) */
2458     broken_link = get_bits1(&s->gb);
2459
2460     if (s->avctx->debug & FF_DEBUG_PICT_INFO) {
2461         char tcbuf[AV_TIMECODE_STR_SIZE];
2462         av_timecode_make_mpeg_tc_string(tcbuf, tc);
2463         av_log(s->avctx, AV_LOG_DEBUG,
2464                "GOP (%s) closed_gop=%d broken_link=%d\n",
2465                tcbuf, s->closed_gop, broken_link);
2466     }
2467 }
2468
2469 static int decode_chunks(AVCodecContext *avctx, AVFrame *picture,
2470                          int *got_output, const uint8_t *buf, int buf_size)
2471 {
2472     Mpeg1Context *s = avctx->priv_data;
2473     MpegEncContext *s2 = &s->mpeg_enc_ctx;
2474     const uint8_t *buf_ptr = buf;
2475     const uint8_t *buf_end = buf + buf_size;
2476     int ret, input_size;
2477     int last_code = 0, skip_frame = 0;
2478     int picture_start_code_seen = 0;
2479
2480     for (;;) {
2481         /* find next start code */
2482         uint32_t start_code = -1;
2483         buf_ptr = avpriv_find_start_code(buf_ptr, buf_end, &start_code);
2484         if (start_code > 0x1ff) {
2485             if (!skip_frame) {
2486                 if (HAVE_THREADS &&
2487                     (avctx->active_thread_type & FF_THREAD_SLICE) &&
2488                     !avctx->hwaccel) {
2489                     int i;
2490                     av_assert0(avctx->thread_count > 1);
2491
2492                     avctx->execute(avctx, slice_decode_thread,
2493                                    &s2->thread_context[0], NULL,
2494                                    s->slice_count, sizeof(void *));
2495                     for (i = 0; i < s->slice_count; i++)
2496                         s2->er.error_count += s2->thread_context[i]->er.error_count;
2497                 }
2498
2499                 ret = slice_end(avctx, picture);
2500                 if (ret < 0)
2501                     return ret;
2502                 else if (ret) {
2503                     // FIXME: merge with the stuff in mpeg_decode_slice
2504                     if (s2->last_picture_ptr || s2->low_delay || s2->pict_type == AV_PICTURE_TYPE_B)
2505                         *got_output = 1;
2506                 }
2507             }
2508             s2->pict_type = 0;
2509
2510             if (avctx->err_recognition & AV_EF_EXPLODE && s2->er.error_count)
2511                 return AVERROR_INVALIDDATA;
2512
2513             return FFMAX(0, buf_ptr - buf - s2->parse_context.last_index);
2514         }
2515
2516         input_size = buf_end - buf_ptr;
2517
2518         if (avctx->debug & FF_DEBUG_STARTCODE)
2519             av_log(avctx, AV_LOG_DEBUG, "%3"PRIX32" at %"PTRDIFF_SPECIFIER" left %d\n",
2520                    start_code, buf_ptr - buf, input_size);
2521
2522         /* prepare data for next start code */
2523         switch (start_code) {
2524         case SEQ_START_CODE:
2525             if (last_code == 0) {
2526                 mpeg1_decode_sequence(avctx, buf_ptr, input_size);
2527                 if (buf != avctx->extradata)
2528                     s->sync = 1;
2529             } else {
2530                 av_log(avctx, AV_LOG_ERROR,
2531                        "ignoring SEQ_START_CODE after %X\n", last_code);
2532                 if (avctx->err_recognition & AV_EF_EXPLODE)
2533                     return AVERROR_INVALIDDATA;
2534             }
2535             break;
2536
2537         case PICTURE_START_CODE:
2538             if (picture_start_code_seen && s2->picture_structure == PICT_FRAME) {
2539                /* If it's a frame picture, there can't be more than one picture header.
2540                   Yet, it does happen and we need to handle it. */
2541                av_log(avctx, AV_LOG_WARNING, "ignoring extra picture following a frame-picture\n");
2542                break;
2543             }
2544             picture_start_code_seen = 1;
2545
2546             if (s2->width <= 0 || s2->height <= 0) {
2547                 av_log(avctx, AV_LOG_ERROR, "Invalid frame dimensions %dx%d.\n",
2548                        s2->width, s2->height);
2549                 return AVERROR_INVALIDDATA;
2550             }
2551
2552             if (s->tmpgexs){
2553                 s2->intra_dc_precision= 3;
2554                 s2->intra_matrix[0]= 1;
2555             }
2556             if (HAVE_THREADS && (avctx->active_thread_type & FF_THREAD_SLICE) &&
2557                 !avctx->hwaccel && s->slice_count) {
2558                 int i;
2559
2560                 avctx->execute(avctx, slice_decode_thread,
2561                                s2->thread_context, NULL,
2562                                s->slice_count, sizeof(void *));
2563                 for (i = 0; i < s->slice_count; i++)
2564                     s2->er.error_count += s2->thread_context[i]->er.error_count;
2565                 s->slice_count = 0;
2566             }
2567             if (last_code == 0 || last_code == SLICE_MIN_START_CODE) {
2568                 ret = mpeg_decode_postinit(avctx);
2569                 if (ret < 0) {
2570                     av_log(avctx, AV_LOG_ERROR,
2571                            "mpeg_decode_postinit() failure\n");
2572                     return ret;
2573                 }
2574
2575                 /* We have a complete image: we try to decompress it. */
2576                 if (mpeg1_decode_picture(avctx, buf_ptr, input_size) < 0)
2577                     s2->pict_type = 0;
2578                 s->first_slice = 1;
2579                 last_code      = PICTURE_START_CODE;
2580             } else {
2581                 av_log(avctx, AV_LOG_ERROR,
2582                        "ignoring pic after %X\n", last_code);
2583                 if (avctx->err_recognition & AV_EF_EXPLODE)
2584                     return AVERROR_INVALIDDATA;
2585             }
2586             break;
2587         case EXT_START_CODE:
2588             init_get_bits(&s2->gb, buf_ptr, input_size * 8);
2589
2590             switch (get_bits(&s2->gb, 4)) {
2591             case 0x1:
2592                 if (last_code == 0) {
2593                     mpeg_decode_sequence_extension(s);
2594                 } else {
2595                     av_log(avctx, AV_LOG_ERROR,
2596                            "ignoring seq ext after %X\n", last_code);
2597                     if (avctx->err_recognition & AV_EF_EXPLODE)
2598                         return AVERROR_INVALIDDATA;
2599                 }
2600                 break;
2601             case 0x2:
2602                 mpeg_decode_sequence_display_extension(s);
2603                 break;
2604             case 0x3:
2605                 mpeg_decode_quant_matrix_extension(s2);
2606                 break;
2607             case 0x7:
2608                 mpeg_decode_picture_display_extension(s);
2609                 break;
2610             case 0x8:
2611                 if (last_code == PICTURE_START_CODE) {
2612                     mpeg_decode_picture_coding_extension(s);
2613                 } else {
2614                     av_log(avctx, AV_LOG_ERROR,
2615                            "ignoring pic cod ext after %X\n", last_code);
2616                     if (avctx->err_recognition & AV_EF_EXPLODE)
2617                         return AVERROR_INVALIDDATA;
2618                 }
2619                 break;
2620             }
2621             break;
2622         case USER_START_CODE:
2623             mpeg_decode_user_data(avctx, buf_ptr, input_size);
2624             break;
2625         case GOP_START_CODE:
2626             if (last_code == 0) {
2627                 s2->first_field = 0;
2628                 mpeg_decode_gop(avctx, buf_ptr, input_size);
2629                 s->sync = 1;
2630             } else {
2631                 av_log(avctx, AV_LOG_ERROR,
2632                        "ignoring GOP_START_CODE after %X\n", last_code);
2633                 if (avctx->err_recognition & AV_EF_EXPLODE)
2634                     return AVERROR_INVALIDDATA;
2635             }
2636             break;
2637         default:
2638             if (start_code >= SLICE_MIN_START_CODE &&
2639                 start_code <= SLICE_MAX_START_CODE && last_code == PICTURE_START_CODE) {
2640                 if (s2->progressive_sequence && !s2->progressive_frame) {
2641                     s2->progressive_frame = 1;
2642                     av_log(s2->avctx, AV_LOG_ERROR,
2643                            "interlaced frame in progressive sequence, ignoring\n");
2644                 }
2645
2646                 if (s2->picture_structure == 0 ||
2647                     (s2->progressive_frame && s2->picture_structure != PICT_FRAME)) {
2648                     av_log(s2->avctx, AV_LOG_ERROR,
2649                            "picture_structure %d invalid, ignoring\n",
2650                            s2->picture_structure);
2651                     s2->picture_structure = PICT_FRAME;
2652                 }
2653
2654                 if (s2->progressive_sequence && !s2->frame_pred_frame_dct)
2655                     av_log(s2->avctx, AV_LOG_WARNING, "invalid frame_pred_frame_dct\n");
2656
2657                 if (s2->picture_structure == PICT_FRAME) {
2658                     s2->first_field = 0;
2659                     s2->v_edge_pos  = 16 * s2->mb_height;
2660                 } else {
2661                     s2->first_field ^= 1;
2662                     s2->v_edge_pos   = 8 * s2->mb_height;
2663                     memset(s2->mbskip_table, 0, s2->mb_stride * s2->mb_height);
2664                 }
2665             }
2666             if (start_code >= SLICE_MIN_START_CODE &&
2667                 start_code <= SLICE_MAX_START_CODE && last_code != 0) {
2668                 const int field_pic = s2->picture_structure != PICT_FRAME;
2669                 int mb_y = start_code - SLICE_MIN_START_CODE;
2670                 last_code = SLICE_MIN_START_CODE;
2671                 if (s2->codec_id != AV_CODEC_ID_MPEG1VIDEO && s2->mb_height > 2800/16)
2672                     mb_y += (*buf_ptr&0xE0)<<2;
2673
2674                 mb_y <<= field_pic;
2675                 if (s2->picture_structure == PICT_BOTTOM_FIELD)
2676                     mb_y++;
2677
2678                 if (buf_end - buf_ptr < 2) {
2679                     av_log(s2->avctx, AV_LOG_ERROR, "slice too small\n");
2680                     return AVERROR_INVALIDDATA;
2681                 }
2682
2683                 if (mb_y >= s2->mb_height) {
2684                     av_log(s2->avctx, AV_LOG_ERROR,
2685                            "slice below image (%d >= %d)\n", mb_y, s2->mb_height);
2686                     return AVERROR_INVALIDDATA;
2687                 }
2688
2689                 if (!s2->last_picture_ptr) {
2690                     /* Skip B-frames if we do not have reference frames and
2691                      * GOP is not closed. */
2692                     if (s2->pict_type == AV_PICTURE_TYPE_B) {
2693                         if (!s2->closed_gop) {
2694                             skip_frame = 1;
2695                             av_log(s2->avctx, AV_LOG_DEBUG,
2696                                    "Skipping B slice due to open GOP\n");
2697                             break;
2698                         }
2699                     }
2700                 }
2701                 if (s2->pict_type == AV_PICTURE_TYPE_I || (s2->avctx->flags2 & AV_CODEC_FLAG2_SHOW_ALL))
2702                     s->sync = 1;
2703                 if (!s2->next_picture_ptr) {
2704                     /* Skip P-frames if we do not have a reference frame or
2705                      * we have an invalid header. */
2706                     if (s2->pict_type == AV_PICTURE_TYPE_P && !s->sync) {
2707                         skip_frame = 1;
2708                         av_log(s2->avctx, AV_LOG_DEBUG,
2709                                "Skipping P slice due to !sync\n");
2710                         break;
2711                     }
2712                 }
2713                 if ((avctx->skip_frame >= AVDISCARD_NONREF &&
2714                      s2->pict_type == AV_PICTURE_TYPE_B) ||
2715                     (avctx->skip_frame >= AVDISCARD_NONKEY &&
2716                      s2->pict_type != AV_PICTURE_TYPE_I) ||
2717                     avctx->skip_frame >= AVDISCARD_ALL) {
2718                     skip_frame = 1;
2719                     break;
2720                 }
2721
2722                 if (!s->mpeg_enc_ctx_allocated)
2723                     break;
2724
2725                 if (s2->codec_id == AV_CODEC_ID_MPEG2VIDEO) {
2726                     if (mb_y < avctx->skip_top ||
2727                         mb_y >= s2->mb_height - avctx->skip_bottom)
2728                         break;
2729                 }
2730
2731                 if (!s2->pict_type) {
2732                     av_log(avctx, AV_LOG_ERROR, "Missing picture start code\n");
2733                     if (avctx->err_recognition & AV_EF_EXPLODE)
2734                         return AVERROR_INVALIDDATA;
2735                     break;
2736                 }
2737
2738                 if (s->first_slice) {
2739                     skip_frame     = 0;
2740                     s->first_slice = 0;
2741                     if ((ret = mpeg_field_start(s2, buf, buf_size)) < 0)
2742                         return ret;
2743                 }
2744                 if (!s2->current_picture_ptr) {
2745                     av_log(avctx, AV_LOG_ERROR,
2746                            "current_picture not initialized\n");
2747                     return AVERROR_INVALIDDATA;
2748                 }
2749
2750                 if (HAVE_THREADS &&
2751                     (avctx->active_thread_type & FF_THREAD_SLICE) &&
2752                     !avctx->hwaccel) {
2753                     int threshold = (s2->mb_height * s->slice_count +
2754                                      s2->slice_context_count / 2) /
2755                                     s2->slice_context_count;
2756                     av_assert0(avctx->thread_count > 1);
2757                     if (threshold <= mb_y) {
2758                         MpegEncContext *thread_context = s2->thread_context[s->slice_count];
2759
2760                         thread_context->start_mb_y = mb_y;
2761                         thread_context->end_mb_y   = s2->mb_height;
2762                         if (s->slice_count) {
2763                             s2->thread_context[s->slice_count - 1]->end_mb_y = mb_y;
2764                             ret = ff_update_duplicate_context(thread_context, s2);
2765                             if (ret < 0)
2766                                 return ret;
2767                         }
2768                         init_get_bits(&thread_context->gb, buf_ptr, input_size * 8);
2769                         s->slice_count++;
2770                     }
2771                     buf_ptr += 2; // FIXME add minimum number of bytes per slice
2772                 } else {
2773                     ret = mpeg_decode_slice(s2, mb_y, &buf_ptr, input_size);
2774                     emms_c();
2775
2776                     if (ret < 0) {
2777                         if (avctx->err_recognition & AV_EF_EXPLODE)
2778                             return ret;
2779                         if (s2->resync_mb_x >= 0 && s2->resync_mb_y >= 0)
2780                             ff_er_add_slice(&s2->er, s2->resync_mb_x,
2781                                             s2->resync_mb_y, s2->mb_x, s2->mb_y,
2782                                             ER_AC_ERROR | ER_DC_ERROR | ER_MV_ERROR);
2783                     } else {
2784                         ff_er_add_slice(&s2->er, s2->resync_mb_x,
2785                                         s2->resync_mb_y, s2->mb_x - 1, s2->mb_y,
2786                                         ER_AC_END | ER_DC_END | ER_MV_END);
2787                     }
2788                 }
2789             }
2790             break;
2791         }
2792     }
2793 }
2794
2795 static int mpeg_decode_frame(AVCodecContext *avctx, void *data,
2796                              int *got_output, AVPacket *avpkt)
2797 {
2798     const uint8_t *buf = avpkt->data;
2799     int ret;
2800     int buf_size = avpkt->size;
2801     Mpeg1Context *s = avctx->priv_data;
2802     AVFrame *picture = data;
2803     MpegEncContext *s2 = &s->mpeg_enc_ctx;
2804
2805     if (buf_size == 0 || (buf_size == 4 && AV_RB32(buf) == SEQ_END_CODE)) {
2806         /* special case for last picture */
2807         if (s2->low_delay == 0 && s2->next_picture_ptr) {
2808             int ret = av_frame_ref(picture, s2->next_picture_ptr->f);
2809             if (ret < 0)
2810                 return ret;
2811
2812             s2->next_picture_ptr = NULL;
2813
2814             *got_output = 1;
2815         }
2816         return buf_size;
2817     }
2818
2819     if (s2->avctx->flags & AV_CODEC_FLAG_TRUNCATED) {
2820         int next = ff_mpeg1_find_frame_end(&s2->parse_context, buf,
2821                                            buf_size, NULL);
2822
2823         if (ff_combine_frame(&s2->parse_context, next,
2824                              (const uint8_t **) &buf, &buf_size) < 0)
2825             return buf_size;
2826     }
2827
2828     s2->codec_tag = avpriv_toupper4(avctx->codec_tag);
2829     if (s->mpeg_enc_ctx_allocated == 0 && (   s2->codec_tag == AV_RL32("VCR2")
2830                                            || s2->codec_tag == AV_RL32("BW10")
2831                                           ))
2832         vcr2_init_sequence(avctx);
2833
2834     s->slice_count = 0;
2835
2836     if (avctx->extradata && !s->extradata_decoded) {
2837         ret = decode_chunks(avctx, picture, got_output,
2838                             avctx->extradata, avctx->extradata_size);
2839         if (*got_output) {
2840             av_log(avctx, AV_LOG_ERROR, "picture in extradata\n");
2841             av_frame_unref(picture);
2842             *got_output = 0;
2843         }
2844         s->extradata_decoded = 1;
2845         if (ret < 0 && (avctx->err_recognition & AV_EF_EXPLODE)) {
2846             s2->current_picture_ptr = NULL;
2847             return ret;
2848         }
2849     }
2850
2851     ret = decode_chunks(avctx, picture, got_output, buf, buf_size);
2852     if (ret<0 || *got_output) {
2853         s2->current_picture_ptr = NULL;
2854
2855         if (s2->timecode_frame_start != -1 && *got_output) {
2856             char tcbuf[AV_TIMECODE_STR_SIZE];
2857             AVFrameSideData *tcside = av_frame_new_side_data(picture,
2858                                                              AV_FRAME_DATA_GOP_TIMECODE,
2859                                                              sizeof(int64_t));
2860             if (!tcside)
2861                 return AVERROR(ENOMEM);
2862             memcpy(tcside->data, &s2->timecode_frame_start, sizeof(int64_t));
2863
2864             av_timecode_make_mpeg_tc_string(tcbuf, s2->timecode_frame_start);
2865             av_dict_set(&picture->metadata, "timecode", tcbuf, 0);
2866
2867             s2->timecode_frame_start = -1;
2868         }
2869     }
2870
2871     return ret;
2872 }
2873
2874 static void flush(AVCodecContext *avctx)
2875 {
2876     Mpeg1Context *s = avctx->priv_data;
2877
2878     s->sync       = 0;
2879
2880     ff_mpeg_flush(avctx);
2881 }
2882
2883 static av_cold int mpeg_decode_end(AVCodecContext *avctx)
2884 {
2885     Mpeg1Context *s = avctx->priv_data;
2886
2887     ff_mpv_common_end(&s->mpeg_enc_ctx);
2888     av_buffer_unref(&s->a53_buf_ref);
2889     return 0;
2890 }
2891
2892 AVCodec ff_mpeg1video_decoder = {
2893     .name                  = "mpeg1video",
2894     .long_name             = NULL_IF_CONFIG_SMALL("MPEG-1 video"),
2895     .type                  = AVMEDIA_TYPE_VIDEO,
2896     .id                    = AV_CODEC_ID_MPEG1VIDEO,
2897     .priv_data_size        = sizeof(Mpeg1Context),
2898     .init                  = mpeg_decode_init,
2899     .close                 = mpeg_decode_end,
2900     .decode                = mpeg_decode_frame,
2901     .capabilities          = AV_CODEC_CAP_DRAW_HORIZ_BAND | AV_CODEC_CAP_DR1 |
2902                              AV_CODEC_CAP_TRUNCATED | AV_CODEC_CAP_DELAY |
2903                              AV_CODEC_CAP_SLICE_THREADS,
2904     .caps_internal         = FF_CODEC_CAP_SKIP_FRAME_FILL_PARAM | FF_CODEC_CAP_INIT_CLEANUP,
2905     .flush                 = flush,
2906     .max_lowres            = 3,
2907     .update_thread_context = ONLY_IF_THREADS_ENABLED(mpeg_decode_update_thread_context),
2908     .hw_configs            = (const AVCodecHWConfigInternal*[]) {
2909 #if CONFIG_MPEG1_NVDEC_HWACCEL
2910                                HWACCEL_NVDEC(mpeg1),
2911 #endif
2912 #if CONFIG_MPEG1_VDPAU_HWACCEL
2913                                HWACCEL_VDPAU(mpeg1),
2914 #endif
2915 #if CONFIG_MPEG1_VIDEOTOOLBOX_HWACCEL
2916                                HWACCEL_VIDEOTOOLBOX(mpeg1),
2917 #endif
2918 #if CONFIG_MPEG1_XVMC_HWACCEL
2919                                HWACCEL_XVMC(mpeg1),
2920 #endif
2921                                NULL
2922                            },
2923 };
2924
2925 AVCodec ff_mpeg2video_decoder = {
2926     .name           = "mpeg2video",
2927     .long_name      = NULL_IF_CONFIG_SMALL("MPEG-2 video"),
2928     .type           = AVMEDIA_TYPE_VIDEO,
2929     .id             = AV_CODEC_ID_MPEG2VIDEO,
2930     .priv_data_size = sizeof(Mpeg1Context),
2931     .init           = mpeg_decode_init,
2932     .close          = mpeg_decode_end,
2933     .decode         = mpeg_decode_frame,
2934     .capabilities   = AV_CODEC_CAP_DRAW_HORIZ_BAND | AV_CODEC_CAP_DR1 |
2935                       AV_CODEC_CAP_TRUNCATED | AV_CODEC_CAP_DELAY |
2936                       AV_CODEC_CAP_SLICE_THREADS,
2937     .caps_internal  = FF_CODEC_CAP_SKIP_FRAME_FILL_PARAM | FF_CODEC_CAP_INIT_CLEANUP,
2938     .flush          = flush,
2939     .max_lowres     = 3,
2940     .profiles       = NULL_IF_CONFIG_SMALL(ff_mpeg2_video_profiles),
2941     .hw_configs     = (const AVCodecHWConfigInternal*[]) {
2942 #if CONFIG_MPEG2_DXVA2_HWACCEL
2943                         HWACCEL_DXVA2(mpeg2),
2944 #endif
2945 #if CONFIG_MPEG2_D3D11VA_HWACCEL
2946                         HWACCEL_D3D11VA(mpeg2),
2947 #endif
2948 #if CONFIG_MPEG2_D3D11VA2_HWACCEL
2949                         HWACCEL_D3D11VA2(mpeg2),
2950 #endif
2951 #if CONFIG_MPEG2_NVDEC_HWACCEL
2952                         HWACCEL_NVDEC(mpeg2),
2953 #endif
2954 #if CONFIG_MPEG2_VAAPI_HWACCEL
2955                         HWACCEL_VAAPI(mpeg2),
2956 #endif
2957 #if CONFIG_MPEG2_VDPAU_HWACCEL
2958                         HWACCEL_VDPAU(mpeg2),
2959 #endif
2960 #if CONFIG_MPEG2_VIDEOTOOLBOX_HWACCEL
2961                         HWACCEL_VIDEOTOOLBOX(mpeg2),
2962 #endif
2963 #if CONFIG_MPEG2_XVMC_HWACCEL
2964                         HWACCEL_XVMC(mpeg2),
2965 #endif
2966                         NULL
2967                     },
2968 };
2969
2970 //legacy decoder
2971 AVCodec ff_mpegvideo_decoder = {
2972     .name           = "mpegvideo",
2973     .long_name      = NULL_IF_CONFIG_SMALL("MPEG-1 video"),
2974     .type           = AVMEDIA_TYPE_VIDEO,
2975     .id             = AV_CODEC_ID_MPEG2VIDEO,
2976     .priv_data_size = sizeof(Mpeg1Context),
2977     .init           = mpeg_decode_init,
2978     .close          = mpeg_decode_end,
2979     .decode         = mpeg_decode_frame,
2980     .capabilities   = AV_CODEC_CAP_DRAW_HORIZ_BAND | AV_CODEC_CAP_DR1 | AV_CODEC_CAP_TRUNCATED | AV_CODEC_CAP_DELAY | AV_CODEC_CAP_SLICE_THREADS,
2981     .caps_internal  = FF_CODEC_CAP_SKIP_FRAME_FILL_PARAM | FF_CODEC_CAP_INIT_CLEANUP,
2982     .flush          = flush,
2983     .max_lowres     = 3,
2984 };
2985
2986 typedef struct IPUContext {
2987     MpegEncContext m;
2988
2989     int flags;
2990     DECLARE_ALIGNED(32, int16_t, block)[6][64];
2991 } IPUContext;
2992
2993 static int ipu_decode_frame(AVCodecContext *avctx, void *data,
2994                             int *got_frame, AVPacket *avpkt)
2995 {
2996     IPUContext *s = avctx->priv_data;
2997     MpegEncContext *m = &s->m;
2998     GetBitContext *gb = &m->gb;
2999     AVFrame * const frame = data;
3000     int ret;
3001
3002     ret = ff_get_buffer(avctx, frame, 0);
3003     if (ret < 0)
3004         return ret;
3005
3006     ret = init_get_bits8(gb, avpkt->data, avpkt->size);
3007     if (ret < 0)
3008         return ret;
3009
3010     s->flags = get_bits(gb, 8);
3011     m->intra_dc_precision = s->flags & 3;
3012     m->q_scale_type = !!(s->flags & 0x40);
3013     m->intra_vlc_format = !!(s->flags & 0x20);
3014     m->alternate_scan = !!(s->flags & 0x10);
3015
3016     if (s->flags & 0x10) {
3017         ff_init_scantable(m->idsp.idct_permutation, &m->inter_scantable, ff_alternate_vertical_scan);
3018         ff_init_scantable(m->idsp.idct_permutation, &m->intra_scantable, ff_alternate_vertical_scan);
3019     } else {
3020         ff_init_scantable(m->idsp.idct_permutation, &m->inter_scantable, ff_zigzag_direct);
3021         ff_init_scantable(m->idsp.idct_permutation, &m->intra_scantable, ff_zigzag_direct);
3022     }
3023
3024     m->last_dc[0] = m->last_dc[1] = m->last_dc[2] = 1 << (7 + (s->flags & 3));
3025     m->qscale = 1;
3026
3027     for (int y = 0; y < avctx->height; y += 16) {
3028         int intraquant;
3029
3030         for (int x = 0; x < avctx->width; x += 16) {
3031             if (x || y) {
3032                 if (!get_bits1(gb))
3033                     return AVERROR_INVALIDDATA;
3034             }
3035             if (get_bits1(gb)) {
3036                 intraquant = 0;
3037             } else {
3038                 if (!get_bits1(gb))
3039                     return AVERROR_INVALIDDATA;
3040                 intraquant = 1;
3041             }
3042
3043             if (s->flags & 4)
3044                 skip_bits1(gb);
3045
3046             if (intraquant)
3047                 m->qscale = mpeg_get_qscale(m);
3048
3049             memset(s->block, 0, sizeof(s->block));
3050
3051             for (int n = 0; n < 6; n++) {
3052                 if (s->flags & 0x80) {
3053                     ret = ff_mpeg1_decode_block_intra(&m->gb,
3054                                                       m->intra_matrix,
3055                                                       m->intra_scantable.permutated,
3056                                                       m->last_dc, s->block[n],
3057                                                       n, m->qscale);
3058                     if (ret >= 0)
3059                         m->block_last_index[n] = ret;
3060                 } else {
3061                     ret = mpeg2_decode_block_intra(m, s->block[n], n);
3062                 }
3063
3064                 if (ret < 0)
3065                     return ret;
3066             }
3067
3068             m->idsp.idct_put(frame->data[0] + y * frame->linesize[0] + x,
3069                              frame->linesize[0], s->block[0]);
3070             m->idsp.idct_put(frame->data[0] + y * frame->linesize[0] + x + 8,
3071                              frame->linesize[0], s->block[1]);
3072             m->idsp.idct_put(frame->data[0] + (y + 8) * frame->linesize[0] + x,
3073                              frame->linesize[0], s->block[2]);
3074             m->idsp.idct_put(frame->data[0] + (y + 8) * frame->linesize[0] + x + 8,
3075                              frame->linesize[0], s->block[3]);
3076             m->idsp.idct_put(frame->data[1] + (y >> 1) * frame->linesize[1] + (x >> 1),
3077                              frame->linesize[1], s->block[4]);
3078             m->idsp.idct_put(frame->data[2] + (y >> 1) * frame->linesize[2] + (x >> 1),
3079                              frame->linesize[2], s->block[5]);
3080         }
3081     }
3082
3083     align_get_bits(gb);
3084     if (get_bits_left(gb) != 32)
3085         return AVERROR_INVALIDDATA;
3086
3087     frame->pict_type = AV_PICTURE_TYPE_I;
3088     frame->key_frame = 1;
3089     *got_frame = 1;
3090
3091     return avpkt->size;
3092 }
3093
3094 static av_cold int ipu_decode_init(AVCodecContext *avctx)
3095 {
3096     IPUContext *s = avctx->priv_data;
3097     MpegEncContext *m = &s->m;
3098
3099     avctx->pix_fmt = AV_PIX_FMT_YUV420P;
3100
3101     ff_mpv_decode_defaults(m);
3102     ff_mpv_decode_init(m, avctx);
3103     s->m.avctx = avctx;
3104     ff_mpv_idct_init(m);
3105     ff_mpeg12_common_init(m);
3106     ff_mpeg12_init_vlcs();
3107
3108     for (int i = 0; i < 64; i++) {
3109         int j = m->idsp.idct_permutation[i];
3110         int v = ff_mpeg1_default_intra_matrix[i];
3111         m->intra_matrix[j]        = v;
3112         m->chroma_intra_matrix[j] = v;
3113     }
3114
3115     for (int i = 0; i < 64; i++) {
3116         int j = m->idsp.idct_permutation[i];
3117         int v = ff_mpeg1_default_non_intra_matrix[i];
3118         m->inter_matrix[j]        = v;
3119         m->chroma_inter_matrix[j] = v;
3120     }
3121
3122     return 0;
3123 }
3124
3125 static av_cold int ipu_decode_end(AVCodecContext *avctx)
3126 {
3127     IPUContext *s = avctx->priv_data;
3128
3129     ff_mpv_common_end(&s->m);
3130
3131     return 0;
3132 }
3133
3134 AVCodec ff_ipu_decoder = {
3135     .name           = "ipu",
3136     .long_name      = NULL_IF_CONFIG_SMALL("IPU Video"),
3137     .type           = AVMEDIA_TYPE_VIDEO,
3138     .id             = AV_CODEC_ID_IPU,
3139     .priv_data_size = sizeof(IPUContext),
3140     .init           = ipu_decode_init,
3141     .decode         = ipu_decode_frame,
3142     .close          = ipu_decode_end,
3143     .capabilities   = AV_CODEC_CAP_DR1,
3144     .caps_internal  = FF_CODEC_CAP_INIT_CLEANUP,
3145 };