git.sesse.net Git - ffmpeg/blob - libavcodec/mpegvideo.c

   1 /*
   2  * The simplest mpeg encoder (well, it was the simplest!)
   3  * Copyright (c) 2000,2001 Fabrice Bellard
   4  * Copyright (c) 2002-2004 Michael Niedermayer <michaelni@gmx.at>
   5  *
   6  * 4MV & hq & B-frame encoding stuff by Michael Niedermayer <michaelni@gmx.at>
   7  *
   8  * This file is part of FFmpeg.
   9  *
  10  * FFmpeg is free software; you can redistribute it and/or
  11  * modify it under the terms of the GNU Lesser General Public
  12  * License as published by the Free Software Foundation; either
  13  * version 2.1 of the License, or (at your option) any later version.
  14  *
  15  * FFmpeg is distributed in the hope that it will be useful,
  16  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  17  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  18  * Lesser General Public License for more details.
  19  *
  20  * You should have received a copy of the GNU Lesser General Public
  21  * License along with FFmpeg; if not, write to the Free Software
  22  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
  23  */
  24
  25 /**
  26  * @file
  27  * The simplest mpeg encoder (well, it was the simplest!).
  28  */
  29
  30 #include "libavutil/attributes.h"
  31 #include "libavutil/avassert.h"
  32 #include "libavutil/imgutils.h"
  33 #include "libavutil/internal.h"
  34 #include "libavutil/motion_vector.h"
  35 #include "libavutil/timer.h"
  36 #include "avcodec.h"
  37 #include "blockdsp.h"
  38 #include "h264chroma.h"
  39 #include "idctdsp.h"
  40 #include "internal.h"
  41 #include "mathops.h"
  42 #include "mpeg_er.h"
  43 #include "mpegutils.h"
  44 #include "mpegvideo.h"
  45 #include "mpegvideodata.h"
  46 #include "mjpegenc.h"
  47 #include "msmpeg4.h"
  48 #include "qpeldsp.h"
  49 #include "thread.h"
  50 #include "wmv2.h"
  51 #include <limits.h>
  52
  53 static void dct_unquantize_mpeg1_intra_c(MpegEncContext *s,
  54                                    int16_t *block, int n, int qscale)
  55 {
  56     int i, level, nCoeffs;
  57     const uint16_t *quant_matrix;
  58
  59     nCoeffs= s->block_last_index[n];
  60
  61     block[0] *= n < 4 ? s->y_dc_scale : s->c_dc_scale;
  62     /* XXX: only MPEG-1 */
  63     quant_matrix = s->intra_matrix;
  64     for(i=1;i<=nCoeffs;i++) {
  65         int j= s->intra_scantable.permutated[i];
  66         level = block[j];
  67         if (level) {
  68             if (level < 0) {
  69                 level = -level;
  70                 level = (int)(level * qscale * quant_matrix[j]) >> 3;
  71                 level = (level - 1) | 1;
  72                 level = -level;
  73             } else {
  74                 level = (int)(level * qscale * quant_matrix[j]) >> 3;
  75                 level = (level - 1) | 1;
  76             }
  77             block[j] = level;
  78         }
  79     }
  80 }
  81
  82 static void dct_unquantize_mpeg1_inter_c(MpegEncContext *s,
  83                                    int16_t *block, int n, int qscale)
  84 {
  85     int i, level, nCoeffs;
  86     const uint16_t *quant_matrix;
  87
  88     nCoeffs= s->block_last_index[n];
  89
  90     quant_matrix = s->inter_matrix;
  91     for(i=0; i<=nCoeffs; i++) {
  92         int j= s->intra_scantable.permutated[i];
  93         level = block[j];
  94         if (level) {
  95             if (level < 0) {
  96                 level = -level;
  97                 level = (((level << 1) + 1) * qscale *
  98                          ((int) (quant_matrix[j]))) >> 4;
  99                 level = (level - 1) | 1;
 100                 level = -level;
 101             } else {
 102                 level = (((level << 1) + 1) * qscale *
 103                          ((int) (quant_matrix[j]))) >> 4;
 104                 level = (level - 1) | 1;
 105             }
 106             block[j] = level;
 107         }
 108     }
 109 }
 110
 111 static void dct_unquantize_mpeg2_intra_c(MpegEncContext *s,
 112                                    int16_t *block, int n, int qscale)
 113 {
 114     int i, level, nCoeffs;
 115     const uint16_t *quant_matrix;
 116
 117     if (s->q_scale_type) qscale = ff_mpeg2_non_linear_qscale[qscale];
 118     else                 qscale <<= 1;
 119
 120     if(s->alternate_scan) nCoeffs= 63;
 121     else nCoeffs= s->block_last_index[n];
 122
 123     block[0] *= n < 4 ? s->y_dc_scale : s->c_dc_scale;
 124     quant_matrix = s->intra_matrix;
 125     for(i=1;i<=nCoeffs;i++) {
 126         int j= s->intra_scantable.permutated[i];
 127         level = block[j];
 128         if (level) {
 129             if (level < 0) {
 130                 level = -level;
 131                 level = (int)(level * qscale * quant_matrix[j]) >> 4;
 132                 level = -level;
 133             } else {
 134                 level = (int)(level * qscale * quant_matrix[j]) >> 4;
 135             }
 136             block[j] = level;
 137         }
 138     }
 139 }
 140
 141 static void dct_unquantize_mpeg2_intra_bitexact(MpegEncContext *s,
 142                                    int16_t *block, int n, int qscale)
 143 {
 144     int i, level, nCoeffs;
 145     const uint16_t *quant_matrix;
 146     int sum=-1;
 147
 148     if (s->q_scale_type) qscale = ff_mpeg2_non_linear_qscale[qscale];
 149     else                 qscale <<= 1;
 150
 151     if(s->alternate_scan) nCoeffs= 63;
 152     else nCoeffs= s->block_last_index[n];
 153
 154     block[0] *= n < 4 ? s->y_dc_scale : s->c_dc_scale;
 155     sum += block[0];
 156     quant_matrix = s->intra_matrix;
 157     for(i=1;i<=nCoeffs;i++) {
 158         int j= s->intra_scantable.permutated[i];
 159         level = block[j];
 160         if (level) {
 161             if (level < 0) {
 162                 level = -level;
 163                 level = (int)(level * qscale * quant_matrix[j]) >> 4;
 164                 level = -level;
 165             } else {
 166                 level = (int)(level * qscale * quant_matrix[j]) >> 4;
 167             }
 168             block[j] = level;
 169             sum+=level;
 170         }
 171     }
 172     block[63]^=sum&1;
 173 }
 174
 175 static void dct_unquantize_mpeg2_inter_c(MpegEncContext *s,
 176                                    int16_t *block, int n, int qscale)
 177 {
 178     int i, level, nCoeffs;
 179     const uint16_t *quant_matrix;
 180     int sum=-1;
 181
 182     if (s->q_scale_type) qscale = ff_mpeg2_non_linear_qscale[qscale];
 183     else                 qscale <<= 1;
 184
 185     if(s->alternate_scan) nCoeffs= 63;
 186     else nCoeffs= s->block_last_index[n];
 187
 188     quant_matrix = s->inter_matrix;
 189     for(i=0; i<=nCoeffs; i++) {
 190         int j= s->intra_scantable.permutated[i];
 191         level = block[j];
 192         if (level) {
 193             if (level < 0) {
 194                 level = -level;
 195                 level = (((level << 1) + 1) * qscale *
 196                          ((int) (quant_matrix[j]))) >> 5;
 197                 level = -level;
 198             } else {
 199                 level = (((level << 1) + 1) * qscale *
 200                          ((int) (quant_matrix[j]))) >> 5;
 201             }
 202             block[j] = level;
 203             sum+=level;
 204         }
 205     }
 206     block[63]^=sum&1;
 207 }
 208
 209 static void dct_unquantize_h263_intra_c(MpegEncContext *s,
 210                                   int16_t *block, int n, int qscale)
 211 {
 212     int i, level, qmul, qadd;
 213     int nCoeffs;
 214
 215     av_assert2(s->block_last_index[n]>=0 || s->h263_aic);
 216
 217     qmul = qscale << 1;
 218
 219     if (!s->h263_aic) {
 220         block[0] *= n < 4 ? s->y_dc_scale : s->c_dc_scale;
 221         qadd = (qscale - 1) | 1;
 222     }else{
 223         qadd = 0;
 224     }
 225     if(s->ac_pred)
 226         nCoeffs=63;
 227     else
 228         nCoeffs= s->intra_scantable.raster_end[ s->block_last_index[n] ];
 229
 230     for(i=1; i<=nCoeffs; i++) {
 231         level = block[i];
 232         if (level) {
 233             if (level < 0) {
 234                 level = level * qmul - qadd;
 235             } else {
 236                 level = level * qmul + qadd;
 237             }
 238             block[i] = level;
 239         }
 240     }
 241 }
 242
 243 static void dct_unquantize_h263_inter_c(MpegEncContext *s,
 244                                   int16_t *block, int n, int qscale)
 245 {
 246     int i, level, qmul, qadd;
 247     int nCoeffs;
 248
 249     av_assert2(s->block_last_index[n]>=0);
 250
 251     qadd = (qscale - 1) | 1;
 252     qmul = qscale << 1;
 253
 254     nCoeffs= s->inter_scantable.raster_end[ s->block_last_index[n] ];
 255
 256     for(i=0; i<=nCoeffs; i++) {
 257         level = block[i];
 258         if (level) {
 259             if (level < 0) {
 260                 level = level * qmul - qadd;
 261             } else {
 262                 level = level * qmul + qadd;
 263             }
 264             block[i] = level;
 265         }
 266     }
 267 }
 268
 269
 270 static void gray16(uint8_t *dst, const uint8_t *src, ptrdiff_t linesize, int h)
 271 {
 272     while(h--)
 273         memset(dst + h*linesize, 128, 16);
 274 }
 275
 276 static void gray8(uint8_t *dst, const uint8_t *src, ptrdiff_t linesize, int h)
 277 {
 278     while(h--)
 279         memset(dst + h*linesize, 128, 8);
 280 }
 281
 282 /* init common dct for both encoder and decoder */
 283 static av_cold int dct_init(MpegEncContext *s)
 284 {
 285     ff_blockdsp_init(&s->bdsp, s->avctx);
 286     ff_h264chroma_init(&s->h264chroma, 8); //for lowres
 287     ff_hpeldsp_init(&s->hdsp, s->avctx->flags);
 288     ff_mpegvideodsp_init(&s->mdsp);
 289     ff_videodsp_init(&s->vdsp, s->avctx->bits_per_raw_sample);
 290
 291     if (s->avctx->debug & FF_DEBUG_NOMC) {
 292         int i;
 293         for (i=0; i<4; i++) {
 294             s->hdsp.avg_pixels_tab[0][i] = gray16;
 295             s->hdsp.put_pixels_tab[0][i] = gray16;
 296             s->hdsp.put_no_rnd_pixels_tab[0][i] = gray16;
 297
 298             s->hdsp.avg_pixels_tab[1][i] = gray8;
 299             s->hdsp.put_pixels_tab[1][i] = gray8;
 300             s->hdsp.put_no_rnd_pixels_tab[1][i] = gray8;
 301         }
 302     }
 303
 304     s->dct_unquantize_h263_intra = dct_unquantize_h263_intra_c;
 305     s->dct_unquantize_h263_inter = dct_unquantize_h263_inter_c;
 306     s->dct_unquantize_mpeg1_intra = dct_unquantize_mpeg1_intra_c;
 307     s->dct_unquantize_mpeg1_inter = dct_unquantize_mpeg1_inter_c;
 308     s->dct_unquantize_mpeg2_intra = dct_unquantize_mpeg2_intra_c;
 309     if (s->avctx->flags & AV_CODEC_FLAG_BITEXACT)
 310         s->dct_unquantize_mpeg2_intra = dct_unquantize_mpeg2_intra_bitexact;
 311     s->dct_unquantize_mpeg2_inter = dct_unquantize_mpeg2_inter_c;
 312
 313     if (HAVE_INTRINSICS_NEON)
 314         ff_mpv_common_init_neon(s);
 315
 316     if (ARCH_ALPHA)
 317         ff_mpv_common_init_axp(s);
 318     if (ARCH_ARM)
 319         ff_mpv_common_init_arm(s);
 320     if (ARCH_PPC)
 321         ff_mpv_common_init_ppc(s);
 322     if (ARCH_X86)
 323         ff_mpv_common_init_x86(s);
 324     if (ARCH_MIPS)
 325         ff_mpv_common_init_mips(s);
 326
 327     return 0;
 328 }
 329
 330 av_cold void ff_mpv_idct_init(MpegEncContext *s)
 331 {
 332     ff_idctdsp_init(&s->idsp, s->avctx);
 333
 334     /* load & permutate scantables
 335      * note: only wmv uses different ones
 336      */
 337     if (s->alternate_scan) {
 338         ff_init_scantable(s->idsp.idct_permutation, &s->inter_scantable, ff_alternate_vertical_scan);
 339         ff_init_scantable(s->idsp.idct_permutation, &s->intra_scantable, ff_alternate_vertical_scan);
 340     } else {
 341         ff_init_scantable(s->idsp.idct_permutation, &s->inter_scantable, ff_zigzag_direct);
 342         ff_init_scantable(s->idsp.idct_permutation, &s->intra_scantable, ff_zigzag_direct);
 343     }
 344     ff_init_scantable(s->idsp.idct_permutation, &s->intra_h_scantable, ff_alternate_horizontal_scan);
 345     ff_init_scantable(s->idsp.idct_permutation, &s->intra_v_scantable, ff_alternate_vertical_scan);
 346 }
 347
 348 static int alloc_picture(MpegEncContext *s, Picture *pic, int shared)
 349 {
 350     return ff_alloc_picture(s->avctx, pic, &s->me, &s->sc, shared, 0,
 351                             s->chroma_x_shift, s->chroma_y_shift, s->out_format,
 352                             s->mb_stride, s->mb_width, s->mb_height, s->b8_stride,
 353                             &s->linesize, &s->uvlinesize);
 354 }
 355
 356 static int init_duplicate_context(MpegEncContext *s)
 357 {
 358     int y_size = s->b8_stride * (2 * s->mb_height + 1);
 359     int c_size = s->mb_stride * (s->mb_height + 1);
 360     int yc_size = y_size + 2 * c_size;
 361     int i;
 362
 363     if (s->mb_height & 1)
 364         yc_size += 2*s->b8_stride + 2*s->mb_stride;
 365
 366     s->sc.edge_emu_buffer =
 367     s->me.scratchpad   =
 368     s->me.temp         =
 369     s->sc.rd_scratchpad   =
 370     s->sc.b_scratchpad    =
 371     s->sc.obmc_scratchpad = NULL;
 372
 373     if (s->encoding) {
 374         FF_ALLOCZ_OR_GOTO(s->avctx, s->me.map,
 375                           ME_MAP_SIZE * sizeof(uint32_t), fail)
 376         FF_ALLOCZ_OR_GOTO(s->avctx, s->me.score_map,
 377                           ME_MAP_SIZE * sizeof(uint32_t), fail)
 378         if (s->noise_reduction) {
 379             FF_ALLOCZ_OR_GOTO(s->avctx, s->dct_error_sum,
 380                               2 * 64 * sizeof(int), fail)
 381         }
 382     }
 383     FF_ALLOCZ_OR_GOTO(s->avctx, s->blocks, 64 * 12 * 2 * sizeof(int16_t), fail)
 384     s->block = s->blocks[0];
 385
 386     for (i = 0; i < 12; i++) {
 387         s->pblocks[i] = &s->block[i];
 388     }
 389     if (s->avctx->codec_tag == AV_RL32("VCR2")) {
 390         // exchange uv
 391         FFSWAP(void *, s->pblocks[4], s->pblocks[5]);
 392     }
 393
 394     if (s->out_format == FMT_H263) {
 395         /* ac values */
 396         FF_ALLOCZ_OR_GOTO(s->avctx, s->ac_val_base,
 397                           yc_size * sizeof(int16_t) * 16, fail);
 398         s->ac_val[0] = s->ac_val_base + s->b8_stride + 1;
 399         s->ac_val[1] = s->ac_val_base + y_size + s->mb_stride + 1;
 400         s->ac_val[2] = s->ac_val[1] + c_size;
 401     }
 402
 403     return 0;
 404 fail:
 405     return -1; // free() through ff_mpv_common_end()
 406 }
 407
 408 static void free_duplicate_context(MpegEncContext *s)
 409 {
 410     if (!s)
 411         return;
 412
 413     av_freep(&s->sc.edge_emu_buffer);
 414     av_freep(&s->me.scratchpad);
 415     s->me.temp =
 416     s->sc.rd_scratchpad =
 417     s->sc.b_scratchpad =
 418     s->sc.obmc_scratchpad = NULL;
 419
 420     av_freep(&s->dct_error_sum);
 421     av_freep(&s->me.map);
 422     av_freep(&s->me.score_map);
 423     av_freep(&s->blocks);
 424     av_freep(&s->ac_val_base);
 425     s->block = NULL;
 426 }
 427
 428 static void backup_duplicate_context(MpegEncContext *bak, MpegEncContext *src)
 429 {
 430 #define COPY(a) bak->a = src->a
 431     COPY(sc.edge_emu_buffer);
 432     COPY(me.scratchpad);
 433     COPY(me.temp);
 434     COPY(sc.rd_scratchpad);
 435     COPY(sc.b_scratchpad);
 436     COPY(sc.obmc_scratchpad);
 437     COPY(me.map);
 438     COPY(me.score_map);
 439     COPY(blocks);
 440     COPY(block);
 441     COPY(start_mb_y);
 442     COPY(end_mb_y);
 443     COPY(me.map_generation);
 444     COPY(pb);
 445     COPY(dct_error_sum);
 446     COPY(dct_count[0]);
 447     COPY(dct_count[1]);
 448     COPY(ac_val_base);
 449     COPY(ac_val[0]);
 450     COPY(ac_val[1]);
 451     COPY(ac_val[2]);
 452 #undef COPY
 453 }
 454
 455 int ff_update_duplicate_context(MpegEncContext *dst, MpegEncContext *src)
 456 {
 457     MpegEncContext bak;
 458     int i, ret;
 459     // FIXME copy only needed parts
 460     // START_TIMER
 461     backup_duplicate_context(&bak, dst);
 462     memcpy(dst, src, sizeof(MpegEncContext));
 463     backup_duplicate_context(dst, &bak);
 464     for (i = 0; i < 12; i++) {
 465         dst->pblocks[i] = &dst->block[i];
 466     }
 467     if (dst->avctx->codec_tag == AV_RL32("VCR2")) {
 468         // exchange uv
 469         FFSWAP(void *, dst->pblocks[4], dst->pblocks[5]);
 470     }
 471     if (!dst->sc.edge_emu_buffer &&
 472         (ret = ff_mpeg_framesize_alloc(dst->avctx, &dst->me,
 473                                        &dst->sc, dst->linesize)) < 0) {
 474         av_log(dst->avctx, AV_LOG_ERROR, "failed to allocate context "
 475                "scratch buffers.\n");
 476         return ret;
 477     }
 478     // STOP_TIMER("update_duplicate_context")
 479     // about 10k cycles / 0.01 sec for  1000frames on 1ghz with 2 threads
 480     return 0;
 481 }
 482
 483 int ff_mpeg_update_thread_context(AVCodecContext *dst,
 484                                   const AVCodecContext *src)
 485 {
 486     int i, ret;
 487     MpegEncContext *s = dst->priv_data, *s1 = src->priv_data;
 488
 489     if (dst == src)
 490         return 0;
 491
 492     av_assert0(s != s1);
 493
 494     // FIXME can parameters change on I-frames?
 495     // in that case dst may need a reinit
 496     if (!s->context_initialized) {
 497         int err;
 498         memcpy(s, s1, sizeof(MpegEncContext));
 499
 500         s->avctx                 = dst;
 501         s->bitstream_buffer      = NULL;
 502         s->bitstream_buffer_size = s->allocated_bitstream_buffer_size = 0;
 503
 504         if (s1->context_initialized){
 505 //             s->picture_range_start  += MAX_PICTURE_COUNT;
 506 //             s->picture_range_end    += MAX_PICTURE_COUNT;
 507             ff_mpv_idct_init(s);
 508             if((err = ff_mpv_common_init(s)) < 0){
 509                 memset(s, 0, sizeof(MpegEncContext));
 510                 s->avctx = dst;
 511                 return err;
 512             }
 513         }
 514     }
 515
 516     if (s->height != s1->height || s->width != s1->width || s->context_reinit) {
 517         s->context_reinit = 0;
 518         s->height = s1->height;
 519         s->width  = s1->width;
 520         if ((ret = ff_mpv_common_frame_size_change(s)) < 0)
 521             return ret;
 522     }
 523
 524     s->avctx->coded_height  = s1->avctx->coded_height;
 525     s->avctx->coded_width   = s1->avctx->coded_width;
 526     s->avctx->width         = s1->avctx->width;
 527     s->avctx->height        = s1->avctx->height;
 528
 529     s->coded_picture_number = s1->coded_picture_number;
 530     s->picture_number       = s1->picture_number;
 531
 532     av_assert0(!s->picture || s->picture != s1->picture);
 533     if(s->picture)
 534     for (i = 0; i < MAX_PICTURE_COUNT; i++) {
 535         ff_mpeg_unref_picture(s->avctx, &s->picture[i]);
 536         if (s1->picture && s1->picture[i].f->buf[0] &&
 537             (ret = ff_mpeg_ref_picture(s->avctx, &s->picture[i], &s1->picture[i])) < 0)
 538             return ret;
 539     }
 540
 541 #define UPDATE_PICTURE(pic)\
 542 do {\
 543     ff_mpeg_unref_picture(s->avctx, &s->pic);\
 544     if (s1->pic.f && s1->pic.f->buf[0])\
 545         ret = ff_mpeg_ref_picture(s->avctx, &s->pic, &s1->pic);\
 546     else\
 547         ret = ff_update_picture_tables(&s->pic, &s1->pic);\
 548     if (ret < 0)\
 549         return ret;\
 550 } while (0)
 551
 552     UPDATE_PICTURE(current_picture);
 553     UPDATE_PICTURE(last_picture);
 554     UPDATE_PICTURE(next_picture);
 555
 556 #define REBASE_PICTURE(pic, new_ctx, old_ctx)                                 \
 557     ((pic && pic >= old_ctx->picture &&                                       \
 558       pic < old_ctx->picture + MAX_PICTURE_COUNT) ?                           \
 559         &new_ctx->picture[pic - old_ctx->picture] : NULL)
 560
 561     s->last_picture_ptr    = REBASE_PICTURE(s1->last_picture_ptr,    s, s1);
 562     s->current_picture_ptr = REBASE_PICTURE(s1->current_picture_ptr, s, s1);
 563     s->next_picture_ptr    = REBASE_PICTURE(s1->next_picture_ptr,    s, s1);
 564
 565     // Error/bug resilience
 566     s->next_p_frame_damaged = s1->next_p_frame_damaged;
 567     s->workaround_bugs      = s1->workaround_bugs;
 568     s->padding_bug_score    = s1->padding_bug_score;
 569
 570     // MPEG-4 timing info
 571     memcpy(&s->last_time_base, &s1->last_time_base,
 572            (char *) &s1->pb_field_time + sizeof(s1->pb_field_time) -
 573            (char *) &s1->last_time_base);
 574
 575     // B-frame info
 576     s->max_b_frames = s1->max_b_frames;
 577     s->low_delay    = s1->low_delay;
 578     s->droppable    = s1->droppable;
 579
 580     // DivX handling (doesn't work)
 581     s->divx_packed  = s1->divx_packed;
 582
 583     if (s1->bitstream_buffer) {
 584         if (s1->bitstream_buffer_size +
 585             AV_INPUT_BUFFER_PADDING_SIZE > s->allocated_bitstream_buffer_size) {
 586             av_fast_malloc(&s->bitstream_buffer,
 587                            &s->allocated_bitstream_buffer_size,
 588                            s1->allocated_bitstream_buffer_size);
 589             if (!s->bitstream_buffer) {
 590                 s->bitstream_buffer_size = 0;
 591                 return AVERROR(ENOMEM);
 592             }
 593         }
 594         s->bitstream_buffer_size = s1->bitstream_buffer_size;
 595         memcpy(s->bitstream_buffer, s1->bitstream_buffer,
 596                s1->bitstream_buffer_size);
 597         memset(s->bitstream_buffer + s->bitstream_buffer_size, 0,
 598                AV_INPUT_BUFFER_PADDING_SIZE);
 599     }
 600
 601     // linesize-dependent scratch buffer allocation
 602     if (!s->sc.edge_emu_buffer)
 603         if (s1->linesize) {
 604             if (ff_mpeg_framesize_alloc(s->avctx, &s->me,
 605                                         &s->sc, s1->linesize) < 0) {
 606                 av_log(s->avctx, AV_LOG_ERROR, "Failed to allocate context "
 607                        "scratch buffers.\n");
 608                 return AVERROR(ENOMEM);
 609             }
 610         } else {
 611             av_log(s->avctx, AV_LOG_ERROR, "Context scratch buffers could not "
 612                    "be allocated due to unknown size.\n");
 613         }
 614
 615     // MPEG-2/interlacing info
 616     memcpy(&s->progressive_sequence, &s1->progressive_sequence,
 617            (char *) &s1->rtp_mode - (char *) &s1->progressive_sequence);
 618
 619     if (!s1->first_field) {
 620         s->last_pict_type = s1->pict_type;
 621         if (s1->current_picture_ptr)
 622             s->last_lambda_for[s1->pict_type] = s1->current_picture_ptr->f->quality;
 623     }
 624
 625     return 0;
 626 }
 627
 628 /**
 629  * Set the given MpegEncContext to common defaults
 630  * (same for encoding and decoding).
 631  * The changed fields will not depend upon the
 632  * prior state of the MpegEncContext.
 633  */
 634 void ff_mpv_common_defaults(MpegEncContext *s)
 635 {
 636     s->y_dc_scale_table      =
 637     s->c_dc_scale_table      = ff_mpeg1_dc_scale_table;
 638     s->chroma_qscale_table   = ff_default_chroma_qscale_table;
 639     s->progressive_frame     = 1;
 640     s->progressive_sequence  = 1;
 641     s->picture_structure     = PICT_FRAME;
 642
 643     s->coded_picture_number  = 0;
 644     s->picture_number        = 0;
 645
 646     s->f_code                = 1;
 647     s->b_code                = 1;
 648
 649     s->slice_context_count   = 1;
 650 }
 651
 652 /**
 653  * Set the given MpegEncContext to defaults for decoding.
 654  * the changed fields will not depend upon
 655  * the prior state of the MpegEncContext.
 656  */
 657 void ff_mpv_decode_defaults(MpegEncContext *s)
 658 {
 659     ff_mpv_common_defaults(s);
 660 }
 661
 662 void ff_mpv_decode_init(MpegEncContext *s, AVCodecContext *avctx)
 663 {
 664     s->avctx           = avctx;
 665     s->width           = avctx->coded_width;
 666     s->height          = avctx->coded_height;
 667     s->codec_id        = avctx->codec->id;
 668     s->workaround_bugs = avctx->workaround_bugs;
 669
 670     /* convert fourcc to upper case */
 671     s->codec_tag          = avpriv_toupper4(avctx->codec_tag);
 672 }
 673
 674 /**
 675  * Initialize and allocates MpegEncContext fields dependent on the resolution.
 676  */
 677 static int init_context_frame(MpegEncContext *s)
 678 {
 679     int y_size, c_size, yc_size, i, mb_array_size, mv_table_size, x, y;
 680
 681     s->mb_width   = (s->width + 15) / 16;
 682     s->mb_stride  = s->mb_width + 1;
 683     s->b8_stride  = s->mb_width * 2 + 1;
 684     mb_array_size = s->mb_height * s->mb_stride;
 685     mv_table_size = (s->mb_height + 2) * s->mb_stride + 1;
 686
 687     /* set default edge pos, will be overridden
 688      * in decode_header if needed */
 689     s->h_edge_pos = s->mb_width * 16;
 690     s->v_edge_pos = s->mb_height * 16;
 691
 692     s->mb_num     = s->mb_width * s->mb_height;
 693
 694     s->block_wrap[0] =
 695     s->block_wrap[1] =
 696     s->block_wrap[2] =
 697     s->block_wrap[3] = s->b8_stride;
 698     s->block_wrap[4] =
 699     s->block_wrap[5] = s->mb_stride;
 700
 701     y_size  = s->b8_stride * (2 * s->mb_height + 1);
 702     c_size  = s->mb_stride * (s->mb_height + 1);
 703     yc_size = y_size + 2   * c_size;
 704
 705     if (s->mb_height & 1)
 706         yc_size += 2*s->b8_stride + 2*s->mb_stride;
 707
 708     FF_ALLOCZ_OR_GOTO(s->avctx, s->mb_index2xy, (s->mb_num + 1) * sizeof(int),
 709                       fail); // error resilience code looks cleaner with this
 710     for (y = 0; y < s->mb_height; y++)
 711         for (x = 0; x < s->mb_width; x++)
 712             s->mb_index2xy[x + y * s->mb_width] = x + y * s->mb_stride;
 713
 714     s->mb_index2xy[s->mb_height * s->mb_width] = (s->mb_height - 1) * s->mb_stride + s->mb_width; // FIXME really needed?
 715
 716     if (s->encoding) {
 717         /* Allocate MV tables */
 718         FF_ALLOCZ_OR_GOTO(s->avctx, s->p_mv_table_base,                 mv_table_size * 2 * sizeof(int16_t), fail)
 719         FF_ALLOCZ_OR_GOTO(s->avctx, s->b_forw_mv_table_base,            mv_table_size * 2 * sizeof(int16_t), fail)
 720         FF_ALLOCZ_OR_GOTO(s->avctx, s->b_back_mv_table_base,            mv_table_size * 2 * sizeof(int16_t), fail)
 721         FF_ALLOCZ_OR_GOTO(s->avctx, s->b_bidir_forw_mv_table_base,      mv_table_size * 2 * sizeof(int16_t), fail)
 722         FF_ALLOCZ_OR_GOTO(s->avctx, s->b_bidir_back_mv_table_base,      mv_table_size * 2 * sizeof(int16_t), fail)
 723         FF_ALLOCZ_OR_GOTO(s->avctx, s->b_direct_mv_table_base,          mv_table_size * 2 * sizeof(int16_t), fail)
 724         s->p_mv_table            = s->p_mv_table_base + s->mb_stride + 1;
 725         s->b_forw_mv_table       = s->b_forw_mv_table_base + s->mb_stride + 1;
 726         s->b_back_mv_table       = s->b_back_mv_table_base + s->mb_stride + 1;
 727         s->b_bidir_forw_mv_table = s->b_bidir_forw_mv_table_base + s->mb_stride + 1;
 728         s->b_bidir_back_mv_table = s->b_bidir_back_mv_table_base + s->mb_stride + 1;
 729         s->b_direct_mv_table     = s->b_direct_mv_table_base + s->mb_stride + 1;
 730
 731         /* Allocate MB type table */
 732         FF_ALLOCZ_OR_GOTO(s->avctx, s->mb_type, mb_array_size * sizeof(uint16_t), fail) // needed for encoding
 733
 734         FF_ALLOCZ_OR_GOTO(s->avctx, s->lambda_table, mb_array_size * sizeof(int), fail)
 735
 736         FF_ALLOC_OR_GOTO(s->avctx, s->cplx_tab,
 737                          mb_array_size * sizeof(float), fail);
 738         FF_ALLOC_OR_GOTO(s->avctx, s->bits_tab,
 739                          mb_array_size * sizeof(float), fail);
 740
 741     }
 742
 743     if (s->codec_id == AV_CODEC_ID_MPEG4 ||
 744         (s->avctx->flags & AV_CODEC_FLAG_INTERLACED_ME)) {
 745         /* interlaced direct mode decoding tables */
 746         for (i = 0; i < 2; i++) {
 747             int j, k;
 748             for (j = 0; j < 2; j++) {
 749                 for (k = 0; k < 2; k++) {
 750                     FF_ALLOCZ_OR_GOTO(s->avctx,
 751                                       s->b_field_mv_table_base[i][j][k],
 752                                       mv_table_size * 2 * sizeof(int16_t),
 753                                       fail);
 754                     s->b_field_mv_table[i][j][k] = s->b_field_mv_table_base[i][j][k] +
 755                                                    s->mb_stride + 1;
 756                 }
 757                 FF_ALLOCZ_OR_GOTO(s->avctx, s->b_field_select_table [i][j], mb_array_size * 2 * sizeof(uint8_t), fail)
 758                 FF_ALLOCZ_OR_GOTO(s->avctx, s->p_field_mv_table_base[i][j], mv_table_size * 2 * sizeof(int16_t), fail)
 759                 s->p_field_mv_table[i][j] = s->p_field_mv_table_base[i][j] + s->mb_stride + 1;
 760             }
 761             FF_ALLOCZ_OR_GOTO(s->avctx, s->p_field_select_table[i], mb_array_size * 2 * sizeof(uint8_t), fail)
 762         }
 763     }
 764     if (s->out_format == FMT_H263) {
 765         /* cbp values */
 766         FF_ALLOCZ_OR_GOTO(s->avctx, s->coded_block_base, y_size + (s->mb_height&1)*2*s->b8_stride, fail);
 767         s->coded_block = s->coded_block_base + s->b8_stride + 1;
 768
 769         /* cbp, ac_pred, pred_dir */
 770         FF_ALLOCZ_OR_GOTO(s->avctx, s->cbp_table     , mb_array_size * sizeof(uint8_t), fail);
 771         FF_ALLOCZ_OR_GOTO(s->avctx, s->pred_dir_table, mb_array_size * sizeof(uint8_t), fail);
 772     }
 773
 774     if (s->h263_pred || s->h263_plus || !s->encoding) {
 775         /* dc values */
 776         // MN: we need these for error resilience of intra-frames
 777         FF_ALLOCZ_OR_GOTO(s->avctx, s->dc_val_base, yc_size * sizeof(int16_t), fail);
 778         s->dc_val[0] = s->dc_val_base + s->b8_stride + 1;
 779         s->dc_val[1] = s->dc_val_base + y_size + s->mb_stride + 1;
 780         s->dc_val[2] = s->dc_val[1] + c_size;
 781         for (i = 0; i < yc_size; i++)
 782             s->dc_val_base[i] = 1024;
 783     }
 784
 785     /* which mb is an intra block */
 786     FF_ALLOCZ_OR_GOTO(s->avctx, s->mbintra_table, mb_array_size, fail);
 787     memset(s->mbintra_table, 1, mb_array_size);
 788
 789     /* init macroblock skip table */
 790     FF_ALLOCZ_OR_GOTO(s->avctx, s->mbskip_table, mb_array_size + 2, fail);
 791     // Note the + 1 is for a quicker MPEG-4 slice_end detection
 792
 793     return ff_mpeg_er_init(s);
 794 fail:
 795     return AVERROR(ENOMEM);
 796 }
 797
 798 static void clear_context(MpegEncContext *s)
 799 {
 800     int i, j, k;
 801
 802     memset(&s->next_picture, 0, sizeof(s->next_picture));
 803     memset(&s->last_picture, 0, sizeof(s->last_picture));
 804     memset(&s->current_picture, 0, sizeof(s->current_picture));
 805     memset(&s->new_picture, 0, sizeof(s->new_picture));
 806
 807     memset(s->thread_context, 0, sizeof(s->thread_context));
 808
 809     s->me.map = NULL;
 810     s->me.score_map = NULL;
 811     s->dct_error_sum = NULL;
 812     s->block = NULL;
 813     s->blocks = NULL;
 814     memset(s->pblocks, 0, sizeof(s->pblocks));
 815     s->ac_val_base = NULL;
 816     s->ac_val[0] =
 817     s->ac_val[1] =
 818     s->ac_val[2] =NULL;
 819     s->sc.edge_emu_buffer = NULL;
 820     s->me.scratchpad = NULL;
 821     s->me.temp =
 822     s->sc.rd_scratchpad =
 823     s->sc.b_scratchpad =
 824     s->sc.obmc_scratchpad = NULL;
 825
 826
 827     s->bitstream_buffer = NULL;
 828     s->allocated_bitstream_buffer_size = 0;
 829     s->picture          = NULL;
 830     s->mb_type          = NULL;
 831     s->p_mv_table_base  = NULL;
 832     s->b_forw_mv_table_base = NULL;
 833     s->b_back_mv_table_base = NULL;
 834     s->b_bidir_forw_mv_table_base = NULL;
 835     s->b_bidir_back_mv_table_base = NULL;
 836     s->b_direct_mv_table_base = NULL;
 837     s->p_mv_table            = NULL;
 838     s->b_forw_mv_table       = NULL;
 839     s->b_back_mv_table       = NULL;
 840     s->b_bidir_forw_mv_table = NULL;
 841     s->b_bidir_back_mv_table = NULL;
 842     s->b_direct_mv_table     = NULL;
 843     for (i = 0; i < 2; i++) {
 844         for (j = 0; j < 2; j++) {
 845             for (k = 0; k < 2; k++) {
 846                 s->b_field_mv_table_base[i][j][k] = NULL;
 847                 s->b_field_mv_table[i][j][k] = NULL;
 848             }
 849             s->b_field_select_table[i][j] = NULL;
 850             s->p_field_mv_table_base[i][j] = NULL;
 851             s->p_field_mv_table[i][j] = NULL;
 852         }
 853         s->p_field_select_table[i] = NULL;
 854     }
 855
 856     s->dc_val_base = NULL;
 857     s->coded_block_base = NULL;
 858     s->mbintra_table = NULL;
 859     s->cbp_table = NULL;
 860     s->pred_dir_table = NULL;
 861
 862     s->mbskip_table = NULL;
 863
 864     s->er.error_status_table = NULL;
 865     s->er.er_temp_buffer = NULL;
 866     s->mb_index2xy = NULL;
 867     s->lambda_table = NULL;
 868
 869     s->cplx_tab = NULL;
 870     s->bits_tab = NULL;
 871 }
 872
 873 /**
 874  * init common structure for both encoder and decoder.
 875  * this assumes that some variables like width/height are already set
 876  */
 877 av_cold int ff_mpv_common_init(MpegEncContext *s)
 878 {
 879     int i, ret;
 880     int nb_slices = (HAVE_THREADS &&
 881                      s->avctx->active_thread_type & FF_THREAD_SLICE) ?
 882                     s->avctx->thread_count : 1;
 883
 884     clear_context(s);
 885
 886     if (s->encoding && s->avctx->slices)
 887         nb_slices = s->avctx->slices;
 888
 889     if (s->codec_id == AV_CODEC_ID_MPEG2VIDEO && !s->progressive_sequence)
 890         s->mb_height = (s->height + 31) / 32 * 2;
 891     else
 892         s->mb_height = (s->height + 15) / 16;
 893
 894     if (s->avctx->pix_fmt == AV_PIX_FMT_NONE) {
 895         av_log(s->avctx, AV_LOG_ERROR,
 896                "decoding to AV_PIX_FMT_NONE is not supported.\n");
 897         return -1;
 898     }
 899
 900     if (nb_slices > MAX_THREADS || (nb_slices > s->mb_height && s->mb_height)) {
 901         int max_slices;
 902         if (s->mb_height)
 903             max_slices = FFMIN(MAX_THREADS, s->mb_height);
 904         else
 905             max_slices = MAX_THREADS;
 906         av_log(s->avctx, AV_LOG_WARNING, "too many threads/slices (%d),"
 907                " reducing to %d\n", nb_slices, max_slices);
 908         nb_slices = max_slices;
 909     }
 910
 911     if ((s->width || s->height) &&
 912         av_image_check_size(s->width, s->height, 0, s->avctx))
 913         return -1;
 914
 915     dct_init(s);
 916
 917     /* set chroma shifts */
 918     ret = av_pix_fmt_get_chroma_sub_sample(s->avctx->pix_fmt,
 919                                            &s->chroma_x_shift,
 920                                            &s->chroma_y_shift);
 921     if (ret)
 922         return ret;
 923
 924     FF_ALLOCZ_OR_GOTO(s->avctx, s->picture,
 925                       MAX_PICTURE_COUNT * sizeof(Picture), fail);
 926     for (i = 0; i < MAX_PICTURE_COUNT; i++) {
 927         s->picture[i].f = av_frame_alloc();
 928         if (!s->picture[i].f)
 929             goto fail;
 930     }
 931     s->next_picture.f = av_frame_alloc();
 932     if (!s->next_picture.f)
 933         goto fail;
 934     s->last_picture.f = av_frame_alloc();
 935     if (!s->last_picture.f)
 936         goto fail;
 937     s->current_picture.f = av_frame_alloc();
 938     if (!s->current_picture.f)
 939         goto fail;
 940     s->new_picture.f = av_frame_alloc();
 941     if (!s->new_picture.f)
 942         goto fail;
 943
 944     if (init_context_frame(s))
 945         goto fail;
 946
 947     s->parse_context.state = -1;
 948
 949     s->context_initialized = 1;
 950     memset(s->thread_context, 0, sizeof(s->thread_context));
 951     s->thread_context[0]   = s;
 952
 953 //     if (s->width && s->height) {
 954     if (nb_slices > 1) {
 955         for (i = 0; i < nb_slices; i++) {
 956             if (i) {
 957                 s->thread_context[i] = av_memdup(s, sizeof(MpegEncContext));
 958                 if (!s->thread_context[i])
 959                     goto fail;
 960             }
 961             if (init_duplicate_context(s->thread_context[i]) < 0)
 962                 goto fail;
 963             s->thread_context[i]->start_mb_y =
 964                 (s->mb_height * (i) + nb_slices / 2) / nb_slices;
 965             s->thread_context[i]->end_mb_y   =
 966                 (s->mb_height * (i + 1) + nb_slices / 2) / nb_slices;
 967         }
 968     } else {
 969         if (init_duplicate_context(s) < 0)
 970             goto fail;
 971         s->start_mb_y = 0;
 972         s->end_mb_y   = s->mb_height;
 973     }
 974     s->slice_context_count = nb_slices;
 975 //     }
 976
 977     return 0;
 978  fail:
 979     ff_mpv_common_end(s);
 980     return -1;
 981 }
 982
 983 /**
 984  * Frees and resets MpegEncContext fields depending on the resolution.
 985  * Is used during resolution changes to avoid a full reinitialization of the
 986  * codec.
 987  */
 988 static void free_context_frame(MpegEncContext *s)
 989 {
 990     int i, j, k;
 991
 992     av_freep(&s->mb_type);
 993     av_freep(&s->p_mv_table_base);
 994     av_freep(&s->b_forw_mv_table_base);
 995     av_freep(&s->b_back_mv_table_base);
 996     av_freep(&s->b_bidir_forw_mv_table_base);
 997     av_freep(&s->b_bidir_back_mv_table_base);
 998     av_freep(&s->b_direct_mv_table_base);
 999     s->p_mv_table            = NULL;
1000     s->b_forw_mv_table       = NULL;
1001     s->b_back_mv_table       = NULL;
1002     s->b_bidir_forw_mv_table = NULL;
1003     s->b_bidir_back_mv_table = NULL;
1004     s->b_direct_mv_table     = NULL;
1005     for (i = 0; i < 2; i++) {
1006         for (j = 0; j < 2; j++) {
1007             for (k = 0; k < 2; k++) {
1008                 av_freep(&s->b_field_mv_table_base[i][j][k]);
1009                 s->b_field_mv_table[i][j][k] = NULL;
1010             }
1011             av_freep(&s->b_field_select_table[i][j]);
1012             av_freep(&s->p_field_mv_table_base[i][j]);
1013             s->p_field_mv_table[i][j] = NULL;
1014         }
1015         av_freep(&s->p_field_select_table[i]);
1016     }
1017
1018     av_freep(&s->dc_val_base);
1019     av_freep(&s->coded_block_base);
1020     av_freep(&s->mbintra_table);
1021     av_freep(&s->cbp_table);
1022     av_freep(&s->pred_dir_table);
1023
1024     av_freep(&s->mbskip_table);
1025
1026     av_freep(&s->er.error_status_table);
1027     av_freep(&s->er.er_temp_buffer);
1028     av_freep(&s->mb_index2xy);
1029     av_freep(&s->lambda_table);
1030
1031     av_freep(&s->cplx_tab);
1032     av_freep(&s->bits_tab);
1033
1034     s->linesize = s->uvlinesize = 0;
1035 }
1036
1037 int ff_mpv_common_frame_size_change(MpegEncContext *s)
1038 {
1039     int i, err = 0;
1040
1041     if (!s->context_initialized)
1042         return AVERROR(EINVAL);
1043
1044     if (s->slice_context_count > 1) {
1045         for (i = 0; i < s->slice_context_count; i++) {
1046             free_duplicate_context(s->thread_context[i]);
1047         }
1048         for (i = 1; i < s->slice_context_count; i++) {
1049             av_freep(&s->thread_context[i]);
1050         }
1051     } else
1052         free_duplicate_context(s);
1053
1054     free_context_frame(s);
1055
1056     if (s->picture)
1057         for (i = 0; i < MAX_PICTURE_COUNT; i++) {
1058                 s->picture[i].needs_realloc = 1;
1059         }
1060
1061     s->last_picture_ptr         =
1062     s->next_picture_ptr         =
1063     s->current_picture_ptr      = NULL;
1064
1065     // init
1066     if (s->codec_id == AV_CODEC_ID_MPEG2VIDEO && !s->progressive_sequence)
1067         s->mb_height = (s->height + 31) / 32 * 2;
1068     else
1069         s->mb_height = (s->height + 15) / 16;
1070
1071     if ((s->width || s->height) &&
1072         (err = av_image_check_size(s->width, s->height, 0, s->avctx)) < 0)
1073         goto fail;
1074
1075     if ((err = init_context_frame(s)))
1076         goto fail;
1077
1078     memset(s->thread_context, 0, sizeof(s->thread_context));
1079     s->thread_context[0]   = s;
1080
1081     if (s->width && s->height) {
1082         int nb_slices = s->slice_context_count;
1083         if (nb_slices > 1) {
1084             for (i = 0; i < nb_slices; i++) {
1085                 if (i) {
1086                     s->thread_context[i] = av_memdup(s, sizeof(MpegEncContext));
1087                     if (!s->thread_context[i]) {
1088                         err = AVERROR(ENOMEM);
1089                         goto fail;
1090                     }
1091                 }
1092                 if ((err = init_duplicate_context(s->thread_context[i])) < 0)
1093                     goto fail;
1094                 s->thread_context[i]->start_mb_y =
1095                     (s->mb_height * (i) + nb_slices / 2) / nb_slices;
1096                 s->thread_context[i]->end_mb_y   =
1097                     (s->mb_height * (i + 1) + nb_slices / 2) / nb_slices;
1098             }
1099         } else {
1100             err = init_duplicate_context(s);
1101             if (err < 0)
1102                 goto fail;
1103             s->start_mb_y = 0;
1104             s->end_mb_y   = s->mb_height;
1105         }
1106         s->slice_context_count = nb_slices;
1107     }
1108
1109     return 0;
1110  fail:
1111     ff_mpv_common_end(s);
1112     return err;
1113 }
1114
1115 /* init common structure for both encoder and decoder */
1116 void ff_mpv_common_end(MpegEncContext *s)
1117 {
1118     int i;
1119
1120     if (!s)
1121         return ;
1122
1123     if (s->slice_context_count > 1) {
1124         for (i = 0; i < s->slice_context_count; i++) {
1125             free_duplicate_context(s->thread_context[i]);
1126         }
1127         for (i = 1; i < s->slice_context_count; i++) {
1128             av_freep(&s->thread_context[i]);
1129         }
1130         s->slice_context_count = 1;
1131     } else free_duplicate_context(s);
1132
1133     av_freep(&s->parse_context.buffer);
1134     s->parse_context.buffer_size = 0;
1135
1136     av_freep(&s->bitstream_buffer);
1137     s->allocated_bitstream_buffer_size = 0;
1138
1139     if (s->picture) {
1140         for (i = 0; i < MAX_PICTURE_COUNT; i++) {
1141             ff_free_picture_tables(&s->picture[i]);
1142             ff_mpeg_unref_picture(s->avctx, &s->picture[i]);
1143             av_frame_free(&s->picture[i].f);
1144         }
1145     }
1146     av_freep(&s->picture);
1147     ff_free_picture_tables(&s->last_picture);
1148     ff_mpeg_unref_picture(s->avctx, &s->last_picture);
1149     av_frame_free(&s->last_picture.f);
1150     ff_free_picture_tables(&s->current_picture);
1151     ff_mpeg_unref_picture(s->avctx, &s->current_picture);
1152     av_frame_free(&s->current_picture.f);
1153     ff_free_picture_tables(&s->next_picture);
1154     ff_mpeg_unref_picture(s->avctx, &s->next_picture);
1155     av_frame_free(&s->next_picture.f);
1156     ff_free_picture_tables(&s->new_picture);
1157     ff_mpeg_unref_picture(s->avctx, &s->new_picture);
1158     av_frame_free(&s->new_picture.f);
1159
1160     free_context_frame(s);
1161
1162     s->context_initialized      = 0;
1163     s->last_picture_ptr         =
1164     s->next_picture_ptr         =
1165     s->current_picture_ptr      = NULL;
1166     s->linesize = s->uvlinesize = 0;
1167 }
1168
1169
1170 static void gray_frame(AVFrame *frame)
1171 {
1172     int i, h_chroma_shift, v_chroma_shift;
1173
1174     av_pix_fmt_get_chroma_sub_sample(frame->format, &h_chroma_shift, &v_chroma_shift);
1175
1176     for(i=0; i<frame->height; i++)
1177         memset(frame->data[0] + frame->linesize[0]*i, 0x80, frame->width);
1178     for(i=0; i<AV_CEIL_RSHIFT(frame->height, v_chroma_shift); i++) {
1179         memset(frame->data[1] + frame->linesize[1]*i,
1180                0x80, AV_CEIL_RSHIFT(frame->width, h_chroma_shift));
1181         memset(frame->data[2] + frame->linesize[2]*i,
1182                0x80, AV_CEIL_RSHIFT(frame->width, h_chroma_shift));
1183     }
1184 }
1185
1186 /**
1187  * generic function called after decoding
1188  * the header and before a frame is decoded.
1189  */
1190 int ff_mpv_frame_start(MpegEncContext *s, AVCodecContext *avctx)
1191 {
1192     int i, ret;
1193     Picture *pic;
1194     s->mb_skipped = 0;
1195
1196     if (!ff_thread_can_start_frame(avctx)) {
1197         av_log(avctx, AV_LOG_ERROR, "Attempt to start a frame outside SETUP state\n");
1198         return -1;
1199     }
1200
1201     /* mark & release old frames */
1202     if (s->pict_type != AV_PICTURE_TYPE_B && s->last_picture_ptr &&
1203         s->last_picture_ptr != s->next_picture_ptr &&
1204         s->last_picture_ptr->f->buf[0]) {
1205         ff_mpeg_unref_picture(s->avctx, s->last_picture_ptr);
1206     }
1207
1208     /* release forgotten pictures */
1209     /* if (MPEG-124 / H.263) */
1210     for (i = 0; i < MAX_PICTURE_COUNT; i++) {
1211         if (&s->picture[i] != s->last_picture_ptr &&
1212             &s->picture[i] != s->next_picture_ptr &&
1213             s->picture[i].reference && !s->picture[i].needs_realloc) {
1214             ff_mpeg_unref_picture(s->avctx, &s->picture[i]);
1215         }
1216     }
1217
1218     ff_mpeg_unref_picture(s->avctx, &s->current_picture);
1219     ff_mpeg_unref_picture(s->avctx, &s->last_picture);
1220     ff_mpeg_unref_picture(s->avctx, &s->next_picture);
1221
1222     /* release non reference frames */
1223     for (i = 0; i < MAX_PICTURE_COUNT; i++) {
1224         if (!s->picture[i].reference)
1225             ff_mpeg_unref_picture(s->avctx, &s->picture[i]);
1226     }
1227
1228     if (s->current_picture_ptr && !s->current_picture_ptr->f->buf[0]) {
1229         // we already have an unused image
1230         // (maybe it was set before reading the header)
1231         pic = s->current_picture_ptr;
1232     } else {
1233         i   = ff_find_unused_picture(s->avctx, s->picture, 0);
1234         if (i < 0) {
1235             av_log(s->avctx, AV_LOG_ERROR, "no frame buffer available\n");
1236             return i;
1237         }
1238         pic = &s->picture[i];
1239     }
1240
1241     pic->reference = 0;
1242     if (!s->droppable) {
1243         if (s->pict_type != AV_PICTURE_TYPE_B)
1244             pic->reference = 3;
1245     }
1246
1247     pic->f->coded_picture_number = s->coded_picture_number++;
1248
1249     if (alloc_picture(s, pic, 0) < 0)
1250         return -1;
1251
1252     s->current_picture_ptr = pic;
1253     // FIXME use only the vars from current_pic
1254     s->current_picture_ptr->f->top_field_first = s->top_field_first;
1255     if (s->codec_id == AV_CODEC_ID_MPEG1VIDEO ||
1256         s->codec_id == AV_CODEC_ID_MPEG2VIDEO) {
1257         if (s->picture_structure != PICT_FRAME)
1258             s->current_picture_ptr->f->top_field_first =
1259                 (s->picture_structure == PICT_TOP_FIELD) == s->first_field;
1260     }
1261     s->current_picture_ptr->f->interlaced_frame = !s->progressive_frame &&
1262                                                  !s->progressive_sequence;
1263     s->current_picture_ptr->field_picture      =  s->picture_structure != PICT_FRAME;
1264
1265     s->current_picture_ptr->f->pict_type = s->pict_type;
1266     // if (s->avctx->flags && AV_CODEC_FLAG_QSCALE)
1267     //     s->current_picture_ptr->quality = s->new_picture_ptr->quality;
1268     s->current_picture_ptr->f->key_frame = s->pict_type == AV_PICTURE_TYPE_I;
1269
1270     if ((ret = ff_mpeg_ref_picture(s->avctx, &s->current_picture,
1271                                    s->current_picture_ptr)) < 0)
1272         return ret;
1273
1274     if (s->pict_type != AV_PICTURE_TYPE_B) {
1275         s->last_picture_ptr = s->next_picture_ptr;
1276         if (!s->droppable)
1277             s->next_picture_ptr = s->current_picture_ptr;
1278     }
1279     ff_dlog(s->avctx, "L%p N%p C%p L%p N%p C%p type:%d drop:%d\n",
1280             s->last_picture_ptr, s->next_picture_ptr,s->current_picture_ptr,
1281             s->last_picture_ptr    ? s->last_picture_ptr->f->data[0]    : NULL,
1282             s->next_picture_ptr    ? s->next_picture_ptr->f->data[0]    : NULL,
1283             s->current_picture_ptr ? s->current_picture_ptr->f->data[0] : NULL,
1284             s->pict_type, s->droppable);
1285
1286     if ((!s->last_picture_ptr || !s->last_picture_ptr->f->buf[0]) &&
1287         (s->pict_type != AV_PICTURE_TYPE_I)) {
1288         int h_chroma_shift, v_chroma_shift;
1289         av_pix_fmt_get_chroma_sub_sample(s->avctx->pix_fmt,
1290                                          &h_chroma_shift, &v_chroma_shift);
1291         if (s->pict_type == AV_PICTURE_TYPE_B && s->next_picture_ptr && s->next_picture_ptr->f->buf[0])
1292             av_log(avctx, AV_LOG_DEBUG,
1293                    "allocating dummy last picture for B frame\n");
1294         else if (s->pict_type != AV_PICTURE_TYPE_I)
1295             av_log(avctx, AV_LOG_ERROR,
1296                    "warning: first frame is no keyframe\n");
1297
1298         /* Allocate a dummy frame */
1299         i = ff_find_unused_picture(s->avctx, s->picture, 0);
1300         if (i < 0) {
1301             av_log(s->avctx, AV_LOG_ERROR, "no frame buffer available\n");
1302             return i;
1303         }
1304         s->last_picture_ptr = &s->picture[i];
1305
1306         s->last_picture_ptr->reference   = 3;
1307         s->last_picture_ptr->f->key_frame = 0;
1308         s->last_picture_ptr->f->pict_type = AV_PICTURE_TYPE_P;
1309
1310         if (alloc_picture(s, s->last_picture_ptr, 0) < 0) {
1311             s->last_picture_ptr = NULL;
1312             return -1;
1313         }
1314
1315         if (!avctx->hwaccel) {
1316             for(i=0; i<avctx->height; i++)
1317                 memset(s->last_picture_ptr->f->data[0] + s->last_picture_ptr->f->linesize[0]*i,
1318                        0x80, avctx->width);
1319             if (s->last_picture_ptr->f->data[2]) {
1320                 for(i=0; i<AV_CEIL_RSHIFT(avctx->height, v_chroma_shift); i++) {
1321                     memset(s->last_picture_ptr->f->data[1] + s->last_picture_ptr->f->linesize[1]*i,
1322                         0x80, AV_CEIL_RSHIFT(avctx->width, h_chroma_shift));
1323                     memset(s->last_picture_ptr->f->data[2] + s->last_picture_ptr->f->linesize[2]*i,
1324                         0x80, AV_CEIL_RSHIFT(avctx->width, h_chroma_shift));
1325                 }
1326             }
1327
1328             if(s->codec_id == AV_CODEC_ID_FLV1 || s->codec_id == AV_CODEC_ID_H263){
1329                 for(i=0; i<avctx->height; i++)
1330                 memset(s->last_picture_ptr->f->data[0] + s->last_picture_ptr->f->linesize[0]*i, 16, avctx->width);
1331             }
1332         }
1333
1334         ff_thread_report_progress(&s->last_picture_ptr->tf, INT_MAX, 0);
1335         ff_thread_report_progress(&s->last_picture_ptr->tf, INT_MAX, 1);
1336     }
1337     if ((!s->next_picture_ptr || !s->next_picture_ptr->f->buf[0]) &&
1338         s->pict_type == AV_PICTURE_TYPE_B) {
1339         /* Allocate a dummy frame */
1340         i = ff_find_unused_picture(s->avctx, s->picture, 0);
1341         if (i < 0) {
1342             av_log(s->avctx, AV_LOG_ERROR, "no frame buffer available\n");
1343             return i;
1344         }
1345         s->next_picture_ptr = &s->picture[i];
1346
1347         s->next_picture_ptr->reference   = 3;
1348         s->next_picture_ptr->f->key_frame = 0;
1349         s->next_picture_ptr->f->pict_type = AV_PICTURE_TYPE_P;
1350
1351         if (alloc_picture(s, s->next_picture_ptr, 0) < 0) {
1352             s->next_picture_ptr = NULL;
1353             return -1;
1354         }
1355         ff_thread_report_progress(&s->next_picture_ptr->tf, INT_MAX, 0);
1356         ff_thread_report_progress(&s->next_picture_ptr->tf, INT_MAX, 1);
1357     }
1358
1359 #if 0 // BUFREF-FIXME
1360     memset(s->last_picture.f->data, 0, sizeof(s->last_picture.f->data));
1361     memset(s->next_picture.f->data, 0, sizeof(s->next_picture.f->data));
1362 #endif
1363     if (s->last_picture_ptr) {
1364         if (s->last_picture_ptr->f->buf[0] &&
1365             (ret = ff_mpeg_ref_picture(s->avctx, &s->last_picture,
1366                                        s->last_picture_ptr)) < 0)
1367             return ret;
1368     }
1369     if (s->next_picture_ptr) {
1370         if (s->next_picture_ptr->f->buf[0] &&
1371             (ret = ff_mpeg_ref_picture(s->avctx, &s->next_picture,
1372                                        s->next_picture_ptr)) < 0)
1373             return ret;
1374     }
1375
1376     av_assert0(s->pict_type == AV_PICTURE_TYPE_I || (s->last_picture_ptr &&
1377                                                  s->last_picture_ptr->f->buf[0]));
1378
1379     if (s->picture_structure!= PICT_FRAME) {
1380         int i;
1381         for (i = 0; i < 4; i++) {
1382             if (s->picture_structure == PICT_BOTTOM_FIELD) {
1383                 s->current_picture.f->data[i] +=
1384                     s->current_picture.f->linesize[i];
1385             }
1386             s->current_picture.f->linesize[i] *= 2;
1387             s->last_picture.f->linesize[i]    *= 2;
1388             s->next_picture.f->linesize[i]    *= 2;
1389         }
1390     }
1391
1392     /* set dequantizer, we can't do it during init as
1393      * it might change for MPEG-4 and we can't do it in the header
1394      * decode as init is not called for MPEG-4 there yet */
1395     if (s->mpeg_quant || s->codec_id == AV_CODEC_ID_MPEG2VIDEO) {
1396         s->dct_unquantize_intra = s->dct_unquantize_mpeg2_intra;
1397         s->dct_unquantize_inter = s->dct_unquantize_mpeg2_inter;
1398     } else if (s->out_format == FMT_H263 || s->out_format == FMT_H261) {
1399         s->dct_unquantize_intra = s->dct_unquantize_h263_intra;
1400         s->dct_unquantize_inter = s->dct_unquantize_h263_inter;
1401     } else {
1402         s->dct_unquantize_intra = s->dct_unquantize_mpeg1_intra;
1403         s->dct_unquantize_inter = s->dct_unquantize_mpeg1_inter;
1404     }
1405
1406     if (s->avctx->debug & FF_DEBUG_NOMC) {
1407         gray_frame(s->current_picture_ptr->f);
1408     }
1409
1410     return 0;
1411 }
1412
1413 /* called after a frame has been decoded. */
1414 void ff_mpv_frame_end(MpegEncContext *s)
1415 {
1416     emms_c();
1417
1418     if (s->current_picture.reference)
1419         ff_thread_report_progress(&s->current_picture_ptr->tf, INT_MAX, 0);
1420 }
1421
1422 static int add_mb(AVMotionVector *mb, uint32_t mb_type,
1423                   int dst_x, int dst_y,
1424                   int motion_x, int motion_y, int motion_scale,
1425                   int direction)
1426 {
1427     mb->w = IS_8X8(mb_type) || IS_8X16(mb_type) ? 8 : 16;
1428     mb->h = IS_8X8(mb_type) || IS_16X8(mb_type) ? 8 : 16;
1429     mb->motion_x = motion_x;
1430     mb->motion_y = motion_y;
1431     mb->motion_scale = motion_scale;
1432     mb->dst_x = dst_x;
1433     mb->dst_y = dst_y;
1434     mb->src_x = dst_x + motion_x / motion_scale;
1435     mb->src_y = dst_y + motion_y / motion_scale;
1436     mb->source = direction ? 1 : -1;
1437     mb->flags = 0; // XXX: does mb_type contain extra information that could be exported here?
1438     return 1;
1439 }
1440
1441 /**
1442  * Print debugging info for the given picture.
1443  */
1444 void ff_print_debug_info2(AVCodecContext *avctx, AVFrame *pict, uint8_t *mbskip_table,
1445                          uint32_t *mbtype_table, int8_t *qscale_table, int16_t (*motion_val[2])[2],
1446                          int *low_delay,
1447                          int mb_width, int mb_height, int mb_stride, int quarter_sample)
1448 {
1449     if ((avctx->flags2 & AV_CODEC_FLAG2_EXPORT_MVS) && mbtype_table && motion_val[0]) {
1450         const int shift = 1 + quarter_sample;
1451         const int scale = 1 << shift;
1452         const int mv_sample_log2 = avctx->codec_id == AV_CODEC_ID_H264 || avctx->codec_id == AV_CODEC_ID_SVQ3 ? 2 : 1;
1453         const int mv_stride      = (mb_width << mv_sample_log2) +
1454                                    (avctx->codec->id == AV_CODEC_ID_H264 ? 0 : 1);
1455         int mb_x, mb_y, mbcount = 0;
1456
1457         /* size is width * height * 2 * 4 where 2 is for directions and 4 is
1458          * for the maximum number of MB (4 MB in case of IS_8x8) */
1459         AVMotionVector *mvs = av_malloc_array(mb_width * mb_height, 2 * 4 * sizeof(AVMotionVector));
1460         if (!mvs)
1461             return;
1462
1463         for (mb_y = 0; mb_y < mb_height; mb_y++) {
1464             for (mb_x = 0; mb_x < mb_width; mb_x++) {
1465                 int i, direction, mb_type = mbtype_table[mb_x + mb_y * mb_stride];
1466                 for (direction = 0; direction < 2; direction++) {
1467                     if (!USES_LIST(mb_type, direction))
1468                         continue;
1469                     if (IS_8X8(mb_type)) {
1470                         for (i = 0; i < 4; i++) {
1471                             int sx = mb_x * 16 + 4 + 8 * (i & 1);
1472                             int sy = mb_y * 16 + 4 + 8 * (i >> 1);
1473                             int xy = (mb_x * 2 + (i & 1) +
1474                                       (mb_y * 2 + (i >> 1)) * mv_stride) << (mv_sample_log2 - 1);
1475                             int mx = motion_val[direction][xy][0];
1476                             int my = motion_val[direction][xy][1];
1477                             mbcount += add_mb(mvs + mbcount, mb_type, sx, sy, mx, my, scale, direction);
1478                         }
1479                     } else if (IS_16X8(mb_type)) {
1480                         for (i = 0; i < 2; i++) {
1481                             int sx = mb_x * 16 + 8;
1482                             int sy = mb_y * 16 + 4 + 8 * i;
1483                             int xy = (mb_x * 2 + (mb_y * 2 + i) * mv_stride) << (mv_sample_log2 - 1);
1484                             int mx = motion_val[direction][xy][0];
1485                             int my = motion_val[direction][xy][1];
1486
1487                             if (IS_INTERLACED(mb_type))
1488                                 my *= 2;
1489
1490                             mbcount += add_mb(mvs + mbcount, mb_type, sx, sy, mx, my, scale, direction);
1491                         }
1492                     } else if (IS_8X16(mb_type)) {
1493                         for (i = 0; i < 2; i++) {
1494                             int sx = mb_x * 16 + 4 + 8 * i;
1495                             int sy = mb_y * 16 + 8;
1496                             int xy = (mb_x * 2 + i + mb_y * 2 * mv_stride) << (mv_sample_log2 - 1);
1497                             int mx = motion_val[direction][xy][0];
1498                             int my = motion_val[direction][xy][1];
1499
1500                             if (IS_INTERLACED(mb_type))
1501                                 my *= 2;
1502
1503                             mbcount += add_mb(mvs + mbcount, mb_type, sx, sy, mx, my, scale, direction);
1504                         }
1505                     } else {
1506                           int sx = mb_x * 16 + 8;
1507                           int sy = mb_y * 16 + 8;
1508                           int xy = (mb_x + mb_y * mv_stride) << mv_sample_log2;
1509                           int mx = motion_val[direction][xy][0];
1510                           int my = motion_val[direction][xy][1];
1511                           mbcount += add_mb(mvs + mbcount, mb_type, sx, sy, mx, my, scale, direction);
1512                     }
1513                 }
1514             }
1515         }
1516
1517         if (mbcount) {
1518             AVFrameSideData *sd;
1519
1520             av_log(avctx, AV_LOG_DEBUG, "Adding %d MVs info to frame %d\n", mbcount, avctx->frame_number);
1521             sd = av_frame_new_side_data(pict, AV_FRAME_DATA_MOTION_VECTORS, mbcount * sizeof(AVMotionVector));
1522             if (!sd) {
1523                 av_freep(&mvs);
1524                 return;
1525             }
1526             memcpy(sd->data, mvs, mbcount * sizeof(AVMotionVector));
1527         }
1528
1529         av_freep(&mvs);
1530     }
1531
1532     /* TODO: export all the following to make them accessible for users (and filters) */
1533     if (avctx->hwaccel || !mbtype_table)
1534         return;
1535
1536
1537     if (avctx->debug & (FF_DEBUG_SKIP | FF_DEBUG_QP | FF_DEBUG_MB_TYPE)) {
1538         int x,y;
1539
1540         av_log(avctx, AV_LOG_DEBUG, "New frame, type: %c\n",
1541                av_get_picture_type_char(pict->pict_type));
1542         for (y = 0; y < mb_height; y++) {
1543             for (x = 0; x < mb_width; x++) {
1544                 if (avctx->debug & FF_DEBUG_SKIP) {
1545                     int count = mbskip_table ? mbskip_table[x + y * mb_stride] : 0;
1546                     if (count > 9)
1547                         count = 9;
1548                     av_log(avctx, AV_LOG_DEBUG, "%1d", count);
1549                 }
1550                 if (avctx->debug & FF_DEBUG_QP) {
1551                     av_log(avctx, AV_LOG_DEBUG, "%2d",
1552                            qscale_table[x + y * mb_stride]);
1553                 }
1554                 if (avctx->debug & FF_DEBUG_MB_TYPE) {
1555                     int mb_type = mbtype_table[x + y * mb_stride];
1556                     // Type & MV direction
1557                     if (IS_PCM(mb_type))
1558                         av_log(avctx, AV_LOG_DEBUG, "P");
1559                     else if (IS_INTRA(mb_type) && IS_ACPRED(mb_type))
1560                         av_log(avctx, AV_LOG_DEBUG, "A");
1561                     else if (IS_INTRA4x4(mb_type))
1562                         av_log(avctx, AV_LOG_DEBUG, "i");
1563                     else if (IS_INTRA16x16(mb_type))
1564                         av_log(avctx, AV_LOG_DEBUG, "I");
1565                     else if (IS_DIRECT(mb_type) && IS_SKIP(mb_type))
1566                         av_log(avctx, AV_LOG_DEBUG, "d");
1567                     else if (IS_DIRECT(mb_type))
1568                         av_log(avctx, AV_LOG_DEBUG, "D");
1569                     else if (IS_GMC(mb_type) && IS_SKIP(mb_type))
1570                         av_log(avctx, AV_LOG_DEBUG, "g");
1571                     else if (IS_GMC(mb_type))
1572                         av_log(avctx, AV_LOG_DEBUG, "G");
1573                     else if (IS_SKIP(mb_type))
1574                         av_log(avctx, AV_LOG_DEBUG, "S");
1575                     else if (!USES_LIST(mb_type, 1))
1576                         av_log(avctx, AV_LOG_DEBUG, ">");
1577                     else if (!USES_LIST(mb_type, 0))
1578                         av_log(avctx, AV_LOG_DEBUG, "<");
1579                     else {
1580                         av_assert2(USES_LIST(mb_type, 0) && USES_LIST(mb_type, 1));
1581                         av_log(avctx, AV_LOG_DEBUG, "X");
1582                     }
1583
1584                     // segmentation
1585                     if (IS_8X8(mb_type))
1586                         av_log(avctx, AV_LOG_DEBUG, "+");
1587                     else if (IS_16X8(mb_type))
1588                         av_log(avctx, AV_LOG_DEBUG, "-");
1589                     else if (IS_8X16(mb_type))
1590                         av_log(avctx, AV_LOG_DEBUG, "|");
1591                     else if (IS_INTRA(mb_type) || IS_16X16(mb_type))
1592                         av_log(avctx, AV_LOG_DEBUG, " ");
1593                     else
1594                         av_log(avctx, AV_LOG_DEBUG, "?");
1595
1596
1597                     if (IS_INTERLACED(mb_type))
1598                         av_log(avctx, AV_LOG_DEBUG, "=");
1599                     else
1600                         av_log(avctx, AV_LOG_DEBUG, " ");
1601                 }
1602             }
1603             av_log(avctx, AV_LOG_DEBUG, "\n");
1604         }
1605     }
1606
1607 #if FF_API_DEBUG_MV
1608     if ((avctx->debug & (FF_DEBUG_VIS_QP | FF_DEBUG_VIS_MB_TYPE)) ||
1609         (avctx->debug_mv)) {
1610         int mb_y;
1611         int i, ret;
1612         int h_chroma_shift, v_chroma_shift, block_height;
1613         const int mv_sample_log2 = avctx->codec_id == AV_CODEC_ID_H264 || avctx->codec_id == AV_CODEC_ID_SVQ3 ? 2 : 1;
1614         const int mv_stride      = (mb_width << mv_sample_log2) +
1615                                    (avctx->codec->id == AV_CODEC_ID_H264 ? 0 : 1);
1616
1617         if (low_delay)
1618             *low_delay = 0; // needed to see the vectors without trashing the buffers
1619
1620         ret = av_pix_fmt_get_chroma_sub_sample (avctx->pix_fmt, &h_chroma_shift, &v_chroma_shift);
1621         if (ret)
1622             return ret;
1623
1624         av_frame_make_writable(pict);
1625
1626         pict->opaque = NULL;
1627         block_height = 16 >> v_chroma_shift;
1628
1629         for (mb_y = 0; mb_y < mb_height; mb_y++) {
1630             int mb_x;
1631             for (mb_x = 0; mb_x < mb_width; mb_x++) {
1632                 const int mb_index = mb_x + mb_y * mb_stride;
1633                 if ((avctx->debug & FF_DEBUG_VIS_QP)) {
1634                     uint64_t c = (qscale_table[mb_index] * 128 / 31) *
1635                                  0x0101010101010101ULL;
1636                     int y;
1637                     for (y = 0; y < block_height; y++) {
1638                         *(uint64_t *)(pict->data[1] + 8 * mb_x +
1639                                       (block_height * mb_y + y) *
1640                                       pict->linesize[1]) = c;
1641                         *(uint64_t *)(pict->data[2] + 8 * mb_x +
1642                                       (block_height * mb_y + y) *
1643                                       pict->linesize[2]) = c;
1644                     }
1645                 }
1646                 if ((avctx->debug & FF_DEBUG_VIS_MB_TYPE) &&
1647                     motion_val[0]) {
1648                     int mb_type = mbtype_table[mb_index];
1649                     uint64_t u,v;
1650                     int y;
1651 #define COLOR(theta, r) \
1652     u = (int)(128 + r * cos(theta * M_PI / 180)); \
1653     v = (int)(128 + r * sin(theta * M_PI / 180));
1654
1655
1656                     u = v = 128;
1657                     if (IS_PCM(mb_type)) {
1658                         COLOR(120, 48)
1659                     } else if ((IS_INTRA(mb_type) && IS_ACPRED(mb_type)) ||
1660                                IS_INTRA16x16(mb_type)) {
1661                         COLOR(30, 48)
1662                     } else if (IS_INTRA4x4(mb_type)) {
1663                         COLOR(90, 48)
1664                     } else if (IS_DIRECT(mb_type) && IS_SKIP(mb_type)) {
1665                         // COLOR(120, 48)
1666                     } else if (IS_DIRECT(mb_type)) {
1667                         COLOR(150, 48)
1668                     } else if (IS_GMC(mb_type) && IS_SKIP(mb_type)) {
1669                         COLOR(170, 48)
1670                     } else if (IS_GMC(mb_type)) {
1671                         COLOR(190, 48)
1672                     } else if (IS_SKIP(mb_type)) {
1673                         // COLOR(180, 48)
1674                     } else if (!USES_LIST(mb_type, 1)) {
1675                         COLOR(240, 48)
1676                     } else if (!USES_LIST(mb_type, 0)) {
1677                         COLOR(0, 48)
1678                     } else {
1679                         av_assert2(USES_LIST(mb_type, 0) && USES_LIST(mb_type, 1));
1680                         COLOR(300,48)
1681                     }
1682
1683                     u *= 0x0101010101010101ULL;
1684                     v *= 0x0101010101010101ULL;
1685                     for (y = 0; y < block_height; y++) {
1686                         *(uint64_t *)(pict->data[1] + 8 * mb_x +
1687                                       (block_height * mb_y + y) * pict->linesize[1]) = u;
1688                         *(uint64_t *)(pict->data[2] + 8 * mb_x +
1689                                       (block_height * mb_y + y) * pict->linesize[2]) = v;
1690                     }
1691
1692                     // segmentation
1693                     if (IS_8X8(mb_type) || IS_16X8(mb_type)) {
1694                         *(uint64_t *)(pict->data[0] + 16 * mb_x + 0 +
1695                                       (16 * mb_y + 8) * pict->linesize[0]) ^= 0x8080808080808080ULL;
1696                         *(uint64_t *)(pict->data[0] + 16 * mb_x + 8 +
1697                                       (16 * mb_y + 8) * pict->linesize[0]) ^= 0x8080808080808080ULL;
1698                     }
1699                     if (IS_8X8(mb_type) || IS_8X16(mb_type)) {
1700                         for (y = 0; y < 16; y++)
1701                             pict->data[0][16 * mb_x + 8 + (16 * mb_y + y) *
1702                                           pict->linesize[0]] ^= 0x80;
1703                     }
1704                     if (IS_8X8(mb_type) && mv_sample_log2 >= 2) {
1705                         int dm = 1 << (mv_sample_log2 - 2);
1706                         for (i = 0; i < 4; i++) {
1707                             int sx = mb_x * 16 + 8 * (i & 1);
1708                             int sy = mb_y * 16 + 8 * (i >> 1);
1709                             int xy = (mb_x * 2 + (i & 1) +
1710                                      (mb_y * 2 + (i >> 1)) * mv_stride) << (mv_sample_log2 - 1);
1711                             // FIXME bidir
1712                             int32_t *mv = (int32_t *) &motion_val[0][xy];
1713                             if (mv[0] != mv[dm] ||
1714                                 mv[dm * mv_stride] != mv[dm * (mv_stride + 1)])
1715                                 for (y = 0; y < 8; y++)
1716                                     pict->data[0][sx + 4 + (sy + y) * pict->linesize[0]] ^= 0x80;
1717                             if (mv[0] != mv[dm * mv_stride] || mv[dm] != mv[dm * (mv_stride + 1)])
1718                                 *(uint64_t *)(pict->data[0] + sx + (sy + 4) *
1719                                               pict->linesize[0]) ^= 0x8080808080808080ULL;
1720                         }
1721                     }
1722
1723                     if (IS_INTERLACED(mb_type) &&
1724                         avctx->codec->id == AV_CODEC_ID_H264) {
1725                         // hmm
1726                     }
1727                 }
1728                 if (mbskip_table)
1729                     mbskip_table[mb_index] = 0;
1730             }
1731         }
1732     }
1733 #endif
1734 }
1735
1736 void ff_print_debug_info(MpegEncContext *s, Picture *p, AVFrame *pict)
1737 {
1738     ff_print_debug_info2(s->avctx, pict, s->mbskip_table, p->mb_type,
1739                          p->qscale_table, p->motion_val, &s->low_delay,
1740                          s->mb_width, s->mb_height, s->mb_stride, s->quarter_sample);
1741 }
1742
1743 int ff_mpv_export_qp_table(MpegEncContext *s, AVFrame *f, Picture *p, int qp_type)
1744 {
1745     AVBufferRef *ref = av_buffer_ref(p->qscale_table_buf);
1746     int offset = 2*s->mb_stride + 1;
1747     if(!ref)
1748         return AVERROR(ENOMEM);
1749     av_assert0(ref->size >= offset + s->mb_stride * ((f->height+15)/16));
1750     ref->size -= offset;
1751     ref->data += offset;
1752     return av_frame_set_qp_table(f, ref, s->mb_stride, qp_type);
1753 }
1754
1755 static inline int hpel_motion_lowres(MpegEncContext *s,
1756                                      uint8_t *dest, uint8_t *src,
1757                                      int field_based, int field_select,
1758                                      int src_x, int src_y,
1759                                      int width, int height, ptrdiff_t stride,
1760                                      int h_edge_pos, int v_edge_pos,
1761                                      int w, int h, h264_chroma_mc_func *pix_op,
1762                                      int motion_x, int motion_y)
1763 {
1764     const int lowres   = s->avctx->lowres;
1765     const int op_index = FFMIN(lowres, 3);
1766     const int s_mask   = (2 << lowres) - 1;
1767     int emu = 0;
1768     int sx, sy;
1769
1770     if (s->quarter_sample) {
1771         motion_x /= 2;
1772         motion_y /= 2;
1773     }
1774
1775     sx = motion_x & s_mask;
1776     sy = motion_y & s_mask;
1777     src_x += motion_x >> lowres + 1;
1778     src_y += motion_y >> lowres + 1;
1779
1780     src   += src_y * stride + src_x;
1781
1782     if ((unsigned)src_x > FFMAX( h_edge_pos - (!!sx) - w,                 0) ||
1783         (unsigned)src_y > FFMAX((v_edge_pos >> field_based) - (!!sy) - h, 0)) {
1784         s->vdsp.emulated_edge_mc(s->sc.edge_emu_buffer, src,
1785                                  s->linesize, s->linesize,
1786                                  w + 1, (h + 1) << field_based,
1787                                  src_x, src_y   << field_based,
1788                                  h_edge_pos, v_edge_pos);
1789         src = s->sc.edge_emu_buffer;
1790         emu = 1;
1791     }
1792
1793     sx = (sx << 2) >> lowres;
1794     sy = (sy << 2) >> lowres;
1795     if (field_select)
1796         src += s->linesize;
1797     pix_op[op_index](dest, src, stride, h, sx, sy);
1798     return emu;
1799 }
1800
1801 /* apply one mpeg motion vector to the three components */
1802 static av_always_inline void mpeg_motion_lowres(MpegEncContext *s,
1803                                                 uint8_t *dest_y,
1804                                                 uint8_t *dest_cb,
1805                                                 uint8_t *dest_cr,
1806                                                 int field_based,
1807                                                 int bottom_field,
1808                                                 int field_select,
1809                                                 uint8_t **ref_picture,
1810                                                 h264_chroma_mc_func *pix_op,
1811                                                 int motion_x, int motion_y,
1812                                                 int h, int mb_y)
1813 {
1814     uint8_t *ptr_y, *ptr_cb, *ptr_cr;
1815     int mx, my, src_x, src_y, uvsrc_x, uvsrc_y, sx, sy, uvsx, uvsy;
1816     ptrdiff_t uvlinesize, linesize;
1817     const int lowres     = s->avctx->lowres;
1818     const int op_index   = FFMIN(lowres-1+s->chroma_x_shift, 3);
1819     const int block_s    = 8>>lowres;
1820     const int s_mask     = (2 << lowres) - 1;
1821     const int h_edge_pos = s->h_edge_pos >> lowres;
1822     const int v_edge_pos = s->v_edge_pos >> lowres;
1823     linesize   = s->current_picture.f->linesize[0] << field_based;
1824     uvlinesize = s->current_picture.f->linesize[1] << field_based;
1825
1826     // FIXME obviously not perfect but qpel will not work in lowres anyway
1827     if (s->quarter_sample) {
1828         motion_x /= 2;
1829         motion_y /= 2;
1830     }
1831
1832     if(field_based){
1833         motion_y += (bottom_field - field_select)*((1 << lowres)-1);
1834     }
1835
1836     sx = motion_x & s_mask;
1837     sy = motion_y & s_mask;
1838     src_x = s->mb_x * 2 * block_s + (motion_x >> lowres + 1);
1839     src_y = (mb_y * 2 * block_s >> field_based) + (motion_y >> lowres + 1);
1840
1841     if (s->out_format == FMT_H263) {
1842         uvsx    = ((motion_x >> 1) & s_mask) | (sx & 1);
1843         uvsy    = ((motion_y >> 1) & s_mask) | (sy & 1);
1844         uvsrc_x = src_x >> 1;
1845         uvsrc_y = src_y >> 1;
1846     } else if (s->out_format == FMT_H261) {
1847         // even chroma mv's are full pel in H261
1848         mx      = motion_x / 4;
1849         my      = motion_y / 4;
1850         uvsx    = (2 * mx) & s_mask;
1851         uvsy    = (2 * my) & s_mask;
1852         uvsrc_x = s->mb_x * block_s + (mx >> lowres);
1853         uvsrc_y =    mb_y * block_s + (my >> lowres);
1854     } else {
1855         if(s->chroma_y_shift){
1856             mx      = motion_x / 2;
1857             my      = motion_y / 2;
1858             uvsx    = mx & s_mask;
1859             uvsy    = my & s_mask;
1860             uvsrc_x = s->mb_x * block_s                 + (mx >> lowres + 1);
1861             uvsrc_y =   (mb_y * block_s >> field_based) + (my >> lowres + 1);
1862         } else {
1863             if(s->chroma_x_shift){
1864             //Chroma422
1865                 mx = motion_x / 2;
1866                 uvsx = mx & s_mask;
1867                 uvsy = motion_y & s_mask;
1868                 uvsrc_y = src_y;
1869                 uvsrc_x = s->mb_x*block_s               + (mx >> (lowres+1));
1870             } else {
1871             //Chroma444
1872                 uvsx = motion_x & s_mask;
1873                 uvsy = motion_y & s_mask;
1874                 uvsrc_x = src_x;
1875                 uvsrc_y = src_y;
1876             }
1877         }
1878     }
1879
1880     ptr_y  = ref_picture[0] + src_y   * linesize   + src_x;
1881     ptr_cb = ref_picture[1] + uvsrc_y * uvlinesize + uvsrc_x;
1882     ptr_cr = ref_picture[2] + uvsrc_y * uvlinesize + uvsrc_x;
1883
1884     if ((unsigned) src_x > FFMAX( h_edge_pos - (!!sx) - 2 * block_s,       0) || uvsrc_y<0 ||
1885         (unsigned) src_y > FFMAX((v_edge_pos >> field_based) - (!!sy) - h, 0)) {
1886         s->vdsp.emulated_edge_mc(s->sc.edge_emu_buffer, ptr_y,
1887                                  linesize >> field_based, linesize >> field_based,
1888                                  17, 17 + field_based,
1889                                 src_x, src_y << field_based, h_edge_pos,
1890                                 v_edge_pos);
1891         ptr_y = s->sc.edge_emu_buffer;
1892         if (!CONFIG_GRAY || !(s->avctx->flags & AV_CODEC_FLAG_GRAY)) {
1893             uint8_t *ubuf = s->sc.edge_emu_buffer + 18 * s->linesize;
1894             uint8_t *vbuf =ubuf + 10 * s->uvlinesize;
1895             if (s->workaround_bugs & FF_BUG_IEDGE)
1896                 vbuf -= s->uvlinesize;
1897             s->vdsp.emulated_edge_mc(ubuf,  ptr_cb,
1898                                      uvlinesize >> field_based, uvlinesize >> field_based,
1899                                      9, 9 + field_based,
1900                                     uvsrc_x, uvsrc_y << field_based,
1901                                     h_edge_pos >> 1, v_edge_pos >> 1);
1902             s->vdsp.emulated_edge_mc(vbuf,  ptr_cr,
1903                                      uvlinesize >> field_based,uvlinesize >> field_based,
1904                                      9, 9 + field_based,
1905                                     uvsrc_x, uvsrc_y << field_based,
1906                                     h_edge_pos >> 1, v_edge_pos >> 1);
1907             ptr_cb = ubuf;
1908             ptr_cr = vbuf;
1909         }
1910     }
1911
1912     // FIXME use this for field pix too instead of the obnoxious hack which changes picture.f->data
1913     if (bottom_field) {
1914         dest_y  += s->linesize;
1915         dest_cb += s->uvlinesize;
1916         dest_cr += s->uvlinesize;
1917     }
1918
1919     if (field_select) {
1920         ptr_y   += s->linesize;
1921         ptr_cb  += s->uvlinesize;
1922         ptr_cr  += s->uvlinesize;
1923     }
1924
1925     sx = (sx << 2) >> lowres;
1926     sy = (sy << 2) >> lowres;
1927     pix_op[lowres - 1](dest_y, ptr_y, linesize, h, sx, sy);
1928
1929     if (!CONFIG_GRAY || !(s->avctx->flags & AV_CODEC_FLAG_GRAY)) {
1930         int hc = s->chroma_y_shift ? (h+1-bottom_field)>>1 : h;
1931         uvsx = (uvsx << 2) >> lowres;
1932         uvsy = (uvsy << 2) >> lowres;
1933         if (hc) {
1934             pix_op[op_index](dest_cb, ptr_cb, uvlinesize, hc, uvsx, uvsy);
1935             pix_op[op_index](dest_cr, ptr_cr, uvlinesize, hc, uvsx, uvsy);
1936         }
1937     }
1938     // FIXME h261 lowres loop filter
1939 }
1940
1941 static inline void chroma_4mv_motion_lowres(MpegEncContext *s,
1942                                             uint8_t *dest_cb, uint8_t *dest_cr,
1943                                             uint8_t **ref_picture,
1944                                             h264_chroma_mc_func * pix_op,
1945                                             int mx, int my)
1946 {
1947     const int lowres     = s->avctx->lowres;
1948     const int op_index   = FFMIN(lowres, 3);
1949     const int block_s    = 8 >> lowres;
1950     const int s_mask     = (2 << lowres) - 1;
1951     const int h_edge_pos = s->h_edge_pos >> lowres + 1;
1952     const int v_edge_pos = s->v_edge_pos >> lowres + 1;
1953     int emu = 0, src_x, src_y, sx, sy;
1954     ptrdiff_t offset;
1955     uint8_t *ptr;
1956
1957     if (s->quarter_sample) {
1958         mx /= 2;
1959         my /= 2;
1960     }
1961
1962     /* In case of 8X8, we construct a single chroma motion vector
1963        with a special rounding */
1964     mx = ff_h263_round_chroma(mx);
1965     my = ff_h263_round_chroma(my);
1966
1967     sx = mx & s_mask;
1968     sy = my & s_mask;
1969     src_x = s->mb_x * block_s + (mx >> lowres + 1);
1970     src_y = s->mb_y * block_s + (my >> lowres + 1);
1971
1972     offset = src_y * s->uvlinesize + src_x;
1973     ptr = ref_picture[1] + offset;
1974     if ((unsigned) src_x > FFMAX(h_edge_pos - (!!sx) - block_s, 0) ||
1975         (unsigned) src_y > FFMAX(v_edge_pos - (!!sy) - block_s, 0)) {
1976         s->vdsp.emulated_edge_mc(s->sc.edge_emu_buffer, ptr,
1977                                  s->uvlinesize, s->uvlinesize,
1978                                  9, 9,
1979                                  src_x, src_y, h_edge_pos, v_edge_pos);
1980         ptr = s->sc.edge_emu_buffer;
1981         emu = 1;
1982     }
1983     sx = (sx << 2) >> lowres;
1984     sy = (sy << 2) >> lowres;
1985     pix_op[op_index](dest_cb, ptr, s->uvlinesize, block_s, sx, sy);
1986
1987     ptr = ref_picture[2] + offset;
1988     if (emu) {
1989         s->vdsp.emulated_edge_mc(s->sc.edge_emu_buffer, ptr,
1990                                  s->uvlinesize, s->uvlinesize,
1991                                  9, 9,
1992                                  src_x, src_y, h_edge_pos, v_edge_pos);
1993         ptr = s->sc.edge_emu_buffer;
1994     }
1995     pix_op[op_index](dest_cr, ptr, s->uvlinesize, block_s, sx, sy);
1996 }
1997
1998 /**
1999  * motion compensation of a single macroblock
2000  * @param s context
2001  * @param dest_y luma destination pointer
2002  * @param dest_cb chroma cb/u destination pointer
2003  * @param dest_cr chroma cr/v destination pointer
2004  * @param dir direction (0->forward, 1->backward)
2005  * @param ref_picture array[3] of pointers to the 3 planes of the reference picture
2006  * @param pix_op halfpel motion compensation function (average or put normally)
2007  * the motion vectors are taken from s->mv and the MV type from s->mv_type
2008  */
2009 static inline void MPV_motion_lowres(MpegEncContext *s,
2010                                      uint8_t *dest_y, uint8_t *dest_cb,
2011                                      uint8_t *dest_cr,
2012                                      int dir, uint8_t **ref_picture,
2013                                      h264_chroma_mc_func *pix_op)
2014 {
2015     int mx, my;
2016     int mb_x, mb_y, i;
2017     const int lowres  = s->avctx->lowres;
2018     const int block_s = 8 >>lowres;
2019
2020     mb_x = s->mb_x;
2021     mb_y = s->mb_y;
2022
2023     switch (s->mv_type) {
2024     case MV_TYPE_16X16:
2025         mpeg_motion_lowres(s, dest_y, dest_cb, dest_cr,
2026                            0, 0, 0,
2027                            ref_picture, pix_op,
2028                            s->mv[dir][0][0], s->mv[dir][0][1],
2029                            2 * block_s, mb_y);
2030         break;
2031     case MV_TYPE_8X8:
2032         mx = 0;
2033         my = 0;
2034         for (i = 0; i < 4; i++) {
2035             hpel_motion_lowres(s, dest_y + ((i & 1) + (i >> 1) *
2036                                s->linesize) * block_s,
2037                                ref_picture[0], 0, 0,
2038                                (2 * mb_x + (i & 1)) * block_s,
2039                                (2 * mb_y + (i >> 1)) * block_s,
2040                                s->width, s->height, s->linesize,
2041                                s->h_edge_pos >> lowres, s->v_edge_pos >> lowres,
2042                                block_s, block_s, pix_op,
2043                                s->mv[dir][i][0], s->mv[dir][i][1]);
2044
2045             mx += s->mv[dir][i][0];
2046             my += s->mv[dir][i][1];
2047         }
2048
2049         if (!CONFIG_GRAY || !(s->avctx->flags & AV_CODEC_FLAG_GRAY))
2050             chroma_4mv_motion_lowres(s, dest_cb, dest_cr, ref_picture,
2051                                      pix_op, mx, my);
2052         break;
2053     case MV_TYPE_FIELD:
2054         if (s->picture_structure == PICT_FRAME) {
2055             /* top field */
2056             mpeg_motion_lowres(s, dest_y, dest_cb, dest_cr,
2057                                1, 0, s->field_select[dir][0],
2058                                ref_picture, pix_op,
2059                                s->mv[dir][0][0], s->mv[dir][0][1],
2060                                block_s, mb_y);
2061             /* bottom field */
2062             mpeg_motion_lowres(s, dest_y, dest_cb, dest_cr,
2063                                1, 1, s->field_select[dir][1],
2064                                ref_picture, pix_op,
2065                                s->mv[dir][1][0], s->mv[dir][1][1],
2066                                block_s, mb_y);
2067         } else {
2068             if (s->picture_structure != s->field_select[dir][0] + 1 &&
2069                 s->pict_type != AV_PICTURE_TYPE_B && !s->first_field) {
2070                 ref_picture = s->current_picture_ptr->f->data;
2071
2072             }
2073             mpeg_motion_lowres(s, dest_y, dest_cb, dest_cr,
2074                                0, 0, s->field_select[dir][0],
2075                                ref_picture, pix_op,
2076                                s->mv[dir][0][0],
2077                                s->mv[dir][0][1], 2 * block_s, mb_y >> 1);
2078             }
2079         break;
2080     case MV_TYPE_16X8:
2081         for (i = 0; i < 2; i++) {
2082             uint8_t **ref2picture;
2083
2084             if (s->picture_structure == s->field_select[dir][i] + 1 ||
2085                 s->pict_type == AV_PICTURE_TYPE_B || s->first_field) {
2086                 ref2picture = ref_picture;
2087             } else {
2088                 ref2picture = s->current_picture_ptr->f->data;
2089             }
2090
2091             mpeg_motion_lowres(s, dest_y, dest_cb, dest_cr,
2092                                0, 0, s->field_select[dir][i],
2093                                ref2picture, pix_op,
2094                                s->mv[dir][i][0], s->mv[dir][i][1] +
2095                                2 * block_s * i, block_s, mb_y >> 1);
2096
2097             dest_y  +=  2 * block_s *  s->linesize;
2098             dest_cb += (2 * block_s >> s->chroma_y_shift) * s->uvlinesize;
2099             dest_cr += (2 * block_s >> s->chroma_y_shift) * s->uvlinesize;
2100         }
2101         break;
2102     case MV_TYPE_DMV:
2103         if (s->picture_structure == PICT_FRAME) {
2104             for (i = 0; i < 2; i++) {
2105                 int j;
2106                 for (j = 0; j < 2; j++) {
2107                     mpeg_motion_lowres(s, dest_y, dest_cb, dest_cr,
2108                                        1, j, j ^ i,
2109                                        ref_picture, pix_op,
2110                                        s->mv[dir][2 * i + j][0],
2111                                        s->mv[dir][2 * i + j][1],
2112                                        block_s, mb_y);
2113                 }
2114                 pix_op = s->h264chroma.avg_h264_chroma_pixels_tab;
2115             }
2116         } else {
2117             for (i = 0; i < 2; i++) {
2118                 mpeg_motion_lowres(s, dest_y, dest_cb, dest_cr,
2119                                    0, 0, s->picture_structure != i + 1,
2120                                    ref_picture, pix_op,
2121                                    s->mv[dir][2 * i][0],s->mv[dir][2 * i][1],
2122                                    2 * block_s, mb_y >> 1);
2123
2124                 // after put we make avg of the same block
2125                 pix_op = s->h264chroma.avg_h264_chroma_pixels_tab;
2126
2127                 // opposite parity is always in the same
2128                 // frame if this is second field
2129                 if (!s->first_field) {
2130                     ref_picture = s->current_picture_ptr->f->data;
2131                 }
2132             }
2133         }
2134         break;
2135     default:
2136         av_assert2(0);
2137     }
2138 }
2139
2140 /**
2141  * find the lowest MB row referenced in the MVs
2142  */
2143 static int lowest_referenced_row(MpegEncContext *s, int dir)
2144 {
2145     int my_max = INT_MIN, my_min = INT_MAX, qpel_shift = !s->quarter_sample;
2146     int my, off, i, mvs;
2147
2148     if (s->picture_structure != PICT_FRAME || s->mcsel)
2149         goto unhandled;
2150
2151     switch (s->mv_type) {
2152         case MV_TYPE_16X16:
2153             mvs = 1;
2154             break;
2155         case MV_TYPE_16X8:
2156             mvs = 2;
2157             break;
2158         case MV_TYPE_8X8:
2159             mvs = 4;
2160             break;
2161         default:
2162             goto unhandled;
2163     }
2164
2165     for (i = 0; i < mvs; i++) {
2166         my = s->mv[dir][i][1];
2167         my_max = FFMAX(my_max, my);
2168         my_min = FFMIN(my_min, my);
2169     }
2170
2171     off = ((FFMAX(-my_min, my_max)<<qpel_shift) + 63) >> 6;
2172
2173     return av_clip(s->mb_y + off, 0, s->mb_height - 1);
2174 unhandled:
2175     return s->mb_height-1;
2176 }
2177
2178 /* put block[] to dest[] */
2179 static inline void put_dct(MpegEncContext *s,
2180                            int16_t *block, int i, uint8_t *dest, int line_size, int qscale)
2181 {
2182     s->dct_unquantize_intra(s, block, i, qscale);
2183     s->idsp.idct_put(dest, line_size, block);
2184 }
2185
2186 /* add block[] to dest[] */
2187 static inline void add_dct(MpegEncContext *s,
2188                            int16_t *block, int i, uint8_t *dest, int line_size)
2189 {
2190     if (s->block_last_index[i] >= 0) {
2191         s->idsp.idct_add(dest, line_size, block);
2192     }
2193 }
2194
2195 static inline void add_dequant_dct(MpegEncContext *s,
2196                            int16_t *block, int i, uint8_t *dest, int line_size, int qscale)
2197 {
2198     if (s->block_last_index[i] >= 0) {
2199         s->dct_unquantize_inter(s, block, i, qscale);
2200
2201         s->idsp.idct_add(dest, line_size, block);
2202     }
2203 }
2204
2205 /**
2206  * Clean dc, ac, coded_block for the current non-intra MB.
2207  */
2208 void ff_clean_intra_table_entries(MpegEncContext *s)
2209 {
2210     int wrap = s->b8_stride;
2211     int xy = s->block_index[0];
2212
2213     s->dc_val[0][xy           ] =
2214     s->dc_val[0][xy + 1       ] =
2215     s->dc_val[0][xy     + wrap] =
2216     s->dc_val[0][xy + 1 + wrap] = 1024;
2217     /* ac pred */
2218     memset(s->ac_val[0][xy       ], 0, 32 * sizeof(int16_t));
2219     memset(s->ac_val[0][xy + wrap], 0, 32 * sizeof(int16_t));
2220     if (s->msmpeg4_version>=3) {
2221         s->coded_block[xy           ] =
2222         s->coded_block[xy + 1       ] =
2223         s->coded_block[xy     + wrap] =
2224         s->coded_block[xy + 1 + wrap] = 0;
2225     }
2226     /* chroma */
2227     wrap = s->mb_stride;
2228     xy = s->mb_x + s->mb_y * wrap;
2229     s->dc_val[1][xy] =
2230     s->dc_val[2][xy] = 1024;
2231     /* ac pred */
2232     memset(s->ac_val[1][xy], 0, 16 * sizeof(int16_t));
2233     memset(s->ac_val[2][xy], 0, 16 * sizeof(int16_t));
2234
2235     s->mbintra_table[xy]= 0;
2236 }
2237
2238 /* generic function called after a macroblock has been parsed by the
2239    decoder or after it has been encoded by the encoder.
2240
2241    Important variables used:
2242    s->mb_intra : true if intra macroblock
2243    s->mv_dir   : motion vector direction
2244    s->mv_type  : motion vector type
2245    s->mv       : motion vector
2246    s->interlaced_dct : true if interlaced dct used (mpeg2)
2247  */
2248 static av_always_inline
2249 void mpv_reconstruct_mb_internal(MpegEncContext *s, int16_t block[12][64],
2250                             int lowres_flag, int is_mpeg12)
2251 {
2252     const int mb_xy = s->mb_y * s->mb_stride + s->mb_x;
2253
2254     if (CONFIG_XVMC &&
2255         s->avctx->hwaccel && s->avctx->hwaccel->decode_mb) {
2256         s->avctx->hwaccel->decode_mb(s);//xvmc uses pblocks
2257         return;
2258     }
2259
2260     if(s->avctx->debug&FF_DEBUG_DCT_COEFF) {
2261        /* print DCT coefficients */
2262        int i,j;
2263        av_log(s->avctx, AV_LOG_DEBUG, "DCT coeffs of MB at %dx%d:\n", s->mb_x, s->mb_y);
2264        for(i=0; i<6; i++){
2265            for(j=0; j<64; j++){
2266                av_log(s->avctx, AV_LOG_DEBUG, "%5d",
2267                       block[i][s->idsp.idct_permutation[j]]);
2268            }
2269            av_log(s->avctx, AV_LOG_DEBUG, "\n");
2270        }
2271     }
2272
2273     s->current_picture.qscale_table[mb_xy] = s->qscale;
2274
2275     /* update DC predictors for P macroblocks */
2276     if (!s->mb_intra) {
2277         if (!is_mpeg12 && (s->h263_pred || s->h263_aic)) {
2278             if(s->mbintra_table[mb_xy])
2279                 ff_clean_intra_table_entries(s);
2280         } else {
2281             s->last_dc[0] =
2282             s->last_dc[1] =
2283             s->last_dc[2] = 128 << s->intra_dc_precision;
2284         }
2285     }
2286     else if (!is_mpeg12 && (s->h263_pred || s->h263_aic))
2287         s->mbintra_table[mb_xy]=1;
2288
2289     if ((s->avctx->flags & AV_CODEC_FLAG_PSNR) || s->frame_skip_threshold || s->frame_skip_factor ||
2290         !(s->encoding && (s->intra_only || s->pict_type == AV_PICTURE_TYPE_B) &&
2291           s->avctx->mb_decision != FF_MB_DECISION_RD)) { // FIXME precalc
2292         uint8_t *dest_y, *dest_cb, *dest_cr;
2293         int dct_linesize, dct_offset;
2294         op_pixels_func (*op_pix)[4];
2295         qpel_mc_func (*op_qpix)[16];
2296         const int linesize   = s->current_picture.f->linesize[0]; //not s->linesize as this would be wrong for field pics
2297         const int uvlinesize = s->current_picture.f->linesize[1];
2298         const int readable= s->pict_type != AV_PICTURE_TYPE_B || s->encoding || s->avctx->draw_horiz_band || lowres_flag;
2299         const int block_size= lowres_flag ? 8>>s->avctx->lowres : 8;
2300
2301         /* avoid copy if macroblock skipped in last frame too */
2302         /* skip only during decoding as we might trash the buffers during encoding a bit */
2303         if(!s->encoding){
2304             uint8_t *mbskip_ptr = &s->mbskip_table[mb_xy];
2305
2306             if (s->mb_skipped) {
2307                 s->mb_skipped= 0;
2308                 av_assert2(s->pict_type!=AV_PICTURE_TYPE_I);
2309                 *mbskip_ptr = 1;
2310             } else if(!s->current_picture.reference) {
2311                 *mbskip_ptr = 1;
2312             } else{
2313                 *mbskip_ptr = 0; /* not skipped */
2314             }
2315         }
2316
2317         dct_linesize = linesize << s->interlaced_dct;
2318         dct_offset   = s->interlaced_dct ? linesize : linesize * block_size;
2319
2320         if(readable){
2321             dest_y=  s->dest[0];
2322             dest_cb= s->dest[1];
2323             dest_cr= s->dest[2];
2324         }else{
2325             dest_y = s->sc.b_scratchpad;
2326             dest_cb= s->sc.b_scratchpad+16*linesize;
2327             dest_cr= s->sc.b_scratchpad+32*linesize;
2328         }
2329
2330         if (!s->mb_intra) {
2331             /* motion handling */
2332             /* decoding or more than one mb_type (MC was already done otherwise) */
2333             if(!s->encoding){
2334
2335                 if(HAVE_THREADS && s->avctx->active_thread_type&FF_THREAD_FRAME) {
2336                     if (s->mv_dir & MV_DIR_FORWARD) {
2337                         ff_thread_await_progress(&s->last_picture_ptr->tf,
2338                                                  lowest_referenced_row(s, 0),
2339                                                  0);
2340                     }
2341                     if (s->mv_dir & MV_DIR_BACKWARD) {
2342                         ff_thread_await_progress(&s->next_picture_ptr->tf,
2343                                                  lowest_referenced_row(s, 1),
2344                                                  0);
2345                     }
2346                 }
2347
2348                 if(lowres_flag){
2349                     h264_chroma_mc_func *op_pix = s->h264chroma.put_h264_chroma_pixels_tab;
2350
2351                     if (s->mv_dir & MV_DIR_FORWARD) {
2352                         MPV_motion_lowres(s, dest_y, dest_cb, dest_cr, 0, s->last_picture.f->data, op_pix);
2353                         op_pix = s->h264chroma.avg_h264_chroma_pixels_tab;
2354                     }
2355                     if (s->mv_dir & MV_DIR_BACKWARD) {
2356                         MPV_motion_lowres(s, dest_y, dest_cb, dest_cr, 1, s->next_picture.f->data, op_pix);
2357                     }
2358                 }else{
2359                     op_qpix = s->me.qpel_put;
2360                     if ((!s->no_rounding) || s->pict_type==AV_PICTURE_TYPE_B){
2361                         op_pix = s->hdsp.put_pixels_tab;
2362                     }else{
2363                         op_pix = s->hdsp.put_no_rnd_pixels_tab;
2364                     }
2365                     if (s->mv_dir & MV_DIR_FORWARD) {
2366                         ff_mpv_motion(s, dest_y, dest_cb, dest_cr, 0, s->last_picture.f->data, op_pix, op_qpix);
2367                         op_pix = s->hdsp.avg_pixels_tab;
2368                         op_qpix= s->me.qpel_avg;
2369                     }
2370                     if (s->mv_dir & MV_DIR_BACKWARD) {
2371                         ff_mpv_motion(s, dest_y, dest_cb, dest_cr, 1, s->next_picture.f->data, op_pix, op_qpix);
2372                     }
2373                 }
2374             }
2375
2376             /* skip dequant / idct if we are really late ;) */
2377             if(s->avctx->skip_idct){
2378                 if(  (s->avctx->skip_idct >= AVDISCARD_NONREF && s->pict_type == AV_PICTURE_TYPE_B)
2379                    ||(s->avctx->skip_idct >= AVDISCARD_NONKEY && s->pict_type != AV_PICTURE_TYPE_I)
2380                    || s->avctx->skip_idct >= AVDISCARD_ALL)
2381                     goto skip_idct;
2382             }
2383
2384             /* add dct residue */
2385             if(s->encoding || !(   s->msmpeg4_version || s->codec_id==AV_CODEC_ID_MPEG1VIDEO || s->codec_id==AV_CODEC_ID_MPEG2VIDEO
2386                                 || (s->codec_id==AV_CODEC_ID_MPEG4 && !s->mpeg_quant))){
2387                 add_dequant_dct(s, block[0], 0, dest_y                          , dct_linesize, s->qscale);
2388                 add_dequant_dct(s, block[1], 1, dest_y              + block_size, dct_linesize, s->qscale);
2389                 add_dequant_dct(s, block[2], 2, dest_y + dct_offset             , dct_linesize, s->qscale);
2390                 add_dequant_dct(s, block[3], 3, dest_y + dct_offset + block_size, dct_linesize, s->qscale);
2391
2392                 if (!CONFIG_GRAY || !(s->avctx->flags & AV_CODEC_FLAG_GRAY)) {
2393                     if (s->chroma_y_shift){
2394                         add_dequant_dct(s, block[4], 4, dest_cb, uvlinesize, s->chroma_qscale);
2395                         add_dequant_dct(s, block[5], 5, dest_cr, uvlinesize, s->chroma_qscale);
2396                     }else{
2397                         dct_linesize >>= 1;
2398                         dct_offset >>=1;
2399                         add_dequant_dct(s, block[4], 4, dest_cb,              dct_linesize, s->chroma_qscale);
2400                         add_dequant_dct(s, block[5], 5, dest_cr,              dct_linesize, s->chroma_qscale);
2401                         add_dequant_dct(s, block[6], 6, dest_cb + dct_offset, dct_linesize, s->chroma_qscale);
2402                         add_dequant_dct(s, block[7], 7, dest_cr + dct_offset, dct_linesize, s->chroma_qscale);
2403                     }
2404                 }
2405             } else if(is_mpeg12 || (s->codec_id != AV_CODEC_ID_WMV2)){
2406                 add_dct(s, block[0], 0, dest_y                          , dct_linesize);
2407                 add_dct(s, block[1], 1, dest_y              + block_size, dct_linesize);
2408                 add_dct(s, block[2], 2, dest_y + dct_offset             , dct_linesize);
2409                 add_dct(s, block[3], 3, dest_y + dct_offset + block_size, dct_linesize);
2410
2411                 if (!CONFIG_GRAY || !(s->avctx->flags & AV_CODEC_FLAG_GRAY)) {
2412                     if(s->chroma_y_shift){//Chroma420
2413                         add_dct(s, block[4], 4, dest_cb, uvlinesize);
2414                         add_dct(s, block[5], 5, dest_cr, uvlinesize);
2415                     }else{
2416                         //chroma422
2417                         dct_linesize = uvlinesize << s->interlaced_dct;
2418                         dct_offset   = s->interlaced_dct ? uvlinesize : uvlinesize*block_size;
2419
2420                         add_dct(s, block[4], 4, dest_cb, dct_linesize);
2421                         add_dct(s, block[5], 5, dest_cr, dct_linesize);
2422                         add_dct(s, block[6], 6, dest_cb+dct_offset, dct_linesize);
2423                         add_dct(s, block[7], 7, dest_cr+dct_offset, dct_linesize);
2424                         if(!s->chroma_x_shift){//Chroma444
2425                             add_dct(s, block[8], 8, dest_cb+block_size, dct_linesize);
2426                             add_dct(s, block[9], 9, dest_cr+block_size, dct_linesize);
2427                             add_dct(s, block[10], 10, dest_cb+block_size+dct_offset, dct_linesize);
2428                             add_dct(s, block[11], 11, dest_cr+block_size+dct_offset, dct_linesize);
2429                         }
2430                     }
2431                 }//fi gray
2432             }
2433             else if (CONFIG_WMV2_DECODER || CONFIG_WMV2_ENCODER) {
2434                 ff_wmv2_add_mb(s, block, dest_y, dest_cb, dest_cr);
2435             }
2436         } else {
2437             /* dct only in intra block */
2438             if(s->encoding || !(s->codec_id==AV_CODEC_ID_MPEG1VIDEO || s->codec_id==AV_CODEC_ID_MPEG2VIDEO)){
2439                 put_dct(s, block[0], 0, dest_y                          , dct_linesize, s->qscale);
2440                 put_dct(s, block[1], 1, dest_y              + block_size, dct_linesize, s->qscale);
2441                 put_dct(s, block[2], 2, dest_y + dct_offset             , dct_linesize, s->qscale);
2442                 put_dct(s, block[3], 3, dest_y + dct_offset + block_size, dct_linesize, s->qscale);
2443
2444                 if (!CONFIG_GRAY || !(s->avctx->flags & AV_CODEC_FLAG_GRAY)) {
2445                     if(s->chroma_y_shift){
2446                         put_dct(s, block[4], 4, dest_cb, uvlinesize, s->chroma_qscale);
2447                         put_dct(s, block[5], 5, dest_cr, uvlinesize, s->chroma_qscale);
2448                     }else{
2449                         dct_offset >>=1;
2450                         dct_linesize >>=1;
2451                         put_dct(s, block[4], 4, dest_cb,              dct_linesize, s->chroma_qscale);
2452                         put_dct(s, block[5], 5, dest_cr,              dct_linesize, s->chroma_qscale);
2453                         put_dct(s, block[6], 6, dest_cb + dct_offset, dct_linesize, s->chroma_qscale);
2454                         put_dct(s, block[7], 7, dest_cr + dct_offset, dct_linesize, s->chroma_qscale);
2455                     }
2456                 }
2457             }else{
2458                 s->idsp.idct_put(dest_y,                           dct_linesize, block[0]);
2459                 s->idsp.idct_put(dest_y              + block_size, dct_linesize, block[1]);
2460                 s->idsp.idct_put(dest_y + dct_offset,              dct_linesize, block[2]);
2461                 s->idsp.idct_put(dest_y + dct_offset + block_size, dct_linesize, block[3]);
2462
2463                 if (!CONFIG_GRAY || !(s->avctx->flags & AV_CODEC_FLAG_GRAY)) {
2464                     if(s->chroma_y_shift){
2465                         s->idsp.idct_put(dest_cb, uvlinesize, block[4]);
2466                         s->idsp.idct_put(dest_cr, uvlinesize, block[5]);
2467                     }else{
2468
2469                         dct_linesize = uvlinesize << s->interlaced_dct;
2470                         dct_offset   = s->interlaced_dct ? uvlinesize : uvlinesize*block_size;
2471
2472                         s->idsp.idct_put(dest_cb,              dct_linesize, block[4]);
2473                         s->idsp.idct_put(dest_cr,              dct_linesize, block[5]);
2474                         s->idsp.idct_put(dest_cb + dct_offset, dct_linesize, block[6]);
2475                         s->idsp.idct_put(dest_cr + dct_offset, dct_linesize, block[7]);
2476                         if(!s->chroma_x_shift){//Chroma444
2477                             s->idsp.idct_put(dest_cb + block_size,              dct_linesize, block[8]);
2478                             s->idsp.idct_put(dest_cr + block_size,              dct_linesize, block[9]);
2479                             s->idsp.idct_put(dest_cb + block_size + dct_offset, dct_linesize, block[10]);
2480                             s->idsp.idct_put(dest_cr + block_size + dct_offset, dct_linesize, block[11]);
2481                         }
2482                     }
2483                 }//gray
2484             }
2485         }
2486 skip_idct:
2487         if(!readable){
2488             s->hdsp.put_pixels_tab[0][0](s->dest[0], dest_y ,   linesize,16);
2489             if (!CONFIG_GRAY || !(s->avctx->flags & AV_CODEC_FLAG_GRAY)) {
2490                 s->hdsp.put_pixels_tab[s->chroma_x_shift][0](s->dest[1], dest_cb, uvlinesize,16 >> s->chroma_y_shift);
2491                 s->hdsp.put_pixels_tab[s->chroma_x_shift][0](s->dest[2], dest_cr, uvlinesize,16 >> s->chroma_y_shift);
2492             }
2493         }
2494     }
2495 }
2496
2497 void ff_mpv_reconstruct_mb(MpegEncContext *s, int16_t block[12][64])
2498 {
2499 #if !CONFIG_SMALL
2500     if(s->out_format == FMT_MPEG1) {
2501         if(s->avctx->lowres) mpv_reconstruct_mb_internal(s, block, 1, 1);
2502         else                 mpv_reconstruct_mb_internal(s, block, 0, 1);
2503     } else
2504 #endif
2505     if(s->avctx->lowres) mpv_reconstruct_mb_internal(s, block, 1, 0);
2506     else                  mpv_reconstruct_mb_internal(s, block, 0, 0);
2507 }
2508
2509 void ff_mpeg_draw_horiz_band(MpegEncContext *s, int y, int h)
2510 {
2511     ff_draw_horiz_band(s->avctx, s->current_picture_ptr->f,
2512                        s->last_picture_ptr ? s->last_picture_ptr->f : NULL, y, h, s->picture_structure,
2513                        s->first_field, s->low_delay);
2514 }
2515
2516 void ff_init_block_index(MpegEncContext *s){ //FIXME maybe rename
2517     const int linesize   = s->current_picture.f->linesize[0]; //not s->linesize as this would be wrong for field pics
2518     const int uvlinesize = s->current_picture.f->linesize[1];
2519     const int mb_size= 4 - s->avctx->lowres;
2520
2521     s->block_index[0]= s->b8_stride*(s->mb_y*2    ) - 2 + s->mb_x*2;
2522     s->block_index[1]= s->b8_stride*(s->mb_y*2    ) - 1 + s->mb_x*2;
2523     s->block_index[2]= s->b8_stride*(s->mb_y*2 + 1) - 2 + s->mb_x*2;
2524     s->block_index[3]= s->b8_stride*(s->mb_y*2 + 1) - 1 + s->mb_x*2;
2525     s->block_index[4]= s->mb_stride*(s->mb_y + 1)                + s->b8_stride*s->mb_height*2 + s->mb_x - 1;
2526     s->block_index[5]= s->mb_stride*(s->mb_y + s->mb_height + 2) + s->b8_stride*s->mb_height*2 + s->mb_x - 1;
2527     //block_index is not used by mpeg2, so it is not affected by chroma_format
2528
2529     s->dest[0] = s->current_picture.f->data[0] + (int)((s->mb_x - 1U) <<  mb_size);
2530     s->dest[1] = s->current_picture.f->data[1] + (int)((s->mb_x - 1U) << (mb_size - s->chroma_x_shift));
2531     s->dest[2] = s->current_picture.f->data[2] + (int)((s->mb_x - 1U) << (mb_size - s->chroma_x_shift));
2532
2533     if(!(s->pict_type==AV_PICTURE_TYPE_B && s->avctx->draw_horiz_band && s->picture_structure==PICT_FRAME))
2534     {
2535         if(s->picture_structure==PICT_FRAME){
2536         s->dest[0] += s->mb_y *   linesize << mb_size;
2537         s->dest[1] += s->mb_y * uvlinesize << (mb_size - s->chroma_y_shift);
2538         s->dest[2] += s->mb_y * uvlinesize << (mb_size - s->chroma_y_shift);
2539         }else{
2540             s->dest[0] += (s->mb_y>>1) *   linesize << mb_size;
2541             s->dest[1] += (s->mb_y>>1) * uvlinesize << (mb_size - s->chroma_y_shift);
2542             s->dest[2] += (s->mb_y>>1) * uvlinesize << (mb_size - s->chroma_y_shift);
2543             av_assert1((s->mb_y&1) == (s->picture_structure == PICT_BOTTOM_FIELD));
2544         }
2545     }
2546 }
2547
2548 void ff_mpeg_flush(AVCodecContext *avctx){
2549     int i;
2550     MpegEncContext *s = avctx->priv_data;
2551
2552     if (!s || !s->picture)
2553         return;
2554
2555     for (i = 0; i < MAX_PICTURE_COUNT; i++)
2556         ff_mpeg_unref_picture(s->avctx, &s->picture[i]);
2557     s->current_picture_ptr = s->last_picture_ptr = s->next_picture_ptr = NULL;
2558
2559     ff_mpeg_unref_picture(s->avctx, &s->current_picture);
2560     ff_mpeg_unref_picture(s->avctx, &s->last_picture);
2561     ff_mpeg_unref_picture(s->avctx, &s->next_picture);
2562
2563     s->mb_x= s->mb_y= 0;
2564     s->closed_gop= 0;
2565
2566     s->parse_context.state= -1;
2567     s->parse_context.frame_start_found= 0;
2568     s->parse_context.overread= 0;
2569     s->parse_context.overread_index= 0;
2570     s->parse_context.index= 0;
2571     s->parse_context.last_index= 0;
2572     s->bitstream_buffer_size=0;
2573     s->pp_time=0;
2574 }
2575
2576 /**
2577  * set qscale and update qscale dependent variables.
2578  */
2579 void ff_set_qscale(MpegEncContext * s, int qscale)
2580 {
2581     if (qscale < 1)
2582         qscale = 1;
2583     else if (qscale > 31)
2584         qscale = 31;
2585
2586     s->qscale = qscale;
2587     s->chroma_qscale= s->chroma_qscale_table[qscale];
2588
2589     s->y_dc_scale= s->y_dc_scale_table[ qscale ];
2590     s->c_dc_scale= s->c_dc_scale_table[ s->chroma_qscale ];
2591 }
2592
2593 void ff_mpv_report_decode_progress(MpegEncContext *s)
2594 {
2595     if (s->pict_type != AV_PICTURE_TYPE_B && !s->partitioned_frame && !s->er.error_occurred)
2596         ff_thread_report_progress(&s->current_picture_ptr->tf, s->mb_y, 0);
2597 }