git.sesse.net Git - x264/blob - common/deblock.c

   1 /*****************************************************************************
   2  * deblock.c: h264 encoder library
   3  *****************************************************************************
   4  * Copyright (C) 2003-2008 x264 project
   5  *
   6  * Authors: Laurent Aimar <fenrir@via.ecp.fr>
   7  *          Loren Merritt <lorenm@u.washington.edu>
   8  *          Fiona Glaser <fiona@x264.com>
   9  *
  10  * This program is free software; you can redistribute it and/or modify
  11  * it under the terms of the GNU General Public License as published by
  12  * the Free Software Foundation; either version 2 of the License, or
  13  * (at your option) any later version.
  14  *
  15  * This program is distributed in the hope that it will be useful,
  16  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  17  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  18  * GNU General Public License for more details.
  19  *
  20  * You should have received a copy of the GNU General Public License
  21  * along with this program; if not, write to the Free Software
  22  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA  02111, USA.
  23  *****************************************************************************/
  24
  25 #include "common.h"
  26
  27 /* cavlc + 8x8 transform stores nnz per 16 coeffs for the purpose of
  28  * entropy coding, but per 64 coeffs for the purpose of deblocking */
  29 static void munge_cavlc_nnz_row( x264_t *h, int mb_y, uint8_t (*buf)[16] )
  30 {
  31     uint32_t (*src)[6] = (uint32_t(*)[6])h->mb.non_zero_count + mb_y * h->sps->i_mb_width;
  32     int8_t *transform = h->mb.mb_transform_size + mb_y * h->sps->i_mb_width;
  33     for( int x = 0; x<h->sps->i_mb_width; x++ )
  34     {
  35         memcpy( buf+x, src+x, 16 );
  36         if( transform[x] )
  37         {
  38             int nnz = src[x][0] | src[x][1];
  39             src[x][0] = src[x][1] = ((uint16_t)nnz ? 0x0101 : 0) + (nnz>>16 ? 0x01010000 : 0);
  40             nnz = src[x][2] | src[x][3];
  41             src[x][2] = src[x][3] = ((uint16_t)nnz ? 0x0101 : 0) + (nnz>>16 ? 0x01010000 : 0);
  42         }
  43     }
  44 }
  45
  46 static void restore_cavlc_nnz_row( x264_t *h, int mb_y, uint8_t (*buf)[16] )
  47 {
  48     uint8_t (*dst)[24] = h->mb.non_zero_count + mb_y * h->sps->i_mb_width;
  49     for( int x = 0; x < h->sps->i_mb_width; x++ )
  50         memcpy( dst+x, buf+x, 16 );
  51 }
  52
  53 static void munge_cavlc_nnz( x264_t *h, int mb_y, uint8_t (*buf)[16], void (*func)(x264_t*, int, uint8_t (*)[16]) )
  54 {
  55     func( h, mb_y, buf );
  56     if( mb_y > 0 )
  57         func( h, mb_y-1, buf + h->sps->i_mb_width );
  58     if( h->sh.b_mbaff )
  59     {
  60         func( h, mb_y+1, buf + h->sps->i_mb_width * 2 );
  61         if( mb_y > 0 )
  62             func( h, mb_y-2, buf + h->sps->i_mb_width * 3 );
  63     }
  64 }
  65
  66
  67 /* Deblocking filter */
  68 static const uint8_t i_alpha_table[52+12*2] =
  69 {
  70      0,  0,  0,  0,  0,  0,  0,  0,  0,  0,  0,  0,
  71      0,  0,  0,  0,  0,  0,  0,  0,  0,  0,
  72      0,  0,  0,  0,  0,  0,  4,  4,  5,  6,
  73      7,  8,  9, 10, 12, 13, 15, 17, 20, 22,
  74     25, 28, 32, 36, 40, 45, 50, 56, 63, 71,
  75     80, 90,101,113,127,144,162,182,203,226,
  76    255,255,
  77    255,255,255,255,255,255,255,255,255,255,255,255,
  78 };
  79 static const uint8_t i_beta_table[52+12*2] =
  80 {
  81      0,  0,  0,  0,  0,  0,  0,  0,  0,  0,  0,  0,
  82      0,  0,  0,  0,  0,  0,  0,  0,  0,  0,
  83      0,  0,  0,  0,  0,  0,  2,  2,  2,  3,
  84      3,  3,  3,  4,  4,  4,  6,  6,  7,  7,
  85      8,  8,  9,  9, 10, 10, 11, 11, 12, 12,
  86     13, 13, 14, 14, 15, 15, 16, 16, 17, 17,
  87     18, 18,
  88     18, 18, 18, 18, 18, 18, 18, 18, 18, 18, 18, 18,
  89 };
  90 static const int8_t i_tc0_table[52+12*2][4] =
  91 {
  92     {-1, 0, 0, 0 }, {-1, 0, 0, 0 }, {-1, 0, 0, 0 }, {-1, 0, 0, 0 }, {-1, 0, 0, 0 }, {-1, 0, 0, 0 },
  93     {-1, 0, 0, 0 }, {-1, 0, 0, 0 }, {-1, 0, 0, 0 }, {-1, 0, 0, 0 }, {-1, 0, 0, 0 }, {-1, 0, 0, 0 },
  94     {-1, 0, 0, 0 }, {-1, 0, 0, 0 }, {-1, 0, 0, 0 }, {-1, 0, 0, 0 }, {-1, 0, 0, 0 }, {-1, 0, 0, 0 },
  95     {-1, 0, 0, 0 }, {-1, 0, 0, 0 }, {-1, 0, 0, 0 }, {-1, 0, 0, 0 }, {-1, 0, 0, 0 }, {-1, 0, 0, 0 },
  96     {-1, 0, 0, 0 }, {-1, 0, 0, 0 }, {-1, 0, 0, 0 }, {-1, 0, 0, 0 }, {-1, 0, 0, 0 }, {-1, 0, 0, 1 },
  97     {-1, 0, 0, 1 }, {-1, 0, 0, 1 }, {-1, 0, 0, 1 }, {-1, 0, 1, 1 }, {-1, 0, 1, 1 }, {-1, 1, 1, 1 },
  98     {-1, 1, 1, 1 }, {-1, 1, 1, 1 }, {-1, 1, 1, 1 }, {-1, 1, 1, 2 }, {-1, 1, 1, 2 }, {-1, 1, 1, 2 },
  99     {-1, 1, 1, 2 }, {-1, 1, 2, 3 }, {-1, 1, 2, 3 }, {-1, 2, 2, 3 }, {-1, 2, 2, 4 }, {-1, 2, 3, 4 },
 100     {-1, 2, 3, 4 }, {-1, 3, 3, 5 }, {-1, 3, 4, 6 }, {-1, 3, 4, 6 }, {-1, 4, 5, 7 }, {-1, 4, 5, 8 },
 101     {-1, 4, 6, 9 }, {-1, 5, 7,10 }, {-1, 6, 8,11 }, {-1, 6, 8,13 }, {-1, 7,10,14 }, {-1, 8,11,16 },
 102     {-1, 9,12,18 }, {-1,10,13,20 }, {-1,11,15,23 }, {-1,13,17,25 },
 103     {-1,13,17,25 }, {-1,13,17,25 }, {-1,13,17,25 }, {-1,13,17,25 }, {-1,13,17,25 }, {-1,13,17,25 },
 104     {-1,13,17,25 }, {-1,13,17,25 }, {-1,13,17,25 }, {-1,13,17,25 }, {-1,13,17,25 }, {-1,13,17,25 },
 105 };
 106 #define alpha_table(x) i_alpha_table[(x)+12]
 107 #define beta_table(x)  i_beta_table[(x)+12]
 108 #define tc0_table(x)   i_tc0_table[(x)+12]
 109
 110 /* From ffmpeg */
 111 static inline void deblock_luma_c( uint8_t *pix, int xstride, int ystride, int alpha, int beta, int8_t *tc0 )
 112 {
 113     for( int i = 0; i < 4; i++ )
 114     {
 115         if( tc0[i] < 0 )
 116         {
 117             pix += 4*ystride;
 118             continue;
 119         }
 120         for( int d = 0; d < 4; d++ )
 121         {
 122             int p2 = pix[-3*xstride];
 123             int p1 = pix[-2*xstride];
 124             int p0 = pix[-1*xstride];
 125             int q0 = pix[ 0*xstride];
 126             int q1 = pix[ 1*xstride];
 127             int q2 = pix[ 2*xstride];
 128
 129             if( abs( p0 - q0 ) < alpha && abs( p1 - p0 ) < beta && abs( q1 - q0 ) < beta )
 130             {
 131                 int tc = tc0[i];
 132                 int delta;
 133                 if( abs( p2 - p0 ) < beta )
 134                 {
 135                     if( tc0[i] )
 136                         pix[-2*xstride] = p1 + x264_clip3( (( p2 + ((p0 + q0 + 1) >> 1)) >> 1) - p1, -tc0[i], tc0[i] );
 137                     tc++;
 138                 }
 139                 if( abs( q2 - q0 ) < beta )
 140                 {
 141                     if( tc0[i] )
 142                         pix[ 1*xstride] = q1 + x264_clip3( (( q2 + ((p0 + q0 + 1) >> 1)) >> 1) - q1, -tc0[i], tc0[i] );
 143                     tc++;
 144                 }
 145
 146                 delta = x264_clip3( (((q0 - p0 ) << 2) + (p1 - q1) + 4) >> 3, -tc, tc );
 147                 pix[-1*xstride] = x264_clip_uint8( p0 + delta );    /* p0' */
 148                 pix[ 0*xstride] = x264_clip_uint8( q0 - delta );    /* q0' */
 149             }
 150             pix += ystride;
 151         }
 152     }
 153 }
 154 static void deblock_v_luma_c( uint8_t *pix, int stride, int alpha, int beta, int8_t *tc0 )
 155 {
 156     deblock_luma_c( pix, stride, 1, alpha, beta, tc0 );
 157 }
 158 static void deblock_h_luma_c( uint8_t *pix, int stride, int alpha, int beta, int8_t *tc0 )
 159 {
 160     deblock_luma_c( pix, 1, stride, alpha, beta, tc0 );
 161 }
 162
 163 static inline void deblock_chroma_c( uint8_t *pix, int xstride, int ystride, int alpha, int beta, int8_t *tc0 )
 164 {
 165     for( int i = 0; i < 4; i++ )
 166     {
 167         int tc = tc0[i];
 168         if( tc <= 0 )
 169         {
 170             pix += 2*ystride;
 171             continue;
 172         }
 173         for( int d = 0; d < 2; d++ )
 174         {
 175             int p1 = pix[-2*xstride];
 176             int p0 = pix[-1*xstride];
 177             int q0 = pix[ 0*xstride];
 178             int q1 = pix[ 1*xstride];
 179
 180             if( abs( p0 - q0 ) < alpha && abs( p1 - p0 ) < beta && abs( q1 - q0 ) < beta )
 181             {
 182                 int delta = x264_clip3( (((q0 - p0 ) << 2) + (p1 - q1) + 4) >> 3, -tc, tc );
 183                 pix[-1*xstride] = x264_clip_uint8( p0 + delta );    /* p0' */
 184                 pix[ 0*xstride] = x264_clip_uint8( q0 - delta );    /* q0' */
 185             }
 186             pix += ystride;
 187         }
 188     }
 189 }
 190 static void deblock_v_chroma_c( uint8_t *pix, int stride, int alpha, int beta, int8_t *tc0 )
 191 {
 192     deblock_chroma_c( pix, stride, 1, alpha, beta, tc0 );
 193 }
 194 static void deblock_h_chroma_c( uint8_t *pix, int stride, int alpha, int beta, int8_t *tc0 )
 195 {
 196     deblock_chroma_c( pix, 1, stride, alpha, beta, tc0 );
 197 }
 198
 199 static inline void deblock_luma_intra_c( uint8_t *pix, int xstride, int ystride, int alpha, int beta )
 200 {
 201     for( int d = 0; d < 16; d++ )
 202     {
 203         int p2 = pix[-3*xstride];
 204         int p1 = pix[-2*xstride];
 205         int p0 = pix[-1*xstride];
 206         int q0 = pix[ 0*xstride];
 207         int q1 = pix[ 1*xstride];
 208         int q2 = pix[ 2*xstride];
 209
 210         if( abs( p0 - q0 ) < alpha && abs( p1 - p0 ) < beta && abs( q1 - q0 ) < beta )
 211         {
 212             if(abs( p0 - q0 ) < ((alpha >> 2) + 2) )
 213             {
 214                 if( abs( p2 - p0 ) < beta ) /* p0', p1', p2' */
 215                 {
 216                     const int p3 = pix[-4*xstride];
 217                     pix[-1*xstride] = ( p2 + 2*p1 + 2*p0 + 2*q0 + q1 + 4 ) >> 3;
 218                     pix[-2*xstride] = ( p2 + p1 + p0 + q0 + 2 ) >> 2;
 219                     pix[-3*xstride] = ( 2*p3 + 3*p2 + p1 + p0 + q0 + 4 ) >> 3;
 220                 }
 221                 else /* p0' */
 222                     pix[-1*xstride] = ( 2*p1 + p0 + q1 + 2 ) >> 2;
 223                 if( abs( q2 - q0 ) < beta ) /* q0', q1', q2' */
 224                 {
 225                     const int q3 = pix[3*xstride];
 226                     pix[0*xstride] = ( p1 + 2*p0 + 2*q0 + 2*q1 + q2 + 4 ) >> 3;
 227                     pix[1*xstride] = ( p0 + q0 + q1 + q2 + 2 ) >> 2;
 228                     pix[2*xstride] = ( 2*q3 + 3*q2 + q1 + q0 + p0 + 4 ) >> 3;
 229                 }
 230                 else /* q0' */
 231                     pix[0*xstride] = ( 2*q1 + q0 + p1 + 2 ) >> 2;
 232             }
 233             else /* p0', q0' */
 234             {
 235                 pix[-1*xstride] = ( 2*p1 + p0 + q1 + 2 ) >> 2;
 236                 pix[ 0*xstride] = ( 2*q1 + q0 + p1 + 2 ) >> 2;
 237             }
 238         }
 239         pix += ystride;
 240     }
 241 }
 242 static void deblock_v_luma_intra_c( uint8_t *pix, int stride, int alpha, int beta )
 243 {
 244     deblock_luma_intra_c( pix, stride, 1, alpha, beta );
 245 }
 246 static void deblock_h_luma_intra_c( uint8_t *pix, int stride, int alpha, int beta )
 247 {
 248     deblock_luma_intra_c( pix, 1, stride, alpha, beta );
 249 }
 250
 251 static inline void deblock_chroma_intra_c( uint8_t *pix, int xstride, int ystride, int alpha, int beta )
 252 {
 253     for( int d = 0; d < 8; d++ )
 254     {
 255         int p1 = pix[-2*xstride];
 256         int p0 = pix[-1*xstride];
 257         int q0 = pix[ 0*xstride];
 258         int q1 = pix[ 1*xstride];
 259
 260         if( abs( p0 - q0 ) < alpha && abs( p1 - p0 ) < beta && abs( q1 - q0 ) < beta )
 261         {
 262             pix[-1*xstride] = (2*p1 + p0 + q1 + 2) >> 2;   /* p0' */
 263             pix[ 0*xstride] = (2*q1 + q0 + p1 + 2) >> 2;   /* q0' */
 264         }
 265         pix += ystride;
 266     }
 267 }
 268 static void deblock_v_chroma_intra_c( uint8_t *pix, int stride, int alpha, int beta )
 269 {
 270     deblock_chroma_intra_c( pix, stride, 1, alpha, beta );
 271 }
 272 static void deblock_h_chroma_intra_c( uint8_t *pix, int stride, int alpha, int beta )
 273 {
 274     deblock_chroma_intra_c( pix, 1, stride, alpha, beta );
 275 }
 276
 277 static void deblock_strength_c( uint8_t nnz[X264_SCAN8_SIZE], int8_t ref[2][X264_SCAN8_LUMA_SIZE],
 278                                 int16_t mv[2][X264_SCAN8_LUMA_SIZE][2], uint8_t bs[2][4][4], int mvy_limit,
 279                                 int bframe )
 280 {
 281     for( int dir = 0; dir < 2; dir++ )
 282     {
 283         int s1 = dir ? 1 : 8;
 284         int s2 = dir ? 8 : 1;
 285         for( int edge = 0; edge < 4; edge++ )
 286             for( int i = 0, loc = X264_SCAN8_0+edge*s2; i < 4; i++, loc += s1 )
 287             {
 288                 int locn = loc - s2;
 289                 if( nnz[loc] || nnz[locn] )
 290                     bs[dir][edge][i] = 2;
 291                 else if( ref[0][loc] != ref[0][locn] ||
 292                          abs( mv[0][loc][0] - mv[0][locn][0] ) >= 4 ||
 293                          abs( mv[0][loc][1] - mv[0][locn][1] ) >= mvy_limit ||
 294                         (bframe && (ref[1][loc] != ref[1][locn] ||
 295                          abs( mv[1][loc][0] - mv[1][locn][0] ) >= 4 ||
 296                          abs( mv[1][loc][1] - mv[1][locn][1] ) >= mvy_limit )))
 297                 {
 298                     bs[dir][edge][i] = 1;
 299                 }
 300                 else
 301                     bs[dir][edge][i] = 0;
 302             }
 303     }
 304 }
 305
 306 static inline void deblock_edge( x264_t *h, uint8_t *pix1, uint8_t *pix2, int i_stride, uint8_t bS[4], int i_qp, int b_chroma, x264_deblock_inter_t pf_inter )
 307 {
 308     int index_a = i_qp + h->sh.i_alpha_c0_offset;
 309     int alpha = alpha_table(index_a);
 310     int beta  = beta_table(i_qp + h->sh.i_beta_offset);
 311     int8_t tc[4];
 312
 313     if( !M32(bS) || !alpha || !beta )
 314         return;
 315
 316     tc[0] = tc0_table(index_a)[bS[0]] + b_chroma;
 317     tc[1] = tc0_table(index_a)[bS[1]] + b_chroma;
 318     tc[2] = tc0_table(index_a)[bS[2]] + b_chroma;
 319     tc[3] = tc0_table(index_a)[bS[3]] + b_chroma;
 320
 321     pf_inter( pix1, i_stride, alpha, beta, tc );
 322     if( b_chroma )
 323         pf_inter( pix2, i_stride, alpha, beta, tc );
 324 }
 325
 326 static inline void deblock_edge_intra( x264_t *h, uint8_t *pix1, uint8_t *pix2, int i_stride, uint8_t bS[4], int i_qp, int b_chroma, x264_deblock_intra_t pf_intra )
 327 {
 328     int alpha = alpha_table(i_qp + h->sh.i_alpha_c0_offset);
 329     int beta  = beta_table(i_qp + h->sh.i_beta_offset);
 330
 331     if( !alpha || !beta )
 332         return;
 333
 334     pf_intra( pix1, i_stride, alpha, beta );
 335     if( b_chroma )
 336         pf_intra( pix2, i_stride, alpha, beta );
 337 }
 338
 339 void x264_frame_deblock_row( x264_t *h, int mb_y )
 340 {
 341     int b_interlaced = h->sh.b_mbaff;
 342     int qp_thresh = 15 - X264_MIN(h->sh.i_alpha_c0_offset, h->sh.i_beta_offset) - X264_MAX(0, h->param.analyse.i_chroma_qp_offset);
 343     int stridey   = h->fdec->i_stride[0];
 344     int stride2y  = stridey << b_interlaced;
 345     int strideuv  = h->fdec->i_stride[1];
 346     int stride2uv = strideuv << b_interlaced;
 347     uint8_t (*nnz_backup)[16] = h->scratch_buffer;
 348
 349     if( !h->pps->b_cabac && h->pps->b_transform_8x8_mode )
 350         munge_cavlc_nnz( h, mb_y, nnz_backup, munge_cavlc_nnz_row );
 351
 352     for( int mb_x = 0; mb_x < h->sps->i_mb_width; mb_x += (~b_interlaced | mb_y)&1, mb_y ^= b_interlaced )
 353     {
 354         x264_prefetch_fenc( h, h->fdec, mb_x, mb_y );
 355         x264_macroblock_cache_load_neighbours_deblock( h, mb_x, mb_y );
 356
 357         int mb_xy = h->mb.i_mb_xy;
 358         int transform_8x8 = h->mb.mb_transform_size[h->mb.i_mb_xy];
 359         int intra_cur = IS_INTRA( h->mb.type[mb_xy] );
 360         uint8_t (*bs)[4][4] = h->deblock_strength[mb_y&b_interlaced][mb_x];
 361
 362         uint8_t *pixy = h->fdec->plane[0] + 16*mb_y*stridey  + 16*mb_x;
 363         uint8_t *pixu = h->fdec->plane[1] +  8*mb_y*strideuv +  8*mb_x;
 364         uint8_t *pixv = h->fdec->plane[2] +  8*mb_y*strideuv +  8*mb_x;
 365         if( b_interlaced && (mb_y&1) )
 366         {
 367             pixy -= 15*stridey;
 368             pixu -=  7*strideuv;
 369             pixv -=  7*strideuv;
 370         }
 371
 372         int qp = h->mb.qp[mb_xy];
 373         int qpc = h->chroma_qp_table[qp];
 374         int first_edge_only = h->mb.type[mb_xy] == P_SKIP || qp <= qp_thresh;
 375
 376         #define FILTER( intra, dir, edge, qp, chroma_qp )\
 377         do\
 378         {\
 379             deblock_edge##intra( h, pixy + 4*edge*(dir?stride2y:1), NULL,\
 380                                  stride2y, bs[dir][edge], qp, 0,\
 381                                  h->loopf.deblock_luma##intra[dir] );\
 382             if( !(edge & 1) )\
 383                 deblock_edge##intra( h, pixu + 2*edge*(dir?stride2uv:1), pixv + 2*edge*(dir?stride2uv:1),\
 384                                      stride2uv, bs[dir][edge], chroma_qp, 1,\
 385                                      h->loopf.deblock_chroma##intra[dir] );\
 386         } while(0)
 387
 388         if( h->mb.i_neighbour & MB_LEFT )
 389         {
 390             int qpl = h->mb.qp[h->mb.i_mb_left_xy];
 391             int qp_left = (qp + qpl + 1) >> 1;
 392             int qpc_left = (h->chroma_qp_table[qp] + h->chroma_qp_table[qpl] + 1) >> 1;
 393             int intra_left = IS_INTRA( h->mb.type[h->mb.i_mb_left_xy] );
 394             if( intra_cur || intra_left )
 395                 FILTER( _intra, 0, 0, qp_left, qpc_left );
 396             else
 397                 FILTER(       , 0, 0, qp_left, qpc_left );
 398         }
 399
 400         if( !first_edge_only )
 401         {
 402             if( !transform_8x8 ) FILTER( , 0, 1, qp, qpc );
 403                                  FILTER( , 0, 2, qp, qpc );
 404             if( !transform_8x8 ) FILTER( , 0, 3, qp, qpc );
 405         }
 406
 407         if( h->mb.i_neighbour & MB_TOP )
 408         {
 409             int qpt = h->mb.qp[h->mb.i_mb_top_xy];
 410             int qp_top = (qp + qpt + 1) >> 1;
 411             int qpc_top = (h->chroma_qp_table[qp] + h->chroma_qp_table[qpt] + 1) >> 1;
 412             int intra_top = IS_INTRA( h->mb.type[h->mb.i_mb_top_xy] );
 413             if( !b_interlaced && (intra_cur || intra_top) )
 414                 FILTER( _intra, 1, 0, qp_top, qpc_top );
 415             else
 416             {
 417                 if( intra_top )
 418                     memset( bs[1][0], 3, sizeof(bs[1][0]) );
 419                 FILTER(       , 1, 0, qp_top, qpc_top );
 420             }
 421         }
 422
 423         if( !first_edge_only )
 424         {
 425             if( !transform_8x8 ) FILTER( , 1, 1, qp, qpc );
 426                                  FILTER( , 1, 2, qp, qpc );
 427             if( !transform_8x8 ) FILTER( , 1, 3, qp, qpc );
 428         }
 429     }
 430
 431     if( !h->pps->b_cabac && h->pps->b_transform_8x8_mode )
 432         munge_cavlc_nnz( h, mb_y, nnz_backup, restore_cavlc_nnz_row );
 433 }
 434
 435 #ifdef HAVE_MMX
 436 void x264_deblock_v_chroma_mmxext( uint8_t *pix, int stride, int alpha, int beta, int8_t *tc0 );
 437 void x264_deblock_h_chroma_mmxext( uint8_t *pix, int stride, int alpha, int beta, int8_t *tc0 );
 438 void x264_deblock_v_chroma_intra_mmxext( uint8_t *pix, int stride, int alpha, int beta );
 439 void x264_deblock_h_chroma_intra_mmxext( uint8_t *pix, int stride, int alpha, int beta );
 440
 441 void x264_deblock_v_luma_sse2( uint8_t *pix, int stride, int alpha, int beta, int8_t *tc0 );
 442 void x264_deblock_h_luma_sse2( uint8_t *pix, int stride, int alpha, int beta, int8_t *tc0 );
 443 void x264_deblock_v_luma_intra_sse2( uint8_t *pix, int stride, int alpha, int beta );
 444 void x264_deblock_h_luma_intra_sse2( uint8_t *pix, int stride, int alpha, int beta );
 445 void x264_deblock_strength_mmxext( uint8_t nnz[X264_SCAN8_SIZE], int8_t ref[2][X264_SCAN8_LUMA_SIZE],
 446                                    int16_t mv[2][X264_SCAN8_LUMA_SIZE][2], uint8_t bs[2][4][4],
 447                                    int mvy_limit, int bframe );
 448 void x264_deblock_strength_sse2  ( uint8_t nnz[X264_SCAN8_SIZE], int8_t ref[2][X264_SCAN8_LUMA_SIZE],
 449                                    int16_t mv[2][X264_SCAN8_LUMA_SIZE][2], uint8_t bs[2][4][4],
 450                                    int mvy_limit, int bframe );
 451 void x264_deblock_strength_ssse3 ( uint8_t nnz[X264_SCAN8_SIZE], int8_t ref[2][X264_SCAN8_LUMA_SIZE],
 452                                    int16_t mv[2][X264_SCAN8_LUMA_SIZE][2], uint8_t bs[2][4][4],
 453                                    int mvy_limit, int bframe );
 454 #ifdef ARCH_X86
 455 void x264_deblock_h_luma_mmxext( uint8_t *pix, int stride, int alpha, int beta, int8_t *tc0 );
 456 void x264_deblock_v8_luma_mmxext( uint8_t *pix, int stride, int alpha, int beta, int8_t *tc0 );
 457 void x264_deblock_h_luma_intra_mmxext( uint8_t *pix, int stride, int alpha, int beta );
 458 void x264_deblock_v8_luma_intra_mmxext( uint8_t *pix, int stride, int alpha, int beta );
 459
 460 static void x264_deblock_v_luma_mmxext( uint8_t *pix, int stride, int alpha, int beta, int8_t *tc0 )
 461 {
 462     x264_deblock_v8_luma_mmxext( pix,   stride, alpha, beta, tc0   );
 463     x264_deblock_v8_luma_mmxext( pix+8, stride, alpha, beta, tc0+2 );
 464 }
 465 static void x264_deblock_v_luma_intra_mmxext( uint8_t *pix, int stride, int alpha, int beta )
 466 {
 467     x264_deblock_v8_luma_intra_mmxext( pix,   stride, alpha, beta );
 468     x264_deblock_v8_luma_intra_mmxext( pix+8, stride, alpha, beta );
 469 }
 470 #endif
 471 #endif
 472
 473 #ifdef ARCH_PPC
 474 void x264_deblock_v_luma_altivec( uint8_t *pix, int stride, int alpha, int beta, int8_t *tc0 );
 475 void x264_deblock_h_luma_altivec( uint8_t *pix, int stride, int alpha, int beta, int8_t *tc0 );
 476 #endif // ARCH_PPC
 477
 478 #ifdef HAVE_ARMV6
 479 void x264_deblock_v_luma_neon( uint8_t *, int, int, int, int8_t * );
 480 void x264_deblock_h_luma_neon( uint8_t *, int, int, int, int8_t * );
 481 void x264_deblock_v_chroma_neon( uint8_t *, int, int, int, int8_t * );
 482 void x264_deblock_h_chroma_neon( uint8_t *, int, int, int, int8_t * );
 483 #endif
 484
 485 void x264_deblock_init( int cpu, x264_deblock_function_t *pf )
 486 {
 487     pf->deblock_luma[1] = deblock_v_luma_c;
 488     pf->deblock_luma[0] = deblock_h_luma_c;
 489     pf->deblock_chroma[1] = deblock_v_chroma_c;
 490     pf->deblock_chroma[0] = deblock_h_chroma_c;
 491     pf->deblock_luma_intra[1] = deblock_v_luma_intra_c;
 492     pf->deblock_luma_intra[0] = deblock_h_luma_intra_c;
 493     pf->deblock_chroma_intra[1] = deblock_v_chroma_intra_c;
 494     pf->deblock_chroma_intra[0] = deblock_h_chroma_intra_c;
 495     pf->deblock_strength = deblock_strength_c;
 496
 497 #ifdef HAVE_MMX
 498     if( cpu&X264_CPU_MMXEXT )
 499     {
 500         pf->deblock_chroma[1] = x264_deblock_v_chroma_mmxext;
 501         pf->deblock_chroma[0] = x264_deblock_h_chroma_mmxext;
 502         pf->deblock_chroma_intra[1] = x264_deblock_v_chroma_intra_mmxext;
 503         pf->deblock_chroma_intra[0] = x264_deblock_h_chroma_intra_mmxext;
 504 #ifdef ARCH_X86
 505         pf->deblock_luma[1] = x264_deblock_v_luma_mmxext;
 506         pf->deblock_luma[0] = x264_deblock_h_luma_mmxext;
 507         pf->deblock_luma_intra[1] = x264_deblock_v_luma_intra_mmxext;
 508         pf->deblock_luma_intra[0] = x264_deblock_h_luma_intra_mmxext;
 509 #endif
 510         pf->deblock_strength = x264_deblock_strength_mmxext;
 511         if( cpu&X264_CPU_SSE2 )
 512         {
 513             pf->deblock_strength = x264_deblock_strength_sse2;
 514             if( !(cpu&X264_CPU_STACK_MOD4) )
 515             {
 516                 pf->deblock_luma[1] = x264_deblock_v_luma_sse2;
 517                 pf->deblock_luma[0] = x264_deblock_h_luma_sse2;
 518                 pf->deblock_luma_intra[1] = x264_deblock_v_luma_intra_sse2;
 519                 pf->deblock_luma_intra[0] = x264_deblock_h_luma_intra_sse2;
 520             }
 521         }
 522         if( cpu&X264_CPU_SSSE3 )
 523             pf->deblock_strength = x264_deblock_strength_ssse3;
 524     }
 525 #endif
 526
 527 #ifdef HAVE_ALTIVEC
 528     if( cpu&X264_CPU_ALTIVEC )
 529     {
 530         pf->deblock_luma[1] = x264_deblock_v_luma_altivec;
 531         pf->deblock_luma[0] = x264_deblock_h_luma_altivec;
 532    }
 533 #endif // HAVE_ALTIVEC
 534
 535 #ifdef HAVE_ARMV6
 536    if( cpu&X264_CPU_NEON )
 537    {
 538         pf->deblock_luma[1] = x264_deblock_v_luma_neon;
 539         pf->deblock_luma[0] = x264_deblock_h_luma_neon;
 540         pf->deblock_chroma[1] = x264_deblock_v_chroma_neon;
 541         pf->deblock_chroma[0] = x264_deblock_h_chroma_neon;
 542    }
 543 #endif
 544 }