]> git.sesse.net Git - ffmpeg/blob - libavcodec/cavs.c
celp filters: Do not read earlier than the start of the 'out' vector.
[ffmpeg] / libavcodec / cavs.c
1 /*
2  * Chinese AVS video (AVS1-P2, JiZhun profile) decoder.
3  * Copyright (c) 2006  Stefan Gehrer <stefan.gehrer@gmx.de>
4  *
5  * This file is part of Libav.
6  *
7  * Libav is free software; you can redistribute it and/or
8  * modify it under the terms of the GNU Lesser General Public
9  * License as published by the Free Software Foundation; either
10  * version 2.1 of the License, or (at your option) any later version.
11  *
12  * Libav is distributed in the hope that it will be useful,
13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
15  * Lesser General Public License for more details.
16  *
17  * You should have received a copy of the GNU Lesser General Public
18  * License along with Libav; if not, write to the Free Software
19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
20  */
21
22 /**
23  * @file
24  * Chinese AVS video (AVS1-P2, JiZhun profile) decoder
25  * @author Stefan Gehrer <stefan.gehrer@gmx.de>
26  */
27
28 #include "avcodec.h"
29 #include "get_bits.h"
30 #include "golomb.h"
31 #include "mathops.h"
32 #include "cavs.h"
33 #include "cavsdata.h"
34
35 /*****************************************************************************
36  *
37  * in-loop deblocking filter
38  *
39  ****************************************************************************/
40
41 static inline int get_bs(cavs_vector *mvP, cavs_vector *mvQ, int b) {
42     if((mvP->ref == REF_INTRA) || (mvQ->ref == REF_INTRA))
43         return 2;
44     if( (abs(mvP->x - mvQ->x) >= 4) ||  (abs(mvP->y - mvQ->y) >= 4) )
45         return 1;
46     if(b){
47         mvP += MV_BWD_OFFS;
48         mvQ += MV_BWD_OFFS;
49         if( (abs(mvP->x - mvQ->x) >= 4) ||  (abs(mvP->y - mvQ->y) >= 4) )
50             return 1;
51     }else{
52         if(mvP->ref != mvQ->ref)
53             return 1;
54     }
55     return 0;
56 }
57
58 #define SET_PARAMS                                            \
59     alpha = alpha_tab[av_clip(qp_avg + h->alpha_offset,0,63)];   \
60     beta  =  beta_tab[av_clip(qp_avg + h->beta_offset, 0,63)];   \
61     tc    =    tc_tab[av_clip(qp_avg + h->alpha_offset,0,63)];
62
63 /**
64  * in-loop deblocking filter for a single macroblock
65  *
66  * boundary strength (bs) mapping:
67  *
68  * --4---5--
69  * 0   2   |
70  * | 6 | 7 |
71  * 1   3   |
72  * ---------
73  *
74  */
75 void ff_cavs_filter(AVSContext *h, enum cavs_mb mb_type) {
76     uint8_t bs[8];
77     int qp_avg, alpha, beta, tc;
78     int i;
79
80     /* save un-deblocked lines */
81     h->topleft_border_y = h->top_border_y[h->mbx*16+15];
82     h->topleft_border_u = h->top_border_u[h->mbx*10+8];
83     h->topleft_border_v = h->top_border_v[h->mbx*10+8];
84     memcpy(&h->top_border_y[h->mbx*16], h->cy + 15* h->l_stride,16);
85     memcpy(&h->top_border_u[h->mbx*10+1], h->cu +  7* h->c_stride,8);
86     memcpy(&h->top_border_v[h->mbx*10+1], h->cv +  7* h->c_stride,8);
87     for(i=0;i<8;i++) {
88         h->left_border_y[i*2+1] = *(h->cy + 15 + (i*2+0)*h->l_stride);
89         h->left_border_y[i*2+2] = *(h->cy + 15 + (i*2+1)*h->l_stride);
90         h->left_border_u[i+1] = *(h->cu + 7 + i*h->c_stride);
91         h->left_border_v[i+1] = *(h->cv + 7 + i*h->c_stride);
92     }
93     if(!h->loop_filter_disable) {
94         /* determine bs */
95         if(mb_type == I_8X8)
96             memset(bs,2,8);
97         else{
98             memset(bs,0,8);
99             if(ff_cavs_partition_flags[mb_type] & SPLITV){
100                 bs[2] = get_bs(&h->mv[MV_FWD_X0], &h->mv[MV_FWD_X1], mb_type > P_8X8);
101                 bs[3] = get_bs(&h->mv[MV_FWD_X2], &h->mv[MV_FWD_X3], mb_type > P_8X8);
102             }
103             if(ff_cavs_partition_flags[mb_type] & SPLITH){
104                 bs[6] = get_bs(&h->mv[MV_FWD_X0], &h->mv[MV_FWD_X2], mb_type > P_8X8);
105                 bs[7] = get_bs(&h->mv[MV_FWD_X1], &h->mv[MV_FWD_X3], mb_type > P_8X8);
106             }
107             bs[0] = get_bs(&h->mv[MV_FWD_A1], &h->mv[MV_FWD_X0], mb_type > P_8X8);
108             bs[1] = get_bs(&h->mv[MV_FWD_A3], &h->mv[MV_FWD_X2], mb_type > P_8X8);
109             bs[4] = get_bs(&h->mv[MV_FWD_B2], &h->mv[MV_FWD_X0], mb_type > P_8X8);
110             bs[5] = get_bs(&h->mv[MV_FWD_B3], &h->mv[MV_FWD_X1], mb_type > P_8X8);
111         }
112         if(AV_RN64(bs)) {
113             if(h->flags & A_AVAIL) {
114                 qp_avg = (h->qp + h->left_qp + 1) >> 1;
115                 SET_PARAMS;
116                 h->cdsp.cavs_filter_lv(h->cy,h->l_stride,alpha,beta,tc,bs[0],bs[1]);
117                 h->cdsp.cavs_filter_cv(h->cu,h->c_stride,alpha,beta,tc,bs[0],bs[1]);
118                 h->cdsp.cavs_filter_cv(h->cv,h->c_stride,alpha,beta,tc,bs[0],bs[1]);
119             }
120             qp_avg = h->qp;
121             SET_PARAMS;
122             h->cdsp.cavs_filter_lv(h->cy + 8,h->l_stride,alpha,beta,tc,bs[2],bs[3]);
123             h->cdsp.cavs_filter_lh(h->cy + 8*h->l_stride,h->l_stride,alpha,beta,tc,
124                            bs[6],bs[7]);
125
126             if(h->flags & B_AVAIL) {
127                 qp_avg = (h->qp + h->top_qp[h->mbx] + 1) >> 1;
128                 SET_PARAMS;
129                 h->cdsp.cavs_filter_lh(h->cy,h->l_stride,alpha,beta,tc,bs[4],bs[5]);
130                 h->cdsp.cavs_filter_ch(h->cu,h->c_stride,alpha,beta,tc,bs[4],bs[5]);
131                 h->cdsp.cavs_filter_ch(h->cv,h->c_stride,alpha,beta,tc,bs[4],bs[5]);
132             }
133         }
134     }
135     h->left_qp = h->qp;
136     h->top_qp[h->mbx] = h->qp;
137 }
138
139 #undef SET_PARAMS
140
141 /*****************************************************************************
142  *
143  * spatial intra prediction
144  *
145  ****************************************************************************/
146
147 void ff_cavs_load_intra_pred_luma(AVSContext *h, uint8_t *top,
148                                         uint8_t **left, int block) {
149     int i;
150
151     switch(block) {
152     case 0:
153         *left = h->left_border_y;
154         h->left_border_y[0] = h->left_border_y[1];
155         memset(&h->left_border_y[17],h->left_border_y[16],9);
156         memcpy(&top[1],&h->top_border_y[h->mbx*16],16);
157         top[17] = top[16];
158         top[0] = top[1];
159         if((h->flags & A_AVAIL) && (h->flags & B_AVAIL))
160             h->left_border_y[0] = top[0] = h->topleft_border_y;
161         break;
162     case 1:
163         *left = h->intern_border_y;
164         for(i=0;i<8;i++)
165             h->intern_border_y[i+1] = *(h->cy + 7 + i*h->l_stride);
166         memset(&h->intern_border_y[9],h->intern_border_y[8],9);
167         h->intern_border_y[0] = h->intern_border_y[1];
168         memcpy(&top[1],&h->top_border_y[h->mbx*16+8],8);
169         if(h->flags & C_AVAIL)
170             memcpy(&top[9],&h->top_border_y[(h->mbx + 1)*16],8);
171         else
172             memset(&top[9],top[8],9);
173         top[17] = top[16];
174         top[0] = top[1];
175         if(h->flags & B_AVAIL)
176             h->intern_border_y[0] = top[0] = h->top_border_y[h->mbx*16+7];
177         break;
178     case 2:
179         *left = &h->left_border_y[8];
180         memcpy(&top[1],h->cy + 7*h->l_stride,16);
181         top[17] = top[16];
182         top[0] = top[1];
183         if(h->flags & A_AVAIL)
184             top[0] = h->left_border_y[8];
185         break;
186     case 3:
187         *left = &h->intern_border_y[8];
188         for(i=0;i<8;i++)
189             h->intern_border_y[i+9] = *(h->cy + 7 + (i+8)*h->l_stride);
190         memset(&h->intern_border_y[17],h->intern_border_y[16],9);
191         memcpy(&top[0],h->cy + 7 + 7*h->l_stride,9);
192         memset(&top[9],top[8],9);
193         break;
194     }
195 }
196
197 void ff_cavs_load_intra_pred_chroma(AVSContext *h) {
198     /* extend borders by one pixel */
199     h->left_border_u[9] = h->left_border_u[8];
200     h->left_border_v[9] = h->left_border_v[8];
201     h->top_border_u[h->mbx*10+9] = h->top_border_u[h->mbx*10+8];
202     h->top_border_v[h->mbx*10+9] = h->top_border_v[h->mbx*10+8];
203     if(h->mbx && h->mby) {
204         h->top_border_u[h->mbx*10] = h->left_border_u[0] = h->topleft_border_u;
205         h->top_border_v[h->mbx*10] = h->left_border_v[0] = h->topleft_border_v;
206     } else {
207         h->left_border_u[0] = h->left_border_u[1];
208         h->left_border_v[0] = h->left_border_v[1];
209         h->top_border_u[h->mbx*10] = h->top_border_u[h->mbx*10+1];
210         h->top_border_v[h->mbx*10] = h->top_border_v[h->mbx*10+1];
211     }
212 }
213
214 static void intra_pred_vert(uint8_t *d,uint8_t *top,uint8_t *left,int stride) {
215     int y;
216     uint64_t a = AV_RN64(&top[1]);
217     for(y=0;y<8;y++) {
218         *((uint64_t *)(d+y*stride)) = a;
219     }
220 }
221
222 static void intra_pred_horiz(uint8_t *d,uint8_t *top,uint8_t *left,int stride) {
223     int y;
224     uint64_t a;
225     for(y=0;y<8;y++) {
226         a = left[y+1] * 0x0101010101010101ULL;
227         *((uint64_t *)(d+y*stride)) = a;
228     }
229 }
230
231 static void intra_pred_dc_128(uint8_t *d,uint8_t *top,uint8_t *left,int stride) {
232     int y;
233     uint64_t a = 0x8080808080808080ULL;
234     for(y=0;y<8;y++)
235         *((uint64_t *)(d+y*stride)) = a;
236 }
237
238 static void intra_pred_plane(uint8_t *d,uint8_t *top,uint8_t *left,int stride) {
239     int x,y,ia;
240     int ih = 0;
241     int iv = 0;
242     uint8_t *cm = ff_cropTbl + MAX_NEG_CROP;
243
244     for(x=0; x<4; x++) {
245         ih += (x+1)*(top[5+x]-top[3-x]);
246         iv += (x+1)*(left[5+x]-left[3-x]);
247     }
248     ia = (top[8]+left[8])<<4;
249     ih = (17*ih+16)>>5;
250     iv = (17*iv+16)>>5;
251     for(y=0; y<8; y++)
252         for(x=0; x<8; x++)
253             d[y*stride+x] = cm[(ia+(x-3)*ih+(y-3)*iv+16)>>5];
254 }
255
256 #define LOWPASS(ARRAY,INDEX)                                            \
257     (( ARRAY[(INDEX)-1] + 2*ARRAY[(INDEX)] + ARRAY[(INDEX)+1] + 2) >> 2)
258
259 static void intra_pred_lp(uint8_t *d,uint8_t *top,uint8_t *left,int stride) {
260     int x,y;
261     for(y=0; y<8; y++)
262         for(x=0; x<8; x++)
263             d[y*stride+x] = (LOWPASS(top,x+1) + LOWPASS(left,y+1)) >> 1;
264 }
265
266 static void intra_pred_down_left(uint8_t *d,uint8_t *top,uint8_t *left,int stride) {
267     int x,y;
268     for(y=0; y<8; y++)
269         for(x=0; x<8; x++)
270             d[y*stride+x] = (LOWPASS(top,x+y+2) + LOWPASS(left,x+y+2)) >> 1;
271 }
272
273 static void intra_pred_down_right(uint8_t *d,uint8_t *top,uint8_t *left,int stride) {
274     int x,y;
275     for(y=0; y<8; y++)
276         for(x=0; x<8; x++)
277             if(x==y)
278                 d[y*stride+x] = (left[1]+2*top[0]+top[1]+2)>>2;
279             else if(x>y)
280                 d[y*stride+x] = LOWPASS(top,x-y);
281             else
282                 d[y*stride+x] = LOWPASS(left,y-x);
283 }
284
285 static void intra_pred_lp_left(uint8_t *d,uint8_t *top,uint8_t *left,int stride) {
286     int x,y;
287     for(y=0; y<8; y++)
288         for(x=0; x<8; x++)
289             d[y*stride+x] = LOWPASS(left,y+1);
290 }
291
292 static void intra_pred_lp_top(uint8_t *d,uint8_t *top,uint8_t *left,int stride) {
293     int x,y;
294     for(y=0; y<8; y++)
295         for(x=0; x<8; x++)
296             d[y*stride+x] = LOWPASS(top,x+1);
297 }
298
299 #undef LOWPASS
300
301 void ff_cavs_modify_mb_i(AVSContext *h, int *pred_mode_uv) {
302     /* save pred modes before they get modified */
303     h->pred_mode_Y[3] =  h->pred_mode_Y[5];
304     h->pred_mode_Y[6] =  h->pred_mode_Y[8];
305     h->top_pred_Y[h->mbx*2+0] = h->pred_mode_Y[7];
306     h->top_pred_Y[h->mbx*2+1] = h->pred_mode_Y[8];
307
308     /* modify pred modes according to availability of neighbour samples */
309     if(!(h->flags & A_AVAIL)) {
310         modify_pred(ff_left_modifier_l, &h->pred_mode_Y[4] );
311         modify_pred(ff_left_modifier_l, &h->pred_mode_Y[7] );
312         modify_pred(ff_left_modifier_c, pred_mode_uv );
313     }
314     if(!(h->flags & B_AVAIL)) {
315         modify_pred(ff_top_modifier_l, &h->pred_mode_Y[4] );
316         modify_pred(ff_top_modifier_l, &h->pred_mode_Y[5] );
317         modify_pred(ff_top_modifier_c, pred_mode_uv );
318     }
319 }
320
321 /*****************************************************************************
322  *
323  * motion compensation
324  *
325  ****************************************************************************/
326
327 static inline void mc_dir_part(AVSContext *h,Picture *pic,
328                                int chroma_height,int delta,int list,uint8_t *dest_y,
329                                uint8_t *dest_cb,uint8_t *dest_cr,int src_x_offset,
330                                int src_y_offset,qpel_mc_func *qpix_op,
331                                h264_chroma_mc_func chroma_op,cavs_vector *mv)
332 {
333     MpegEncContext * const s = &h->s;
334     const int mx= mv->x + src_x_offset*8;
335     const int my= mv->y + src_y_offset*8;
336     const int luma_xy= (mx&3) + ((my&3)<<2);
337     uint8_t * src_y  = pic->f.data[0] + (mx >> 2) + (my >> 2) * h->l_stride;
338     uint8_t * src_cb = pic->f.data[1] + (mx >> 3) + (my >> 3) * h->c_stride;
339     uint8_t * src_cr = pic->f.data[2] + (mx >> 3) + (my >> 3) * h->c_stride;
340     int extra_width= 0; //(s->flags&CODEC_FLAG_EMU_EDGE) ? 0 : 16;
341     int extra_height= extra_width;
342     int emu=0;
343     const int full_mx= mx>>2;
344     const int full_my= my>>2;
345     const int pic_width  = 16*h->mb_width;
346     const int pic_height = 16*h->mb_height;
347
348     if(!pic->f.data[0])
349         return;
350     if(mx&7) extra_width -= 3;
351     if(my&7) extra_height -= 3;
352
353     if(   full_mx < 0-extra_width
354           || full_my < 0-extra_height
355           || full_mx + 16/*FIXME*/ > pic_width + extra_width
356           || full_my + 16/*FIXME*/ > pic_height + extra_height){
357         s->dsp.emulated_edge_mc(s->edge_emu_buffer, src_y - 2 - 2*h->l_stride, h->l_stride,
358                             16+5, 16+5/*FIXME*/, full_mx-2, full_my-2, pic_width, pic_height);
359         src_y= s->edge_emu_buffer + 2 + 2*h->l_stride;
360         emu=1;
361     }
362
363     qpix_op[luma_xy](dest_y, src_y, h->l_stride); //FIXME try variable height perhaps?
364
365     if(emu){
366         s->dsp.emulated_edge_mc(s->edge_emu_buffer, src_cb, h->c_stride,
367                             9, 9/*FIXME*/, (mx>>3), (my>>3), pic_width>>1, pic_height>>1);
368         src_cb= s->edge_emu_buffer;
369     }
370     chroma_op(dest_cb, src_cb, h->c_stride, chroma_height, mx&7, my&7);
371
372     if(emu){
373         s->dsp.emulated_edge_mc(s->edge_emu_buffer, src_cr, h->c_stride,
374                             9, 9/*FIXME*/, (mx>>3), (my>>3), pic_width>>1, pic_height>>1);
375         src_cr= s->edge_emu_buffer;
376     }
377     chroma_op(dest_cr, src_cr, h->c_stride, chroma_height, mx&7, my&7);
378 }
379
380 static inline void mc_part_std(AVSContext *h,int chroma_height,int delta,
381                                uint8_t *dest_y,uint8_t *dest_cb,uint8_t *dest_cr,
382                                int x_offset, int y_offset,qpel_mc_func *qpix_put,
383                                h264_chroma_mc_func chroma_put,qpel_mc_func *qpix_avg,
384                                h264_chroma_mc_func chroma_avg, cavs_vector *mv)
385 {
386     qpel_mc_func *qpix_op=  qpix_put;
387     h264_chroma_mc_func chroma_op= chroma_put;
388
389     dest_y  += 2*x_offset + 2*y_offset*h->l_stride;
390     dest_cb +=   x_offset +   y_offset*h->c_stride;
391     dest_cr +=   x_offset +   y_offset*h->c_stride;
392     x_offset += 8*h->mbx;
393     y_offset += 8*h->mby;
394
395     if(mv->ref >= 0){
396         Picture *ref= &h->DPB[mv->ref];
397         mc_dir_part(h, ref, chroma_height, delta, 0,
398                     dest_y, dest_cb, dest_cr, x_offset, y_offset,
399                     qpix_op, chroma_op, mv);
400
401         qpix_op=  qpix_avg;
402         chroma_op= chroma_avg;
403     }
404
405     if((mv+MV_BWD_OFFS)->ref >= 0){
406         Picture *ref= &h->DPB[0];
407         mc_dir_part(h, ref, chroma_height, delta, 1,
408                     dest_y, dest_cb, dest_cr, x_offset, y_offset,
409                     qpix_op, chroma_op, mv+MV_BWD_OFFS);
410     }
411 }
412
413 void ff_cavs_inter(AVSContext *h, enum cavs_mb mb_type) {
414     if(ff_cavs_partition_flags[mb_type] == 0){ // 16x16
415         mc_part_std(h, 8, 0, h->cy, h->cu, h->cv, 0, 0,
416                 h->cdsp.put_cavs_qpel_pixels_tab[0],
417                 h->s.dsp.put_h264_chroma_pixels_tab[0],
418                 h->cdsp.avg_cavs_qpel_pixels_tab[0],
419                 h->s.dsp.avg_h264_chroma_pixels_tab[0],&h->mv[MV_FWD_X0]);
420     }else{
421         mc_part_std(h, 4, 0, h->cy, h->cu, h->cv, 0, 0,
422                 h->cdsp.put_cavs_qpel_pixels_tab[1],
423                 h->s.dsp.put_h264_chroma_pixels_tab[1],
424                 h->cdsp.avg_cavs_qpel_pixels_tab[1],
425                 h->s.dsp.avg_h264_chroma_pixels_tab[1],&h->mv[MV_FWD_X0]);
426         mc_part_std(h, 4, 0, h->cy, h->cu, h->cv, 4, 0,
427                 h->cdsp.put_cavs_qpel_pixels_tab[1],
428                 h->s.dsp.put_h264_chroma_pixels_tab[1],
429                 h->cdsp.avg_cavs_qpel_pixels_tab[1],
430                 h->s.dsp.avg_h264_chroma_pixels_tab[1],&h->mv[MV_FWD_X1]);
431         mc_part_std(h, 4, 0, h->cy, h->cu, h->cv, 0, 4,
432                 h->cdsp.put_cavs_qpel_pixels_tab[1],
433                 h->s.dsp.put_h264_chroma_pixels_tab[1],
434                 h->cdsp.avg_cavs_qpel_pixels_tab[1],
435                 h->s.dsp.avg_h264_chroma_pixels_tab[1],&h->mv[MV_FWD_X2]);
436         mc_part_std(h, 4, 0, h->cy, h->cu, h->cv, 4, 4,
437                 h->cdsp.put_cavs_qpel_pixels_tab[1],
438                 h->s.dsp.put_h264_chroma_pixels_tab[1],
439                 h->cdsp.avg_cavs_qpel_pixels_tab[1],
440                 h->s.dsp.avg_h264_chroma_pixels_tab[1],&h->mv[MV_FWD_X3]);
441     }
442 }
443
444 /*****************************************************************************
445  *
446  * motion vector prediction
447  *
448  ****************************************************************************/
449
450 static inline void scale_mv(AVSContext *h, int *d_x, int *d_y, cavs_vector *src, int distp) {
451     int den = h->scale_den[src->ref];
452
453     *d_x = (src->x*distp*den + 256 + (src->x>>31)) >> 9;
454     *d_y = (src->y*distp*den + 256 + (src->y>>31)) >> 9;
455 }
456
457 static inline void mv_pred_median(AVSContext *h, cavs_vector *mvP,
458                         cavs_vector *mvA, cavs_vector *mvB, cavs_vector *mvC) {
459     int ax, ay, bx, by, cx, cy;
460     int len_ab, len_bc, len_ca, len_mid;
461
462     /* scale candidates according to their temporal span */
463     scale_mv(h, &ax, &ay, mvA, mvP->dist);
464     scale_mv(h, &bx, &by, mvB, mvP->dist);
465     scale_mv(h, &cx, &cy, mvC, mvP->dist);
466     /* find the geometrical median of the three candidates */
467     len_ab = abs(ax - bx) + abs(ay - by);
468     len_bc = abs(bx - cx) + abs(by - cy);
469     len_ca = abs(cx - ax) + abs(cy - ay);
470     len_mid = mid_pred(len_ab, len_bc, len_ca);
471     if(len_mid == len_ab) {
472         mvP->x = cx;
473         mvP->y = cy;
474     } else if(len_mid == len_bc) {
475         mvP->x = ax;
476         mvP->y = ay;
477     } else {
478         mvP->x = bx;
479         mvP->y = by;
480     }
481 }
482
483 void ff_cavs_mv(AVSContext *h, enum cavs_mv_loc nP, enum cavs_mv_loc nC,
484                 enum cavs_mv_pred mode, enum cavs_block size, int ref) {
485     cavs_vector *mvP = &h->mv[nP];
486     cavs_vector *mvA = &h->mv[nP-1];
487     cavs_vector *mvB = &h->mv[nP-4];
488     cavs_vector *mvC = &h->mv[nC];
489     const cavs_vector *mvP2 = NULL;
490
491     mvP->ref = ref;
492     mvP->dist = h->dist[mvP->ref];
493     if(mvC->ref == NOT_AVAIL)
494         mvC = &h->mv[nP-5]; // set to top-left (mvD)
495     if((mode == MV_PRED_PSKIP) &&
496        ((mvA->ref == NOT_AVAIL) || (mvB->ref == NOT_AVAIL) ||
497            ((mvA->x | mvA->y | mvA->ref) == 0)  ||
498            ((mvB->x | mvB->y | mvB->ref) == 0) )) {
499         mvP2 = &ff_cavs_un_mv;
500     /* if there is only one suitable candidate, take it */
501     } else if((mvA->ref >= 0) && (mvB->ref < 0) && (mvC->ref < 0)) {
502         mvP2= mvA;
503     } else if((mvA->ref < 0) && (mvB->ref >= 0) && (mvC->ref < 0)) {
504         mvP2= mvB;
505     } else if((mvA->ref < 0) && (mvB->ref < 0) && (mvC->ref >= 0)) {
506         mvP2= mvC;
507     } else if(mode == MV_PRED_LEFT     && mvA->ref == ref){
508         mvP2= mvA;
509     } else if(mode == MV_PRED_TOP      && mvB->ref == ref){
510         mvP2= mvB;
511     } else if(mode == MV_PRED_TOPRIGHT && mvC->ref == ref){
512         mvP2= mvC;
513     }
514     if(mvP2){
515         mvP->x = mvP2->x;
516         mvP->y = mvP2->y;
517     }else
518         mv_pred_median(h, mvP, mvA, mvB, mvC);
519
520     if(mode < MV_PRED_PSKIP) {
521         mvP->x += get_se_golomb(&h->s.gb);
522         mvP->y += get_se_golomb(&h->s.gb);
523     }
524     set_mvs(mvP,size);
525 }
526
527 /*****************************************************************************
528  *
529  * macroblock level
530  *
531  ****************************************************************************/
532
533 /**
534  * initialise predictors for motion vectors and intra prediction
535  */
536 void ff_cavs_init_mb(AVSContext *h) {
537     int i;
538
539     /* copy predictors from top line (MB B and C) into cache */
540     for(i=0;i<3;i++) {
541         h->mv[MV_FWD_B2+i] = h->top_mv[0][h->mbx*2+i];
542         h->mv[MV_BWD_B2+i] = h->top_mv[1][h->mbx*2+i];
543     }
544     h->pred_mode_Y[1] = h->top_pred_Y[h->mbx*2+0];
545     h->pred_mode_Y[2] = h->top_pred_Y[h->mbx*2+1];
546     /* clear top predictors if MB B is not available */
547     if(!(h->flags & B_AVAIL)) {
548         h->mv[MV_FWD_B2] = ff_cavs_un_mv;
549         h->mv[MV_FWD_B3] = ff_cavs_un_mv;
550         h->mv[MV_BWD_B2] = ff_cavs_un_mv;
551         h->mv[MV_BWD_B3] = ff_cavs_un_mv;
552         h->pred_mode_Y[1] = h->pred_mode_Y[2] = NOT_AVAIL;
553         h->flags &= ~(C_AVAIL|D_AVAIL);
554     } else if(h->mbx) {
555         h->flags |= D_AVAIL;
556     }
557     if(h->mbx == h->mb_width-1) //MB C not available
558         h->flags &= ~C_AVAIL;
559     /* clear top-right predictors if MB C is not available */
560     if(!(h->flags & C_AVAIL)) {
561         h->mv[MV_FWD_C2] = ff_cavs_un_mv;
562         h->mv[MV_BWD_C2] = ff_cavs_un_mv;
563     }
564     /* clear top-left predictors if MB D is not available */
565     if(!(h->flags & D_AVAIL)) {
566         h->mv[MV_FWD_D3] = ff_cavs_un_mv;
567         h->mv[MV_BWD_D3] = ff_cavs_un_mv;
568     }
569 }
570
571 /**
572  * save predictors for later macroblocks and increase
573  * macroblock address
574  * @return 0 if end of frame is reached, 1 otherwise
575  */
576 int ff_cavs_next_mb(AVSContext *h) {
577     int i;
578
579     h->flags |= A_AVAIL;
580     h->cy += 16;
581     h->cu += 8;
582     h->cv += 8;
583     /* copy mvs as predictors to the left */
584     for(i=0;i<=20;i+=4)
585         h->mv[i] = h->mv[i+2];
586     /* copy bottom mvs from cache to top line */
587     h->top_mv[0][h->mbx*2+0] = h->mv[MV_FWD_X2];
588     h->top_mv[0][h->mbx*2+1] = h->mv[MV_FWD_X3];
589     h->top_mv[1][h->mbx*2+0] = h->mv[MV_BWD_X2];
590     h->top_mv[1][h->mbx*2+1] = h->mv[MV_BWD_X3];
591     /* next MB address */
592     h->mbidx++;
593     h->mbx++;
594     if(h->mbx == h->mb_width) { //new mb line
595         h->flags = B_AVAIL|C_AVAIL;
596         /* clear left pred_modes */
597         h->pred_mode_Y[3] = h->pred_mode_Y[6] = NOT_AVAIL;
598         /* clear left mv predictors */
599         for(i=0;i<=20;i+=4)
600             h->mv[i] = ff_cavs_un_mv;
601         h->mbx = 0;
602         h->mby++;
603         /* re-calculate sample pointers */
604         h->cy = h->picture.f.data[0] + h->mby * 16 * h->l_stride;
605         h->cu = h->picture.f.data[1] + h->mby *  8 * h->c_stride;
606         h->cv = h->picture.f.data[2] + h->mby *  8 * h->c_stride;
607         if(h->mby == h->mb_height) { //frame end
608             return 0;
609         }
610     }
611     return 1;
612 }
613
614 /*****************************************************************************
615  *
616  * frame level
617  *
618  ****************************************************************************/
619
620 void ff_cavs_init_pic(AVSContext *h) {
621     int i;
622
623     /* clear some predictors */
624     for(i=0;i<=20;i+=4)
625         h->mv[i] = ff_cavs_un_mv;
626     h->mv[MV_BWD_X0] = ff_cavs_dir_mv;
627     set_mvs(&h->mv[MV_BWD_X0], BLK_16X16);
628     h->mv[MV_FWD_X0] = ff_cavs_dir_mv;
629     set_mvs(&h->mv[MV_FWD_X0], BLK_16X16);
630     h->pred_mode_Y[3] = h->pred_mode_Y[6] = NOT_AVAIL;
631     h->cy           = h->picture.f.data[0];
632     h->cu           = h->picture.f.data[1];
633     h->cv           = h->picture.f.data[2];
634     h->l_stride     = h->picture.f.linesize[0];
635     h->c_stride     = h->picture.f.linesize[1];
636     h->luma_scan[2] = 8*h->l_stride;
637     h->luma_scan[3] = 8*h->l_stride+8;
638     h->mbx = h->mby = h->mbidx = 0;
639     h->flags = 0;
640 }
641
642 /*****************************************************************************
643  *
644  * headers and interface
645  *
646  ****************************************************************************/
647
648 /**
649  * some predictions require data from the top-neighbouring macroblock.
650  * this data has to be stored for one complete row of macroblocks
651  * and this storage space is allocated here
652  */
653 void ff_cavs_init_top_lines(AVSContext *h) {
654     /* alloc top line of predictors */
655     h->top_qp       = av_malloc( h->mb_width);
656     h->top_mv[0]    = av_malloc((h->mb_width*2+1)*sizeof(cavs_vector));
657     h->top_mv[1]    = av_malloc((h->mb_width*2+1)*sizeof(cavs_vector));
658     h->top_pred_Y   = av_malloc( h->mb_width*2*sizeof(*h->top_pred_Y));
659     h->top_border_y = av_malloc((h->mb_width+1)*16);
660     h->top_border_u = av_malloc( h->mb_width * 10);
661     h->top_border_v = av_malloc( h->mb_width * 10);
662
663     /* alloc space for co-located MVs and types */
664     h->col_mv       = av_malloc( h->mb_width*h->mb_height*4*sizeof(cavs_vector));
665     h->col_type_base = av_malloc(h->mb_width*h->mb_height);
666     h->block        = av_mallocz(64*sizeof(DCTELEM));
667 }
668
669 av_cold int ff_cavs_init(AVCodecContext *avctx) {
670     AVSContext *h = avctx->priv_data;
671     MpegEncContext * const s = &h->s;
672
673     ff_MPV_decode_defaults(s);
674     ff_cavsdsp_init(&h->cdsp, avctx);
675     s->avctx = avctx;
676
677     avctx->pix_fmt= PIX_FMT_YUV420P;
678
679     h->luma_scan[0] = 0;
680     h->luma_scan[1] = 8;
681     h->intra_pred_l[      INTRA_L_VERT] = intra_pred_vert;
682     h->intra_pred_l[     INTRA_L_HORIZ] = intra_pred_horiz;
683     h->intra_pred_l[        INTRA_L_LP] = intra_pred_lp;
684     h->intra_pred_l[ INTRA_L_DOWN_LEFT] = intra_pred_down_left;
685     h->intra_pred_l[INTRA_L_DOWN_RIGHT] = intra_pred_down_right;
686     h->intra_pred_l[   INTRA_L_LP_LEFT] = intra_pred_lp_left;
687     h->intra_pred_l[    INTRA_L_LP_TOP] = intra_pred_lp_top;
688     h->intra_pred_l[    INTRA_L_DC_128] = intra_pred_dc_128;
689     h->intra_pred_c[        INTRA_C_LP] = intra_pred_lp;
690     h->intra_pred_c[     INTRA_C_HORIZ] = intra_pred_horiz;
691     h->intra_pred_c[      INTRA_C_VERT] = intra_pred_vert;
692     h->intra_pred_c[     INTRA_C_PLANE] = intra_pred_plane;
693     h->intra_pred_c[   INTRA_C_LP_LEFT] = intra_pred_lp_left;
694     h->intra_pred_c[    INTRA_C_LP_TOP] = intra_pred_lp_top;
695     h->intra_pred_c[    INTRA_C_DC_128] = intra_pred_dc_128;
696     h->mv[ 7] = ff_cavs_un_mv;
697     h->mv[19] = ff_cavs_un_mv;
698     return 0;
699 }
700
701 av_cold int ff_cavs_end(AVCodecContext *avctx) {
702     AVSContext *h = avctx->priv_data;
703
704     av_free(h->top_qp);
705     av_free(h->top_mv[0]);
706     av_free(h->top_mv[1]);
707     av_free(h->top_pred_Y);
708     av_free(h->top_border_y);
709     av_free(h->top_border_u);
710     av_free(h->top_border_v);
711     av_free(h->col_mv);
712     av_free(h->col_type_base);
713     av_free(h->block);
714     return 0;
715 }