]> git.sesse.net Git - ffmpeg/blob - libavcodec/msmpeg4dec.c
avcodec/msmpeg4dec: Reuse identical RL VLCs
[ffmpeg] / libavcodec / msmpeg4dec.c
1 /*
2  * MSMPEG4 backend for encoder and decoder
3  * Copyright (c) 2001 Fabrice Bellard
4  * Copyright (c) 2002-2013 Michael Niedermayer <michaelni@gmx.at>
5  *
6  * msmpeg4v1 & v2 stuff by Michael Niedermayer <michaelni@gmx.at>
7  *
8  * This file is part of FFmpeg.
9  *
10  * FFmpeg is free software; you can redistribute it and/or
11  * modify it under the terms of the GNU Lesser General Public
12  * License as published by the Free Software Foundation; either
13  * version 2.1 of the License, or (at your option) any later version.
14  *
15  * FFmpeg is distributed in the hope that it will be useful,
16  * but WITHOUT ANY WARRANTY; without even the implied warranty of
17  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
18  * Lesser General Public License for more details.
19  *
20  * You should have received a copy of the GNU Lesser General Public
21  * License along with FFmpeg; if not, write to the Free Software
22  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
23  */
24
25 #include "avcodec.h"
26 #include "internal.h"
27 #include "mpegutils.h"
28 #include "mpegvideo.h"
29 #include "msmpeg4.h"
30 #include "libavutil/imgutils.h"
31 #include "h263.h"
32 #include "mpeg4video.h"
33 #include "msmpeg4data.h"
34 #include "vc1data.h"
35 #include "wmv2.h"
36
37 #define DC_VLC_BITS 9
38 #define V2_INTRA_CBPC_VLC_BITS 3
39 #define V2_MB_TYPE_VLC_BITS 7
40 #define MV_VLC_BITS 9
41 #define V2_MV_VLC_BITS 9
42 #define TEX_VLC_BITS 9
43
44 #define DEFAULT_INTER_INDEX 3
45
46 static inline int msmpeg4v1_pred_dc(MpegEncContext * s, int n,
47                                     int32_t **dc_val_ptr)
48 {
49     int i;
50
51     if (n < 4) {
52         i= 0;
53     } else {
54         i= n-3;
55     }
56
57     *dc_val_ptr= &s->last_dc[i];
58     return s->last_dc[i];
59 }
60
61 /****************************************/
62 /* decoding stuff */
63
64 VLC ff_mb_non_intra_vlc[4];
65 static VLC v2_dc_lum_vlc;
66 static VLC v2_dc_chroma_vlc;
67 static VLC v2_intra_cbpc_vlc;
68 static VLC v2_mb_type_vlc;
69 static VLC v2_mv_vlc;
70 VLC ff_inter_intra_vlc;
71
72 /* This is identical to H.263 except that its range is multiplied by 2. */
73 static int msmpeg4v2_decode_motion(MpegEncContext * s, int pred, int f_code)
74 {
75     int code, val, sign, shift;
76
77     code = get_vlc2(&s->gb, v2_mv_vlc.table, V2_MV_VLC_BITS, 2);
78     ff_dlog(s, "MV code %d at %d %d pred: %d\n", code, s->mb_x,s->mb_y, pred);
79     if (code < 0)
80         return 0xffff;
81
82     if (code == 0)
83         return pred;
84     sign = get_bits1(&s->gb);
85     shift = f_code - 1;
86     val = code;
87     if (shift) {
88         val = (val - 1) << shift;
89         val |= get_bits(&s->gb, shift);
90         val++;
91     }
92     if (sign)
93         val = -val;
94
95     val += pred;
96     if (val <= -64)
97         val += 64;
98     else if (val >= 64)
99         val -= 64;
100
101     return val;
102 }
103
104 static int msmpeg4v12_decode_mb(MpegEncContext *s, int16_t block[6][64])
105 {
106     int cbp, code, i;
107     uint32_t * const mb_type_ptr = &s->current_picture.mb_type[s->mb_x + s->mb_y*s->mb_stride];
108
109     if (s->pict_type == AV_PICTURE_TYPE_P) {
110         if (s->use_skip_mb_code) {
111             if (get_bits1(&s->gb)) {
112                 /* skip mb */
113                 s->mb_intra = 0;
114                 for(i=0;i<6;i++)
115                     s->block_last_index[i] = -1;
116                 s->mv_dir = MV_DIR_FORWARD;
117                 s->mv_type = MV_TYPE_16X16;
118                 s->mv[0][0][0] = 0;
119                 s->mv[0][0][1] = 0;
120                 s->mb_skipped = 1;
121                 *mb_type_ptr = MB_TYPE_SKIP | MB_TYPE_L0 | MB_TYPE_16x16;
122                 return 0;
123             }
124         }
125
126         if(s->msmpeg4_version==2)
127             code = get_vlc2(&s->gb, v2_mb_type_vlc.table, V2_MB_TYPE_VLC_BITS, 1);
128         else
129             code = get_vlc2(&s->gb, ff_h263_inter_MCBPC_vlc.table, INTER_MCBPC_VLC_BITS, 2);
130         if(code<0 || code>7){
131             av_log(s->avctx, AV_LOG_ERROR, "cbpc %d invalid at %d %d\n", code, s->mb_x, s->mb_y);
132             return -1;
133         }
134
135         s->mb_intra = code >>2;
136
137         cbp = code & 0x3;
138     } else {
139         s->mb_intra = 1;
140         if(s->msmpeg4_version==2)
141             cbp= get_vlc2(&s->gb, v2_intra_cbpc_vlc.table, V2_INTRA_CBPC_VLC_BITS, 1);
142         else
143             cbp= get_vlc2(&s->gb, ff_h263_intra_MCBPC_vlc.table, INTRA_MCBPC_VLC_BITS, 2);
144         if(cbp<0 || cbp>3){
145             av_log(s->avctx, AV_LOG_ERROR, "cbpc %d invalid at %d %d\n", cbp, s->mb_x, s->mb_y);
146             return -1;
147         }
148     }
149
150     if (!s->mb_intra) {
151         int mx, my, cbpy;
152
153         cbpy= get_vlc2(&s->gb, ff_h263_cbpy_vlc.table, CBPY_VLC_BITS, 1);
154         if(cbpy<0){
155             av_log(s->avctx, AV_LOG_ERROR, "cbpy %d invalid at %d %d\n", cbp, s->mb_x, s->mb_y);
156             return -1;
157         }
158
159         cbp|= cbpy<<2;
160         if(s->msmpeg4_version==1 || (cbp&3) != 3) cbp^= 0x3C;
161
162         ff_h263_pred_motion(s, 0, 0, &mx, &my);
163         mx= msmpeg4v2_decode_motion(s, mx, 1);
164         my= msmpeg4v2_decode_motion(s, my, 1);
165
166         s->mv_dir = MV_DIR_FORWARD;
167         s->mv_type = MV_TYPE_16X16;
168         s->mv[0][0][0] = mx;
169         s->mv[0][0][1] = my;
170         *mb_type_ptr = MB_TYPE_L0 | MB_TYPE_16x16;
171     } else {
172         int v;
173         if(s->msmpeg4_version==2){
174             s->ac_pred = get_bits1(&s->gb);
175             v = get_vlc2(&s->gb, ff_h263_cbpy_vlc.table, CBPY_VLC_BITS, 1);
176             if (v < 0) {
177                 av_log(s->avctx, AV_LOG_ERROR, "cbpy vlc invalid\n");
178                 return -1;
179             }
180             cbp|= v<<2;
181         } else{
182             s->ac_pred = 0;
183             v = get_vlc2(&s->gb, ff_h263_cbpy_vlc.table, CBPY_VLC_BITS, 1);
184             if (v < 0) {
185                 av_log(s->avctx, AV_LOG_ERROR, "cbpy vlc invalid\n");
186                 return -1;
187             }
188             cbp|= v<<2;
189             if(s->pict_type==AV_PICTURE_TYPE_P) cbp^=0x3C;
190         }
191         *mb_type_ptr = MB_TYPE_INTRA;
192     }
193
194     s->bdsp.clear_blocks(s->block[0]);
195     for (i = 0; i < 6; i++) {
196         if (ff_msmpeg4_decode_block(s, block[i], i, (cbp >> (5 - i)) & 1, NULL) < 0)
197         {
198              av_log(s->avctx, AV_LOG_ERROR, "\nerror while decoding block: %d x %d (%d)\n", s->mb_x, s->mb_y, i);
199              return -1;
200         }
201     }
202     return 0;
203 }
204
205 static int msmpeg4v34_decode_mb(MpegEncContext *s, int16_t block[6][64])
206 {
207     int cbp, code, i;
208     uint8_t *coded_val;
209     uint32_t * const mb_type_ptr = &s->current_picture.mb_type[s->mb_x + s->mb_y*s->mb_stride];
210
211     if (get_bits_left(&s->gb) <= 0)
212         return AVERROR_INVALIDDATA;
213
214     if (s->pict_type == AV_PICTURE_TYPE_P) {
215         if (s->use_skip_mb_code) {
216             if (get_bits1(&s->gb)) {
217                 /* skip mb */
218                 s->mb_intra = 0;
219                 for(i=0;i<6;i++)
220                     s->block_last_index[i] = -1;
221                 s->mv_dir = MV_DIR_FORWARD;
222                 s->mv_type = MV_TYPE_16X16;
223                 s->mv[0][0][0] = 0;
224                 s->mv[0][0][1] = 0;
225                 s->mb_skipped = 1;
226                 *mb_type_ptr = MB_TYPE_SKIP | MB_TYPE_L0 | MB_TYPE_16x16;
227
228                 return 0;
229             }
230         }
231
232         code = get_vlc2(&s->gb, ff_mb_non_intra_vlc[DEFAULT_INTER_INDEX].table, MB_NON_INTRA_VLC_BITS, 3);
233         if (code < 0)
234             return -1;
235         //s->mb_intra = (code & 0x40) ? 0 : 1;
236         s->mb_intra = (~code & 0x40) >> 6;
237
238         cbp = code & 0x3f;
239     } else {
240         s->mb_intra = 1;
241         code = get_vlc2(&s->gb, ff_msmp4_mb_i_vlc.table, MB_INTRA_VLC_BITS, 2);
242         if (code < 0)
243             return -1;
244         /* predict coded block pattern */
245         cbp = 0;
246         for(i=0;i<6;i++) {
247             int val = ((code >> (5 - i)) & 1);
248             if (i < 4) {
249                 int pred = ff_msmpeg4_coded_block_pred(s, i, &coded_val);
250                 val = val ^ pred;
251                 *coded_val = val;
252             }
253             cbp |= val << (5 - i);
254         }
255     }
256
257     if (!s->mb_intra) {
258         int mx, my;
259         if(s->per_mb_rl_table && cbp){
260             s->rl_table_index = decode012(&s->gb);
261             s->rl_chroma_table_index = s->rl_table_index;
262         }
263         ff_h263_pred_motion(s, 0, 0, &mx, &my);
264         if (ff_msmpeg4_decode_motion(s, &mx, &my) < 0)
265             return -1;
266         s->mv_dir = MV_DIR_FORWARD;
267         s->mv_type = MV_TYPE_16X16;
268         s->mv[0][0][0] = mx;
269         s->mv[0][0][1] = my;
270         *mb_type_ptr = MB_TYPE_L0 | MB_TYPE_16x16;
271     } else {
272         ff_dlog(s, "I at %d %d %d %06X\n", s->mb_x, s->mb_y,
273                 ((cbp & 3) ? 1 : 0) +((cbp & 0x3C)? 2 : 0),
274                 show_bits(&s->gb, 24));
275         s->ac_pred = get_bits1(&s->gb);
276         *mb_type_ptr = MB_TYPE_INTRA;
277         if(s->inter_intra_pred){
278             s->h263_aic_dir= get_vlc2(&s->gb, ff_inter_intra_vlc.table, INTER_INTRA_VLC_BITS, 1);
279             ff_dlog(s, "%d%d %d %d/",
280                     s->ac_pred, s->h263_aic_dir, s->mb_x, s->mb_y);
281         }
282         if(s->per_mb_rl_table && cbp){
283             s->rl_table_index = decode012(&s->gb);
284             s->rl_chroma_table_index = s->rl_table_index;
285         }
286     }
287
288     s->bdsp.clear_blocks(s->block[0]);
289     for (i = 0; i < 6; i++) {
290         if (ff_msmpeg4_decode_block(s, block[i], i, (cbp >> (5 - i)) & 1, NULL) < 0)
291         {
292             av_log(s->avctx, AV_LOG_ERROR, "\nerror while decoding block: %d x %d (%d)\n", s->mb_x, s->mb_y, i);
293             return -1;
294         }
295     }
296
297     return 0;
298 }
299
300 /* init all vlc decoding tables */
301 av_cold int ff_msmpeg4_decode_init(AVCodecContext *avctx)
302 {
303     MpegEncContext *s = avctx->priv_data;
304     static volatile int done = 0;
305     int i, ret;
306     MVTable *mv;
307
308     if ((ret = av_image_check_size(avctx->width, avctx->height, 0, avctx)) < 0)
309         return ret;
310
311     if (ff_h263_decode_init(avctx) < 0)
312         return -1;
313
314     ff_msmpeg4_common_init(s);
315
316     if (!done) {
317         for(i=0;i<NB_RL_TABLES;i++) {
318             ff_rl_init(&ff_rl_table[i], ff_static_rl_table_store[i]);
319         }
320         INIT_FIRST_VLC_RL(ff_rl_table[0], 642);
321         INIT_FIRST_VLC_RL(ff_rl_table[1], 1104);
322         INIT_FIRST_VLC_RL(ff_rl_table[2], 554);
323         INIT_VLC_RL(ff_rl_table[3], 940);
324         INIT_VLC_RL(ff_rl_table[4], 962);
325         /* ff_rl_table[5] coincides with ff_h263_rl_inter which has just been
326          * initialized in ff_h263_decode_init() above. So just copy the VLCs. */
327         av_assert1(ff_h263_rl_inter.rl_vlc[0]);
328         memcpy(ff_rl_table[5].rl_vlc, ff_h263_rl_inter.rl_vlc, sizeof(ff_rl_table[5].rl_vlc));
329
330         mv = &ff_mv_tables[0];
331         INIT_VLC_STATIC(&mv->vlc, MV_VLC_BITS, mv->n + 1,
332                     mv->table_mv_bits, 1, 1,
333                     mv->table_mv_code, 2, 2, 3714);
334         mv = &ff_mv_tables[1];
335         INIT_VLC_STATIC(&mv->vlc, MV_VLC_BITS, mv->n + 1,
336                     mv->table_mv_bits, 1, 1,
337                     mv->table_mv_code, 2, 2, 2694);
338
339         INIT_VLC_STATIC(&ff_msmp4_dc_luma_vlc[0], DC_VLC_BITS, 120,
340                  &ff_table0_dc_lum[0][1], 8, 4,
341                  &ff_table0_dc_lum[0][0], 8, 4, 1158);
342         INIT_VLC_STATIC(&ff_msmp4_dc_chroma_vlc[0], DC_VLC_BITS, 120,
343                  &ff_table0_dc_chroma[0][1], 8, 4,
344                  &ff_table0_dc_chroma[0][0], 8, 4, 1118);
345         INIT_VLC_STATIC(&ff_msmp4_dc_luma_vlc[1], DC_VLC_BITS, 120,
346                  &ff_table1_dc_lum[0][1], 8, 4,
347                  &ff_table1_dc_lum[0][0], 8, 4, 1476);
348         INIT_VLC_STATIC(&ff_msmp4_dc_chroma_vlc[1], DC_VLC_BITS, 120,
349                  &ff_table1_dc_chroma[0][1], 8, 4,
350                  &ff_table1_dc_chroma[0][0], 8, 4, 1216);
351
352         INIT_VLC_STATIC(&v2_dc_lum_vlc, DC_VLC_BITS, 512,
353                  &ff_v2_dc_lum_table[0][1], 8, 4,
354                  &ff_v2_dc_lum_table[0][0], 8, 4, 1472);
355         INIT_VLC_STATIC(&v2_dc_chroma_vlc, DC_VLC_BITS, 512,
356                  &ff_v2_dc_chroma_table[0][1], 8, 4,
357                  &ff_v2_dc_chroma_table[0][0], 8, 4, 1506);
358
359         INIT_VLC_STATIC(&v2_intra_cbpc_vlc, V2_INTRA_CBPC_VLC_BITS, 4,
360                  &ff_v2_intra_cbpc[0][1], 2, 1,
361                  &ff_v2_intra_cbpc[0][0], 2, 1, 8);
362         INIT_VLC_STATIC(&v2_mb_type_vlc, V2_MB_TYPE_VLC_BITS, 8,
363                  &ff_v2_mb_type[0][1], 2, 1,
364                  &ff_v2_mb_type[0][0], 2, 1, 128);
365         INIT_VLC_STATIC(&v2_mv_vlc, V2_MV_VLC_BITS, 33,
366                  &ff_mvtab[0][1], 2, 1,
367                  &ff_mvtab[0][0], 2, 1, 538);
368
369         INIT_VLC_STATIC(&ff_mb_non_intra_vlc[0], MB_NON_INTRA_VLC_BITS, 128,
370                      &ff_wmv2_inter_table[0][0][1], 8, 4,
371                      &ff_wmv2_inter_table[0][0][0], 8, 4, 1636);
372         INIT_VLC_STATIC(&ff_mb_non_intra_vlc[1], MB_NON_INTRA_VLC_BITS, 128,
373                      &ff_wmv2_inter_table[1][0][1], 8, 4,
374                      &ff_wmv2_inter_table[1][0][0], 8, 4, 2648);
375         INIT_VLC_STATIC(&ff_mb_non_intra_vlc[2], MB_NON_INTRA_VLC_BITS, 128,
376                      &ff_wmv2_inter_table[2][0][1], 8, 4,
377                      &ff_wmv2_inter_table[2][0][0], 8, 4, 1532);
378         INIT_VLC_STATIC(&ff_mb_non_intra_vlc[3], MB_NON_INTRA_VLC_BITS, 128,
379                      &ff_wmv2_inter_table[3][0][1], 8, 4,
380                      &ff_wmv2_inter_table[3][0][0], 8, 4, 2488);
381
382         INIT_VLC_STATIC(&ff_msmp4_mb_i_vlc, MB_INTRA_VLC_BITS, 64,
383                  &ff_msmp4_mb_i_table[0][1], 4, 2,
384                  &ff_msmp4_mb_i_table[0][0], 4, 2, 536);
385
386         INIT_VLC_STATIC(&ff_inter_intra_vlc, INTER_INTRA_VLC_BITS, 4,
387                  &ff_table_inter_intra[0][1], 2, 1,
388                  &ff_table_inter_intra[0][0], 2, 1, 8);
389         done = 1;
390     }
391
392     switch(s->msmpeg4_version){
393     case 1:
394     case 2:
395         s->decode_mb= msmpeg4v12_decode_mb;
396         break;
397     case 3:
398     case 4:
399         s->decode_mb= msmpeg4v34_decode_mb;
400         break;
401     case 5:
402         if (CONFIG_WMV2_DECODER)
403             s->decode_mb= ff_wmv2_decode_mb;
404     case 6:
405         //FIXME + TODO VC1 decode mb
406         break;
407     }
408
409     s->slice_height= s->mb_height; //to avoid 1/0 if the first frame is not a keyframe
410
411     return 0;
412 }
413
414 int ff_msmpeg4_decode_picture_header(MpegEncContext * s)
415 {
416     int code;
417
418     // at minimum one bit per macroblock is required at least in a valid frame,
419     // we discard frames much smaller than this. Frames smaller than 1/8 of the
420     // smallest "black/skip" frame generally contain not much recoverable content
421     // while at the same time they have the highest computational requirements
422     // per byte
423     if (get_bits_left(&s->gb) * 8LL < (s->width+15)/16 * ((s->height+15)/16))
424         return AVERROR_INVALIDDATA;
425
426     if(s->msmpeg4_version==1){
427         int start_code = get_bits_long(&s->gb, 32);
428         if(start_code!=0x00000100){
429             av_log(s->avctx, AV_LOG_ERROR, "invalid startcode\n");
430             return -1;
431         }
432
433         skip_bits(&s->gb, 5); // frame number */
434     }
435
436     s->pict_type = get_bits(&s->gb, 2) + 1;
437     if (s->pict_type != AV_PICTURE_TYPE_I &&
438         s->pict_type != AV_PICTURE_TYPE_P){
439         av_log(s->avctx, AV_LOG_ERROR, "invalid picture type\n");
440         return -1;
441     }
442     s->chroma_qscale= s->qscale = get_bits(&s->gb, 5);
443     if(s->qscale==0){
444         av_log(s->avctx, AV_LOG_ERROR, "invalid qscale\n");
445         return -1;
446     }
447
448     if (s->pict_type == AV_PICTURE_TYPE_I) {
449         code = get_bits(&s->gb, 5);
450         if(s->msmpeg4_version==1){
451             if(code==0 || code>s->mb_height){
452                 av_log(s->avctx, AV_LOG_ERROR, "invalid slice height %d\n", code);
453                 return -1;
454             }
455
456             s->slice_height = code;
457         }else{
458             /* 0x17: one slice, 0x18: two slices, ... */
459             if (code < 0x17){
460                 av_log(s->avctx, AV_LOG_ERROR, "error, slice code was %X\n", code);
461                 return -1;
462             }
463
464             s->slice_height = s->mb_height / (code - 0x16);
465         }
466
467         switch(s->msmpeg4_version){
468         case 1:
469         case 2:
470             s->rl_chroma_table_index = 2;
471             s->rl_table_index = 2;
472
473             s->dc_table_index = 0; //not used
474             break;
475         case 3:
476             s->rl_chroma_table_index = decode012(&s->gb);
477             s->rl_table_index = decode012(&s->gb);
478
479             s->dc_table_index = get_bits1(&s->gb);
480             break;
481         case 4:
482             ff_msmpeg4_decode_ext_header(s, (2+5+5+17+7)/8);
483
484             if(s->bit_rate > MBAC_BITRATE) s->per_mb_rl_table= get_bits1(&s->gb);
485             else                           s->per_mb_rl_table= 0;
486
487             if(!s->per_mb_rl_table){
488                 s->rl_chroma_table_index = decode012(&s->gb);
489                 s->rl_table_index = decode012(&s->gb);
490             }
491
492             s->dc_table_index = get_bits1(&s->gb);
493             s->inter_intra_pred= 0;
494             break;
495         }
496         s->no_rounding = 1;
497         if(s->avctx->debug&FF_DEBUG_PICT_INFO)
498             av_log(s->avctx, AV_LOG_DEBUG, "qscale:%d rlc:%d rl:%d dc:%d mbrl:%d slice:%d   \n",
499                 s->qscale,
500                 s->rl_chroma_table_index,
501                 s->rl_table_index,
502                 s->dc_table_index,
503                 s->per_mb_rl_table,
504                 s->slice_height);
505     } else {
506         switch(s->msmpeg4_version){
507         case 1:
508         case 2:
509             if(s->msmpeg4_version==1)
510                 s->use_skip_mb_code = 1;
511             else
512                 s->use_skip_mb_code = get_bits1(&s->gb);
513             s->rl_table_index = 2;
514             s->rl_chroma_table_index = s->rl_table_index;
515             s->dc_table_index = 0; //not used
516             s->mv_table_index = 0;
517             break;
518         case 3:
519             s->use_skip_mb_code = get_bits1(&s->gb);
520             s->rl_table_index = decode012(&s->gb);
521             s->rl_chroma_table_index = s->rl_table_index;
522
523             s->dc_table_index = get_bits1(&s->gb);
524
525             s->mv_table_index = get_bits1(&s->gb);
526             break;
527         case 4:
528             s->use_skip_mb_code = get_bits1(&s->gb);
529
530             if(s->bit_rate > MBAC_BITRATE) s->per_mb_rl_table= get_bits1(&s->gb);
531             else                           s->per_mb_rl_table= 0;
532
533             if(!s->per_mb_rl_table){
534                 s->rl_table_index = decode012(&s->gb);
535                 s->rl_chroma_table_index = s->rl_table_index;
536             }
537
538             s->dc_table_index = get_bits1(&s->gb);
539
540             s->mv_table_index = get_bits1(&s->gb);
541             s->inter_intra_pred= (s->width*s->height < 320*240 && s->bit_rate<=II_BITRATE);
542             break;
543         }
544
545         if(s->avctx->debug&FF_DEBUG_PICT_INFO)
546             av_log(s->avctx, AV_LOG_DEBUG, "skip:%d rl:%d rlc:%d dc:%d mv:%d mbrl:%d qp:%d   \n",
547                 s->use_skip_mb_code,
548                 s->rl_table_index,
549                 s->rl_chroma_table_index,
550                 s->dc_table_index,
551                 s->mv_table_index,
552                 s->per_mb_rl_table,
553                 s->qscale);
554
555         if(s->flipflop_rounding){
556             s->no_rounding ^= 1;
557         }else{
558             s->no_rounding = 0;
559         }
560     }
561     ff_dlog(s->avctx, "%d %"PRId64" %d %d %d\n", s->pict_type, s->bit_rate,
562             s->inter_intra_pred, s->width, s->height);
563
564     s->esc3_level_length= 0;
565     s->esc3_run_length= 0;
566
567     return 0;
568 }
569
570 int ff_msmpeg4_decode_ext_header(MpegEncContext * s, int buf_size)
571 {
572     int left= buf_size*8 - get_bits_count(&s->gb);
573     int length= s->msmpeg4_version>=3 ? 17 : 16;
574     /* the alt_bitstream reader could read over the end so we need to check it */
575     if(left>=length && left<length+8)
576     {
577         skip_bits(&s->gb, 5); /* fps */
578         s->bit_rate= get_bits(&s->gb, 11)*1024;
579         if(s->msmpeg4_version>=3)
580             s->flipflop_rounding= get_bits1(&s->gb);
581         else
582             s->flipflop_rounding= 0;
583     }
584     else if(left<length+8)
585     {
586         s->flipflop_rounding= 0;
587         if(s->msmpeg4_version != 2)
588             av_log(s->avctx, AV_LOG_ERROR, "ext header missing, %d left\n", left);
589     }
590     else
591     {
592         av_log(s->avctx, AV_LOG_ERROR, "I-frame too long, ignoring ext header\n");
593     }
594
595     return 0;
596 }
597
598 static int msmpeg4_decode_dc(MpegEncContext * s, int n, int *dir_ptr)
599 {
600     int level, pred;
601
602     if(s->msmpeg4_version<=2){
603         if (n < 4) {
604             level = get_vlc2(&s->gb, v2_dc_lum_vlc.table, DC_VLC_BITS, 3);
605         } else {
606             level = get_vlc2(&s->gb, v2_dc_chroma_vlc.table, DC_VLC_BITS, 3);
607         }
608         if (level < 0) {
609             av_log(s->avctx, AV_LOG_ERROR, "illegal dc vlc\n");
610             *dir_ptr = 0;
611             return -1;
612         }
613         level-=256;
614     }else{  //FIXME optimize use unified tables & index
615         if (n < 4) {
616             level = get_vlc2(&s->gb, ff_msmp4_dc_luma_vlc[s->dc_table_index].table, DC_VLC_BITS, 3);
617         } else {
618             level = get_vlc2(&s->gb, ff_msmp4_dc_chroma_vlc[s->dc_table_index].table, DC_VLC_BITS, 3);
619         }
620         if (level < 0){
621             av_log(s->avctx, AV_LOG_ERROR, "illegal dc vlc\n");
622             *dir_ptr = 0;
623             return -1;
624         }
625
626         if (level == DC_MAX) {
627             level = get_bits(&s->gb, 8);
628             if (get_bits1(&s->gb))
629                 level = -level;
630         } else if (level != 0) {
631             if (get_bits1(&s->gb))
632                 level = -level;
633         }
634     }
635
636     if(s->msmpeg4_version==1){
637         int32_t *dc_val;
638         pred = msmpeg4v1_pred_dc(s, n, &dc_val);
639         level += pred;
640
641         /* update predictor */
642         *dc_val= level;
643     }else{
644         int16_t *dc_val;
645         pred   = ff_msmpeg4_pred_dc(s, n, &dc_val, dir_ptr);
646         level += pred;
647
648         /* update predictor */
649         if (n < 4) {
650             *dc_val = level * s->y_dc_scale;
651         } else {
652             *dc_val = level * s->c_dc_scale;
653         }
654     }
655
656     return level;
657 }
658
659 int ff_msmpeg4_decode_block(MpegEncContext * s, int16_t * block,
660                               int n, int coded, const uint8_t *scan_table)
661 {
662     int level, i, last, run, run_diff;
663     int av_uninit(dc_pred_dir);
664     RLTable *rl;
665     RL_VLC_ELEM *rl_vlc;
666     int qmul, qadd;
667
668     if (s->mb_intra) {
669         qmul=1;
670         qadd=0;
671
672         /* DC coef */
673         level = msmpeg4_decode_dc(s, n, &dc_pred_dir);
674
675         if (level < 0){
676             av_log(s->avctx, AV_LOG_ERROR, "dc overflow- block: %d qscale: %d//\n", n, s->qscale);
677             if(s->inter_intra_pred) level=0;
678         }
679         if (n < 4) {
680             rl = &ff_rl_table[s->rl_table_index];
681             if(level > 256*s->y_dc_scale){
682                 av_log(s->avctx, AV_LOG_ERROR, "dc overflow+ L qscale: %d//\n", s->qscale);
683                 if(!s->inter_intra_pred) return -1;
684             }
685         } else {
686             rl = &ff_rl_table[3 + s->rl_chroma_table_index];
687             if(level > 256*s->c_dc_scale){
688                 av_log(s->avctx, AV_LOG_ERROR, "dc overflow+ C qscale: %d//\n", s->qscale);
689                 if(!s->inter_intra_pred) return -1;
690             }
691         }
692         block[0] = level;
693
694         run_diff = s->msmpeg4_version >= 4;
695         i = 0;
696         if (!coded) {
697             goto not_coded;
698         }
699         if (s->ac_pred) {
700             if (dc_pred_dir == 0)
701                 scan_table = s->intra_v_scantable.permutated; /* left */
702             else
703                 scan_table = s->intra_h_scantable.permutated; /* top */
704         } else {
705             scan_table = s->intra_scantable.permutated;
706         }
707         rl_vlc= rl->rl_vlc[0];
708     } else {
709         qmul = s->qscale << 1;
710         qadd = (s->qscale - 1) | 1;
711         i = -1;
712         rl = &ff_rl_table[3 + s->rl_table_index];
713
714         if(s->msmpeg4_version==2)
715             run_diff = 0;
716         else
717             run_diff = 1;
718
719         if (!coded) {
720             s->block_last_index[n] = i;
721             return 0;
722         }
723         if(!scan_table)
724             scan_table = s->inter_scantable.permutated;
725         rl_vlc= rl->rl_vlc[s->qscale];
726     }
727   {
728     OPEN_READER(re, &s->gb);
729     for(;;) {
730         UPDATE_CACHE(re, &s->gb);
731         GET_RL_VLC(level, run, re, &s->gb, rl_vlc, TEX_VLC_BITS, 2, 0);
732         if (level==0) {
733             int cache;
734             cache= GET_CACHE(re, &s->gb);
735             /* escape */
736             if (s->msmpeg4_version==1 || (cache&0x80000000)==0) {
737                 if (s->msmpeg4_version==1 || (cache&0x40000000)==0) {
738                     /* third escape */
739                     if(s->msmpeg4_version!=1) LAST_SKIP_BITS(re, &s->gb, 2);
740                     UPDATE_CACHE(re, &s->gb);
741                     if(s->msmpeg4_version<=3){
742                         last=  SHOW_UBITS(re, &s->gb, 1); SKIP_CACHE(re, &s->gb, 1);
743                         run=   SHOW_UBITS(re, &s->gb, 6); SKIP_CACHE(re, &s->gb, 6);
744                         level= SHOW_SBITS(re, &s->gb, 8);
745                         SKIP_COUNTER(re, &s->gb, 1+6+8);
746                     }else{
747                         int sign;
748                         last=  SHOW_UBITS(re, &s->gb, 1); SKIP_BITS(re, &s->gb, 1);
749                         if(!s->esc3_level_length){
750                             int ll;
751                             ff_dlog(s->avctx, "ESC-3 %X at %d %d\n",
752                                     show_bits(&s->gb, 24), s->mb_x, s->mb_y);
753                             if(s->qscale<8){
754                                 ll= SHOW_UBITS(re, &s->gb, 3); SKIP_BITS(re, &s->gb, 3);
755                                 if(ll==0){
756                                     ll= 8+SHOW_UBITS(re, &s->gb, 1); SKIP_BITS(re, &s->gb, 1);
757                                 }
758                             }else{
759                                 ll=2;
760                                 while(ll<8 && SHOW_UBITS(re, &s->gb, 1)==0){
761                                     ll++;
762                                     SKIP_BITS(re, &s->gb, 1);
763                                 }
764                                 if(ll<8) SKIP_BITS(re, &s->gb, 1);
765                             }
766
767                             s->esc3_level_length= ll;
768                             s->esc3_run_length= SHOW_UBITS(re, &s->gb, 2) + 3; SKIP_BITS(re, &s->gb, 2);
769                             UPDATE_CACHE(re, &s->gb);
770                         }
771                         run=   SHOW_UBITS(re, &s->gb, s->esc3_run_length);
772                         SKIP_BITS(re, &s->gb, s->esc3_run_length);
773
774                         sign=  SHOW_UBITS(re, &s->gb, 1);
775                         SKIP_BITS(re, &s->gb, 1);
776
777                         level= SHOW_UBITS(re, &s->gb, s->esc3_level_length);
778                         SKIP_BITS(re, &s->gb, s->esc3_level_length);
779                         if(sign) level= -level;
780                     }
781
782                     //level = level * qmul + (level>0) * qadd - (level<=0) * qadd ;
783                     if (level>0) level= level * qmul + qadd;
784                     else         level= level * qmul - qadd;
785                     i+= run + 1;
786                     if(last) i+=192;
787                 } else {
788                     /* second escape */
789                     SKIP_BITS(re, &s->gb, 2);
790                     GET_RL_VLC(level, run, re, &s->gb, rl_vlc, TEX_VLC_BITS, 2, 1);
791                     i+= run + rl->max_run[run>>7][level/qmul] + run_diff; //FIXME opt indexing
792                     level = (level ^ SHOW_SBITS(re, &s->gb, 1)) - SHOW_SBITS(re, &s->gb, 1);
793                     LAST_SKIP_BITS(re, &s->gb, 1);
794                 }
795             } else {
796                 /* first escape */
797                 SKIP_BITS(re, &s->gb, 1);
798                 GET_RL_VLC(level, run, re, &s->gb, rl_vlc, TEX_VLC_BITS, 2, 1);
799                 i+= run;
800                 level = level + rl->max_level[run>>7][(run-1)&63] * qmul;//FIXME opt indexing
801                 level = (level ^ SHOW_SBITS(re, &s->gb, 1)) - SHOW_SBITS(re, &s->gb, 1);
802                 LAST_SKIP_BITS(re, &s->gb, 1);
803             }
804         } else {
805             i+= run;
806             level = (level ^ SHOW_SBITS(re, &s->gb, 1)) - SHOW_SBITS(re, &s->gb, 1);
807             LAST_SKIP_BITS(re, &s->gb, 1);
808         }
809         if (i > 62){
810             i-= 192;
811             if(i&(~63)){
812                 const int left= get_bits_left(&s->gb);
813                 if (((i + 192 == 64 && level / qmul == -1) ||
814                      !(s->avctx->err_recognition & (AV_EF_BITSTREAM|AV_EF_COMPLIANT))) &&
815                     left >= 0) {
816                     av_log(s->avctx, AV_LOG_ERROR, "ignoring overflow at %d %d\n", s->mb_x, s->mb_y);
817                     i = 63;
818                     break;
819                 }else{
820                     av_log(s->avctx, AV_LOG_ERROR, "ac-tex damaged at %d %d\n", s->mb_x, s->mb_y);
821                     return -1;
822                 }
823             }
824
825             block[scan_table[i]] = level;
826             break;
827         }
828
829         block[scan_table[i]] = level;
830     }
831     CLOSE_READER(re, &s->gb);
832   }
833  not_coded:
834     if (s->mb_intra) {
835         ff_mpeg4_pred_ac(s, block, n, dc_pred_dir);
836         if (s->ac_pred) {
837             i = 63; /* XXX: not optimal */
838         }
839     }
840     if(s->msmpeg4_version>=4 && i>0) i=63; //FIXME/XXX optimize
841     s->block_last_index[n] = i;
842
843     return 0;
844 }
845
846 int ff_msmpeg4_decode_motion(MpegEncContext * s,
847                                  int *mx_ptr, int *my_ptr)
848 {
849     MVTable *mv;
850     int code, mx, my;
851
852     mv = &ff_mv_tables[s->mv_table_index];
853
854     code = get_vlc2(&s->gb, mv->vlc.table, MV_VLC_BITS, 2);
855     if (code < 0){
856         av_log(s->avctx, AV_LOG_ERROR, "illegal MV code at %d %d\n", s->mb_x, s->mb_y);
857         return -1;
858     }
859     if (code == mv->n) {
860         mx = get_bits(&s->gb, 6);
861         my = get_bits(&s->gb, 6);
862     } else {
863         mx = mv->table_mvx[code];
864         my = mv->table_mvy[code];
865     }
866
867     mx += *mx_ptr - 32;
868     my += *my_ptr - 32;
869     /* WARNING : they do not do exactly modulo encoding */
870     if (mx <= -64)
871         mx += 64;
872     else if (mx >= 64)
873         mx -= 64;
874
875     if (my <= -64)
876         my += 64;
877     else if (my >= 64)
878         my -= 64;
879     *mx_ptr = mx;
880     *my_ptr = my;
881     return 0;
882 }
883
884 AVCodec ff_msmpeg4v1_decoder = {
885     .name           = "msmpeg4v1",
886     .long_name      = NULL_IF_CONFIG_SMALL("MPEG-4 part 2 Microsoft variant version 1"),
887     .type           = AVMEDIA_TYPE_VIDEO,
888     .id             = AV_CODEC_ID_MSMPEG4V1,
889     .priv_data_size = sizeof(MpegEncContext),
890     .init           = ff_msmpeg4_decode_init,
891     .close          = ff_h263_decode_end,
892     .decode         = ff_h263_decode_frame,
893     .capabilities   = AV_CODEC_CAP_DRAW_HORIZ_BAND | AV_CODEC_CAP_DR1,
894     .caps_internal  = FF_CODEC_CAP_SKIP_FRAME_FILL_PARAM | FF_CODEC_CAP_INIT_CLEANUP,
895     .max_lowres     = 3,
896     .pix_fmts       = (const enum AVPixelFormat[]) {
897         AV_PIX_FMT_YUV420P,
898         AV_PIX_FMT_NONE
899     },
900 };
901
902 AVCodec ff_msmpeg4v2_decoder = {
903     .name           = "msmpeg4v2",
904     .long_name      = NULL_IF_CONFIG_SMALL("MPEG-4 part 2 Microsoft variant version 2"),
905     .type           = AVMEDIA_TYPE_VIDEO,
906     .id             = AV_CODEC_ID_MSMPEG4V2,
907     .priv_data_size = sizeof(MpegEncContext),
908     .init           = ff_msmpeg4_decode_init,
909     .close          = ff_h263_decode_end,
910     .decode         = ff_h263_decode_frame,
911     .capabilities   = AV_CODEC_CAP_DRAW_HORIZ_BAND | AV_CODEC_CAP_DR1,
912     .caps_internal  = FF_CODEC_CAP_SKIP_FRAME_FILL_PARAM | FF_CODEC_CAP_INIT_CLEANUP,
913     .max_lowres     = 3,
914     .pix_fmts       = (const enum AVPixelFormat[]) {
915         AV_PIX_FMT_YUV420P,
916         AV_PIX_FMT_NONE
917     },
918 };
919
920 AVCodec ff_msmpeg4v3_decoder = {
921     .name           = "msmpeg4",
922     .long_name      = NULL_IF_CONFIG_SMALL("MPEG-4 part 2 Microsoft variant version 3"),
923     .type           = AVMEDIA_TYPE_VIDEO,
924     .id             = AV_CODEC_ID_MSMPEG4V3,
925     .priv_data_size = sizeof(MpegEncContext),
926     .init           = ff_msmpeg4_decode_init,
927     .close          = ff_h263_decode_end,
928     .decode         = ff_h263_decode_frame,
929     .capabilities   = AV_CODEC_CAP_DRAW_HORIZ_BAND | AV_CODEC_CAP_DR1,
930     .caps_internal  = FF_CODEC_CAP_SKIP_FRAME_FILL_PARAM | FF_CODEC_CAP_INIT_CLEANUP,
931     .max_lowres     = 3,
932     .pix_fmts       = (const enum AVPixelFormat[]) {
933         AV_PIX_FMT_YUV420P,
934         AV_PIX_FMT_NONE
935     },
936 };
937
938 AVCodec ff_wmv1_decoder = {
939     .name           = "wmv1",
940     .long_name      = NULL_IF_CONFIG_SMALL("Windows Media Video 7"),
941     .type           = AVMEDIA_TYPE_VIDEO,
942     .id             = AV_CODEC_ID_WMV1,
943     .priv_data_size = sizeof(MpegEncContext),
944     .init           = ff_msmpeg4_decode_init,
945     .close          = ff_h263_decode_end,
946     .decode         = ff_h263_decode_frame,
947     .capabilities   = AV_CODEC_CAP_DRAW_HORIZ_BAND | AV_CODEC_CAP_DR1,
948     .caps_internal  = FF_CODEC_CAP_SKIP_FRAME_FILL_PARAM | FF_CODEC_CAP_INIT_CLEANUP,
949     .max_lowres     = 3,
950     .pix_fmts       = (const enum AVPixelFormat[]) {
951         AV_PIX_FMT_YUV420P,
952         AV_PIX_FMT_NONE
953     },
954 };