]> git.sesse.net Git - ffmpeg/blob - libavfilter/libmpcodecs/vf_uspp.c
Merge commit '0c00fd80ee4791bd70b634084307fc9f179e0412'
[ffmpeg] / libavfilter / libmpcodecs / vf_uspp.c
1 /*
2  * Copyright (C) 2005 Michael Niedermayer <michaelni@gmx.at>
3  *
4  * This file is part of MPlayer.
5  *
6  * MPlayer is free software; you can redistribute it and/or modify
7  * it under the terms of the GNU General Public License as published by
8  * the Free Software Foundation; either version 2 of the License, or
9  * (at your option) any later version.
10  *
11  * MPlayer is distributed in the hope that it will be useful,
12  * but WITHOUT ANY WARRANTY; without even the implied warranty of
13  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
14  * GNU General Public License for more details.
15  *
16  * You should have received a copy of the GNU General Public License along
17  * with MPlayer; if not, write to the Free Software Foundation, Inc.,
18  * 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA.
19  */
20
21 #include <stdio.h>
22 #include <stdlib.h>
23 #include <string.h>
24 #include <inttypes.h>
25 #include <math.h>
26 #include <assert.h>
27
28 #include "config.h"
29
30 #include "mp_msg.h"
31 #include "cpudetect.h"
32
33 #include "libavcodec/avcodec.h"
34
35 #include "img_format.h"
36 #include "mp_image.h"
37 #include "vf.h"
38 #include "vd_ffmpeg.h"
39 #include "libvo/fastmemcpy.h"
40
41 #define XMIN(a,b) ((a) < (b) ? (a) : (b))
42
43 #define BLOCK 16
44
45 //===========================================================================//
46 static const uint8_t  __attribute__((aligned(8))) dither[8][8]={
47 {  0*4,  48*4,  12*4,  60*4,   3*4,  51*4,  15*4,  63*4, },
48 { 32*4,  16*4,  44*4,  28*4,  35*4,  19*4,  47*4,  31*4, },
49 {  8*4,  56*4,   4*4,  52*4,  11*4,  59*4,   7*4,  55*4, },
50 { 40*4,  24*4,  36*4,  20*4,  43*4,  27*4,  39*4,  23*4, },
51 {  2*4,  50*4,  14*4,  62*4,   1*4,  49*4,  13*4,  61*4, },
52 { 34*4,  18*4,  46*4,  30*4,  33*4,  17*4,  45*4,  29*4, },
53 { 10*4,  58*4,   6*4,  54*4,   9*4,  57*4,   5*4,  53*4, },
54 { 42*4,  26*4,  38*4,  22*4,  41*4,  25*4,  37*4,  21*4, },
55 };
56
57 static const uint8_t offset[511][2]= {
58 { 0, 0},
59 { 0, 0}, { 8, 8},
60 { 0, 0}, { 4, 4}, {12, 8}, { 8,12},
61 { 0, 0}, {10, 2}, { 4, 4}, {14, 6}, { 8, 8}, { 2,10}, {12,12}, { 6,14},
62
63 { 0, 0}, {10, 2}, { 4, 4}, {14, 6}, { 8, 8}, { 2,10}, {12,12}, { 6,14},
64 { 5, 1}, {15, 3}, { 9, 5}, { 3, 7}, {13, 9}, { 7,11}, { 1,13}, {11,15},
65
66 { 0, 0}, { 8, 0}, { 0, 8}, { 8, 8}, { 5, 1}, {13, 1}, { 5, 9}, {13, 9},
67 { 2, 2}, {10, 2}, { 2,10}, {10,10}, { 7, 3}, {15, 3}, { 7,11}, {15,11},
68 { 4, 4}, {12, 4}, { 4,12}, {12,12}, { 1, 5}, { 9, 5}, { 1,13}, { 9,13},
69 { 6, 6}, {14, 6}, { 6,14}, {14,14}, { 3, 7}, {11, 7}, { 3,15}, {11,15},
70
71 { 0, 0}, { 8, 0}, { 0, 8}, { 8, 8}, { 4, 0}, {12, 0}, { 4, 8}, {12, 8},
72 { 1, 1}, { 9, 1}, { 1, 9}, { 9, 9}, { 5, 1}, {13, 1}, { 5, 9}, {13, 9},
73 { 3, 2}, {11, 2}, { 3,10}, {11,10}, { 7, 2}, {15, 2}, { 7,10}, {15,10},
74 { 2, 3}, {10, 3}, { 2,11}, {10,11}, { 6, 3}, {14, 3}, { 6,11}, {14,11},
75 { 0, 4}, { 8, 4}, { 0,12}, { 8,12}, { 4, 4}, {12, 4}, { 4,12}, {12,12},
76 { 1, 5}, { 9, 5}, { 1,13}, { 9,13}, { 5, 5}, {13, 5}, { 5,13}, {13,13},
77 { 3, 6}, {11, 6}, { 3,14}, {11,14}, { 7, 6}, {15, 6}, { 7,14}, {15,14},
78 { 2, 7}, {10, 7}, { 2,15}, {10,15}, { 6, 7}, {14, 7}, { 6,15}, {14,15},
79
80 { 0, 0}, { 8, 0}, { 0, 8}, { 8, 8}, { 0, 2}, { 8, 2}, { 0,10}, { 8,10},
81 { 0, 4}, { 8, 4}, { 0,12}, { 8,12}, { 0, 6}, { 8, 6}, { 0,14}, { 8,14},
82 { 1, 1}, { 9, 1}, { 1, 9}, { 9, 9}, { 1, 3}, { 9, 3}, { 1,11}, { 9,11},
83 { 1, 5}, { 9, 5}, { 1,13}, { 9,13}, { 1, 7}, { 9, 7}, { 1,15}, { 9,15},
84 { 2, 0}, {10, 0}, { 2, 8}, {10, 8}, { 2, 2}, {10, 2}, { 2,10}, {10,10},
85 { 2, 4}, {10, 4}, { 2,12}, {10,12}, { 2, 6}, {10, 6}, { 2,14}, {10,14},
86 { 3, 1}, {11, 1}, { 3, 9}, {11, 9}, { 3, 3}, {11, 3}, { 3,11}, {11,11},
87 { 3, 5}, {11, 5}, { 3,13}, {11,13}, { 3, 7}, {11, 7}, { 3,15}, {11,15},
88 { 4, 0}, {12, 0}, { 4, 8}, {12, 8}, { 4, 2}, {12, 2}, { 4,10}, {12,10},
89 { 4, 4}, {12, 4}, { 4,12}, {12,12}, { 4, 6}, {12, 6}, { 4,14}, {12,14},
90 { 5, 1}, {13, 1}, { 5, 9}, {13, 9}, { 5, 3}, {13, 3}, { 5,11}, {13,11},
91 { 5, 5}, {13, 5}, { 5,13}, {13,13}, { 5, 7}, {13, 7}, { 5,15}, {13,15},
92 { 6, 0}, {14, 0}, { 6, 8}, {14, 8}, { 6, 2}, {14, 2}, { 6,10}, {14,10},
93 { 6, 4}, {14, 4}, { 6,12}, {14,12}, { 6, 6}, {14, 6}, { 6,14}, {14,14},
94 { 7, 1}, {15, 1}, { 7, 9}, {15, 9}, { 7, 3}, {15, 3}, { 7,11}, {15,11},
95 { 7, 5}, {15, 5}, { 7,13}, {15,13}, { 7, 7}, {15, 7}, { 7,15}, {15,15},
96
97 { 0, 0}, { 8, 0}, { 0, 8}, { 8, 8}, { 4, 4}, {12, 4}, { 4,12}, {12,12}, { 0, 4}, { 8, 4}, { 0,12}, { 8,12}, { 4, 0}, {12, 0}, { 4, 8}, {12, 8}, { 2, 2}, {10, 2}, { 2,10}, {10,10}, { 6, 6}, {14, 6}, { 6,14}, {14,14}, { 2, 6}, {10, 6}, { 2,14}, {10,14}, { 6, 2}, {14, 2}, { 6,10}, {14,10}, { 0, 2}, { 8, 2}, { 0,10}, { 8,10}, { 4, 6}, {12, 6}, { 4,14}, {12,14}, { 0, 6}, { 8, 6}, { 0,14}, { 8,14}, { 4, 2}, {12, 2}, { 4,10}, {12,10}, { 2, 0}, {10, 0}, { 2, 8}, {10, 8}, { 6, 4}, {14, 4}, { 6,12}, {14,12}, { 2, 4}, {10, 4}, { 2,12}, {10,12}, { 6, 0}, {14, 0}, { 6, 8}, {14, 8}, { 1, 1}, { 9, 1}, { 1, 9}, { 9, 9}, { 5, 5}, {13, 5}, { 5,13}, {13,13}, { 1, 5}, { 9, 5}, { 1,13}, { 9,13}, { 5, 1}, {13, 1}, { 5, 9}, {13, 9}, { 3, 3}, {11, 3}, { 3,11}, {11,11}, { 7, 7}, {15, 7}, { 7,15}, {15,15}, { 3, 7}, {11, 7}, { 3,15}, {11,15}, { 7, 3}, {15, 3}, { 7,11}, {15,11}, { 1, 3}, { 9, 3}, { 1,11}, { 9,11}, { 5, 7}, {13, 7}, { 5,15}, {13,15}, { 1, 7}, { 9, 7}, { 1,15}, { 9,15}, { 5, 3}, {13, 3}, { 5,11}, {13,11}, { 3, 1}, {11,1}, { 3, 9}, {11, 9}, { 7, 5}, {15, 5}, { 7,13}, {15,13}, { 3, 5}, {11, 5}, { 3,13}, {11,13}, { 7, 1}, {15, 1}, { 7, 9}, {15, 9}, { 0, 1}, { 8, 1}, { 0, 9}, { 8, 9}, { 4, 5}, {12, 5}, { 4,13}, {12,13}, { 0, 5}, { 8, 5}, { 0,13}, { 8,13}, { 4, 1}, {12, 1}, { 4, 9}, {12, 9}, { 2, 3}, {10, 3}, { 2,11}, {10,11}, { 6, 7}, {14, 7}, { 6,15}, {14,15}, { 2, 7}, {10, 7}, { 2,15}, {10,15}, { 6, 3}, {14, 3}, { 6,11}, {14,11}, { 0, 3}, { 8, 3}, { 0,11}, { 8,11}, { 4, 7}, {12, 7}, { 4,15}, {12,15}, { 0, 7}, { 8, 7}, { 0,15}, { 8,15}, { 4, 3}, {12, 3}, { 4,11}, {12,11}, { 2, 1}, {10, 1}, { 2, 9}, {10, 9}, { 6, 5}, {14, 5}, { 6,13}, {14,13}, { 2, 5}, {10, 5}, { 2,13}, {10,13}, { 6, 1}, {14, 1}, { 6, 9}, {14, 9}, { 1, 0}, { 9, 0}, { 1, 8}, { 9, 8}, { 5, 4}, {13, 4}, { 5,12}, {13,12}, { 1, 4}, { 9, 4}, { 1,12}, { 9,12}, { 5, 0}, {13, 0}, { 5, 8}, {13, 8}, { 3, 2}, {11, 2}, { 3,10}, {11,10}, { 7, 6}, {15, 6}, { 7,14}, {15,14}, { 3, 6}, {11, 6}, { 3,14}, {11,14}, { 7, 2}, {15, 2}, { 7,10}, {15,10}, { 1, 2}, { 9, 2}, { 1,10}, {9,10}, { 5, 6}, {13, 6}, { 5,14}, {13,14}, { 1, 6}, { 9, 6}, { 1,14}, { 9,14}, { 5, 2}, {13, 2}, { 5,10}, {13,10}, { 3, 0}, {11, 0}, { 3, 8}, {11, 8}, { 7, 4}, {15, 4}, { 7,12}, {15,12}, { 3, 4}, {11, 4}, { 3,12}, {11,12}, { 7, 0}, {15, 0}, { 7, 8}, {15, 8},
98 };
99
100 struct vf_priv_s {
101     int log2_count;
102     int qp;
103     int mode;
104     int mpeg2;
105     int temp_stride[3];
106     uint8_t *src[3];
107     int16_t *temp[3];
108     int outbuf_size;
109     uint8_t *outbuf;
110     AVCodecContext *avctx_enc[BLOCK*BLOCK];
111     AVFrame *frame;
112     AVFrame *frame_dec;
113 };
114
115 static void store_slice_c(uint8_t *dst, int16_t *src, int dst_stride, int src_stride, int width, int height, int log2_scale){
116         int y, x;
117
118 #define STORE(pos) \
119         temp= ((src[x + y*src_stride + pos]<<log2_scale) + d[pos])>>8;\
120         if(temp & 0x100) temp= ~(temp>>31);\
121         dst[x + y*dst_stride + pos]= temp;
122
123         for(y=0; y<height; y++){
124                 const uint8_t *d= dither[y&7];
125                 for(x=0; x<width; x+=8){
126                         int temp;
127                         STORE(0);
128                         STORE(1);
129                         STORE(2);
130                         STORE(3);
131                         STORE(4);
132                         STORE(5);
133                         STORE(6);
134                         STORE(7);
135                 }
136         }
137 }
138
139 static void filter(struct vf_priv_s *p, uint8_t *dst[3], uint8_t *src[3], int dst_stride[3], int src_stride[3], int width, int height, uint8_t *qp_store, int qp_stride){
140     int x, y, i, j;
141     const int count= 1<<p->log2_count;
142
143     for(i=0; i<3; i++){
144         int is_chroma= !!i;
145         int w= width >>is_chroma;
146         int h= height>>is_chroma;
147         int stride= p->temp_stride[i];
148         int block= BLOCK>>is_chroma;
149
150         if (!src[i] || !dst[i])
151             continue; // HACK avoid crash for Y8 colourspace
152         for(y=0; y<h; y++){
153             int index= block + block*stride + y*stride;
154             fast_memcpy(p->src[i] + index, src[i] + y*src_stride[i], w);
155             for(x=0; x<block; x++){
156                 p->src[i][index     - x - 1]= p->src[i][index +     x    ];
157                 p->src[i][index + w + x    ]= p->src[i][index + w - x - 1];
158             }
159         }
160         for(y=0; y<block; y++){
161             fast_memcpy(p->src[i] + (  block-1-y)*stride, p->src[i] + (  y+block  )*stride, stride);
162             fast_memcpy(p->src[i] + (h+block  +y)*stride, p->src[i] + (h-y+block-1)*stride, stride);
163         }
164
165         p->frame->linesize[i]= stride;
166         memset(p->temp[i], 0, (h+2*block)*stride*sizeof(int16_t));
167     }
168
169     if(p->qp)
170         p->frame->quality= p->qp * FF_QP2LAMBDA;
171     else
172         p->frame->quality= norm_qscale(qp_store[0], p->mpeg2) * FF_QP2LAMBDA;
173 //    init per MB qscale stuff FIXME
174
175     for(i=0; i<count; i++){
176         const int x1= offset[i+count-1][0];
177         const int y1= offset[i+count-1][1];
178         int offset;
179         p->frame->data[0]= p->src[0] + x1 + y1 * p->frame->linesize[0];
180         p->frame->data[1]= p->src[1] + x1/2 + y1/2 * p->frame->linesize[1];
181         p->frame->data[2]= p->src[2] + x1/2 + y1/2 * p->frame->linesize[2];
182
183         avcodec_encode_video(p->avctx_enc[i], p->outbuf, p->outbuf_size, p->frame);
184         p->frame_dec = p->avctx_enc[i]->coded_frame;
185
186         offset= (BLOCK-x1) + (BLOCK-y1)*p->frame_dec->linesize[0];
187         //FIXME optimize
188         for(y=0; y<height; y++){
189             for(x=0; x<width; x++){
190                 p->temp[0][ x + y*p->temp_stride[0] ] += p->frame_dec->data[0][ x + y*p->frame_dec->linesize[0] + offset ];
191             }
192         }
193         offset= (BLOCK/2-x1/2) + (BLOCK/2-y1/2)*p->frame_dec->linesize[1];
194         for(y=0; y<height/2; y++){
195             for(x=0; x<width/2; x++){
196                 p->temp[1][ x + y*p->temp_stride[1] ] += p->frame_dec->data[1][ x + y*p->frame_dec->linesize[1] + offset ];
197                 p->temp[2][ x + y*p->temp_stride[2] ] += p->frame_dec->data[2][ x + y*p->frame_dec->linesize[2] + offset ];
198             }
199         }
200     }
201
202     for(j=0; j<3; j++){
203         int is_chroma= !!j;
204         store_slice_c(dst[j], p->temp[j], dst_stride[j], p->temp_stride[j], width>>is_chroma, height>>is_chroma, 8-p->log2_count);
205     }
206 }
207
208 static int config(struct vf_instance *vf,
209         int width, int height, int d_width, int d_height,
210         unsigned int flags, unsigned int outfmt){
211         int i;
212         AVCodec *enc= avcodec_find_encoder(AV_CODEC_ID_SNOW);
213
214         for(i=0; i<3; i++){
215             int is_chroma= !!i;
216             int w= ((width  + 4*BLOCK-1) & (~(2*BLOCK-1)))>>is_chroma;
217             int h= ((height + 4*BLOCK-1) & (~(2*BLOCK-1)))>>is_chroma;
218
219             vf->priv->temp_stride[i]= w;
220             vf->priv->temp[i]= malloc(vf->priv->temp_stride[i]*h*sizeof(int16_t));
221             vf->priv->src [i]= malloc(vf->priv->temp_stride[i]*h*sizeof(uint8_t));
222         }
223         for(i=0; i< (1<<vf->priv->log2_count); i++){
224             AVCodecContext *avctx_enc;
225
226             avctx_enc=
227             vf->priv->avctx_enc[i]= avcodec_alloc_context();
228             avctx_enc->width = width + BLOCK;
229             avctx_enc->height = height + BLOCK;
230             avctx_enc->time_base= (AVRational){1,25};  // meaningless
231             avctx_enc->gop_size = 300;
232             avctx_enc->max_b_frames= 0;
233             avctx_enc->pix_fmt = PIX_FMT_YUV420P;
234             avctx_enc->flags = CODEC_FLAG_QSCALE | CODEC_FLAG_LOW_DELAY;
235             avctx_enc->strict_std_compliance = FF_COMPLIANCE_EXPERIMENTAL;
236             avctx_enc->global_quality= 123;
237             avcodec_open(avctx_enc, enc);
238             assert(avctx_enc->codec);
239         }
240         vf->priv->frame= avcodec_alloc_frame();
241         vf->priv->frame_dec= avcodec_alloc_frame();
242
243         vf->priv->outbuf_size= (width + BLOCK)*(height + BLOCK)*10;
244         vf->priv->outbuf= malloc(vf->priv->outbuf_size);
245
246         return vf_next_config(vf,width,height,d_width,d_height,flags,outfmt);
247 }
248
249 static void get_image(struct vf_instance *vf, mp_image_t *mpi){
250     if(mpi->flags&MP_IMGFLAG_PRESERVE) return; // don't change
251     // ok, we can do pp in-place (or pp disabled):
252     vf->dmpi=vf_get_image(vf->next,mpi->imgfmt,
253         mpi->type, mpi->flags | MP_IMGFLAG_READABLE, mpi->width, mpi->height);
254     mpi->planes[0]=vf->dmpi->planes[0];
255     mpi->stride[0]=vf->dmpi->stride[0];
256     mpi->width=vf->dmpi->width;
257     if(mpi->flags&MP_IMGFLAG_PLANAR){
258         mpi->planes[1]=vf->dmpi->planes[1];
259         mpi->planes[2]=vf->dmpi->planes[2];
260         mpi->stride[1]=vf->dmpi->stride[1];
261         mpi->stride[2]=vf->dmpi->stride[2];
262     }
263     mpi->flags|=MP_IMGFLAG_DIRECT;
264 }
265
266 static int put_image(struct vf_instance *vf, mp_image_t *mpi, double pts){
267     mp_image_t *dmpi;
268
269     if(!(mpi->flags&MP_IMGFLAG_DIRECT)){
270         // no DR, so get a new image! hope we'll get DR buffer:
271         dmpi=vf_get_image(vf->next,mpi->imgfmt,
272             MP_IMGTYPE_TEMP,
273             MP_IMGFLAG_ACCEPT_STRIDE|MP_IMGFLAG_PREFER_ALIGNED_STRIDE,
274             mpi->width,mpi->height);
275         vf_clone_mpi_attributes(dmpi, mpi);
276     }else{
277         dmpi=vf->dmpi;
278     }
279
280     vf->priv->mpeg2= mpi->qscale_type;
281     if(vf->priv->log2_count || !(mpi->flags&MP_IMGFLAG_DIRECT)){
282         if(mpi->qscale || vf->priv->qp){
283             filter(vf->priv, dmpi->planes, mpi->planes, dmpi->stride, mpi->stride, mpi->w, mpi->h, mpi->qscale, mpi->qstride);
284         }else{
285             memcpy_pic(dmpi->planes[0], mpi->planes[0], mpi->w, mpi->h, dmpi->stride[0], mpi->stride[0]);
286             memcpy_pic(dmpi->planes[1], mpi->planes[1], mpi->w>>mpi->chroma_x_shift, mpi->h>>mpi->chroma_y_shift, dmpi->stride[1], mpi->stride[1]);
287             memcpy_pic(dmpi->planes[2], mpi->planes[2], mpi->w>>mpi->chroma_x_shift, mpi->h>>mpi->chroma_y_shift, dmpi->stride[2], mpi->stride[2]);
288         }
289     }
290
291 #if HAVE_MMX
292     if(gCpuCaps.hasMMX) __asm__ volatile ("emms\n\t");
293 #endif
294 #if HAVE_MMX2
295     if(gCpuCaps.hasMMX2) __asm__ volatile ("sfence\n\t");
296 #endif
297
298     return vf_next_put_image(vf,dmpi, pts);
299 }
300
301 static void uninit(struct vf_instance *vf){
302     int i;
303     if(!vf->priv) return;
304
305     for(i=0; i<3; i++){
306         free(vf->priv->temp[i]);
307         vf->priv->temp[i]= NULL;
308         free(vf->priv->src[i]);
309         vf->priv->src[i]= NULL;
310     }
311     for(i=0; i<BLOCK*BLOCK; i++){
312         av_freep(&vf->priv->avctx_enc[i]);
313     }
314
315     free(vf->priv);
316     vf->priv=NULL;
317 }
318
319 //===========================================================================//
320 static int query_format(struct vf_instance *vf, unsigned int fmt){
321     switch(fmt){
322         case IMGFMT_YV12:
323         case IMGFMT_I420:
324         case IMGFMT_IYUV:
325         case IMGFMT_Y800:
326         case IMGFMT_Y8:
327             return vf_next_query_format(vf,fmt);
328     }
329     return 0;
330 }
331
332 static int control(struct vf_instance *vf, int request, void* data){
333     switch(request){
334     case VFCTRL_QUERY_MAX_PP_LEVEL:
335         return 8;
336     case VFCTRL_SET_PP_LEVEL:
337         vf->priv->log2_count= *((unsigned int*)data);
338         //FIXME we have to realloc a few things here
339         return CONTROL_TRUE;
340     }
341     return vf_next_control(vf,request,data);
342 }
343
344 static int vf_open(vf_instance_t *vf, char *args){
345
346     int log2c=-1;
347
348     vf->config=config;
349     vf->put_image=put_image;
350     vf->get_image=get_image;
351     vf->query_format=query_format;
352     vf->uninit=uninit;
353     vf->control= control;
354     vf->priv=malloc(sizeof(struct vf_priv_s));
355     memset(vf->priv, 0, sizeof(struct vf_priv_s));
356
357     init_avcodec();
358
359     vf->priv->log2_count= 4;
360
361     if (args) sscanf(args, "%d:%d:%d", &log2c, &vf->priv->qp, &vf->priv->mode);
362
363     if( log2c >=0 && log2c <=8 )
364         vf->priv->log2_count = log2c;
365
366     if(vf->priv->qp < 0)
367         vf->priv->qp = 0;
368
369 // #if HAVE_MMX
370 //     if(gCpuCaps.hasMMX){
371 //         store_slice= store_slice_mmx;
372 //     }
373 // #endif
374
375     return 1;
376 }
377
378 const vf_info_t vf_info_uspp = {
379     "ultra simple/slow postprocess",
380     "uspp",
381     "Michael Niedermayer",
382     "",
383     vf_open,
384     NULL
385 };