]> git.sesse.net Git - ffmpeg/blob - libavcodec/imgconvert.c
avcodec/imgconvert: Fix loss mask bug in avcodec_find_best_pix_fmt_of_list()
[ffmpeg] / libavcodec / imgconvert.c
1 /*
2  * Misc image conversion routines
3  * Copyright (c) 2001, 2002, 2003 Fabrice Bellard
4  *
5  * This file is part of FFmpeg.
6  *
7  * FFmpeg is free software; you can redistribute it and/or
8  * modify it under the terms of the GNU Lesser General Public
9  * License as published by the Free Software Foundation; either
10  * version 2.1 of the License, or (at your option) any later version.
11  *
12  * FFmpeg is distributed in the hope that it will be useful,
13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
15  * Lesser General Public License for more details.
16  *
17  * You should have received a copy of the GNU Lesser General Public
18  * License along with FFmpeg; if not, write to the Free Software
19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
20  */
21
22 /**
23  * @file
24  * misc image conversion routines
25  */
26
27 #include "avcodec.h"
28 #include "internal.h"
29 #include "mathops.h"
30 #include "libavutil/avassert.h"
31 #include "libavutil/colorspace.h"
32 #include "libavutil/common.h"
33 #include "libavutil/pixdesc.h"
34 #include "libavutil/internal.h"
35 #include "libavutil/imgutils.h"
36
37 #if FF_API_GETCHROMA
38 void avcodec_get_chroma_sub_sample(enum AVPixelFormat pix_fmt, int *h_shift, int *v_shift)
39 {
40     const AVPixFmtDescriptor *desc = av_pix_fmt_desc_get(pix_fmt);
41     av_assert0(desc);
42     *h_shift = desc->log2_chroma_w;
43     *v_shift = desc->log2_chroma_h;
44 }
45 #endif
46
47 int avcodec_get_pix_fmt_loss(enum AVPixelFormat dst_pix_fmt,
48                              enum AVPixelFormat src_pix_fmt,
49                              int has_alpha)
50 {
51     return av_get_pix_fmt_loss(dst_pix_fmt, src_pix_fmt, has_alpha);
52 }
53
54 enum AVPixelFormat avcodec_find_best_pix_fmt_of_2(enum AVPixelFormat dst_pix_fmt1, enum AVPixelFormat dst_pix_fmt2,
55                                             enum AVPixelFormat src_pix_fmt, int has_alpha, int *loss_ptr)
56 {
57     return av_find_best_pix_fmt_of_2(dst_pix_fmt1, dst_pix_fmt2, src_pix_fmt, has_alpha, loss_ptr);
58 }
59
60 enum AVPixelFormat avcodec_find_best_pix_fmt2(enum AVPixelFormat dst_pix_fmt1, enum AVPixelFormat dst_pix_fmt2,
61                                             enum AVPixelFormat src_pix_fmt, int has_alpha, int *loss_ptr)
62 {
63     return avcodec_find_best_pix_fmt_of_2(dst_pix_fmt1, dst_pix_fmt2, src_pix_fmt, has_alpha, loss_ptr);
64 }
65
66 enum AVPixelFormat avcodec_find_best_pix_fmt_of_list(const enum AVPixelFormat *pix_fmt_list,
67                                             enum AVPixelFormat src_pix_fmt,
68                                             int has_alpha, int *loss_ptr){
69     int i;
70
71     enum AVPixelFormat best = AV_PIX_FMT_NONE;
72     int loss;
73
74     for (i=0; pix_fmt_list[i] != AV_PIX_FMT_NONE; i++) {
75         loss = *loss_ptr;
76         best = avcodec_find_best_pix_fmt_of_2(best, pix_fmt_list[i], src_pix_fmt, has_alpha, &loss);
77     }
78
79     *loss_ptr = loss;
80     return best;
81 }
82
83 #if FF_API_AVPICTURE
84 FF_DISABLE_DEPRECATION_WARNINGS
85 /* return true if yuv planar */
86 static inline int is_yuv_planar(const AVPixFmtDescriptor *desc)
87 {
88     int i;
89     int planes[4] = { 0 };
90
91     if (     desc->flags & AV_PIX_FMT_FLAG_RGB
92         || !(desc->flags & AV_PIX_FMT_FLAG_PLANAR))
93         return 0;
94
95     /* set the used planes */
96     for (i = 0; i < desc->nb_components; i++)
97         planes[desc->comp[i].plane] = 1;
98
99     /* if there is an unused plane, the format is not planar */
100     for (i = 0; i < desc->nb_components; i++)
101         if (!planes[i])
102             return 0;
103     return 1;
104 }
105
106 int av_picture_crop(AVPicture *dst, const AVPicture *src,
107                     enum AVPixelFormat pix_fmt, int top_band, int left_band)
108 {
109     const AVPixFmtDescriptor *desc = av_pix_fmt_desc_get(pix_fmt);
110     int y_shift;
111     int x_shift;
112     int max_step[4];
113
114     if (pix_fmt < 0 || pix_fmt >= AV_PIX_FMT_NB)
115         return -1;
116
117     y_shift = desc->log2_chroma_h;
118     x_shift = desc->log2_chroma_w;
119     av_image_fill_max_pixsteps(max_step, NULL, desc);
120
121     if (is_yuv_planar(desc)) {
122     dst->data[0] = src->data[0] + (top_band * src->linesize[0]) + left_band;
123     dst->data[1] = src->data[1] + ((top_band >> y_shift) * src->linesize[1]) + (left_band >> x_shift);
124     dst->data[2] = src->data[2] + ((top_band >> y_shift) * src->linesize[2]) + (left_band >> x_shift);
125     } else{
126         if(top_band % (1<<y_shift) || left_band % (1<<x_shift))
127             return -1;
128         dst->data[0] = src->data[0] + (top_band * src->linesize[0]) + (left_band * max_step[0]);
129     }
130
131     dst->linesize[0] = src->linesize[0];
132     dst->linesize[1] = src->linesize[1];
133     dst->linesize[2] = src->linesize[2];
134     return 0;
135 }
136
137 int av_picture_pad(AVPicture *dst, const AVPicture *src, int height, int width,
138                    enum AVPixelFormat pix_fmt, int padtop, int padbottom, int padleft, int padright,
139             int *color)
140 {
141     const AVPixFmtDescriptor *desc = av_pix_fmt_desc_get(pix_fmt);
142     uint8_t *optr;
143     int y_shift;
144     int x_shift;
145     int yheight;
146     int i, y;
147     int max_step[4];
148
149     if (pix_fmt < 0 || pix_fmt >= AV_PIX_FMT_NB)
150         return -1;
151
152     if (!is_yuv_planar(desc)) {
153         if (src)
154             return -1; //TODO: Not yet implemented
155
156         av_image_fill_max_pixsteps(max_step, NULL, desc);
157
158         if (padtop || padleft) {
159             memset(dst->data[0], color[0],
160                     dst->linesize[0] * padtop + (padleft * max_step[0]));
161         }
162
163         if (padleft || padright) {
164             optr = dst->data[0] + dst->linesize[0] * padtop +
165                     (dst->linesize[0] - (padright * max_step[0]));
166             yheight = height - 1 - (padtop + padbottom);
167             for (y = 0; y < yheight; y++) {
168                 memset(optr, color[0], (padleft + padright) * max_step[0]);
169                 optr += dst->linesize[0];
170             }
171         }
172
173         if (padbottom || padright) {
174             optr = dst->data[0] + dst->linesize[0] * (height - padbottom) -
175                     (padright * max_step[0]);
176             memset(optr, color[0], dst->linesize[0] * padbottom +
177                     (padright * max_step[0]));
178         }
179
180         return 0;
181     }
182
183     for (i = 0; i < 3; i++) {
184         x_shift = i ? desc->log2_chroma_w : 0;
185         y_shift = i ? desc->log2_chroma_h : 0;
186
187         if (padtop || padleft) {
188             memset(dst->data[i], color[i],
189                 dst->linesize[i] * (padtop >> y_shift) + (padleft >> x_shift));
190         }
191
192         if (padleft || padright) {
193             optr = dst->data[i] + dst->linesize[i] * (padtop >> y_shift) +
194                 (dst->linesize[i] - (padright >> x_shift));
195             yheight = (height - 1 - (padtop + padbottom)) >> y_shift;
196             for (y = 0; y < yheight; y++) {
197                 memset(optr, color[i], (padleft + padright) >> x_shift);
198                 optr += dst->linesize[i];
199             }
200         }
201
202         if (src) { /* first line */
203             uint8_t *iptr = src->data[i];
204             optr = dst->data[i] + dst->linesize[i] * (padtop >> y_shift) +
205                     (padleft >> x_shift);
206             memcpy(optr, iptr, (width - padleft - padright) >> x_shift);
207             iptr += src->linesize[i];
208             optr = dst->data[i] + dst->linesize[i] * (padtop >> y_shift) +
209                 (dst->linesize[i] - (padright >> x_shift));
210             yheight = (height - 1 - (padtop + padbottom)) >> y_shift;
211             for (y = 0; y < yheight; y++) {
212                 memset(optr, color[i], (padleft + padright) >> x_shift);
213                 memcpy(optr + ((padleft + padright) >> x_shift), iptr,
214                        (width - padleft - padright) >> x_shift);
215                 iptr += src->linesize[i];
216                 optr += dst->linesize[i];
217             }
218         }
219
220         if (padbottom || padright) {
221             optr = dst->data[i] + dst->linesize[i] *
222                 ((height - padbottom) >> y_shift) - (padright >> x_shift);
223             memset(optr, color[i],dst->linesize[i] *
224                 (padbottom >> y_shift) + (padright >> x_shift));
225         }
226     }
227
228     return 0;
229 }
230 FF_ENABLE_DEPRECATION_WARNINGS
231 #endif /* FF_API_AVPICTURE */