]> git.sesse.net Git - ffmpeg/blob - libavcodec/dfa.c
cook: Make constants passed to AV_BE2NE32C() unsigned to avoid signed overflow.
[ffmpeg] / libavcodec / dfa.c
1 /*
2  * Chronomaster DFA Video Decoder
3  * Copyright (c) 2011 Konstantin Shishkov
4  * based on work by Vladimir "VAG" Gneushev
5  *
6  * This file is part of Libav.
7  *
8  * Libav is free software; you can redistribute it and/or
9  * modify it under the terms of the GNU Lesser General Public
10  * License as published by the Free Software Foundation; either
11  * version 2.1 of the License, or (at your option) any later version.
12  *
13  * Libav is distributed in the hope that it will be useful,
14  * but WITHOUT ANY WARRANTY; without even the implied warranty of
15  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
16  * Lesser General Public License for more details.
17  *
18  * You should have received a copy of the GNU Lesser General Public
19  * License along with Libav; if not, write to the Free Software
20  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
21  */
22
23 #include "avcodec.h"
24 #include "bytestream.h"
25 #include "libavutil/lzo.h" // for av_memcpy_backptr
26
27 typedef struct DfaContext {
28     AVFrame pic;
29
30     uint32_t pal[256];
31     uint8_t *frame_buf;
32 } DfaContext;
33
34 static av_cold int dfa_decode_init(AVCodecContext *avctx)
35 {
36     DfaContext *s = avctx->priv_data;
37
38     avctx->pix_fmt = PIX_FMT_PAL8;
39
40     s->frame_buf = av_mallocz(avctx->width * avctx->height + AV_LZO_OUTPUT_PADDING);
41     if (!s->frame_buf)
42         return AVERROR(ENOMEM);
43
44     return 0;
45 }
46
47 static int decode_copy(GetByteContext *gb, uint8_t *frame, int width, int height)
48 {
49     const int size = width * height;
50
51     if (bytestream2_get_buffer(gb, frame, size) != size)
52         return -1;
53     return 0;
54 }
55
56 static int decode_tsw1(GetByteContext *gb, uint8_t *frame, int width, int height)
57 {
58     const uint8_t *frame_start = frame;
59     const uint8_t *frame_end   = frame + width * height;
60     int mask = 0x10000, bitbuf = 0;
61     int v, count, segments;
62     unsigned offset;
63
64     segments = bytestream2_get_le32(gb);
65     offset   = bytestream2_get_le32(gb);
66     if (frame_end - frame <= offset)
67         return -1;
68     frame += offset;
69     while (segments--) {
70         if (bytestream2_get_bytes_left(gb) < 2)
71             return -1;
72         if (mask == 0x10000) {
73             bitbuf = bytestream2_get_le16u(gb);
74             mask = 1;
75         }
76         if (frame_end - frame < 2)
77             return -1;
78         if (bitbuf & mask) {
79             v = bytestream2_get_le16(gb);
80             offset = (v & 0x1FFF) << 1;
81             count = ((v >> 13) + 2) << 1;
82             if (frame - frame_start < offset || frame_end - frame < count)
83                 return -1;
84             av_memcpy_backptr(frame, offset, count);
85             frame += count;
86         } else {
87             *frame++ = bytestream2_get_byte(gb);
88             *frame++ = bytestream2_get_byte(gb);
89         }
90         mask <<= 1;
91     }
92
93     return 0;
94 }
95
96 static int decode_dsw1(GetByteContext *gb, uint8_t *frame, int width, int height)
97 {
98     const uint8_t *frame_start = frame;
99     const uint8_t *frame_end   = frame + width * height;
100     int mask = 0x10000, bitbuf = 0;
101     int v, offset, count, segments;
102
103     segments = bytestream2_get_le16(gb);
104     while (segments--) {
105         if (bytestream2_get_bytes_left(gb) < 2)
106             return -1;
107         if (mask == 0x10000) {
108             bitbuf = bytestream2_get_le16u(gb);
109             mask = 1;
110         }
111         if (frame_end - frame < 2)
112             return -1;
113         if (bitbuf & mask) {
114             v = bytestream2_get_le16(gb);
115             offset = (v & 0x1FFF) << 1;
116             count = ((v >> 13) + 2) << 1;
117             if (frame - frame_start < offset || frame_end - frame < count)
118                 return -1;
119             // can't use av_memcpy_backptr() since it can overwrite following pixels
120             for (v = 0; v < count; v++)
121                 frame[v] = frame[v - offset];
122             frame += count;
123         } else if (bitbuf & (mask << 1)) {
124             frame += bytestream2_get_le16(gb);
125         } else {
126             *frame++ = bytestream2_get_byte(gb);
127             *frame++ = bytestream2_get_byte(gb);
128         }
129         mask <<= 2;
130     }
131
132     return 0;
133 }
134
135 static int decode_dds1(GetByteContext *gb, uint8_t *frame, int width, int height)
136 {
137     const uint8_t *frame_start = frame;
138     const uint8_t *frame_end   = frame + width * height;
139     int mask = 0x10000, bitbuf = 0;
140     int i, v, offset, count, segments;
141
142     segments = bytestream2_get_le16(gb);
143     while (segments--) {
144         if (bytestream2_get_bytes_left(gb) < 2)
145             return -1;
146         if (mask == 0x10000) {
147             bitbuf = bytestream2_get_le16u(gb);
148             mask = 1;
149         }
150         if (frame_end - frame < 2)
151             return -1;
152         if (bitbuf & mask) {
153             v = bytestream2_get_le16(gb);
154             offset = (v & 0x1FFF) << 2;
155             count = ((v >> 13) + 2) << 1;
156             if (frame - frame_start < offset || frame_end - frame < count*2 + width)
157                 return -1;
158             for (i = 0; i < count; i++) {
159                 frame[0] = frame[1] =
160                 frame[width] = frame[width + 1] = frame[-offset];
161
162                 frame += 2;
163             }
164         } else if (bitbuf & (mask << 1)) {
165             frame += bytestream2_get_le16(gb) * 2;
166         } else {
167             frame[0] = frame[1] =
168             frame[width] = frame[width + 1] =  bytestream2_get_byte(gb);
169             frame += 2;
170             frame[0] = frame[1] =
171             frame[width] = frame[width + 1] =  bytestream2_get_byte(gb);
172             frame += 2;
173         }
174         mask <<= 2;
175     }
176
177     return 0;
178 }
179
180 static int decode_bdlt(GetByteContext *gb, uint8_t *frame, int width, int height)
181 {
182     uint8_t *line_ptr;
183     int count, lines, segments;
184
185     count = bytestream2_get_le16(gb);
186     if (count >= height)
187         return -1;
188     frame += width * count;
189     lines = bytestream2_get_le16(gb);
190     if (count + lines > height)
191         return -1;
192
193     while (lines--) {
194         if (bytestream2_get_bytes_left(gb) < 1)
195             return -1;
196         line_ptr = frame;
197         frame += width;
198         segments = bytestream2_get_byteu(gb);
199         while (segments--) {
200             if (frame - line_ptr <= bytestream2_peek_byte(gb))
201                 return -1;
202             line_ptr += bytestream2_get_byte(gb);
203             count = (int8_t)bytestream2_get_byte(gb);
204             if (count >= 0) {
205                 if (frame - line_ptr < count)
206                     return -1;
207                 if (bytestream2_get_buffer(gb, line_ptr, count) != count)
208                     return -1;
209             } else {
210                 count = -count;
211                 if (frame - line_ptr < count)
212                     return -1;
213                 memset(line_ptr, bytestream2_get_byte(gb), count);
214             }
215             line_ptr += count;
216         }
217     }
218
219     return 0;
220 }
221
222 static int decode_wdlt(GetByteContext *gb, uint8_t *frame, int width, int height)
223 {
224     const uint8_t *frame_end   = frame + width * height;
225     uint8_t *line_ptr;
226     int count, i, v, lines, segments;
227
228     lines = bytestream2_get_le16(gb);
229     if (lines > height)
230         return -1;
231
232     while (lines--) {
233         if (bytestream2_get_bytes_left(gb) < 2)
234             return -1;
235         segments = bytestream2_get_le16u(gb);
236         while ((segments & 0xC000) == 0xC000) {
237             unsigned delta = -((int16_t)segments * width);
238             if (frame_end - frame <= delta)
239                 return -1;
240             frame    += delta;
241             segments = bytestream2_get_le16(gb);
242         }
243         if (segments & 0x8000) {
244             frame[width - 1] = segments & 0xFF;
245             segments = bytestream2_get_le16(gb);
246         }
247         line_ptr = frame;
248         frame += width;
249         while (segments--) {
250             if (frame - line_ptr <= bytestream2_peek_byte(gb))
251                 return -1;
252             line_ptr += bytestream2_get_byte(gb);
253             count = (int8_t)bytestream2_get_byte(gb);
254             if (count >= 0) {
255                 if (frame - line_ptr < count * 2)
256                     return -1;
257                 if (bytestream2_get_buffer(gb, line_ptr, count * 2) != count * 2)
258                     return -1;
259                 line_ptr += count * 2;
260             } else {
261                 count = -count;
262                 if (frame - line_ptr < count * 2)
263                     return -1;
264                 v = bytestream2_get_le16(gb);
265                 for (i = 0; i < count; i++)
266                     bytestream_put_le16(&line_ptr, v);
267             }
268         }
269     }
270
271     return 0;
272 }
273
274 static int decode_unk6(GetByteContext *gb, uint8_t *frame, int width, int height)
275 {
276     return -1;
277 }
278
279 static int decode_blck(GetByteContext *gb, uint8_t *frame, int width, int height)
280 {
281     memset(frame, 0, width * height);
282     return 0;
283 }
284
285
286 typedef int (*chunk_decoder)(GetByteContext *gb, uint8_t *frame, int width, int height);
287
288 static const chunk_decoder decoder[8] = {
289     decode_copy, decode_tsw1, decode_bdlt, decode_wdlt,
290     decode_unk6, decode_dsw1, decode_blck, decode_dds1,
291 };
292
293 static const char* chunk_name[8] = {
294     "COPY", "TSW1", "BDLT", "WDLT", "????", "DSW1", "BLCK", "DDS1"
295 };
296
297 static int dfa_decode_frame(AVCodecContext *avctx,
298                             void *data, int *data_size,
299                             AVPacket *avpkt)
300 {
301     DfaContext *s = avctx->priv_data;
302     GetByteContext gb;
303     const uint8_t *buf = avpkt->data;
304     uint32_t chunk_type, chunk_size;
305     uint8_t *dst;
306     int ret;
307     int i, pal_elems;
308
309     if (s->pic.data[0])
310         avctx->release_buffer(avctx, &s->pic);
311
312     if ((ret = avctx->get_buffer(avctx, &s->pic))) {
313         av_log(avctx, AV_LOG_ERROR, "get_buffer() failed\n");
314         return ret;
315     }
316
317     bytestream2_init(&gb, avpkt->data, avpkt->size);
318     while (bytestream2_get_bytes_left(&gb) > 0) {
319         bytestream2_skip(&gb, 4);
320         chunk_size = bytestream2_get_le32(&gb);
321         chunk_type = bytestream2_get_le32(&gb);
322         if (!chunk_type)
323             break;
324         if (chunk_type == 1) {
325             pal_elems = FFMIN(chunk_size / 3, 256);
326             for (i = 0; i < pal_elems; i++) {
327                 s->pal[i] = bytestream2_get_be24(&gb) << 2;
328                 s->pal[i] |= (s->pal[i] >> 6) & 0x333;
329             }
330             s->pic.palette_has_changed = 1;
331         } else if (chunk_type <= 9) {
332             if (decoder[chunk_type - 2](&gb, s->frame_buf, avctx->width, avctx->height)) {
333                 av_log(avctx, AV_LOG_ERROR, "Error decoding %s chunk\n",
334                        chunk_name[chunk_type - 2]);
335                 return -1;
336             }
337         } else {
338             av_log(avctx, AV_LOG_WARNING, "Ignoring unknown chunk type %d\n",
339                    chunk_type);
340         }
341         buf += chunk_size;
342     }
343
344     buf = s->frame_buf;
345     dst = s->pic.data[0];
346     for (i = 0; i < avctx->height; i++) {
347         memcpy(dst, buf, avctx->width);
348         dst += s->pic.linesize[0];
349         buf += avctx->width;
350     }
351     memcpy(s->pic.data[1], s->pal, sizeof(s->pal));
352
353     *data_size = sizeof(AVFrame);
354     *(AVFrame*)data = s->pic;
355
356     return avpkt->size;
357 }
358
359 static av_cold int dfa_decode_end(AVCodecContext *avctx)
360 {
361     DfaContext *s = avctx->priv_data;
362
363     if (s->pic.data[0])
364         avctx->release_buffer(avctx, &s->pic);
365
366     av_freep(&s->frame_buf);
367
368     return 0;
369 }
370
371 AVCodec ff_dfa_decoder = {
372     .name           = "dfa",
373     .type           = AVMEDIA_TYPE_VIDEO,
374     .id             = CODEC_ID_DFA,
375     .priv_data_size = sizeof(DfaContext),
376     .init           = dfa_decode_init,
377     .close          = dfa_decode_end,
378     .decode         = dfa_decode_frame,
379     .capabilities   = CODEC_CAP_DR1,
380     .long_name      = NULL_IF_CONFIG_SMALL("Chronomaster DFA"),
381 };