]> git.sesse.net Git - ffmpeg/blob - libavcodec/proresdec2.c
avcodec/proresdec : put unpack alpha func in prores ctx
[ffmpeg] / libavcodec / proresdec2.c
1 /*
2  * Copyright (c) 2010-2011 Maxim Poliakovski
3  * Copyright (c) 2010-2011 Elvis Presley
4  *
5  * This file is part of FFmpeg.
6  *
7  * FFmpeg is free software; you can redistribute it and/or
8  * modify it under the terms of the GNU Lesser General Public
9  * License as published by the Free Software Foundation; either
10  * version 2.1 of the License, or (at your option) any later version.
11  *
12  * FFmpeg is distributed in the hope that it will be useful,
13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
15  * Lesser General Public License for more details.
16  *
17  * You should have received a copy of the GNU Lesser General Public
18  * License along with FFmpeg; if not, write to the Free Software
19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
20  */
21
22 /**
23  * @file
24  * Known FOURCCs: 'apch' (HQ), 'apcn' (SD), 'apcs' (LT), 'acpo' (Proxy), 'ap4h' (4444)
25  */
26
27 //#define DEBUG
28
29 #define LONG_BITSTREAM_READER
30
31 #include "libavutil/internal.h"
32 #include "avcodec.h"
33 #include "get_bits.h"
34 #include "idctdsp.h"
35 #include "internal.h"
36 #include "profiles.h"
37 #include "simple_idct.h"
38 #include "proresdec.h"
39 #include "proresdata.h"
40 #include "thread.h"
41
42 static void permute(uint8_t *dst, const uint8_t *src, const uint8_t permutation[64])
43 {
44     int i;
45     for (i = 0; i < 64; i++)
46         dst[i] = permutation[src[i]];
47 }
48
49 static void unpack_alpha_10(GetBitContext *gb, uint16_t *dst, int num_coeffs,
50                             const int num_bits)
51 {
52     const int mask = (1 << num_bits) - 1;
53     int i, idx, val, alpha_val;
54
55     idx       = 0;
56     alpha_val = mask;
57     do {
58         do {
59             if (get_bits1(gb)) {
60                 val = get_bits(gb, num_bits);
61             } else {
62                 int sign;
63                 val  = get_bits(gb, num_bits == 16 ? 7 : 4);
64                 sign = val & 1;
65                 val  = (val + 2) >> 1;
66                 if (sign)
67                     val = -val;
68             }
69             alpha_val = (alpha_val + val) & mask;
70             if (num_bits == 16) {
71                 dst[idx++] = alpha_val >> 6;
72             } else {
73                 dst[idx++] = (alpha_val << 2) | (alpha_val >> 6);
74             }
75             if (idx >= num_coeffs)
76                 break;
77         } while (get_bits_left(gb)>0 && get_bits1(gb));
78         val = get_bits(gb, 4);
79         if (!val)
80             val = get_bits(gb, 11);
81         if (idx + val > num_coeffs)
82             val = num_coeffs - idx;
83         if (num_bits == 16) {
84             for (i = 0; i < val; i++)
85                 dst[idx++] = alpha_val >> 6;
86         } else {
87             for (i = 0; i < val; i++)
88                 dst[idx++] = (alpha_val << 2) | (alpha_val >> 6);
89
90         }
91     } while (idx < num_coeffs);
92 }
93
94 static av_cold int decode_init(AVCodecContext *avctx)
95 {
96     int ret = 0;
97     ProresContext *ctx = avctx->priv_data;
98     uint8_t idct_permutation[64];
99
100     avctx->bits_per_raw_sample = 10;
101
102     switch (avctx->codec_tag) {
103     case MKTAG('a','p','c','o'):
104         avctx->profile = FF_PROFILE_PRORES_PROXY;
105         break;
106     case MKTAG('a','p','c','s'):
107         avctx->profile = FF_PROFILE_PRORES_LT;
108         break;
109     case MKTAG('a','p','c','n'):
110         avctx->profile = FF_PROFILE_PRORES_STANDARD;
111         break;
112     case MKTAG('a','p','c','h'):
113         avctx->profile = FF_PROFILE_PRORES_HQ;
114         break;
115     case MKTAG('a','p','4','h'):
116         avctx->profile = FF_PROFILE_PRORES_4444;
117         break;
118     case MKTAG('a','p','4','x'):
119         avctx->profile = FF_PROFILE_PRORES_XQ;
120         break;
121     default:
122         avctx->profile = FF_PROFILE_UNKNOWN;
123         av_log(avctx, AV_LOG_WARNING, "Unknown prores profile %d\n", avctx->codec_tag);
124     }
125
126     ff_blockdsp_init(&ctx->bdsp, avctx);
127     ret = ff_proresdsp_init(&ctx->prodsp, avctx);
128     if (ret < 0) {
129         av_log(avctx, AV_LOG_ERROR, "Fail to init proresdsp for bits per raw sample %d\n", avctx->bits_per_raw_sample);
130         return ret;
131     }
132
133     ff_init_scantable_permutation(idct_permutation,
134                                   ctx->prodsp.idct_permutation_type);
135
136     permute(ctx->progressive_scan, ff_prores_progressive_scan, idct_permutation);
137     permute(ctx->interlaced_scan, ff_prores_interlaced_scan, idct_permutation);
138
139     if (avctx->bits_per_raw_sample == 10){
140         ctx->unpack_alpha = unpack_alpha_10;
141     } else {
142         av_log(avctx, AV_LOG_ERROR, "Fail to set unpack_alpha for bits per raw sample %d\n", avctx->bits_per_raw_sample);
143         return AVERROR_BUG;
144     }
145     return ret;
146 }
147
148 static int decode_frame_header(ProresContext *ctx, const uint8_t *buf,
149                                const int data_size, AVCodecContext *avctx)
150 {
151     int hdr_size, width, height, flags;
152     int version;
153     const uint8_t *ptr;
154
155     hdr_size = AV_RB16(buf);
156     ff_dlog(avctx, "header size %d\n", hdr_size);
157     if (hdr_size > data_size) {
158         av_log(avctx, AV_LOG_ERROR, "error, wrong header size\n");
159         return AVERROR_INVALIDDATA;
160     }
161
162     version = AV_RB16(buf + 2);
163     ff_dlog(avctx, "%.4s version %d\n", buf+4, version);
164     if (version > 1) {
165         av_log(avctx, AV_LOG_ERROR, "unsupported version: %d\n", version);
166         return AVERROR_PATCHWELCOME;
167     }
168
169     width  = AV_RB16(buf + 8);
170     height = AV_RB16(buf + 10);
171     if (width != avctx->width || height != avctx->height) {
172         av_log(avctx, AV_LOG_ERROR, "picture resolution change: %dx%d -> %dx%d\n",
173                avctx->width, avctx->height, width, height);
174         return AVERROR_PATCHWELCOME;
175     }
176
177     ctx->frame_type = (buf[12] >> 2) & 3;
178     ctx->alpha_info = buf[17] & 0xf;
179
180     if (ctx->alpha_info > 2) {
181         av_log(avctx, AV_LOG_ERROR, "Invalid alpha mode %d\n", ctx->alpha_info);
182         return AVERROR_INVALIDDATA;
183     }
184     if (avctx->skip_alpha) ctx->alpha_info = 0;
185
186     ff_dlog(avctx, "frame type %d\n", ctx->frame_type);
187
188     if (ctx->frame_type == 0) {
189         ctx->scan = ctx->progressive_scan; // permuted
190     } else {
191         ctx->scan = ctx->interlaced_scan; // permuted
192         ctx->frame->interlaced_frame = 1;
193         ctx->frame->top_field_first = ctx->frame_type == 1;
194     }
195
196     if (ctx->alpha_info) {
197         avctx->pix_fmt = (buf[12] & 0xC0) == 0xC0 ? AV_PIX_FMT_YUVA444P10 : AV_PIX_FMT_YUVA422P10;
198     } else {
199         avctx->pix_fmt = (buf[12] & 0xC0) == 0xC0 ? AV_PIX_FMT_YUV444P10 : AV_PIX_FMT_YUV422P10;
200     }
201
202     avctx->color_primaries = buf[14];
203     avctx->color_trc       = buf[15];
204     avctx->colorspace      = buf[16];
205     avctx->color_range     = AVCOL_RANGE_MPEG;
206
207     ptr   = buf + 20;
208     flags = buf[19];
209     ff_dlog(avctx, "flags %x\n", flags);
210
211     if (flags & 2) {
212         if(buf + data_size - ptr < 64) {
213             av_log(avctx, AV_LOG_ERROR, "Header truncated\n");
214             return AVERROR_INVALIDDATA;
215         }
216         permute(ctx->qmat_luma, ctx->prodsp.idct_permutation, ptr);
217         ptr += 64;
218     } else {
219         memset(ctx->qmat_luma, 4, 64);
220     }
221
222     if (flags & 1) {
223         if(buf + data_size - ptr < 64) {
224             av_log(avctx, AV_LOG_ERROR, "Header truncated\n");
225             return AVERROR_INVALIDDATA;
226         }
227         permute(ctx->qmat_chroma, ctx->prodsp.idct_permutation, ptr);
228     } else {
229         memset(ctx->qmat_chroma, 4, 64);
230     }
231
232     return hdr_size;
233 }
234
235 static int decode_picture_header(AVCodecContext *avctx, const uint8_t *buf, const int buf_size)
236 {
237     ProresContext *ctx = avctx->priv_data;
238     int i, hdr_size, slice_count;
239     unsigned pic_data_size;
240     int log2_slice_mb_width, log2_slice_mb_height;
241     int slice_mb_count, mb_x, mb_y;
242     const uint8_t *data_ptr, *index_ptr;
243
244     hdr_size = buf[0] >> 3;
245     if (hdr_size < 8 || hdr_size > buf_size) {
246         av_log(avctx, AV_LOG_ERROR, "error, wrong picture header size\n");
247         return AVERROR_INVALIDDATA;
248     }
249
250     pic_data_size = AV_RB32(buf + 1);
251     if (pic_data_size > buf_size) {
252         av_log(avctx, AV_LOG_ERROR, "error, wrong picture data size\n");
253         return AVERROR_INVALIDDATA;
254     }
255
256     log2_slice_mb_width  = buf[7] >> 4;
257     log2_slice_mb_height = buf[7] & 0xF;
258     if (log2_slice_mb_width > 3 || log2_slice_mb_height) {
259         av_log(avctx, AV_LOG_ERROR, "unsupported slice resolution: %dx%d\n",
260                1 << log2_slice_mb_width, 1 << log2_slice_mb_height);
261         return AVERROR_INVALIDDATA;
262     }
263
264     ctx->mb_width  = (avctx->width  + 15) >> 4;
265     if (ctx->frame_type)
266         ctx->mb_height = (avctx->height + 31) >> 5;
267     else
268         ctx->mb_height = (avctx->height + 15) >> 4;
269
270     // QT ignores the written value
271     // slice_count = AV_RB16(buf + 5);
272     slice_count = ctx->mb_height * ((ctx->mb_width >> log2_slice_mb_width) +
273                                     av_popcount(ctx->mb_width & (1 << log2_slice_mb_width) - 1));
274
275     if (ctx->slice_count != slice_count || !ctx->slices) {
276         av_freep(&ctx->slices);
277         ctx->slice_count = 0;
278         ctx->slices = av_mallocz_array(slice_count, sizeof(*ctx->slices));
279         if (!ctx->slices)
280             return AVERROR(ENOMEM);
281         ctx->slice_count = slice_count;
282     }
283
284     if (!slice_count)
285         return AVERROR(EINVAL);
286
287     if (hdr_size + slice_count*2 > buf_size) {
288         av_log(avctx, AV_LOG_ERROR, "error, wrong slice count\n");
289         return AVERROR_INVALIDDATA;
290     }
291
292     // parse slice information
293     index_ptr = buf + hdr_size;
294     data_ptr  = index_ptr + slice_count*2;
295
296     slice_mb_count = 1 << log2_slice_mb_width;
297     mb_x = 0;
298     mb_y = 0;
299
300     for (i = 0; i < slice_count; i++) {
301         SliceContext *slice = &ctx->slices[i];
302
303         slice->data = data_ptr;
304         data_ptr += AV_RB16(index_ptr + i*2);
305
306         while (ctx->mb_width - mb_x < slice_mb_count)
307             slice_mb_count >>= 1;
308
309         slice->mb_x = mb_x;
310         slice->mb_y = mb_y;
311         slice->mb_count = slice_mb_count;
312         slice->data_size = data_ptr - slice->data;
313
314         if (slice->data_size < 6) {
315             av_log(avctx, AV_LOG_ERROR, "error, wrong slice data size\n");
316             return AVERROR_INVALIDDATA;
317         }
318
319         mb_x += slice_mb_count;
320         if (mb_x == ctx->mb_width) {
321             slice_mb_count = 1 << log2_slice_mb_width;
322             mb_x = 0;
323             mb_y++;
324         }
325         if (data_ptr > buf + buf_size) {
326             av_log(avctx, AV_LOG_ERROR, "error, slice out of bounds\n");
327             return AVERROR_INVALIDDATA;
328         }
329     }
330
331     if (mb_x || mb_y != ctx->mb_height) {
332         av_log(avctx, AV_LOG_ERROR, "error wrong mb count y %d h %d\n",
333                mb_y, ctx->mb_height);
334         return AVERROR_INVALIDDATA;
335     }
336
337     return pic_data_size;
338 }
339
340 #define DECODE_CODEWORD(val, codebook, SKIP)                            \
341     do {                                                                \
342         unsigned int rice_order, exp_order, switch_bits;                \
343         unsigned int q, buf, bits;                                      \
344                                                                         \
345         UPDATE_CACHE(re, gb);                                           \
346         buf = GET_CACHE(re, gb);                                        \
347                                                                         \
348         /* number of bits to switch between rice and exp golomb */      \
349         switch_bits =  codebook & 3;                                    \
350         rice_order  =  codebook >> 5;                                   \
351         exp_order   = (codebook >> 2) & 7;                              \
352                                                                         \
353         q = 31 - av_log2(buf);                                          \
354                                                                         \
355         if (q > switch_bits) { /* exp golomb */                         \
356             bits = exp_order - switch_bits + (q<<1);                    \
357             if (bits > FFMIN(MIN_CACHE_BITS, 31))                       \
358                 return AVERROR_INVALIDDATA;                             \
359             val = SHOW_UBITS(re, gb, bits) - (1 << exp_order) +         \
360                 ((switch_bits + 1) << rice_order);                      \
361             SKIP(re, gb, bits);                                         \
362         } else if (rice_order) {                                        \
363             SKIP_BITS(re, gb, q+1);                                     \
364             val = (q << rice_order) + SHOW_UBITS(re, gb, rice_order);   \
365             SKIP(re, gb, rice_order);                                   \
366         } else {                                                        \
367             val = q;                                                    \
368             SKIP(re, gb, q+1);                                          \
369         }                                                               \
370     } while (0)
371
372 #define TOSIGNED(x) (((x) >> 1) ^ (-((x) & 1)))
373
374 #define FIRST_DC_CB 0xB8
375
376 static const uint8_t dc_codebook[7] = { 0x04, 0x28, 0x28, 0x4D, 0x4D, 0x70, 0x70};
377
378 static av_always_inline int decode_dc_coeffs(GetBitContext *gb, int16_t *out,
379                                               int blocks_per_slice)
380 {
381     int16_t prev_dc;
382     int code, i, sign;
383
384     OPEN_READER(re, gb);
385
386     DECODE_CODEWORD(code, FIRST_DC_CB, LAST_SKIP_BITS);
387     prev_dc = TOSIGNED(code);
388     out[0] = prev_dc;
389
390     out += 64; // dc coeff for the next block
391
392     code = 5;
393     sign = 0;
394     for (i = 1; i < blocks_per_slice; i++, out += 64) {
395         DECODE_CODEWORD(code, dc_codebook[FFMIN(code, 6U)], LAST_SKIP_BITS);
396         if(code) sign ^= -(code & 1);
397         else     sign  = 0;
398         prev_dc += (((code + 1) >> 1) ^ sign) - sign;
399         out[0] = prev_dc;
400     }
401     CLOSE_READER(re, gb);
402     return 0;
403 }
404
405 // adaptive codebook switching lut according to previous run/level values
406 static const uint8_t run_to_cb[16] = { 0x06, 0x06, 0x05, 0x05, 0x04, 0x29, 0x29, 0x29, 0x29, 0x28, 0x28, 0x28, 0x28, 0x28, 0x28, 0x4C };
407 static const uint8_t lev_to_cb[10] = { 0x04, 0x0A, 0x05, 0x06, 0x04, 0x28, 0x28, 0x28, 0x28, 0x4C };
408
409 static av_always_inline int decode_ac_coeffs(AVCodecContext *avctx, GetBitContext *gb,
410                                              int16_t *out, int blocks_per_slice)
411 {
412     ProresContext *ctx = avctx->priv_data;
413     int block_mask, sign;
414     unsigned pos, run, level;
415     int max_coeffs, i, bits_left;
416     int log2_block_count = av_log2(blocks_per_slice);
417
418     OPEN_READER(re, gb);
419     UPDATE_CACHE(re, gb);                                           \
420     run   = 4;
421     level = 2;
422
423     max_coeffs = 64 << log2_block_count;
424     block_mask = blocks_per_slice - 1;
425
426     for (pos = block_mask;;) {
427         bits_left = gb->size_in_bits - re_index;
428         if (!bits_left || (bits_left < 32 && !SHOW_UBITS(re, gb, bits_left)))
429             break;
430
431         DECODE_CODEWORD(run, run_to_cb[FFMIN(run,  15)], LAST_SKIP_BITS);
432         pos += run + 1;
433         if (pos >= max_coeffs) {
434             av_log(avctx, AV_LOG_ERROR, "ac tex damaged %d, %d\n", pos, max_coeffs);
435             return AVERROR_INVALIDDATA;
436         }
437
438         DECODE_CODEWORD(level, lev_to_cb[FFMIN(level, 9)], SKIP_BITS);
439         level += 1;
440
441         i = pos >> log2_block_count;
442
443         sign = SHOW_SBITS(re, gb, 1);
444         SKIP_BITS(re, gb, 1);
445         out[((pos & block_mask) << 6) + ctx->scan[i]] = ((level ^ sign) - sign);
446     }
447
448     CLOSE_READER(re, gb);
449     return 0;
450 }
451
452 static int decode_slice_luma(AVCodecContext *avctx, SliceContext *slice,
453                              uint16_t *dst, int dst_stride,
454                              const uint8_t *buf, unsigned buf_size,
455                              const int16_t *qmat)
456 {
457     ProresContext *ctx = avctx->priv_data;
458     LOCAL_ALIGNED_32(int16_t, blocks, [8*4*64]);
459     int16_t *block;
460     GetBitContext gb;
461     int i, blocks_per_slice = slice->mb_count<<2;
462     int ret;
463
464     for (i = 0; i < blocks_per_slice; i++)
465         ctx->bdsp.clear_block(blocks+(i<<6));
466
467     init_get_bits(&gb, buf, buf_size << 3);
468
469     if ((ret = decode_dc_coeffs(&gb, blocks, blocks_per_slice)) < 0)
470         return ret;
471     if ((ret = decode_ac_coeffs(avctx, &gb, blocks, blocks_per_slice)) < 0)
472         return ret;
473
474     block = blocks;
475     for (i = 0; i < slice->mb_count; i++) {
476         ctx->prodsp.idct_put(dst, dst_stride, block+(0<<6), qmat);
477         ctx->prodsp.idct_put(dst             +8, dst_stride, block+(1<<6), qmat);
478         ctx->prodsp.idct_put(dst+4*dst_stride  , dst_stride, block+(2<<6), qmat);
479         ctx->prodsp.idct_put(dst+4*dst_stride+8, dst_stride, block+(3<<6), qmat);
480         block += 4*64;
481         dst += 16;
482     }
483     return 0;
484 }
485
486 static int decode_slice_chroma(AVCodecContext *avctx, SliceContext *slice,
487                                uint16_t *dst, int dst_stride,
488                                const uint8_t *buf, unsigned buf_size,
489                                const int16_t *qmat, int log2_blocks_per_mb)
490 {
491     ProresContext *ctx = avctx->priv_data;
492     LOCAL_ALIGNED_32(int16_t, blocks, [8*4*64]);
493     int16_t *block;
494     GetBitContext gb;
495     int i, j, blocks_per_slice = slice->mb_count << log2_blocks_per_mb;
496     int ret;
497
498     for (i = 0; i < blocks_per_slice; i++)
499         ctx->bdsp.clear_block(blocks+(i<<6));
500
501     init_get_bits(&gb, buf, buf_size << 3);
502
503     if ((ret = decode_dc_coeffs(&gb, blocks, blocks_per_slice)) < 0)
504         return ret;
505     if ((ret = decode_ac_coeffs(avctx, &gb, blocks, blocks_per_slice)) < 0)
506         return ret;
507
508     block = blocks;
509     for (i = 0; i < slice->mb_count; i++) {
510         for (j = 0; j < log2_blocks_per_mb; j++) {
511             ctx->prodsp.idct_put(dst,              dst_stride, block+(0<<6), qmat);
512             ctx->prodsp.idct_put(dst+4*dst_stride, dst_stride, block+(1<<6), qmat);
513             block += 2*64;
514             dst += 8;
515         }
516     }
517     return 0;
518 }
519
520 /**
521  * Decode alpha slice plane.
522  */
523 static void decode_slice_alpha(ProresContext *ctx,
524                                uint16_t *dst, int dst_stride,
525                                const uint8_t *buf, int buf_size,
526                                int blocks_per_slice)
527 {
528     GetBitContext gb;
529     int i;
530     LOCAL_ALIGNED_32(int16_t, blocks, [8*4*64]);
531     int16_t *block;
532
533     for (i = 0; i < blocks_per_slice<<2; i++)
534         ctx->bdsp.clear_block(blocks+(i<<6));
535
536     init_get_bits(&gb, buf, buf_size << 3);
537
538     if (ctx->alpha_info == 2) {
539         ctx->unpack_alpha(&gb, blocks, blocks_per_slice * 4 * 64, 16);
540     } else {
541         ctx->unpack_alpha(&gb, blocks, blocks_per_slice * 4 * 64, 8);
542     }
543
544     block = blocks;
545     for (i = 0; i < 16; i++) {
546         memcpy(dst, block, 16 * blocks_per_slice * sizeof(*dst));
547         dst   += dst_stride >> 1;
548         block += 16 * blocks_per_slice;
549     }
550 }
551
552 static int decode_slice_thread(AVCodecContext *avctx, void *arg, int jobnr, int threadnr)
553 {
554     ProresContext *ctx = avctx->priv_data;
555     SliceContext *slice = &ctx->slices[jobnr];
556     const uint8_t *buf = slice->data;
557     AVFrame *pic = ctx->frame;
558     int i, hdr_size, qscale, log2_chroma_blocks_per_mb;
559     int luma_stride, chroma_stride;
560     int y_data_size, u_data_size, v_data_size, a_data_size;
561     uint8_t *dest_y, *dest_u, *dest_v, *dest_a;
562     LOCAL_ALIGNED_16(int16_t, qmat_luma_scaled,  [64]);
563     LOCAL_ALIGNED_16(int16_t, qmat_chroma_scaled,[64]);
564     int mb_x_shift;
565     int ret;
566
567     slice->ret = -1;
568     //av_log(avctx, AV_LOG_INFO, "slice %d mb width %d mb x %d y %d\n",
569     //       jobnr, slice->mb_count, slice->mb_x, slice->mb_y);
570
571     // slice header
572     hdr_size = buf[0] >> 3;
573     qscale = av_clip(buf[1], 1, 224);
574     qscale = qscale > 128 ? qscale - 96 << 2: qscale;
575     y_data_size = AV_RB16(buf + 2);
576     u_data_size = AV_RB16(buf + 4);
577     v_data_size = slice->data_size - y_data_size - u_data_size - hdr_size;
578     if (hdr_size > 7) v_data_size = AV_RB16(buf + 6);
579     a_data_size = slice->data_size - y_data_size - u_data_size -
580                   v_data_size - hdr_size;
581
582     if (y_data_size < 0 || u_data_size < 0 || v_data_size < 0
583         || hdr_size+y_data_size+u_data_size+v_data_size > slice->data_size){
584         av_log(avctx, AV_LOG_ERROR, "invalid plane data size\n");
585         return AVERROR_INVALIDDATA;
586     }
587
588     buf += hdr_size;
589
590     for (i = 0; i < 64; i++) {
591         qmat_luma_scaled  [i] = ctx->qmat_luma  [i] * qscale;
592         qmat_chroma_scaled[i] = ctx->qmat_chroma[i] * qscale;
593     }
594
595     if (ctx->frame_type == 0) {
596         luma_stride   = pic->linesize[0];
597         chroma_stride = pic->linesize[1];
598     } else {
599         luma_stride   = pic->linesize[0] << 1;
600         chroma_stride = pic->linesize[1] << 1;
601     }
602
603     if (avctx->pix_fmt == AV_PIX_FMT_YUV444P10 || avctx->pix_fmt == AV_PIX_FMT_YUVA444P10) {
604         mb_x_shift = 5;
605         log2_chroma_blocks_per_mb = 2;
606     } else {
607         mb_x_shift = 4;
608         log2_chroma_blocks_per_mb = 1;
609     }
610
611     dest_y = pic->data[0] + (slice->mb_y << 4) * luma_stride + (slice->mb_x << 5);
612     dest_u = pic->data[1] + (slice->mb_y << 4) * chroma_stride + (slice->mb_x << mb_x_shift);
613     dest_v = pic->data[2] + (slice->mb_y << 4) * chroma_stride + (slice->mb_x << mb_x_shift);
614     dest_a = pic->data[3] + (slice->mb_y << 4) * luma_stride + (slice->mb_x << 5);
615
616     if (ctx->frame_type && ctx->first_field ^ ctx->frame->top_field_first) {
617         dest_y += pic->linesize[0];
618         dest_u += pic->linesize[1];
619         dest_v += pic->linesize[2];
620         dest_a += pic->linesize[3];
621     }
622
623     ret = decode_slice_luma(avctx, slice, (uint16_t*)dest_y, luma_stride,
624                             buf, y_data_size, qmat_luma_scaled);
625     if (ret < 0)
626         return ret;
627
628     if (!(avctx->flags & AV_CODEC_FLAG_GRAY) && (u_data_size + v_data_size) > 0) {
629         ret = decode_slice_chroma(avctx, slice, (uint16_t*)dest_u, chroma_stride,
630                                   buf + y_data_size, u_data_size,
631                                   qmat_chroma_scaled, log2_chroma_blocks_per_mb);
632         if (ret < 0)
633             return ret;
634
635         ret = decode_slice_chroma(avctx, slice, (uint16_t*)dest_v, chroma_stride,
636                                   buf + y_data_size + u_data_size, v_data_size,
637                                   qmat_chroma_scaled, log2_chroma_blocks_per_mb);
638         if (ret < 0)
639             return ret;
640     }
641     else {
642         size_t mb_max_x = slice->mb_count << (mb_x_shift - 1);
643         size_t i, j;
644         for (i = 0; i < 16; ++i)
645             for (j = 0; j < mb_max_x; ++j) {
646                 *(uint16_t*)(dest_u + (i * chroma_stride) + (j << 1)) = 511;
647                 *(uint16_t*)(dest_v + (i * chroma_stride) + (j << 1)) = 511;
648             }
649     }
650
651     /* decode alpha plane if available */
652     if (ctx->alpha_info && pic->data[3] && a_data_size)
653         decode_slice_alpha(ctx, (uint16_t*)dest_a, luma_stride,
654                            buf + y_data_size + u_data_size + v_data_size,
655                            a_data_size, slice->mb_count);
656
657     slice->ret = 0;
658     return 0;
659 }
660
661 static int decode_picture(AVCodecContext *avctx)
662 {
663     ProresContext *ctx = avctx->priv_data;
664     int i;
665     int error = 0;
666
667     avctx->execute2(avctx, decode_slice_thread, NULL, NULL, ctx->slice_count);
668
669     for (i = 0; i < ctx->slice_count; i++)
670         error += ctx->slices[i].ret < 0;
671
672     if (error)
673         ctx->frame->decode_error_flags = FF_DECODE_ERROR_INVALID_BITSTREAM;
674     if (error < ctx->slice_count)
675         return 0;
676
677     return ctx->slices[0].ret;
678 }
679
680 static int decode_frame(AVCodecContext *avctx, void *data, int *got_frame,
681                         AVPacket *avpkt)
682 {
683     ProresContext *ctx = avctx->priv_data;
684     ThreadFrame tframe = { .f = data };
685     AVFrame *frame = data;
686     const uint8_t *buf = avpkt->data;
687     int buf_size = avpkt->size;
688     int frame_hdr_size, pic_size, ret;
689
690     if (buf_size < 28 || AV_RL32(buf + 4) != AV_RL32("icpf")) {
691         av_log(avctx, AV_LOG_ERROR, "invalid frame header\n");
692         return AVERROR_INVALIDDATA;
693     }
694
695     ctx->frame = frame;
696     ctx->frame->pict_type = AV_PICTURE_TYPE_I;
697     ctx->frame->key_frame = 1;
698     ctx->first_field = 1;
699
700     buf += 8;
701     buf_size -= 8;
702
703     frame_hdr_size = decode_frame_header(ctx, buf, buf_size, avctx);
704     if (frame_hdr_size < 0)
705         return frame_hdr_size;
706
707     buf += frame_hdr_size;
708     buf_size -= frame_hdr_size;
709
710     if ((ret = ff_thread_get_buffer(avctx, &tframe, 0)) < 0)
711         return ret;
712
713  decode_picture:
714     pic_size = decode_picture_header(avctx, buf, buf_size);
715     if (pic_size < 0) {
716         av_log(avctx, AV_LOG_ERROR, "error decoding picture header\n");
717         return pic_size;
718     }
719
720     if ((ret = decode_picture(avctx)) < 0) {
721         av_log(avctx, AV_LOG_ERROR, "error decoding picture\n");
722         return ret;
723     }
724
725     buf += pic_size;
726     buf_size -= pic_size;
727
728     if (ctx->frame_type && buf_size > 0 && ctx->first_field) {
729         ctx->first_field = 0;
730         goto decode_picture;
731     }
732
733     *got_frame      = 1;
734
735     return avpkt->size;
736 }
737
738 #if HAVE_THREADS
739 static int decode_init_thread_copy(AVCodecContext *avctx)
740 {
741     ProresContext *ctx = avctx->priv_data;
742
743     ctx->slices = NULL;
744
745     return 0;
746 }
747 #endif
748
749 static av_cold int decode_close(AVCodecContext *avctx)
750 {
751     ProresContext *ctx = avctx->priv_data;
752
753     av_freep(&ctx->slices);
754
755     return 0;
756 }
757
758 AVCodec ff_prores_decoder = {
759     .name           = "prores",
760     .long_name      = NULL_IF_CONFIG_SMALL("ProRes (iCodec Pro)"),
761     .type           = AVMEDIA_TYPE_VIDEO,
762     .id             = AV_CODEC_ID_PRORES,
763     .priv_data_size = sizeof(ProresContext),
764     .init           = decode_init,
765     .init_thread_copy = ONLY_IF_THREADS_ENABLED(decode_init_thread_copy),
766     .close          = decode_close,
767     .decode         = decode_frame,
768     .capabilities   = AV_CODEC_CAP_DR1 | AV_CODEC_CAP_SLICE_THREADS | AV_CODEC_CAP_FRAME_THREADS,
769     .profiles       = NULL_IF_CONFIG_SMALL(ff_prores_profiles),
770 };