git.sesse.net Git - ffmpeg/blob - libavcodec/scpr.c

   1 /*
   2  * ScreenPressor decoder
   3  *
   4  * Copyright (c) 2017 Paul B Mahol
   5  *
   6  * This file is part of FFmpeg.
   7  *
   8  * FFmpeg is free software; you can redistribute it and/or
   9  * modify it under the terms of the GNU Lesser General Public
  10  * License as published by the Free Software Foundation; either
  11  * version 2.1 of the License, or (at your option) any later version.
  12  *
  13  * FFmpeg is distributed in the hope that it will be useful,
  14  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  15  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  16  * Lesser General Public License for more details.
  17  *
  18  * You should have received a copy of the GNU Lesser General Public
  19  * License along with FFmpeg; if not, write to the Free Software
  20  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
  21  */
  22
  23 #include <stdio.h>
  24 #include <stdlib.h>
  25 #include <string.h>
  26
  27 #include "avcodec.h"
  28 #include "bytestream.h"
  29 #include "internal.h"
  30
  31 #define TOP  0x01000000
  32 #define BOT    0x010000
  33
  34 typedef struct RangeCoder {
  35     unsigned   code;
  36     unsigned   range;
  37     unsigned   code1;
  38 } RangeCoder;
  39
  40 typedef struct PixelModel {
  41     unsigned    freq[256];
  42     unsigned    lookup[16];
  43     unsigned    total_freq;
  44 } PixelModel;
  45
  46 typedef struct SCPRContext {
  47     AVFrame        *last_frame;
  48     AVFrame        *current_frame;
  49     GetByteContext  gb;
  50     RangeCoder      rc;
  51     PixelModel      pixel_model[3][4096];
  52     unsigned        op_model[6][7];
  53     unsigned        run_model[6][257];
  54     unsigned        range_model[257];
  55     unsigned        count_model[257];
  56     unsigned        fill_model[6];
  57     unsigned        sxy_model[4][17];
  58     unsigned        mv_model[2][513];
  59     unsigned        nbx, nby;
  60     unsigned        nbcount;
  61     unsigned       *blocks;
  62     unsigned        cbits;
  63     int             cxshift;
  64
  65     int           (*get_freq)(RangeCoder *rc, unsigned total_freq, unsigned *freq);
  66     int           (*decode)(GetByteContext *gb, RangeCoder *rc, unsigned cumFreq, unsigned freq, unsigned total_freq);
  67 } SCPRContext;
  68
  69 static void init_rangecoder(RangeCoder *rc, GetByteContext *gb)
  70 {
  71     rc->code1 = 0;
  72     rc->range = 0xFFFFFFFFU;
  73     rc->code  = bytestream2_get_be32(gb);
  74 }
  75
  76 static void reinit_tables(SCPRContext *s)
  77 {
  78     int comp, i, j;
  79
  80     for (comp = 0; comp < 3; comp++) {
  81         for (j = 0; j < 4096; j++) {
  82             if (s->pixel_model[comp][j].total_freq != 256) {
  83                 for (i = 0; i < 256; i++)
  84                     s->pixel_model[comp][j].freq[i] = 1;
  85                 for (i = 0; i < 16; i++)
  86                     s->pixel_model[comp][j].lookup[i] = 16;
  87                 s->pixel_model[comp][j].total_freq = 256;
  88             }
  89         }
  90     }
  91
  92     for (j = 0; j < 6; j++) {
  93         unsigned *p = s->run_model[j];
  94         for (i = 0; i < 256; i++)
  95             p[i] = 1;
  96         p[256] = 256;
  97     }
  98
  99     for (j = 0; j < 6; j++) {
 100         unsigned *op = s->op_model[j];
 101         for (i = 0; i < 6; i++)
 102             op[i] = 1;
 103         op[6] = 6;
 104     }
 105
 106     for (i = 0; i < 256; i++) {
 107         s->range_model[i] = 1;
 108         s->count_model[i] = 1;
 109     }
 110     s->range_model[256] = 256;
 111     s->count_model[256] = 256;
 112
 113     for (i = 0; i < 5; i++) {
 114         s->fill_model[i] = 1;
 115     }
 116     s->fill_model[5] = 5;
 117
 118     for (j = 0; j < 4; j++) {
 119         for (i = 0; i < 16; i++) {
 120             s->sxy_model[j][i] = 1;
 121         }
 122         s->sxy_model[j][16] = 16;
 123     }
 124
 125     for (i = 0; i < 512; i++) {
 126         s->mv_model[0][i] = 1;
 127         s->mv_model[1][i] = 1;
 128     }
 129     s->mv_model[0][512] = 512;
 130     s->mv_model[1][512] = 512;
 131 }
 132
 133 static int decode(GetByteContext *gb, RangeCoder *rc, unsigned cumFreq, unsigned freq, unsigned total_freq)
 134 {
 135     rc->code -= cumFreq * rc->range;
 136     rc->range *= freq;
 137
 138     while (rc->range < TOP && bytestream2_get_bytes_left(gb) > 0) {
 139         unsigned byte = bytestream2_get_byte(gb);
 140         rc->code = (rc->code << 8) | byte;
 141         rc->range <<= 8;
 142     }
 143
 144     return 0;
 145 }
 146
 147 static int get_freq(RangeCoder *rc, unsigned total_freq, unsigned *freq)
 148 {
 149     if (total_freq == 0)
 150         return AVERROR_INVALIDDATA;
 151
 152     rc->range = rc->range / total_freq;
 153
 154     if (rc->range == 0)
 155         return AVERROR_INVALIDDATA;
 156
 157     *freq = rc->code / rc->range;
 158
 159     return 0;
 160 }
 161
 162 static int decode0(GetByteContext *gb, RangeCoder *rc, unsigned cumFreq, unsigned freq, unsigned total_freq)
 163 {
 164     unsigned t;
 165
 166     if (total_freq == 0)
 167         return AVERROR_INVALIDDATA;
 168
 169     t = rc->range * (uint64_t)cumFreq / total_freq;
 170
 171     rc->code1 += t + 1;
 172     rc->range = rc->range * (uint64_t)(freq + cumFreq) / total_freq - (t + 1);
 173
 174     while (rc->range < TOP && bytestream2_get_bytes_left(gb) > 0) {
 175         unsigned byte = bytestream2_get_byte(gb);
 176         rc->code = (rc->code << 8) | byte;
 177         rc->code1 <<= 8;
 178         rc->range <<= 8;
 179     }
 180
 181     return 0;
 182 }
 183
 184 static int get_freq0(RangeCoder *rc, unsigned total_freq, unsigned *freq)
 185 {
 186     if (rc->range == 0)
 187         return AVERROR_INVALIDDATA;
 188
 189     *freq = total_freq * (uint64_t)(rc->code - rc->code1) / rc->range;
 190
 191     return 0;
 192 }
 193
 194 static int decode_value(SCPRContext *s, unsigned *cnt, unsigned maxc, unsigned step, unsigned *rval)
 195 {
 196     GetByteContext *gb = &s->gb;
 197     RangeCoder *rc = &s->rc;
 198     unsigned totfr = cnt[maxc];
 199     unsigned value;
 200     unsigned c = 0, cumfr = 0, cnt_c = 0;
 201     int i, ret;
 202
 203     if ((ret = s->get_freq(rc, totfr, &value)) < 0)
 204         return ret;
 205
 206     while (c < maxc) {
 207         cnt_c = cnt[c];
 208         if (value >= cumfr + cnt_c)
 209             cumfr += cnt_c;
 210         else
 211             break;
 212         c++;
 213     }
 214     if ((ret = s->decode(gb, rc, cumfr, cnt_c, totfr)) < 0)
 215         return ret;
 216
 217     cnt[c] = cnt_c + step;
 218     totfr += step;
 219     if (totfr > BOT) {
 220         totfr = 0;
 221         for (i = 0; i < maxc; i++) {
 222             unsigned nc = (cnt[i] >> 1) + 1;
 223             cnt[i] = nc;
 224             totfr += nc;
 225         }
 226     }
 227
 228     cnt[maxc] = totfr;
 229     *rval = c;
 230
 231     return 0;
 232 }
 233
 234 static int decode_unit(SCPRContext *s, PixelModel *pixel, unsigned step, unsigned *rval)
 235 {
 236     GetByteContext *gb = &s->gb;
 237     RangeCoder *rc = &s->rc;
 238     unsigned totfr = pixel->total_freq;
 239     unsigned value, x = 0, cumfr = 0, cnt_x = 0;
 240     int i, j, ret, c, cnt_c;
 241
 242     if ((ret = s->get_freq(rc, totfr, &value)) < 0)
 243         return ret;
 244
 245     while (x < 16) {
 246         cnt_x = pixel->lookup[x];
 247         if (value >= cumfr + cnt_x)
 248             cumfr += cnt_x;
 249         else
 250             break;
 251         x++;
 252     }
 253
 254     c = x * 16;
 255     cnt_c = 0;
 256     while (c < 256) {
 257         cnt_c = pixel->freq[c];
 258         if (value >= cumfr + cnt_c)
 259             cumfr += cnt_c;
 260         else
 261             break;
 262         c++;
 263     }
 264     if (x >= 16 || c >= 256) {
 265         return AVERROR_INVALIDDATA;
 266     }
 267
 268     if ((ret = s->decode(gb, rc, cumfr, cnt_c, totfr)) < 0)
 269         return ret;
 270
 271     pixel->freq[c] = cnt_c + step;
 272     pixel->lookup[x] = cnt_x + step;
 273     totfr += step;
 274     if (totfr > BOT) {
 275         totfr = 0;
 276         for (i = 0; i < 256; i++) {
 277             unsigned nc = (pixel->freq[i] >> 1) + 1;
 278             pixel->freq[i] = nc;
 279             totfr += nc;
 280         }
 281         for (i = 0; i < 16; i++) {
 282             unsigned sum = 0;
 283             unsigned i16_17 = i << 4;
 284             for (j = 0; j < 16; j++)
 285                 sum += pixel->freq[i16_17 + j];
 286             pixel->lookup[i] = sum;
 287         }
 288     }
 289     pixel->total_freq = totfr;
 290
 291     *rval = c & s->cbits;
 292
 293     return 0;
 294 }
 295
 296 static int decompress_i(AVCodecContext *avctx, uint32_t *dst, int linesize)
 297 {
 298     SCPRContext *s = avctx->priv_data;
 299     GetByteContext *gb = &s->gb;
 300     int cx = 0, cx1 = 0, k = 0, clr = 0;
 301     int run, r, g, b, off, y = 0, x = 0, z, ret;
 302     unsigned backstep = linesize - avctx->width;
 303     const int cxshift = s->cxshift;
 304     unsigned lx, ly, ptype;
 305
 306     reinit_tables(s);
 307     bytestream2_skip(gb, 2);
 308     init_rangecoder(&s->rc, gb);
 309
 310     while (k < avctx->width + 1) {
 311         ret = decode_unit(s, &s->pixel_model[0][cx + cx1], 400, &r);
 312         if (ret < 0)
 313             return ret;
 314
 315         cx1 = (cx << 6) & 0xFC0;
 316         cx = r >> cxshift;
 317         ret = decode_unit(s, &s->pixel_model[1][cx + cx1], 400, &g);
 318         if (ret < 0)
 319             return ret;
 320
 321         cx1 = (cx << 6) & 0xFC0;
 322         cx = g >> cxshift;
 323         ret = decode_unit(s, &s->pixel_model[2][cx + cx1], 400, &b);
 324         if (ret < 0)
 325             return ret;
 326
 327         cx1 = (cx << 6) & 0xFC0;
 328         cx = b >> cxshift;
 329
 330         ret = decode_value(s, s->run_model[0], 256, 400, &run);
 331         if (ret < 0)
 332             return ret;
 333
 334         clr = (b << 16) + (g << 8) + r;
 335         k += run;
 336         while (run-- > 0) {
 337             if (y >= avctx->height)
 338                 return AVERROR_INVALIDDATA;
 339
 340             dst[y * linesize + x] = clr;
 341             lx = x;
 342             ly = y;
 343             x++;
 344             if (x >= avctx->width) {
 345                 x = 0;
 346                 y++;
 347             }
 348         }
 349     }
 350     off = -linesize - 1;
 351     ptype = 0;
 352
 353     while (x < avctx->width && y < avctx->height) {
 354         ret = decode_value(s, s->op_model[ptype], 6, 1000, &ptype);
 355         if (ret < 0)
 356             return ret;
 357         if (ptype == 0) {
 358             ret = decode_unit(s, &s->pixel_model[0][cx + cx1], 400, &r);
 359             if (ret < 0)
 360                 return ret;
 361
 362             cx1 = (cx << 6) & 0xFC0;
 363             cx = r >> cxshift;
 364             ret = decode_unit(s, &s->pixel_model[1][cx + cx1], 400, &g);
 365             if (ret < 0)
 366                 return ret;
 367
 368             cx1 = (cx << 6) & 0xFC0;
 369             cx = g >> cxshift;
 370             ret = decode_unit(s, &s->pixel_model[2][cx + cx1], 400, &b);
 371             if (ret < 0)
 372                 return ret;
 373
 374             clr = (b << 16) + (g << 8) + r;
 375         }
 376         if (ptype > 5)
 377             return AVERROR_INVALIDDATA;
 378         ret = decode_value(s, s->run_model[ptype], 256, 400, &run);
 379         if (ret < 0)
 380             return ret;
 381
 382         switch (ptype) {
 383         case 0:
 384             while (run-- > 0) {
 385                 if (y >= avctx->height)
 386                     return AVERROR_INVALIDDATA;
 387
 388                 dst[y * linesize + x] = clr;
 389                 lx = x;
 390                 ly = y;
 391                 x++;
 392                 if (x >= avctx->width) {
 393                     x = 0;
 394                     y++;
 395                 }
 396             }
 397             break;
 398         case 1:
 399             while (run-- > 0) {
 400                 if (y >= avctx->height)
 401                     return AVERROR_INVALIDDATA;
 402
 403                 dst[y * linesize + x] = dst[ly * linesize + lx];
 404                 lx = x;
 405                 ly = y;
 406                 x++;
 407                 if (x >= avctx->width) {
 408                     x = 0;
 409                     y++;
 410                 }
 411             }
 412             clr = dst[ly * linesize + lx];
 413             break;
 414         case 2:
 415             while (run-- > 0) {
 416                 if (y < 1 || y >= avctx->height)
 417                     return AVERROR_INVALIDDATA;
 418
 419                 clr = dst[y * linesize + x + off + 1];
 420                 dst[y * linesize + x] = clr;
 421                 lx = x;
 422                 ly = y;
 423                 x++;
 424                 if (x >= avctx->width) {
 425                     x = 0;
 426                     y++;
 427                 }
 428             }
 429             break;
 430         case 4:
 431             while (run-- > 0) {
 432                 uint8_t *odst = (uint8_t *)dst;
 433
 434                 if (y < 1 || y >= avctx->height ||
 435                     (y == 1 && x == 0))
 436                     return AVERROR_INVALIDDATA;
 437
 438                 if (x == 0) {
 439                     z = backstep;
 440                 } else {
 441                     z = 0;
 442                 }
 443
 444                 r = odst[(ly * linesize + lx) * 4] +
 445                     odst[((y * linesize + x) + off - z) * 4 + 4] -
 446                     odst[((y * linesize + x) + off - z) * 4];
 447                 g = odst[(ly * linesize + lx) * 4 + 1] +
 448                     odst[((y * linesize + x) + off - z) * 4 + 5] -
 449                     odst[((y * linesize + x) + off - z) * 4 + 1];
 450                 b = odst[(ly * linesize + lx) * 4 + 2] +
 451                     odst[((y * linesize + x) + off - z) * 4 + 6] -
 452                     odst[((y * linesize + x) + off - z) * 4 + 2];
 453                 clr = ((b & 0xFF) << 16) + ((g & 0xFF) << 8) + (r & 0xFF);
 454                 dst[y * linesize + x] = clr;
 455                 lx = x;
 456                 ly = y;
 457                 x++;
 458                 if (x >= avctx->width) {
 459                     x = 0;
 460                     y++;
 461                 }
 462             }
 463             break;
 464         case 5:
 465             while (run-- > 0) {
 466                 if (y < 1 || y >= avctx->height ||
 467                     (y == 1 && x == 0))
 468                     return AVERROR_INVALIDDATA;
 469
 470                 if (x == 0) {
 471                     z = backstep;
 472                 } else {
 473                     z = 0;
 474                 }
 475
 476                 clr = dst[y * linesize + x + off - z];
 477                 dst[y * linesize + x] = clr;
 478                 lx = x;
 479                 ly = y;
 480                 x++;
 481                 if (x >= avctx->width) {
 482                     x = 0;
 483                     y++;
 484                 }
 485             }
 486             break;
 487         }
 488
 489         if (avctx->bits_per_coded_sample == 16) {
 490             cx1 = (clr & 0x3F00) >> 2;
 491             cx = (clr & 0x3FFFFF) >> 16;
 492         } else {
 493             cx1 = (clr & 0xFC00) >> 4;
 494             cx = (clr & 0xFFFFFF) >> 18;
 495         }
 496     }
 497
 498     return 0;
 499 }
 500
 501 static int decompress_p(AVCodecContext *avctx,
 502                         uint32_t *dst, int linesize,
 503                         uint32_t *prev, int plinesize)
 504 {
 505     SCPRContext *s = avctx->priv_data;
 506     GetByteContext *gb = &s->gb;
 507     int ret, temp, min, max, x, y, cx = 0, cx1 = 0;
 508     int backstep = linesize - avctx->width;
 509     const int cxshift = s->cxshift;
 510
 511     if (bytestream2_get_byte(gb) == 0)
 512         return 0;
 513     bytestream2_skip(gb, 1);
 514     init_rangecoder(&s->rc, gb);
 515
 516     ret  = decode_value(s, s->range_model, 256, 1, &min);
 517     ret |= decode_value(s, s->range_model, 256, 1, &temp);
 518     min += temp << 8;
 519     ret |= decode_value(s, s->range_model, 256, 1, &max);
 520     ret |= decode_value(s, s->range_model, 256, 1, &temp);
 521     if (ret < 0)
 522         return ret;
 523
 524     max += temp << 8;
 525     memset(s->blocks, 0, sizeof(*s->blocks) * s->nbcount);
 526
 527     while (min <= max) {
 528         int fill, count;
 529
 530         ret  = decode_value(s, s->fill_model,  5,   10, &fill);
 531         ret |= decode_value(s, s->count_model, 256, 20, &count);
 532         if (ret < 0)
 533             return ret;
 534
 535         while (min < s->nbcount && count-- > 0) {
 536             s->blocks[min++] = fill;
 537         }
 538     }
 539
 540     for (y = 0; y < s->nby; y++) {
 541         for (x = 0; x < s->nbx; x++) {
 542             int sy1 = 0, sy2 = 16, sx1 = 0, sx2 = 16;
 543
 544             if (s->blocks[y * s->nbx + x] == 0)
 545                 continue;
 546
 547             if (((s->blocks[y * s->nbx + x] - 1) & 1) > 0) {
 548                 ret  = decode_value(s, s->sxy_model[0], 16, 100, &sx1);
 549                 ret |= decode_value(s, s->sxy_model[1], 16, 100, &sy1);
 550                 ret |= decode_value(s, s->sxy_model[2], 16, 100, &sx2);
 551                 ret |= decode_value(s, s->sxy_model[3], 16, 100, &sy2);
 552                 if (ret < 0)
 553                     return ret;
 554
 555                 sx2++;
 556                 sy2++;
 557             }
 558             if (((s->blocks[y * s->nbx + x] - 1) & 2) > 0) {
 559                 int i, j, by = y * 16, bx = x * 16;
 560                 int mvx, mvy;
 561
 562                 ret  = decode_value(s, s->mv_model[0], 512, 100, &mvx);
 563                 ret |= decode_value(s, s->mv_model[1], 512, 100, &mvy);
 564                 if (ret < 0)
 565                     return ret;
 566
 567                 mvx -= 256;
 568                 mvy -= 256;
 569
 570                 if (by + mvy + sy1 < 0 || bx + mvx + sx1 < 0 ||
 571                     by + mvy + sy1 >= avctx->height || bx + mvx + sx1 >= avctx->width)
 572                     return AVERROR_INVALIDDATA;
 573
 574                 for (i = 0; i < sy2 - sy1 && (by + sy1 + i) < avctx->height && (by + mvy + sy1 + i) < avctx->height; i++) {
 575                     for (j = 0; j < sx2 - sx1 && (bx + sx1 + j) < avctx->width && (bx + mvx + sx1 + j) < avctx->width; j++) {
 576                         dst[(by + i + sy1) * linesize + bx + sx1 + j] = prev[(by + mvy + sy1 + i) * plinesize + bx + sx1 + mvx + j];
 577                     }
 578                 }
 579             } else {
 580                 int run, r, g, b, z, bx = x * 16 + sx1, by = y * 16 + sy1;
 581                 unsigned clr, ptype = 0;
 582
 583                 for (; by < y * 16 + sy2 && by < avctx->height;) {
 584                     ret = decode_value(s, s->op_model[ptype], 6, 1000, &ptype);
 585                     if (ret < 0)
 586                         return ret;
 587                     if (ptype == 0) {
 588                         ret = decode_unit(s, &s->pixel_model[0][cx + cx1], 400, &r);
 589                         if (ret < 0)
 590                             return ret;
 591
 592                         cx1 = (cx << 6) & 0xFC0;
 593                         cx = r >> cxshift;
 594                         ret = decode_unit(s, &s->pixel_model[1][cx + cx1], 400, &g);
 595                         if (ret < 0)
 596                             return ret;
 597
 598                         cx1 = (cx << 6) & 0xFC0;
 599                         cx = g >> cxshift;
 600                         ret = decode_unit(s, &s->pixel_model[2][cx + cx1], 400, &b);
 601                         if (ret < 0)
 602                             return ret;
 603
 604                         clr = (b << 16) + (g << 8) + r;
 605                     }
 606                     if (ptype > 5)
 607                         return AVERROR_INVALIDDATA;
 608                     ret = decode_value(s, s->run_model[ptype], 256, 400, &run);
 609                     if (ret < 0)
 610                         return ret;
 611
 612                     switch (ptype) {
 613                     case 0:
 614                         while (run-- > 0) {
 615                             if (by >= avctx->height)
 616                                 return AVERROR_INVALIDDATA;
 617
 618                             dst[by * linesize + bx] = clr;
 619                             bx++;
 620                             if (bx >= x * 16 + sx2 || bx >= avctx->width) {
 621                                 bx = x * 16 + sx1;
 622                                 by++;
 623                             }
 624                         }
 625                         break;
 626                     case 1:
 627                         while (run-- > 0) {
 628                             if (bx == 0) {
 629                                 if (by < 1)
 630                                     return AVERROR_INVALIDDATA;
 631                                 z = backstep;
 632                             } else {
 633                                 z = 0;
 634                             }
 635
 636                             if (by >= avctx->height)
 637                                 return AVERROR_INVALIDDATA;
 638
 639                             clr = dst[by * linesize + bx - 1 - z];
 640                             dst[by * linesize + bx] = clr;
 641                             bx++;
 642                             if (bx >= x * 16 + sx2 || bx >= avctx->width) {
 643                                 bx = x * 16 + sx1;
 644                                 by++;
 645                             }
 646                         }
 647                         break;
 648                     case 2:
 649                         while (run-- > 0) {
 650                             if (by < 1 || by >= avctx->height)
 651                                 return AVERROR_INVALIDDATA;
 652
 653                             clr = dst[(by - 1) * linesize + bx];
 654                             dst[by * linesize + bx] = clr;
 655                             bx++;
 656                             if (bx >= x * 16 + sx2 || bx >= avctx->width) {
 657                                 bx = x * 16 + sx1;
 658                                 by++;
 659                             }
 660                         }
 661                         break;
 662                     case 3:
 663                         while (run-- > 0) {
 664                             if (by >= avctx->height)
 665                                 return AVERROR_INVALIDDATA;
 666
 667                             clr = prev[by * plinesize + bx];
 668                             dst[by * linesize + bx] = clr;
 669                             bx++;
 670                             if (bx >= x * 16 + sx2 || bx >= avctx->width) {
 671                                 bx = x * 16 + sx1;
 672                                 by++;
 673                             }
 674                         }
 675                         break;
 676                     case 4:
 677                         while (run-- > 0) {
 678                             uint8_t *odst = (uint8_t *)dst;
 679
 680                             if (by < 1 || by >= avctx->height)
 681                                 return AVERROR_INVALIDDATA;
 682
 683                             if (bx == 0) {
 684                                 if (by < 2)
 685                                     return AVERROR_INVALIDDATA;
 686                                 z = backstep;
 687                             } else {
 688                                 z = 0;
 689                             }
 690
 691                             r = odst[((by - 1) * linesize + bx) * 4] +
 692                                 odst[(by * linesize + bx - 1 - z) * 4] -
 693                                 odst[((by - 1) * linesize + bx - 1 - z) * 4];
 694                             g = odst[((by - 1) * linesize + bx) * 4 + 1] +
 695                                 odst[(by * linesize + bx - 1 - z) * 4 + 1] -
 696                                 odst[((by - 1) * linesize + bx - 1 - z) * 4 + 1];
 697                             b = odst[((by - 1) * linesize + bx) * 4 + 2] +
 698                                 odst[(by * linesize + bx - 1 - z) * 4 + 2] -
 699                                 odst[((by - 1) * linesize + bx - 1 - z) * 4 + 2];
 700                             clr = ((b & 0xFF) << 16) + ((g & 0xFF) << 8) + (r & 0xFF);
 701                             dst[by * linesize + bx] = clr;
 702                             bx++;
 703                             if (bx >= x * 16 + sx2 || bx >= avctx->width) {
 704                                 bx = x * 16 + sx1;
 705                                 by++;
 706                             }
 707                         }
 708                         break;
 709                     case 5:
 710                         while (run-- > 0) {
 711                             if (by < 1 || by >= avctx->height)
 712                                 return AVERROR_INVALIDDATA;
 713
 714                             if (bx == 0) {
 715                                 if (by < 2)
 716                                     return AVERROR_INVALIDDATA;
 717                                 z = backstep;
 718                             } else {
 719                                 z = 0;
 720                             }
 721
 722                             clr = dst[(by - 1) * linesize + bx - 1 - z];
 723                             dst[by * linesize + bx] = clr;
 724                             bx++;
 725                             if (bx >= x * 16 + sx2 || bx >= avctx->width) {
 726                                 bx = x * 16 + sx1;
 727                                 by++;
 728                             }
 729                         }
 730                         break;
 731                     }
 732
 733                     if (avctx->bits_per_coded_sample == 16) {
 734                         cx1 = (clr & 0x3F00) >> 2;
 735                         cx = (clr & 0x3FFFFF) >> 16;
 736                     } else {
 737                         cx1 = (clr & 0xFC00) >> 4;
 738                         cx = (clr & 0xFFFFFF) >> 18;
 739                     }
 740                 }
 741             }
 742         }
 743     }
 744
 745     return 0;
 746 }
 747
 748 static int decode_frame(AVCodecContext *avctx, void *data, int *got_frame,
 749                         AVPacket *avpkt)
 750 {
 751     SCPRContext *s = avctx->priv_data;
 752     GetByteContext *gb = &s->gb;
 753     AVFrame *frame = data;
 754     int ret, type;
 755
 756     if (avctx->bits_per_coded_sample == 16) {
 757         if ((ret = ff_get_buffer(avctx, frame, 0)) < 0)
 758             return ret;
 759     }
 760
 761     if ((ret = ff_reget_buffer(avctx, s->current_frame)) < 0)
 762         return ret;
 763
 764     bytestream2_init(gb, avpkt->data, avpkt->size);
 765
 766     type = bytestream2_peek_byte(gb);
 767
 768     if (type == 2) {
 769         s->get_freq = get_freq0;
 770         s->decode = decode0;
 771         frame->key_frame = 1;
 772         ret = decompress_i(avctx, (uint32_t *)s->current_frame->data[0],
 773                            s->current_frame->linesize[0] / 4);
 774     } else if (type == 18) {
 775         s->get_freq = get_freq;
 776         s->decode = decode;
 777         frame->key_frame = 1;
 778         ret = decompress_i(avctx, (uint32_t *)s->current_frame->data[0],
 779                            s->current_frame->linesize[0] / 4);
 780     } else if (type == 17) {
 781         uint32_t clr, *dst = (uint32_t *)s->current_frame->data[0];
 782         int x, y;
 783
 784         frame->key_frame = 1;
 785         bytestream2_skip(gb, 1);
 786         if (avctx->bits_per_coded_sample == 16) {
 787             uint16_t value = bytestream2_get_le16(gb);
 788             int r, g, b;
 789
 790             r = (value      ) & 31;
 791             g = (value >>  5) & 31;
 792             b = (value >> 10) & 31;
 793             clr = (r << 16) + (g << 8) + b;
 794         } else {
 795             clr = bytestream2_get_le24(gb);
 796         }
 797         for (y = 0; y < avctx->height; y++) {
 798             for (x = 0; x < avctx->width; x++) {
 799                 dst[x] = clr;
 800             }
 801             dst += s->current_frame->linesize[0] / 4;
 802         }
 803     } else if (type == 0 || type == 1) {
 804         frame->key_frame = 0;
 805
 806         ret = av_frame_copy(s->current_frame, s->last_frame);
 807         if (ret < 0)
 808             return ret;
 809
 810         ret = decompress_p(avctx, (uint32_t *)s->current_frame->data[0],
 811                            s->current_frame->linesize[0] / 4,
 812                            (uint32_t *)s->last_frame->data[0],
 813                            s->last_frame->linesize[0] / 4);
 814     } else {
 815         return AVERROR_PATCHWELCOME;
 816     }
 817
 818     if (ret < 0)
 819         return ret;
 820
 821     if (avctx->bits_per_coded_sample != 16) {
 822         ret = av_frame_ref(data, s->current_frame);
 823         if (ret < 0)
 824             return ret;
 825     } else {
 826         uint8_t *dst = frame->data[0];
 827         int x, y;
 828
 829         ret = av_frame_copy(frame, s->current_frame);
 830         if (ret < 0)
 831             return ret;
 832
 833         // scale up each sample by 8
 834         for (y = 0; y < avctx->height; y++) {
 835             // If the image is sufficiently aligned, compute 8 samples at once
 836             if (!(((uintptr_t)dst) & 7)) {
 837                 uint64_t *dst64 = (uint64_t *)dst;
 838                 int w = avctx->width>>1;
 839                 for (x = 0; x < w; x++) {
 840                     dst64[x] = (dst64[x] << 3) & 0xFCFCFCFCFCFCFCFCULL;
 841                 }
 842                 x *= 8;
 843             } else
 844                 x = 0;
 845             for (; x < avctx->width * 4; x++) {
 846                 dst[x] = dst[x] << 3;
 847             }
 848             dst += frame->linesize[0];
 849         }
 850     }
 851
 852     frame->pict_type = frame->key_frame ? AV_PICTURE_TYPE_I : AV_PICTURE_TYPE_P;
 853
 854     FFSWAP(AVFrame *, s->current_frame, s->last_frame);
 855
 856     frame->data[0]     += frame->linesize[0] * (avctx->height - 1);
 857     frame->linesize[0] *= -1;
 858
 859     *got_frame = 1;
 860
 861     return avpkt->size;
 862 }
 863
 864 static av_cold int decode_init(AVCodecContext *avctx)
 865 {
 866     SCPRContext *s = avctx->priv_data;
 867
 868     switch (avctx->bits_per_coded_sample) {
 869     case 16: avctx->pix_fmt = AV_PIX_FMT_RGB0; break;
 870     case 24:
 871     case 32: avctx->pix_fmt = AV_PIX_FMT_BGR0; break;
 872     default:
 873         av_log(avctx, AV_LOG_ERROR, "Unsupported bitdepth %i\n", avctx->bits_per_coded_sample);
 874         return AVERROR_INVALIDDATA;
 875     }
 876
 877     s->get_freq = get_freq0;
 878     s->decode = decode0;
 879
 880     s->cxshift = avctx->bits_per_coded_sample == 16 ? 0 : 2;
 881     s->cbits = avctx->bits_per_coded_sample == 16 ? 0x1F : 0xFF;
 882     s->nbx = (avctx->width + 15) / 16;
 883     s->nby = (avctx->height + 15) / 16;
 884     s->nbcount = s->nbx * s->nby;
 885     s->blocks = av_malloc_array(s->nbcount, sizeof(*s->blocks));
 886     if (!s->blocks)
 887         return AVERROR(ENOMEM);
 888
 889     s->last_frame = av_frame_alloc();
 890     s->current_frame = av_frame_alloc();
 891     if (!s->last_frame || !s->current_frame)
 892         return AVERROR(ENOMEM);
 893
 894     return 0;
 895 }
 896
 897 static av_cold int decode_close(AVCodecContext *avctx)
 898 {
 899     SCPRContext *s = avctx->priv_data;
 900
 901     av_freep(&s->blocks);
 902     av_frame_free(&s->last_frame);
 903     av_frame_free(&s->current_frame);
 904
 905     return 0;
 906 }
 907
 908 AVCodec ff_scpr_decoder = {
 909     .name             = "scpr",
 910     .long_name        = NULL_IF_CONFIG_SMALL("ScreenPressor"),
 911     .type             = AVMEDIA_TYPE_VIDEO,
 912     .id               = AV_CODEC_ID_SCPR,
 913     .priv_data_size   = sizeof(SCPRContext),
 914     .init             = decode_init,
 915     .close            = decode_close,
 916     .decode           = decode_frame,
 917     .capabilities     = AV_CODEC_CAP_DR1,
 918     .caps_internal    = FF_CODEC_CAP_INIT_THREADSAFE |
 919                         FF_CODEC_CAP_INIT_CLEANUP,
 920 };