git.sesse.net Git - ffmpeg/blob - libavcodec/h264_metadata_bsf.c

   1 /*
   2  * This file is part of FFmpeg.
   3  *
   4  * FFmpeg is free software; you can redistribute it and/or
   5  * modify it under the terms of the GNU Lesser General Public
   6  * License as published by the Free Software Foundation; either
   7  * version 2.1 of the License, or (at your option) any later version.
   8  *
   9  * FFmpeg is distributed in the hope that it will be useful,
  10  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  11  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  12  * Lesser General Public License for more details.
  13  *
  14  * You should have received a copy of the GNU Lesser General Public
  15  * License along with FFmpeg; if not, write to the Free Software
  16  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
  17  */
  18
  19 #include "libavutil/avstring.h"
  20 #include "libavutil/display.h"
  21 #include "libavutil/common.h"
  22 #include "libavutil/opt.h"
  23
  24 #include "bsf.h"
  25 #include "cbs.h"
  26 #include "cbs_h264.h"
  27 #include "h264.h"
  28 #include "h264_levels.h"
  29 #include "h264_sei.h"
  30
  31 enum {
  32     PASS,
  33     INSERT,
  34     REMOVE,
  35     EXTRACT,
  36 };
  37
  38 enum {
  39     FLIP_HORIZONTAL = 1,
  40     FLIP_VERTICAL   = 2,
  41 };
  42
  43 enum {
  44     LEVEL_UNSET = -2,
  45     LEVEL_AUTO  = -1,
  46 };
  47
  48 typedef struct H264MetadataContext {
  49     const AVClass *class;
  50
  51     CodedBitstreamContext *cbc;
  52     CodedBitstreamFragment access_unit;
  53
  54     int done_first_au;
  55
  56     int aud;
  57
  58     AVRational sample_aspect_ratio;
  59
  60     int overscan_appropriate_flag;
  61
  62     int video_format;
  63     int video_full_range_flag;
  64     int colour_primaries;
  65     int transfer_characteristics;
  66     int matrix_coefficients;
  67
  68     int chroma_sample_loc_type;
  69
  70     AVRational tick_rate;
  71     int fixed_frame_rate_flag;
  72
  73     int crop_left;
  74     int crop_right;
  75     int crop_top;
  76     int crop_bottom;
  77
  78     const char *sei_user_data;
  79
  80     int delete_filler;
  81
  82     int display_orientation;
  83     double rotate;
  84     int flip;
  85
  86     int level;
  87 } H264MetadataContext;
  88
  89
  90 static int h264_metadata_update_sps(AVBSFContext *bsf,
  91                                     H264RawSPS *sps)
  92 {
  93     H264MetadataContext *ctx = bsf->priv_data;
  94     int need_vui = 0;
  95     int crop_unit_x, crop_unit_y;
  96
  97     if (ctx->sample_aspect_ratio.num && ctx->sample_aspect_ratio.den) {
  98         // Table E-1.
  99         static const AVRational sar_idc[] = {
 100             {   0,  0 }, // Unspecified (never written here).
 101             {   1,  1 }, {  12, 11 }, {  10, 11 }, {  16, 11 },
 102             {  40, 33 }, {  24, 11 }, {  20, 11 }, {  32, 11 },
 103             {  80, 33 }, {  18, 11 }, {  15, 11 }, {  64, 33 },
 104             { 160, 99 }, {   4,  3 }, {   3,  2 }, {   2,  1 },
 105         };
 106         int num, den, i;
 107
 108         av_reduce(&num, &den, ctx->sample_aspect_ratio.num,
 109                   ctx->sample_aspect_ratio.den, 65535);
 110
 111         for (i = 1; i < FF_ARRAY_ELEMS(sar_idc); i++) {
 112             if (num == sar_idc[i].num &&
 113                 den == sar_idc[i].den)
 114                 break;
 115         }
 116         if (i == FF_ARRAY_ELEMS(sar_idc)) {
 117             sps->vui.aspect_ratio_idc = 255;
 118             sps->vui.sar_width  = num;
 119             sps->vui.sar_height = den;
 120         } else {
 121             sps->vui.aspect_ratio_idc = i;
 122         }
 123         sps->vui.aspect_ratio_info_present_flag = 1;
 124         need_vui = 1;
 125     }
 126
 127 #define SET_VUI_FIELD(field) do { \
 128         if (ctx->field >= 0) { \
 129             sps->vui.field = ctx->field; \
 130             need_vui = 1; \
 131         } \
 132     } while (0)
 133
 134     if (ctx->overscan_appropriate_flag >= 0) {
 135         SET_VUI_FIELD(overscan_appropriate_flag);
 136         sps->vui.overscan_info_present_flag = 1;
 137     }
 138
 139     if (ctx->video_format             >= 0 ||
 140         ctx->video_full_range_flag    >= 0 ||
 141         ctx->colour_primaries         >= 0 ||
 142         ctx->transfer_characteristics >= 0 ||
 143         ctx->matrix_coefficients      >= 0) {
 144
 145         SET_VUI_FIELD(video_format);
 146
 147         SET_VUI_FIELD(video_full_range_flag);
 148
 149         if (ctx->colour_primaries         >= 0 ||
 150             ctx->transfer_characteristics >= 0 ||
 151             ctx->matrix_coefficients      >= 0) {
 152
 153             SET_VUI_FIELD(colour_primaries);
 154             SET_VUI_FIELD(transfer_characteristics);
 155             SET_VUI_FIELD(matrix_coefficients);
 156
 157             sps->vui.colour_description_present_flag = 1;
 158         }
 159         sps->vui.video_signal_type_present_flag = 1;
 160     }
 161
 162     if (ctx->chroma_sample_loc_type >= 0) {
 163         sps->vui.chroma_sample_loc_type_top_field =
 164             ctx->chroma_sample_loc_type;
 165         sps->vui.chroma_sample_loc_type_bottom_field =
 166             ctx->chroma_sample_loc_type;
 167         sps->vui.chroma_loc_info_present_flag = 1;
 168         need_vui = 1;
 169     }
 170
 171     if (ctx->tick_rate.num && ctx->tick_rate.den) {
 172         int num, den;
 173
 174         av_reduce(&num, &den, ctx->tick_rate.num, ctx->tick_rate.den,
 175                   UINT32_MAX > INT_MAX ? UINT32_MAX : INT_MAX);
 176
 177         sps->vui.time_scale        = num;
 178         sps->vui.num_units_in_tick = den;
 179
 180         sps->vui.timing_info_present_flag = 1;
 181         need_vui = 1;
 182     }
 183     SET_VUI_FIELD(fixed_frame_rate_flag);
 184
 185     if (sps->separate_colour_plane_flag || sps->chroma_format_idc == 0) {
 186         crop_unit_x = 1;
 187         crop_unit_y = 2 - sps->frame_mbs_only_flag;
 188     } else {
 189         crop_unit_x = 1 + (sps->chroma_format_idc < 3);
 190         crop_unit_y = (1 + (sps->chroma_format_idc < 2)) *
 191                        (2 - sps->frame_mbs_only_flag);
 192     }
 193 #define CROP(border, unit) do { \
 194         if (ctx->crop_ ## border >= 0) { \
 195             if (ctx->crop_ ## border % unit != 0) { \
 196                 av_log(bsf, AV_LOG_ERROR, "Invalid value for crop_%s: " \
 197                        "must be a multiple of %d.\n", #border, unit); \
 198                 return AVERROR(EINVAL); \
 199             } \
 200             sps->frame_crop_ ## border ## _offset = \
 201                   ctx->crop_ ## border / unit; \
 202             sps->frame_cropping_flag = 1; \
 203         } \
 204     } while (0)
 205     CROP(left,   crop_unit_x);
 206     CROP(right,  crop_unit_x);
 207     CROP(top,    crop_unit_y);
 208     CROP(bottom, crop_unit_y);
 209 #undef CROP
 210
 211     if (ctx->level != LEVEL_UNSET) {
 212         int level_idc;
 213
 214         if (ctx->level == LEVEL_AUTO) {
 215             const H264LevelDescriptor *desc;
 216             int64_t bit_rate;
 217             int width, height, dpb_frames;
 218             int framerate;
 219
 220             if (sps->vui.nal_hrd_parameters_present_flag) {
 221                 bit_rate = (sps->vui.nal_hrd_parameters.bit_rate_value_minus1[0] + 1) *
 222                     (INT64_C(1) << (sps->vui.nal_hrd_parameters.bit_rate_scale + 6));
 223             } else if (sps->vui.vcl_hrd_parameters_present_flag) {
 224                 bit_rate = (sps->vui.vcl_hrd_parameters.bit_rate_value_minus1[0] + 1) *
 225                     (INT64_C(1) << (sps->vui.vcl_hrd_parameters.bit_rate_scale + 6));
 226                 // Adjust for VCL vs. NAL limits.
 227                 bit_rate = bit_rate * 6 / 5;
 228             } else {
 229                 bit_rate = 0;
 230             }
 231
 232             // Don't use max_dec_frame_buffering if it is only inferred.
 233             dpb_frames = sps->vui.bitstream_restriction_flag ?
 234                 sps->vui.max_dec_frame_buffering : H264_MAX_DPB_FRAMES;
 235
 236             width  = 16 * (sps->pic_width_in_mbs_minus1 + 1);
 237             height = 16 * (sps->pic_height_in_map_units_minus1 + 1) *
 238                 (2 - sps->frame_mbs_only_flag);
 239
 240             if (sps->vui.timing_info_present_flag)
 241                 framerate = sps->vui.time_scale / sps->vui.num_units_in_tick / 2;
 242             else
 243                 framerate = 0;
 244
 245             desc = ff_h264_guess_level(sps->profile_idc, bit_rate, framerate,
 246                                        width, height, dpb_frames);
 247             if (desc) {
 248                 level_idc = desc->level_idc;
 249             } else {
 250                 av_log(bsf, AV_LOG_WARNING, "Stream does not appear to "
 251                        "conform to any level: using level 6.2.\n");
 252                 level_idc = 62;
 253             }
 254         } else {
 255             level_idc = ctx->level;
 256         }
 257
 258         if (level_idc == 9) {
 259             if (sps->profile_idc == 66 ||
 260                 sps->profile_idc == 77 ||
 261                 sps->profile_idc == 88) {
 262                 sps->level_idc = 11;
 263                 sps->constraint_set3_flag = 1;
 264             } else {
 265                 sps->level_idc = 9;
 266             }
 267         } else {
 268             sps->level_idc = level_idc;
 269         }
 270     }
 271
 272     if (need_vui)
 273         sps->vui_parameters_present_flag = 1;
 274
 275     return 0;
 276 }
 277
 278 static int h264_metadata_filter(AVBSFContext *bsf, AVPacket *pkt)
 279 {
 280     H264MetadataContext *ctx = bsf->priv_data;
 281     CodedBitstreamFragment *au = &ctx->access_unit;
 282     int err, i, j, has_sps;
 283     H264RawAUD aud;
 284
 285     err = ff_bsf_get_packet_ref(bsf, pkt);
 286     if (err < 0)
 287         return err;
 288
 289     err = ff_cbs_read_packet(ctx->cbc, au, pkt);
 290     if (err < 0) {
 291         av_log(bsf, AV_LOG_ERROR, "Failed to read packet.\n");
 292         goto fail;
 293     }
 294
 295     if (au->nb_units == 0) {
 296         av_log(bsf, AV_LOG_ERROR, "No NAL units in packet.\n");
 297         err = AVERROR_INVALIDDATA;
 298         goto fail;
 299     }
 300
 301     // If an AUD is present, it must be the first NAL unit.
 302     if (au->units[0].type == H264_NAL_AUD) {
 303         if (ctx->aud == REMOVE)
 304             ff_cbs_delete_unit(ctx->cbc, au, 0);
 305     } else {
 306         if (ctx->aud == INSERT) {
 307             static const int primary_pic_type_table[] = {
 308                 0x084, // 2, 7
 309                 0x0a5, // 0, 2, 5, 7
 310                 0x0e7, // 0, 1, 2, 5, 6, 7
 311                 0x210, // 4, 9
 312                 0x318, // 3, 4, 8, 9
 313                 0x294, // 2, 4, 7, 9
 314                 0x3bd, // 0, 2, 3, 4, 5, 7, 8, 9
 315                 0x3ff, // 0, 1, 2, 3, 4, 5, 6, 7, 8, 9
 316             };
 317             int primary_pic_type_mask = 0xff;
 318
 319             for (i = 0; i < au->nb_units; i++) {
 320                 if (au->units[i].type == H264_NAL_SLICE ||
 321                     au->units[i].type == H264_NAL_IDR_SLICE) {
 322                     H264RawSlice *slice = au->units[i].content;
 323                     for (j = 0; j < FF_ARRAY_ELEMS(primary_pic_type_table); j++) {
 324                          if (!(primary_pic_type_table[j] &
 325                                (1 << slice->header.slice_type)))
 326                              primary_pic_type_mask &= ~(1 << j);
 327                     }
 328                 }
 329             }
 330             for (j = 0; j < FF_ARRAY_ELEMS(primary_pic_type_table); j++)
 331                 if (primary_pic_type_mask & (1 << j))
 332                     break;
 333             if (j >= FF_ARRAY_ELEMS(primary_pic_type_table)) {
 334                 av_log(bsf, AV_LOG_ERROR, "No usable primary_pic_type: "
 335                        "invalid slice types?\n");
 336                 err = AVERROR_INVALIDDATA;
 337                 goto fail;
 338             }
 339
 340             aud = (H264RawAUD) {
 341                 .nal_unit_header.nal_unit_type = H264_NAL_AUD,
 342                 .primary_pic_type = j,
 343             };
 344
 345             err = ff_cbs_insert_unit_content(ctx->cbc, au,
 346                                              0, H264_NAL_AUD, &aud, NULL);
 347             if (err < 0) {
 348                 av_log(bsf, AV_LOG_ERROR, "Failed to insert AUD.\n");
 349                 goto fail;
 350             }
 351         }
 352     }
 353
 354     has_sps = 0;
 355     for (i = 0; i < au->nb_units; i++) {
 356         if (au->units[i].type == H264_NAL_SPS) {
 357             err = h264_metadata_update_sps(bsf, au->units[i].content);
 358             if (err < 0)
 359                 goto fail;
 360             has_sps = 1;
 361         }
 362     }
 363
 364     // Only insert the SEI in access units containing SPSs, and also
 365     // unconditionally in the first access unit we ever see.
 366     if (ctx->sei_user_data && (has_sps || !ctx->done_first_au)) {
 367         H264RawSEIPayload payload = {
 368             .payload_type = H264_SEI_TYPE_USER_DATA_UNREGISTERED,
 369         };
 370         H264RawSEIUserDataUnregistered *udu =
 371             &payload.payload.user_data_unregistered;
 372
 373         for (i = j = 0; j < 32 && ctx->sei_user_data[i]; i++) {
 374             int c, v;
 375             c = ctx->sei_user_data[i];
 376             if (c == '-') {
 377                 continue;
 378             } else if (av_isxdigit(c)) {
 379                 c = av_tolower(c);
 380                 v = (c <= '9' ? c - '0' : c - 'a' + 10);
 381             } else {
 382                 goto invalid_user_data;
 383             }
 384             if (j & 1)
 385                 udu->uuid_iso_iec_11578[j / 2] |= v;
 386             else
 387                 udu->uuid_iso_iec_11578[j / 2] = v << 4;
 388             ++j;
 389         }
 390         if (j == 32 && ctx->sei_user_data[i] == '+') {
 391             size_t len = strlen(ctx->sei_user_data + i + 1);
 392
 393             udu->data_ref = av_buffer_alloc(len + 1);
 394             if (!udu->data_ref) {
 395                 err = AVERROR(ENOMEM);
 396                 goto fail;
 397             }
 398
 399             udu->data        = udu->data_ref->data;
 400             udu->data_length = len + 1;
 401             memcpy(udu->data, ctx->sei_user_data + i + 1, len + 1);
 402
 403             err = ff_cbs_h264_add_sei_message(ctx->cbc, au, &payload);
 404             if (err < 0) {
 405                 av_log(bsf, AV_LOG_ERROR, "Failed to add user data SEI "
 406                        "message to access unit.\n");
 407                 goto fail;
 408             }
 409
 410         } else {
 411         invalid_user_data:
 412             av_log(bsf, AV_LOG_ERROR, "Invalid user data: "
 413                    "must be \"UUID+string\".\n");
 414             err = AVERROR(EINVAL);
 415             goto fail;
 416         }
 417     }
 418
 419     if (ctx->delete_filler) {
 420         for (i = au->nb_units - 1; i >= 0; i--) {
 421             if (au->units[i].type == H264_NAL_FILLER_DATA) {
 422                 ff_cbs_delete_unit(ctx->cbc, au, i);
 423                 continue;
 424             }
 425
 426             if (au->units[i].type == H264_NAL_SEI) {
 427                 // Filler SEI messages.
 428                 H264RawSEI *sei = au->units[i].content;
 429
 430                 for (j = sei->payload_count - 1; j >= 0; j--) {
 431                     if (sei->payload[j].payload_type ==
 432                         H264_SEI_TYPE_FILLER_PAYLOAD)
 433                         ff_cbs_h264_delete_sei_message(ctx->cbc, au,
 434                                                        &au->units[i], j);
 435                 }
 436             }
 437         }
 438     }
 439
 440     if (ctx->display_orientation != PASS) {
 441         for (i = au->nb_units - 1; i >= 0; i--) {
 442             H264RawSEI *sei;
 443             if (au->units[i].type != H264_NAL_SEI)
 444                 continue;
 445             sei = au->units[i].content;
 446
 447             for (j = sei->payload_count - 1; j >= 0; j--) {
 448                 H264RawSEIDisplayOrientation *disp;
 449                 int32_t *matrix;
 450
 451                 if (sei->payload[j].payload_type !=
 452                     H264_SEI_TYPE_DISPLAY_ORIENTATION)
 453                     continue;
 454                 disp = &sei->payload[j].payload.display_orientation;
 455
 456                 if (ctx->display_orientation == REMOVE ||
 457                     ctx->display_orientation == INSERT) {
 458                     ff_cbs_h264_delete_sei_message(ctx->cbc, au,
 459                                                    &au->units[i], j);
 460                     continue;
 461                 }
 462
 463                 matrix = av_malloc(9 * sizeof(int32_t));
 464                 if (!matrix) {
 465                     err = AVERROR(ENOMEM);
 466                     goto fail;
 467                 }
 468
 469                 av_display_rotation_set(matrix,
 470                                         disp->anticlockwise_rotation *
 471                                         180.0 / 65536.0);
 472                 av_display_matrix_flip(matrix, disp->hor_flip, disp->ver_flip);
 473
 474                 // If there are multiple display orientation messages in an
 475                 // access unit, then the last one added to the packet (i.e.
 476                 // the first one in the access unit) will prevail.
 477                 err = av_packet_add_side_data(pkt, AV_PKT_DATA_DISPLAYMATRIX,
 478                                               (uint8_t*)matrix,
 479                                               9 * sizeof(int32_t));
 480                 if (err < 0) {
 481                     av_log(bsf, AV_LOG_ERROR, "Failed to attach extracted "
 482                            "displaymatrix side data to packet.\n");
 483                     av_freep(matrix);
 484                     goto fail;
 485                 }
 486             }
 487         }
 488     }
 489     if (ctx->display_orientation == INSERT) {
 490         H264RawSEIPayload payload = {
 491             .payload_type = H264_SEI_TYPE_DISPLAY_ORIENTATION,
 492         };
 493         H264RawSEIDisplayOrientation *disp =
 494             &payload.payload.display_orientation;
 495         uint8_t *data;
 496         int size;
 497         int write = 0;
 498
 499         data = av_packet_get_side_data(pkt, AV_PKT_DATA_DISPLAYMATRIX, &size);
 500         if (data && size >= 9 * sizeof(int32_t)) {
 501             int32_t matrix[9];
 502             int hflip, vflip;
 503             double angle;
 504
 505             memcpy(matrix, data, sizeof(matrix));
 506
 507             hflip = vflip = 0;
 508             if (matrix[0] < 0 && matrix[4] > 0)
 509                 hflip = 1;
 510             else if (matrix[0] > 0 && matrix[4] < 0)
 511                 vflip = 1;
 512             av_display_matrix_flip(matrix, hflip, vflip);
 513
 514             angle = av_display_rotation_get(matrix);
 515
 516             if (!(angle >= -180.0 && angle <= 180.0 /* also excludes NaN */) ||
 517                 matrix[2] != 0 || matrix[5] != 0 ||
 518                 matrix[6] != 0 || matrix[7] != 0) {
 519                 av_log(bsf, AV_LOG_WARNING, "Input display matrix is not "
 520                        "representable in H.264 parameters.\n");
 521             } else {
 522                 disp->hor_flip = hflip;
 523                 disp->ver_flip = vflip;
 524                 disp->anticlockwise_rotation =
 525                     (uint16_t)rint((angle >= 0.0 ? angle
 526                                                  : angle + 360.0) *
 527                                    65536.0 / 360.0);
 528                 write = 1;
 529             }
 530         }
 531
 532         if (has_sps || !ctx->done_first_au) {
 533             if (!isnan(ctx->rotate)) {
 534                 disp->anticlockwise_rotation =
 535                     (uint16_t)rint((ctx->rotate >= 0.0 ? ctx->rotate
 536                                                        : ctx->rotate + 360.0) *
 537                                    65536.0 / 360.0);
 538                 write = 1;
 539             }
 540             if (ctx->flip) {
 541                 disp->hor_flip = !!(ctx->flip & FLIP_HORIZONTAL);
 542                 disp->ver_flip = !!(ctx->flip & FLIP_VERTICAL);
 543                 write = 1;
 544             }
 545         }
 546
 547         if (write) {
 548             disp->display_orientation_repetition_period = 1;
 549
 550             err = ff_cbs_h264_add_sei_message(ctx->cbc, au, &payload);
 551             if (err < 0) {
 552                 av_log(bsf, AV_LOG_ERROR, "Failed to add display orientation "
 553                        "SEI message to access unit.\n");
 554                 goto fail;
 555             }
 556         }
 557     }
 558
 559     err = ff_cbs_write_packet(ctx->cbc, pkt, au);
 560     if (err < 0) {
 561         av_log(bsf, AV_LOG_ERROR, "Failed to write packet.\n");
 562         goto fail;
 563     }
 564
 565     ctx->done_first_au = 1;
 566
 567     err = 0;
 568 fail:
 569     ff_cbs_fragment_reset(ctx->cbc, au);
 570
 571     if (err < 0)
 572         av_packet_unref(pkt);
 573
 574     return err;
 575 }
 576
 577 static int h264_metadata_init(AVBSFContext *bsf)
 578 {
 579     H264MetadataContext *ctx = bsf->priv_data;
 580     CodedBitstreamFragment *au = &ctx->access_unit;
 581     int err, i;
 582
 583     err = ff_cbs_init(&ctx->cbc, AV_CODEC_ID_H264, bsf);
 584     if (err < 0)
 585         return err;
 586
 587     if (bsf->par_in->extradata) {
 588         err = ff_cbs_read_extradata(ctx->cbc, au, bsf->par_in);
 589         if (err < 0) {
 590             av_log(bsf, AV_LOG_ERROR, "Failed to read extradata.\n");
 591             goto fail;
 592         }
 593
 594         for (i = 0; i < au->nb_units; i++) {
 595             if (au->units[i].type == H264_NAL_SPS) {
 596                 err = h264_metadata_update_sps(bsf, au->units[i].content);
 597                 if (err < 0)
 598                     goto fail;
 599             }
 600         }
 601
 602         err = ff_cbs_write_extradata(ctx->cbc, bsf->par_out, au);
 603         if (err < 0) {
 604             av_log(bsf, AV_LOG_ERROR, "Failed to write extradata.\n");
 605             goto fail;
 606         }
 607     }
 608
 609     err = 0;
 610 fail:
 611     ff_cbs_fragment_reset(ctx->cbc, au);
 612     return err;
 613 }
 614
 615 static void h264_metadata_close(AVBSFContext *bsf)
 616 {
 617     H264MetadataContext *ctx = bsf->priv_data;
 618
 619     ff_cbs_fragment_free(ctx->cbc, &ctx->access_unit);
 620     ff_cbs_close(&ctx->cbc);
 621 }
 622
 623 #define OFFSET(x) offsetof(H264MetadataContext, x)
 624 #define FLAGS (AV_OPT_FLAG_VIDEO_PARAM|AV_OPT_FLAG_BSF_PARAM)
 625 static const AVOption h264_metadata_options[] = {
 626     { "aud", "Access Unit Delimiter NAL units",
 627         OFFSET(aud), AV_OPT_TYPE_INT,
 628         { .i64 = PASS }, PASS, REMOVE, FLAGS, "aud" },
 629     { "pass",   NULL, 0, AV_OPT_TYPE_CONST,
 630         { .i64 = PASS   }, .flags = FLAGS, .unit = "aud" },
 631     { "insert", NULL, 0, AV_OPT_TYPE_CONST,
 632         { .i64 = INSERT }, .flags = FLAGS, .unit = "aud" },
 633     { "remove", NULL, 0, AV_OPT_TYPE_CONST,
 634         { .i64 = REMOVE }, .flags = FLAGS, .unit = "aud" },
 635
 636     { "sample_aspect_ratio", "Set sample aspect ratio (table E-1)",
 637         OFFSET(sample_aspect_ratio), AV_OPT_TYPE_RATIONAL,
 638         { .dbl = 0.0 }, 0, 65535, FLAGS },
 639
 640     { "overscan_appropriate_flag", "Set VUI overscan appropriate flag",
 641         OFFSET(overscan_appropriate_flag), AV_OPT_TYPE_INT,
 642         { .i64 = -1 }, -1, 1, FLAGS },
 643
 644     { "video_format", "Set video format (table E-2)",
 645         OFFSET(video_format), AV_OPT_TYPE_INT,
 646         { .i64 = -1 }, -1, 7, FLAGS},
 647     { "video_full_range_flag", "Set video full range flag",
 648         OFFSET(video_full_range_flag), AV_OPT_TYPE_INT,
 649         { .i64 = -1 }, -1, 1, FLAGS },
 650     { "colour_primaries", "Set colour primaries (table E-3)",
 651         OFFSET(colour_primaries), AV_OPT_TYPE_INT,
 652         { .i64 = -1 }, -1, 255, FLAGS },
 653     { "transfer_characteristics", "Set transfer characteristics (table E-4)",
 654         OFFSET(transfer_characteristics), AV_OPT_TYPE_INT,
 655         { .i64 = -1 }, -1, 255, FLAGS },
 656     { "matrix_coefficients", "Set matrix coefficients (table E-5)",
 657         OFFSET(matrix_coefficients), AV_OPT_TYPE_INT,
 658         { .i64 = -1 }, -1, 255, FLAGS },
 659
 660     { "chroma_sample_loc_type", "Set chroma sample location type (figure E-1)",
 661         OFFSET(chroma_sample_loc_type), AV_OPT_TYPE_INT,
 662         { .i64 = -1 }, -1, 6, FLAGS },
 663
 664     { "tick_rate", "Set VUI tick rate (num_units_in_tick / time_scale)",
 665         OFFSET(tick_rate), AV_OPT_TYPE_RATIONAL,
 666         { .dbl = 0.0 }, 0, UINT_MAX, FLAGS },
 667     { "fixed_frame_rate_flag", "Set VUI fixed frame rate flag",
 668         OFFSET(fixed_frame_rate_flag), AV_OPT_TYPE_INT,
 669         { .i64 = -1 }, -1, 1, FLAGS },
 670
 671     { "crop_left", "Set left border crop offset",
 672         OFFSET(crop_left), AV_OPT_TYPE_INT,
 673         { .i64 = -1 }, -1, H264_MAX_WIDTH, FLAGS },
 674     { "crop_right", "Set right border crop offset",
 675         OFFSET(crop_right), AV_OPT_TYPE_INT,
 676         { .i64 = -1 }, -1, H264_MAX_WIDTH, FLAGS },
 677     { "crop_top", "Set top border crop offset",
 678         OFFSET(crop_top), AV_OPT_TYPE_INT,
 679         { .i64 = -1 }, -1, H264_MAX_HEIGHT, FLAGS },
 680     { "crop_bottom", "Set bottom border crop offset",
 681         OFFSET(crop_bottom), AV_OPT_TYPE_INT,
 682         { .i64 = -1 }, -1, H264_MAX_HEIGHT, FLAGS },
 683
 684     { "sei_user_data", "Insert SEI user data (UUID+string)",
 685         OFFSET(sei_user_data), AV_OPT_TYPE_STRING, { .str = NULL }, .flags = FLAGS },
 686
 687     { "delete_filler", "Delete all filler (both NAL and SEI)",
 688         OFFSET(delete_filler), AV_OPT_TYPE_INT, { .i64 = 0 }, 0, 1, FLAGS},
 689
 690     { "display_orientation", "Display orientation SEI",
 691         OFFSET(display_orientation), AV_OPT_TYPE_INT,
 692         { .i64 = PASS }, PASS, EXTRACT, FLAGS, "disp_or" },
 693     { "pass",    NULL, 0, AV_OPT_TYPE_CONST,
 694         { .i64 = PASS    }, .flags = FLAGS, .unit = "disp_or" },
 695     { "insert",  NULL, 0, AV_OPT_TYPE_CONST,
 696         { .i64 = INSERT  }, .flags = FLAGS, .unit = "disp_or" },
 697     { "remove",  NULL, 0, AV_OPT_TYPE_CONST,
 698         { .i64 = REMOVE  }, .flags = FLAGS, .unit = "disp_or" },
 699     { "extract", NULL, 0, AV_OPT_TYPE_CONST,
 700         { .i64 = EXTRACT }, .flags = FLAGS, .unit = "disp_or" },
 701
 702     { "rotate", "Set rotation in display orientation SEI (anticlockwise angle in degrees)",
 703         OFFSET(rotate), AV_OPT_TYPE_DOUBLE,
 704         { .dbl = NAN }, -360.0, +360.0, FLAGS },
 705     { "flip", "Set flip in display orientation SEI",
 706         OFFSET(flip), AV_OPT_TYPE_FLAGS,
 707         { .i64 = 0 }, 0, FLIP_HORIZONTAL | FLIP_VERTICAL, FLAGS, "flip" },
 708     { "horizontal", "Set hor_flip",
 709         0, AV_OPT_TYPE_CONST,
 710         { .i64 = FLIP_HORIZONTAL }, .flags = FLAGS, .unit = "flip" },
 711     { "vertical",   "Set ver_flip",
 712         0, AV_OPT_TYPE_CONST,
 713         { .i64 = FLIP_VERTICAL },   .flags = FLAGS, .unit = "flip" },
 714
 715     { "level", "Set level (table A-1)",
 716         OFFSET(level), AV_OPT_TYPE_INT,
 717         { .i64 = LEVEL_UNSET }, LEVEL_UNSET, 0xff, FLAGS, "level" },
 718     { "auto", "Attempt to guess level from stream properties",
 719         0, AV_OPT_TYPE_CONST,
 720         { .i64 = LEVEL_AUTO }, .flags = FLAGS, .unit = "level" },
 721 #define LEVEL(name, value) name, NULL, 0, AV_OPT_TYPE_CONST, \
 722         { .i64 = value },      .flags = FLAGS, .unit = "level"
 723     { LEVEL("1",   10) },
 724     { LEVEL("1b",   9) },
 725     { LEVEL("1.1", 11) },
 726     { LEVEL("1.2", 12) },
 727     { LEVEL("1.3", 13) },
 728     { LEVEL("2",   20) },
 729     { LEVEL("2.1", 21) },
 730     { LEVEL("2.2", 22) },
 731     { LEVEL("3",   30) },
 732     { LEVEL("3.1", 31) },
 733     { LEVEL("3.2", 32) },
 734     { LEVEL("4",   40) },
 735     { LEVEL("4.1", 41) },
 736     { LEVEL("4.2", 42) },
 737     { LEVEL("5",   50) },
 738     { LEVEL("5.1", 51) },
 739     { LEVEL("5.2", 52) },
 740     { LEVEL("6",   60) },
 741     { LEVEL("6.1", 61) },
 742     { LEVEL("6.2", 62) },
 743 #undef LEVEL
 744
 745     { NULL }
 746 };
 747
 748 static const AVClass h264_metadata_class = {
 749     .class_name = "h264_metadata_bsf",
 750     .item_name  = av_default_item_name,
 751     .option     = h264_metadata_options,
 752     .version    = LIBAVUTIL_VERSION_INT,
 753 };
 754
 755 static const enum AVCodecID h264_metadata_codec_ids[] = {
 756     AV_CODEC_ID_H264, AV_CODEC_ID_NONE,
 757 };
 758
 759 const AVBitStreamFilter ff_h264_metadata_bsf = {
 760     .name           = "h264_metadata",
 761     .priv_data_size = sizeof(H264MetadataContext),
 762     .priv_class     = &h264_metadata_class,
 763     .init           = &h264_metadata_init,
 764     .close          = &h264_metadata_close,
 765     .filter         = &h264_metadata_filter,
 766     .codec_ids      = h264_metadata_codec_ids,
 767 };