]> git.sesse.net Git - ffmpeg/blob - libavcodec/avcodec.h
89e32f1c8099526a59097b35a411ef81972e92ae
[ffmpeg] / libavcodec / avcodec.h
1 /*
2  * copyright (c) 2001 Fabrice Bellard
3  *
4  * This file is part of FFmpeg.
5  *
6  * FFmpeg is free software; you can redistribute it and/or
7  * modify it under the terms of the GNU Lesser General Public
8  * License as published by the Free Software Foundation; either
9  * version 2.1 of the License, or (at your option) any later version.
10  *
11  * FFmpeg is distributed in the hope that it will be useful,
12  * but WITHOUT ANY WARRANTY; without even the implied warranty of
13  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
14  * Lesser General Public License for more details.
15  *
16  * You should have received a copy of the GNU Lesser General Public
17  * License along with FFmpeg; if not, write to the Free Software
18  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
19  */
20
21 #ifndef AVCODEC_AVCODEC_H
22 #define AVCODEC_AVCODEC_H
23
24 /**
25  * @file
26  * @ingroup libavc
27  * Libavcodec external API header
28  */
29
30 #include <errno.h>
31 #include "libavutil/samplefmt.h"
32 #include "libavutil/attributes.h"
33 #include "libavutil/avutil.h"
34 #include "libavutil/buffer.h"
35 #include "libavutil/cpu.h"
36 #include "libavutil/channel_layout.h"
37 #include "libavutil/dict.h"
38 #include "libavutil/frame.h"
39 #include "libavutil/hwcontext.h"
40 #include "libavutil/log.h"
41 #include "libavutil/pixfmt.h"
42 #include "libavutil/rational.h"
43
44 #include "bsf.h"
45 #include "codec.h"
46 #include "codec_desc.h"
47 #include "codec_par.h"
48 #include "codec_id.h"
49 #include "packet.h"
50 #include "version.h"
51
52 /**
53  * @defgroup libavc libavcodec
54  * Encoding/Decoding Library
55  *
56  * @{
57  *
58  * @defgroup lavc_decoding Decoding
59  * @{
60  * @}
61  *
62  * @defgroup lavc_encoding Encoding
63  * @{
64  * @}
65  *
66  * @defgroup lavc_codec Codecs
67  * @{
68  * @defgroup lavc_codec_native Native Codecs
69  * @{
70  * @}
71  * @defgroup lavc_codec_wrappers External library wrappers
72  * @{
73  * @}
74  * @defgroup lavc_codec_hwaccel Hardware Accelerators bridge
75  * @{
76  * @}
77  * @}
78  * @defgroup lavc_internal Internal
79  * @{
80  * @}
81  * @}
82  */
83
84 /**
85  * @ingroup libavc
86  * @defgroup lavc_encdec send/receive encoding and decoding API overview
87  * @{
88  *
89  * The avcodec_send_packet()/avcodec_receive_frame()/avcodec_send_frame()/
90  * avcodec_receive_packet() functions provide an encode/decode API, which
91  * decouples input and output.
92  *
93  * The API is very similar for encoding/decoding and audio/video, and works as
94  * follows:
95  * - Set up and open the AVCodecContext as usual.
96  * - Send valid input:
97  *   - For decoding, call avcodec_send_packet() to give the decoder raw
98  *     compressed data in an AVPacket.
99  *   - For encoding, call avcodec_send_frame() to give the encoder an AVFrame
100  *     containing uncompressed audio or video.
101  *
102  *   In both cases, it is recommended that AVPackets and AVFrames are
103  *   refcounted, or libavcodec might have to copy the input data. (libavformat
104  *   always returns refcounted AVPackets, and av_frame_get_buffer() allocates
105  *   refcounted AVFrames.)
106  * - Receive output in a loop. Periodically call one of the avcodec_receive_*()
107  *   functions and process their output:
108  *   - For decoding, call avcodec_receive_frame(). On success, it will return
109  *     an AVFrame containing uncompressed audio or video data.
110  *   - For encoding, call avcodec_receive_packet(). On success, it will return
111  *     an AVPacket with a compressed frame.
112  *
113  *   Repeat this call until it returns AVERROR(EAGAIN) or an error. The
114  *   AVERROR(EAGAIN) return value means that new input data is required to
115  *   return new output. In this case, continue with sending input. For each
116  *   input frame/packet, the codec will typically return 1 output frame/packet,
117  *   but it can also be 0 or more than 1.
118  *
119  * At the beginning of decoding or encoding, the codec might accept multiple
120  * input frames/packets without returning a frame, until its internal buffers
121  * are filled. This situation is handled transparently if you follow the steps
122  * outlined above.
123  *
124  * In theory, sending input can result in EAGAIN - this should happen only if
125  * not all output was received. You can use this to structure alternative decode
126  * or encode loops other than the one suggested above. For example, you could
127  * try sending new input on each iteration, and try to receive output if that
128  * returns EAGAIN.
129  *
130  * End of stream situations. These require "flushing" (aka draining) the codec,
131  * as the codec might buffer multiple frames or packets internally for
132  * performance or out of necessity (consider B-frames).
133  * This is handled as follows:
134  * - Instead of valid input, send NULL to the avcodec_send_packet() (decoding)
135  *   or avcodec_send_frame() (encoding) functions. This will enter draining
136  *   mode.
137  * - Call avcodec_receive_frame() (decoding) or avcodec_receive_packet()
138  *   (encoding) in a loop until AVERROR_EOF is returned. The functions will
139  *   not return AVERROR(EAGAIN), unless you forgot to enter draining mode.
140  * - Before decoding can be resumed again, the codec has to be reset with
141  *   avcodec_flush_buffers().
142  *
143  * Using the API as outlined above is highly recommended. But it is also
144  * possible to call functions outside of this rigid schema. For example, you can
145  * call avcodec_send_packet() repeatedly without calling
146  * avcodec_receive_frame(). In this case, avcodec_send_packet() will succeed
147  * until the codec's internal buffer has been filled up (which is typically of
148  * size 1 per output frame, after initial input), and then reject input with
149  * AVERROR(EAGAIN). Once it starts rejecting input, you have no choice but to
150  * read at least some output.
151  *
152  * Not all codecs will follow a rigid and predictable dataflow; the only
153  * guarantee is that an AVERROR(EAGAIN) return value on a send/receive call on
154  * one end implies that a receive/send call on the other end will succeed, or
155  * at least will not fail with AVERROR(EAGAIN). In general, no codec will
156  * permit unlimited buffering of input or output.
157  *
158  * This API replaces the following legacy functions:
159  * - avcodec_decode_video2() and avcodec_decode_audio4():
160  *   Use avcodec_send_packet() to feed input to the decoder, then use
161  *   avcodec_receive_frame() to receive decoded frames after each packet.
162  *   Unlike with the old video decoding API, multiple frames might result from
163  *   a packet. For audio, splitting the input packet into frames by partially
164  *   decoding packets becomes transparent to the API user. You never need to
165  *   feed an AVPacket to the API twice (unless it is rejected with AVERROR(EAGAIN) - then
166  *   no data was read from the packet).
167  *   Additionally, sending a flush/draining packet is required only once.
168  * - avcodec_encode_video2()/avcodec_encode_audio2():
169  *   Use avcodec_send_frame() to feed input to the encoder, then use
170  *   avcodec_receive_packet() to receive encoded packets.
171  *   Providing user-allocated buffers for avcodec_receive_packet() is not
172  *   possible.
173  * - The new API does not handle subtitles yet.
174  *
175  * Mixing new and old function calls on the same AVCodecContext is not allowed,
176  * and will result in undefined behavior.
177  *
178  * Some codecs might require using the new API; using the old API will return
179  * an error when calling it. All codecs support the new API.
180  *
181  * A codec is not allowed to return AVERROR(EAGAIN) for both sending and receiving. This
182  * would be an invalid state, which could put the codec user into an endless
183  * loop. The API has no concept of time either: it cannot happen that trying to
184  * do avcodec_send_packet() results in AVERROR(EAGAIN), but a repeated call 1 second
185  * later accepts the packet (with no other receive/flush API calls involved).
186  * The API is a strict state machine, and the passage of time is not supposed
187  * to influence it. Some timing-dependent behavior might still be deemed
188  * acceptable in certain cases. But it must never result in both send/receive
189  * returning EAGAIN at the same time at any point. It must also absolutely be
190  * avoided that the current state is "unstable" and can "flip-flop" between
191  * the send/receive APIs allowing progress. For example, it's not allowed that
192  * the codec randomly decides that it actually wants to consume a packet now
193  * instead of returning a frame, after it just returned AVERROR(EAGAIN) on an
194  * avcodec_send_packet() call.
195  * @}
196  */
197
198 /**
199  * @defgroup lavc_core Core functions/structures.
200  * @ingroup libavc
201  *
202  * Basic definitions, functions for querying libavcodec capabilities,
203  * allocating core structures, etc.
204  * @{
205  */
206
207 /**
208  * @ingroup lavc_decoding
209  * Required number of additionally allocated bytes at the end of the input bitstream for decoding.
210  * This is mainly needed because some optimized bitstream readers read
211  * 32 or 64 bit at once and could read over the end.<br>
212  * Note: If the first 23 bits of the additional bytes are not 0, then damaged
213  * MPEG bitstreams could cause overread and segfault.
214  */
215 #define AV_INPUT_BUFFER_PADDING_SIZE 64
216
217 /**
218  * @ingroup lavc_encoding
219  * minimum encoding buffer size
220  * Used to avoid some checks during header writing.
221  */
222 #define AV_INPUT_BUFFER_MIN_SIZE 16384
223
224 /**
225  * @ingroup lavc_decoding
226  */
227 enum AVDiscard{
228     /* We leave some space between them for extensions (drop some
229      * keyframes for intra-only or drop just some bidir frames). */
230     AVDISCARD_NONE    =-16, ///< discard nothing
231     AVDISCARD_DEFAULT =  0, ///< discard useless packets like 0 size packets in avi
232     AVDISCARD_NONREF  =  8, ///< discard all non reference
233     AVDISCARD_BIDIR   = 16, ///< discard all bidirectional frames
234     AVDISCARD_NONINTRA= 24, ///< discard all non intra frames
235     AVDISCARD_NONKEY  = 32, ///< discard all frames except keyframes
236     AVDISCARD_ALL     = 48, ///< discard all
237 };
238
239 enum AVAudioServiceType {
240     AV_AUDIO_SERVICE_TYPE_MAIN              = 0,
241     AV_AUDIO_SERVICE_TYPE_EFFECTS           = 1,
242     AV_AUDIO_SERVICE_TYPE_VISUALLY_IMPAIRED = 2,
243     AV_AUDIO_SERVICE_TYPE_HEARING_IMPAIRED  = 3,
244     AV_AUDIO_SERVICE_TYPE_DIALOGUE          = 4,
245     AV_AUDIO_SERVICE_TYPE_COMMENTARY        = 5,
246     AV_AUDIO_SERVICE_TYPE_EMERGENCY         = 6,
247     AV_AUDIO_SERVICE_TYPE_VOICE_OVER        = 7,
248     AV_AUDIO_SERVICE_TYPE_KARAOKE           = 8,
249     AV_AUDIO_SERVICE_TYPE_NB                   , ///< Not part of ABI
250 };
251
252 /**
253  * @ingroup lavc_encoding
254  */
255 typedef struct RcOverride{
256     int start_frame;
257     int end_frame;
258     int qscale; // If this is 0 then quality_factor will be used instead.
259     float quality_factor;
260 } RcOverride;
261
262 /* encoding support
263    These flags can be passed in AVCodecContext.flags before initialization.
264    Note: Not everything is supported yet.
265 */
266
267 /**
268  * Allow decoders to produce frames with data planes that are not aligned
269  * to CPU requirements (e.g. due to cropping).
270  */
271 #define AV_CODEC_FLAG_UNALIGNED       (1 <<  0)
272 /**
273  * Use fixed qscale.
274  */
275 #define AV_CODEC_FLAG_QSCALE          (1 <<  1)
276 /**
277  * 4 MV per MB allowed / advanced prediction for H.263.
278  */
279 #define AV_CODEC_FLAG_4MV             (1 <<  2)
280 /**
281  * Output even those frames that might be corrupted.
282  */
283 #define AV_CODEC_FLAG_OUTPUT_CORRUPT  (1 <<  3)
284 /**
285  * Use qpel MC.
286  */
287 #define AV_CODEC_FLAG_QPEL            (1 <<  4)
288 /**
289  * Don't output frames whose parameters differ from first
290  * decoded frame in stream.
291  */
292 #define AV_CODEC_FLAG_DROPCHANGED     (1 <<  5)
293 /**
294  * Use internal 2pass ratecontrol in first pass mode.
295  */
296 #define AV_CODEC_FLAG_PASS1           (1 <<  9)
297 /**
298  * Use internal 2pass ratecontrol in second pass mode.
299  */
300 #define AV_CODEC_FLAG_PASS2           (1 << 10)
301 /**
302  * loop filter.
303  */
304 #define AV_CODEC_FLAG_LOOP_FILTER     (1 << 11)
305 /**
306  * Only decode/encode grayscale.
307  */
308 #define AV_CODEC_FLAG_GRAY            (1 << 13)
309 /**
310  * error[?] variables will be set during encoding.
311  */
312 #define AV_CODEC_FLAG_PSNR            (1 << 15)
313 /**
314  * Input bitstream might be truncated at a random location
315  * instead of only at frame boundaries.
316  */
317 #define AV_CODEC_FLAG_TRUNCATED       (1 << 16)
318 /**
319  * Use interlaced DCT.
320  */
321 #define AV_CODEC_FLAG_INTERLACED_DCT  (1 << 18)
322 /**
323  * Force low delay.
324  */
325 #define AV_CODEC_FLAG_LOW_DELAY       (1 << 19)
326 /**
327  * Place global headers in extradata instead of every keyframe.
328  */
329 #define AV_CODEC_FLAG_GLOBAL_HEADER   (1 << 22)
330 /**
331  * Use only bitexact stuff (except (I)DCT).
332  */
333 #define AV_CODEC_FLAG_BITEXACT        (1 << 23)
334 /* Fx : Flag for H.263+ extra options */
335 /**
336  * H.263 advanced intra coding / MPEG-4 AC prediction
337  */
338 #define AV_CODEC_FLAG_AC_PRED         (1 << 24)
339 /**
340  * interlaced motion estimation
341  */
342 #define AV_CODEC_FLAG_INTERLACED_ME   (1 << 29)
343 #define AV_CODEC_FLAG_CLOSED_GOP      (1U << 31)
344
345 /**
346  * Allow non spec compliant speedup tricks.
347  */
348 #define AV_CODEC_FLAG2_FAST           (1 <<  0)
349 /**
350  * Skip bitstream encoding.
351  */
352 #define AV_CODEC_FLAG2_NO_OUTPUT      (1 <<  2)
353 /**
354  * Place global headers at every keyframe instead of in extradata.
355  */
356 #define AV_CODEC_FLAG2_LOCAL_HEADER   (1 <<  3)
357
358 /**
359  * timecode is in drop frame format. DEPRECATED!!!!
360  */
361 #define AV_CODEC_FLAG2_DROP_FRAME_TIMECODE (1 << 13)
362
363 /**
364  * Input bitstream might be truncated at a packet boundaries
365  * instead of only at frame boundaries.
366  */
367 #define AV_CODEC_FLAG2_CHUNKS         (1 << 15)
368 /**
369  * Discard cropping information from SPS.
370  */
371 #define AV_CODEC_FLAG2_IGNORE_CROP    (1 << 16)
372
373 /**
374  * Show all frames before the first keyframe
375  */
376 #define AV_CODEC_FLAG2_SHOW_ALL       (1 << 22)
377 /**
378  * Export motion vectors through frame side data
379  */
380 #define AV_CODEC_FLAG2_EXPORT_MVS     (1 << 28)
381 /**
382  * Do not skip samples and export skip information as frame side data
383  */
384 #define AV_CODEC_FLAG2_SKIP_MANUAL    (1 << 29)
385 /**
386  * Do not reset ASS ReadOrder field on flush (subtitles decoding)
387  */
388 #define AV_CODEC_FLAG2_RO_FLUSH_NOOP  (1 << 30)
389
390 /* Unsupported options :
391  *              Syntax Arithmetic coding (SAC)
392  *              Reference Picture Selection
393  *              Independent Segment Decoding */
394 /* /Fx */
395 /* codec capabilities */
396
397 /* Exported side data.
398    These flags can be passed in AVCodecContext.export_side_data before initialization.
399 */
400 /**
401  * Export motion vectors through frame side data
402  */
403 #define AV_CODEC_EXPORT_DATA_MVS         (1 << 0)
404 /**
405  * Export encoder Producer Reference Time through packet side data
406  */
407 #define AV_CODEC_EXPORT_DATA_PRFT        (1 << 1)
408 /**
409  * Decoding only.
410  * Export the AVVideoEncParams structure through frame side data.
411  */
412 #define AV_CODEC_EXPORT_DATA_VIDEO_ENC_PARAMS (1 << 2)
413 /**
414  * Decoding only.
415  * Do not apply film grain, export it instead.
416  */
417 #define AV_CODEC_EXPORT_DATA_FILM_GRAIN (1 << 3)
418
419 /**
420  * Pan Scan area.
421  * This specifies the area which should be displayed.
422  * Note there may be multiple such areas for one frame.
423  */
424 typedef struct AVPanScan {
425     /**
426      * id
427      * - encoding: Set by user.
428      * - decoding: Set by libavcodec.
429      */
430     int id;
431
432     /**
433      * width and height in 1/16 pel
434      * - encoding: Set by user.
435      * - decoding: Set by libavcodec.
436      */
437     int width;
438     int height;
439
440     /**
441      * position of the top left corner in 1/16 pel for up to 3 fields/frames
442      * - encoding: Set by user.
443      * - decoding: Set by libavcodec.
444      */
445     int16_t position[3][2];
446 } AVPanScan;
447
448 /**
449  * This structure describes the bitrate properties of an encoded bitstream. It
450  * roughly corresponds to a subset the VBV parameters for MPEG-2 or HRD
451  * parameters for H.264/HEVC.
452  */
453 typedef struct AVCPBProperties {
454     /**
455      * Maximum bitrate of the stream, in bits per second.
456      * Zero if unknown or unspecified.
457      */
458 #if FF_API_UNSANITIZED_BITRATES
459     int max_bitrate;
460 #else
461     int64_t max_bitrate;
462 #endif
463     /**
464      * Minimum bitrate of the stream, in bits per second.
465      * Zero if unknown or unspecified.
466      */
467 #if FF_API_UNSANITIZED_BITRATES
468     int min_bitrate;
469 #else
470     int64_t min_bitrate;
471 #endif
472     /**
473      * Average bitrate of the stream, in bits per second.
474      * Zero if unknown or unspecified.
475      */
476 #if FF_API_UNSANITIZED_BITRATES
477     int avg_bitrate;
478 #else
479     int64_t avg_bitrate;
480 #endif
481
482     /**
483      * The size of the buffer to which the ratecontrol is applied, in bits.
484      * Zero if unknown or unspecified.
485      */
486     int buffer_size;
487
488     /**
489      * The delay between the time the packet this structure is associated with
490      * is received and the time when it should be decoded, in periods of a 27MHz
491      * clock.
492      *
493      * UINT64_MAX when unknown or unspecified.
494      */
495     uint64_t vbv_delay;
496 } AVCPBProperties;
497
498 /**
499  * This structure supplies correlation between a packet timestamp and a wall clock
500  * production time. The definition follows the Producer Reference Time ('prft')
501  * as defined in ISO/IEC 14496-12
502  */
503 typedef struct AVProducerReferenceTime {
504     /**
505      * A UTC timestamp, in microseconds, since Unix epoch (e.g, av_gettime()).
506      */
507     int64_t wallclock;
508     int flags;
509 } AVProducerReferenceTime;
510
511 /**
512  * The decoder will keep a reference to the frame and may reuse it later.
513  */
514 #define AV_GET_BUFFER_FLAG_REF (1 << 0)
515
516 /**
517  * The encoder will keep a reference to the packet and may reuse it later.
518  */
519 #define AV_GET_ENCODE_BUFFER_FLAG_REF (1 << 0)
520
521 struct AVCodecInternal;
522
523 /**
524  * main external API structure.
525  * New fields can be added to the end with minor version bumps.
526  * Removal, reordering and changes to existing fields require a major
527  * version bump.
528  * You can use AVOptions (av_opt* / av_set/get*()) to access these fields from user
529  * applications.
530  * The name string for AVOptions options matches the associated command line
531  * parameter name and can be found in libavcodec/options_table.h
532  * The AVOption/command line parameter names differ in some cases from the C
533  * structure field names for historic reasons or brevity.
534  * sizeof(AVCodecContext) must not be used outside libav*.
535  */
536 typedef struct AVCodecContext {
537     /**
538      * information on struct for av_log
539      * - set by avcodec_alloc_context3
540      */
541     const AVClass *av_class;
542     int log_level_offset;
543
544     enum AVMediaType codec_type; /* see AVMEDIA_TYPE_xxx */
545     const struct AVCodec  *codec;
546     enum AVCodecID     codec_id; /* see AV_CODEC_ID_xxx */
547
548     /**
549      * fourcc (LSB first, so "ABCD" -> ('D'<<24) + ('C'<<16) + ('B'<<8) + 'A').
550      * This is used to work around some encoder bugs.
551      * A demuxer should set this to what is stored in the field used to identify the codec.
552      * If there are multiple such fields in a container then the demuxer should choose the one
553      * which maximizes the information about the used codec.
554      * If the codec tag field in a container is larger than 32 bits then the demuxer should
555      * remap the longer ID to 32 bits with a table or other structure. Alternatively a new
556      * extra_codec_tag + size could be added but for this a clear advantage must be demonstrated
557      * first.
558      * - encoding: Set by user, if not then the default based on codec_id will be used.
559      * - decoding: Set by user, will be converted to uppercase by libavcodec during init.
560      */
561     unsigned int codec_tag;
562
563     void *priv_data;
564
565     /**
566      * Private context used for internal data.
567      *
568      * Unlike priv_data, this is not codec-specific. It is used in general
569      * libavcodec functions.
570      */
571     struct AVCodecInternal *internal;
572
573     /**
574      * Private data of the user, can be used to carry app specific stuff.
575      * - encoding: Set by user.
576      * - decoding: Set by user.
577      */
578     void *opaque;
579
580     /**
581      * the average bitrate
582      * - encoding: Set by user; unused for constant quantizer encoding.
583      * - decoding: Set by user, may be overwritten by libavcodec
584      *             if this info is available in the stream
585      */
586     int64_t bit_rate;
587
588     /**
589      * number of bits the bitstream is allowed to diverge from the reference.
590      *           the reference can be CBR (for CBR pass1) or VBR (for pass2)
591      * - encoding: Set by user; unused for constant quantizer encoding.
592      * - decoding: unused
593      */
594     int bit_rate_tolerance;
595
596     /**
597      * Global quality for codecs which cannot change it per frame.
598      * This should be proportional to MPEG-1/2/4 qscale.
599      * - encoding: Set by user.
600      * - decoding: unused
601      */
602     int global_quality;
603
604     /**
605      * - encoding: Set by user.
606      * - decoding: unused
607      */
608     int compression_level;
609 #define FF_COMPRESSION_DEFAULT -1
610
611     /**
612      * AV_CODEC_FLAG_*.
613      * - encoding: Set by user.
614      * - decoding: Set by user.
615      */
616     int flags;
617
618     /**
619      * AV_CODEC_FLAG2_*
620      * - encoding: Set by user.
621      * - decoding: Set by user.
622      */
623     int flags2;
624
625     /**
626      * some codecs need / can use extradata like Huffman tables.
627      * MJPEG: Huffman tables
628      * rv10: additional flags
629      * MPEG-4: global headers (they can be in the bitstream or here)
630      * The allocated memory should be AV_INPUT_BUFFER_PADDING_SIZE bytes larger
631      * than extradata_size to avoid problems if it is read with the bitstream reader.
632      * The bytewise contents of extradata must not depend on the architecture or CPU endianness.
633      * Must be allocated with the av_malloc() family of functions.
634      * - encoding: Set/allocated/freed by libavcodec.
635      * - decoding: Set/allocated/freed by user.
636      */
637     uint8_t *extradata;
638     int extradata_size;
639
640     /**
641      * This is the fundamental unit of time (in seconds) in terms
642      * of which frame timestamps are represented. For fixed-fps content,
643      * timebase should be 1/framerate and timestamp increments should be
644      * identically 1.
645      * This often, but not always is the inverse of the frame rate or field rate
646      * for video. 1/time_base is not the average frame rate if the frame rate is not
647      * constant.
648      *
649      * Like containers, elementary streams also can store timestamps, 1/time_base
650      * is the unit in which these timestamps are specified.
651      * As example of such codec time base see ISO/IEC 14496-2:2001(E)
652      * vop_time_increment_resolution and fixed_vop_rate
653      * (fixed_vop_rate == 0 implies that it is different from the framerate)
654      *
655      * - encoding: MUST be set by user.
656      * - decoding: the use of this field for decoding is deprecated.
657      *             Use framerate instead.
658      */
659     AVRational time_base;
660
661     /**
662      * For some codecs, the time base is closer to the field rate than the frame rate.
663      * Most notably, H.264 and MPEG-2 specify time_base as half of frame duration
664      * if no telecine is used ...
665      *
666      * Set to time_base ticks per frame. Default 1, e.g., H.264/MPEG-2 set it to 2.
667      */
668     int ticks_per_frame;
669
670     /**
671      * Codec delay.
672      *
673      * Encoding: Number of frames delay there will be from the encoder input to
674      *           the decoder output. (we assume the decoder matches the spec)
675      * Decoding: Number of frames delay in addition to what a standard decoder
676      *           as specified in the spec would produce.
677      *
678      * Video:
679      *   Number of frames the decoded output will be delayed relative to the
680      *   encoded input.
681      *
682      * Audio:
683      *   For encoding, this field is unused (see initial_padding).
684      *
685      *   For decoding, this is the number of samples the decoder needs to
686      *   output before the decoder's output is valid. When seeking, you should
687      *   start decoding this many samples prior to your desired seek point.
688      *
689      * - encoding: Set by libavcodec.
690      * - decoding: Set by libavcodec.
691      */
692     int delay;
693
694
695     /* video only */
696     /**
697      * picture width / height.
698      *
699      * @note Those fields may not match the values of the last
700      * AVFrame output by avcodec_decode_video2 due frame
701      * reordering.
702      *
703      * - encoding: MUST be set by user.
704      * - decoding: May be set by the user before opening the decoder if known e.g.
705      *             from the container. Some decoders will require the dimensions
706      *             to be set by the caller. During decoding, the decoder may
707      *             overwrite those values as required while parsing the data.
708      */
709     int width, height;
710
711     /**
712      * Bitstream width / height, may be different from width/height e.g. when
713      * the decoded frame is cropped before being output or lowres is enabled.
714      *
715      * @note Those field may not match the value of the last
716      * AVFrame output by avcodec_receive_frame() due frame
717      * reordering.
718      *
719      * - encoding: unused
720      * - decoding: May be set by the user before opening the decoder if known
721      *             e.g. from the container. During decoding, the decoder may
722      *             overwrite those values as required while parsing the data.
723      */
724     int coded_width, coded_height;
725
726     /**
727      * the number of pictures in a group of pictures, or 0 for intra_only
728      * - encoding: Set by user.
729      * - decoding: unused
730      */
731     int gop_size;
732
733     /**
734      * Pixel format, see AV_PIX_FMT_xxx.
735      * May be set by the demuxer if known from headers.
736      * May be overridden by the decoder if it knows better.
737      *
738      * @note This field may not match the value of the last
739      * AVFrame output by avcodec_receive_frame() due frame
740      * reordering.
741      *
742      * - encoding: Set by user.
743      * - decoding: Set by user if known, overridden by libavcodec while
744      *             parsing the data.
745      */
746     enum AVPixelFormat pix_fmt;
747
748     /**
749      * If non NULL, 'draw_horiz_band' is called by the libavcodec
750      * decoder to draw a horizontal band. It improves cache usage. Not
751      * all codecs can do that. You must check the codec capabilities
752      * beforehand.
753      * When multithreading is used, it may be called from multiple threads
754      * at the same time; threads might draw different parts of the same AVFrame,
755      * or multiple AVFrames, and there is no guarantee that slices will be drawn
756      * in order.
757      * The function is also used by hardware acceleration APIs.
758      * It is called at least once during frame decoding to pass
759      * the data needed for hardware render.
760      * In that mode instead of pixel data, AVFrame points to
761      * a structure specific to the acceleration API. The application
762      * reads the structure and can change some fields to indicate progress
763      * or mark state.
764      * - encoding: unused
765      * - decoding: Set by user.
766      * @param height the height of the slice
767      * @param y the y position of the slice
768      * @param type 1->top field, 2->bottom field, 3->frame
769      * @param offset offset into the AVFrame.data from which the slice should be read
770      */
771     void (*draw_horiz_band)(struct AVCodecContext *s,
772                             const AVFrame *src, int offset[AV_NUM_DATA_POINTERS],
773                             int y, int type, int height);
774
775     /**
776      * callback to negotiate the pixelFormat
777      * @param fmt is the list of formats which are supported by the codec,
778      * it is terminated by -1 as 0 is a valid format, the formats are ordered by quality.
779      * The first is always the native one.
780      * @note The callback may be called again immediately if initialization for
781      * the selected (hardware-accelerated) pixel format failed.
782      * @warning Behavior is undefined if the callback returns a value not
783      * in the fmt list of formats.
784      * @return the chosen format
785      * - encoding: unused
786      * - decoding: Set by user, if not set the native format will be chosen.
787      */
788     enum AVPixelFormat (*get_format)(struct AVCodecContext *s, const enum AVPixelFormat * fmt);
789
790     /**
791      * maximum number of B-frames between non-B-frames
792      * Note: The output will be delayed by max_b_frames+1 relative to the input.
793      * - encoding: Set by user.
794      * - decoding: unused
795      */
796     int max_b_frames;
797
798     /**
799      * qscale factor between IP and B-frames
800      * If > 0 then the last P-frame quantizer will be used (q= lastp_q*factor+offset).
801      * If < 0 then normal ratecontrol will be done (q= -normal_q*factor+offset).
802      * - encoding: Set by user.
803      * - decoding: unused
804      */
805     float b_quant_factor;
806
807     /**
808      * qscale offset between IP and B-frames
809      * - encoding: Set by user.
810      * - decoding: unused
811      */
812     float b_quant_offset;
813
814     /**
815      * Size of the frame reordering buffer in the decoder.
816      * For MPEG-2 it is 1 IPB or 0 low delay IP.
817      * - encoding: Set by libavcodec.
818      * - decoding: Set by libavcodec.
819      */
820     int has_b_frames;
821
822     /**
823      * qscale factor between P- and I-frames
824      * If > 0 then the last P-frame quantizer will be used (q = lastp_q * factor + offset).
825      * If < 0 then normal ratecontrol will be done (q= -normal_q*factor+offset).
826      * - encoding: Set by user.
827      * - decoding: unused
828      */
829     float i_quant_factor;
830
831     /**
832      * qscale offset between P and I-frames
833      * - encoding: Set by user.
834      * - decoding: unused
835      */
836     float i_quant_offset;
837
838     /**
839      * luminance masking (0-> disabled)
840      * - encoding: Set by user.
841      * - decoding: unused
842      */
843     float lumi_masking;
844
845     /**
846      * temporary complexity masking (0-> disabled)
847      * - encoding: Set by user.
848      * - decoding: unused
849      */
850     float temporal_cplx_masking;
851
852     /**
853      * spatial complexity masking (0-> disabled)
854      * - encoding: Set by user.
855      * - decoding: unused
856      */
857     float spatial_cplx_masking;
858
859     /**
860      * p block masking (0-> disabled)
861      * - encoding: Set by user.
862      * - decoding: unused
863      */
864     float p_masking;
865
866     /**
867      * darkness masking (0-> disabled)
868      * - encoding: Set by user.
869      * - decoding: unused
870      */
871     float dark_masking;
872
873     /**
874      * slice count
875      * - encoding: Set by libavcodec.
876      * - decoding: Set by user (or 0).
877      */
878     int slice_count;
879
880     /**
881      * slice offsets in the frame in bytes
882      * - encoding: Set/allocated by libavcodec.
883      * - decoding: Set/allocated by user (or NULL).
884      */
885     int *slice_offset;
886
887     /**
888      * sample aspect ratio (0 if unknown)
889      * That is the width of a pixel divided by the height of the pixel.
890      * Numerator and denominator must be relatively prime and smaller than 256 for some video standards.
891      * - encoding: Set by user.
892      * - decoding: Set by libavcodec.
893      */
894     AVRational sample_aspect_ratio;
895
896     /**
897      * motion estimation comparison function
898      * - encoding: Set by user.
899      * - decoding: unused
900      */
901     int me_cmp;
902     /**
903      * subpixel motion estimation comparison function
904      * - encoding: Set by user.
905      * - decoding: unused
906      */
907     int me_sub_cmp;
908     /**
909      * macroblock comparison function (not supported yet)
910      * - encoding: Set by user.
911      * - decoding: unused
912      */
913     int mb_cmp;
914     /**
915      * interlaced DCT comparison function
916      * - encoding: Set by user.
917      * - decoding: unused
918      */
919     int ildct_cmp;
920 #define FF_CMP_SAD          0
921 #define FF_CMP_SSE          1
922 #define FF_CMP_SATD         2
923 #define FF_CMP_DCT          3
924 #define FF_CMP_PSNR         4
925 #define FF_CMP_BIT          5
926 #define FF_CMP_RD           6
927 #define FF_CMP_ZERO         7
928 #define FF_CMP_VSAD         8
929 #define FF_CMP_VSSE         9
930 #define FF_CMP_NSSE         10
931 #define FF_CMP_W53          11
932 #define FF_CMP_W97          12
933 #define FF_CMP_DCTMAX       13
934 #define FF_CMP_DCT264       14
935 #define FF_CMP_MEDIAN_SAD   15
936 #define FF_CMP_CHROMA       256
937
938     /**
939      * ME diamond size & shape
940      * - encoding: Set by user.
941      * - decoding: unused
942      */
943     int dia_size;
944
945     /**
946      * amount of previous MV predictors (2a+1 x 2a+1 square)
947      * - encoding: Set by user.
948      * - decoding: unused
949      */
950     int last_predictor_count;
951
952     /**
953      * motion estimation prepass comparison function
954      * - encoding: Set by user.
955      * - decoding: unused
956      */
957     int me_pre_cmp;
958
959     /**
960      * ME prepass diamond size & shape
961      * - encoding: Set by user.
962      * - decoding: unused
963      */
964     int pre_dia_size;
965
966     /**
967      * subpel ME quality
968      * - encoding: Set by user.
969      * - decoding: unused
970      */
971     int me_subpel_quality;
972
973     /**
974      * maximum motion estimation search range in subpel units
975      * If 0 then no limit.
976      *
977      * - encoding: Set by user.
978      * - decoding: unused
979      */
980     int me_range;
981
982     /**
983      * slice flags
984      * - encoding: unused
985      * - decoding: Set by user.
986      */
987     int slice_flags;
988 #define SLICE_FLAG_CODED_ORDER    0x0001 ///< draw_horiz_band() is called in coded order instead of display
989 #define SLICE_FLAG_ALLOW_FIELD    0x0002 ///< allow draw_horiz_band() with field slices (MPEG-2 field pics)
990 #define SLICE_FLAG_ALLOW_PLANE    0x0004 ///< allow draw_horiz_band() with 1 component at a time (SVQ1)
991
992     /**
993      * macroblock decision mode
994      * - encoding: Set by user.
995      * - decoding: unused
996      */
997     int mb_decision;
998 #define FF_MB_DECISION_SIMPLE 0        ///< uses mb_cmp
999 #define FF_MB_DECISION_BITS   1        ///< chooses the one which needs the fewest bits
1000 #define FF_MB_DECISION_RD     2        ///< rate distortion
1001
1002     /**
1003      * custom intra quantization matrix
1004      * Must be allocated with the av_malloc() family of functions, and will be freed in
1005      * avcodec_free_context().
1006      * - encoding: Set/allocated by user, freed by libavcodec. Can be NULL.
1007      * - decoding: Set/allocated/freed by libavcodec.
1008      */
1009     uint16_t *intra_matrix;
1010
1011     /**
1012      * custom inter quantization matrix
1013      * Must be allocated with the av_malloc() family of functions, and will be freed in
1014      * avcodec_free_context().
1015      * - encoding: Set/allocated by user, freed by libavcodec. Can be NULL.
1016      * - decoding: Set/allocated/freed by libavcodec.
1017      */
1018     uint16_t *inter_matrix;
1019
1020     /**
1021      * precision of the intra DC coefficient - 8
1022      * - encoding: Set by user.
1023      * - decoding: Set by libavcodec
1024      */
1025     int intra_dc_precision;
1026
1027     /**
1028      * Number of macroblock rows at the top which are skipped.
1029      * - encoding: unused
1030      * - decoding: Set by user.
1031      */
1032     int skip_top;
1033
1034     /**
1035      * Number of macroblock rows at the bottom which are skipped.
1036      * - encoding: unused
1037      * - decoding: Set by user.
1038      */
1039     int skip_bottom;
1040
1041     /**
1042      * minimum MB Lagrange multiplier
1043      * - encoding: Set by user.
1044      * - decoding: unused
1045      */
1046     int mb_lmin;
1047
1048     /**
1049      * maximum MB Lagrange multiplier
1050      * - encoding: Set by user.
1051      * - decoding: unused
1052      */
1053     int mb_lmax;
1054
1055     /**
1056      * - encoding: Set by user.
1057      * - decoding: unused
1058      */
1059     int bidir_refine;
1060
1061     /**
1062      * minimum GOP size
1063      * - encoding: Set by user.
1064      * - decoding: unused
1065      */
1066     int keyint_min;
1067
1068     /**
1069      * number of reference frames
1070      * - encoding: Set by user.
1071      * - decoding: Set by lavc.
1072      */
1073     int refs;
1074
1075     /**
1076      * Note: Value depends upon the compare function used for fullpel ME.
1077      * - encoding: Set by user.
1078      * - decoding: unused
1079      */
1080     int mv0_threshold;
1081
1082     /**
1083      * Chromaticity coordinates of the source primaries.
1084      * - encoding: Set by user
1085      * - decoding: Set by libavcodec
1086      */
1087     enum AVColorPrimaries color_primaries;
1088
1089     /**
1090      * Color Transfer Characteristic.
1091      * - encoding: Set by user
1092      * - decoding: Set by libavcodec
1093      */
1094     enum AVColorTransferCharacteristic color_trc;
1095
1096     /**
1097      * YUV colorspace type.
1098      * - encoding: Set by user
1099      * - decoding: Set by libavcodec
1100      */
1101     enum AVColorSpace colorspace;
1102
1103     /**
1104      * MPEG vs JPEG YUV range.
1105      * - encoding: Set by user
1106      * - decoding: Set by libavcodec
1107      */
1108     enum AVColorRange color_range;
1109
1110     /**
1111      * This defines the location of chroma samples.
1112      * - encoding: Set by user
1113      * - decoding: Set by libavcodec
1114      */
1115     enum AVChromaLocation chroma_sample_location;
1116
1117     /**
1118      * Number of slices.
1119      * Indicates number of picture subdivisions. Used for parallelized
1120      * decoding.
1121      * - encoding: Set by user
1122      * - decoding: unused
1123      */
1124     int slices;
1125
1126     /** Field order
1127      * - encoding: set by libavcodec
1128      * - decoding: Set by user.
1129      */
1130     enum AVFieldOrder field_order;
1131
1132     /* audio only */
1133     int sample_rate; ///< samples per second
1134     int channels;    ///< number of audio channels
1135
1136     /**
1137      * audio sample format
1138      * - encoding: Set by user.
1139      * - decoding: Set by libavcodec.
1140      */
1141     enum AVSampleFormat sample_fmt;  ///< sample format
1142
1143     /* The following data should not be initialized. */
1144     /**
1145      * Number of samples per channel in an audio frame.
1146      *
1147      * - encoding: set by libavcodec in avcodec_open2(). Each submitted frame
1148      *   except the last must contain exactly frame_size samples per channel.
1149      *   May be 0 when the codec has AV_CODEC_CAP_VARIABLE_FRAME_SIZE set, then the
1150      *   frame size is not restricted.
1151      * - decoding: may be set by some decoders to indicate constant frame size
1152      */
1153     int frame_size;
1154
1155     /**
1156      * Frame counter, set by libavcodec.
1157      *
1158      * - decoding: total number of frames returned from the decoder so far.
1159      * - encoding: total number of frames passed to the encoder so far.
1160      *
1161      *   @note the counter is not incremented if encoding/decoding resulted in
1162      *   an error.
1163      */
1164     int frame_number;
1165
1166     /**
1167      * number of bytes per packet if constant and known or 0
1168      * Used by some WAV based audio codecs.
1169      */
1170     int block_align;
1171
1172     /**
1173      * Audio cutoff bandwidth (0 means "automatic")
1174      * - encoding: Set by user.
1175      * - decoding: unused
1176      */
1177     int cutoff;
1178
1179     /**
1180      * Audio channel layout.
1181      * - encoding: set by user.
1182      * - decoding: set by user, may be overwritten by libavcodec.
1183      */
1184     uint64_t channel_layout;
1185
1186     /**
1187      * Request decoder to use this channel layout if it can (0 for default)
1188      * - encoding: unused
1189      * - decoding: Set by user.
1190      */
1191     uint64_t request_channel_layout;
1192
1193     /**
1194      * Type of service that the audio stream conveys.
1195      * - encoding: Set by user.
1196      * - decoding: Set by libavcodec.
1197      */
1198     enum AVAudioServiceType audio_service_type;
1199
1200     /**
1201      * desired sample format
1202      * - encoding: Not used.
1203      * - decoding: Set by user.
1204      * Decoder will decode to this format if it can.
1205      */
1206     enum AVSampleFormat request_sample_fmt;
1207
1208     /**
1209      * This callback is called at the beginning of each frame to get data
1210      * buffer(s) for it. There may be one contiguous buffer for all the data or
1211      * there may be a buffer per each data plane or anything in between. What
1212      * this means is, you may set however many entries in buf[] you feel necessary.
1213      * Each buffer must be reference-counted using the AVBuffer API (see description
1214      * of buf[] below).
1215      *
1216      * The following fields will be set in the frame before this callback is
1217      * called:
1218      * - format
1219      * - width, height (video only)
1220      * - sample_rate, channel_layout, nb_samples (audio only)
1221      * Their values may differ from the corresponding values in
1222      * AVCodecContext. This callback must use the frame values, not the codec
1223      * context values, to calculate the required buffer size.
1224      *
1225      * This callback must fill the following fields in the frame:
1226      * - data[]
1227      * - linesize[]
1228      * - extended_data:
1229      *   * if the data is planar audio with more than 8 channels, then this
1230      *     callback must allocate and fill extended_data to contain all pointers
1231      *     to all data planes. data[] must hold as many pointers as it can.
1232      *     extended_data must be allocated with av_malloc() and will be freed in
1233      *     av_frame_unref().
1234      *   * otherwise extended_data must point to data
1235      * - buf[] must contain one or more pointers to AVBufferRef structures. Each of
1236      *   the frame's data and extended_data pointers must be contained in these. That
1237      *   is, one AVBufferRef for each allocated chunk of memory, not necessarily one
1238      *   AVBufferRef per data[] entry. See: av_buffer_create(), av_buffer_alloc(),
1239      *   and av_buffer_ref().
1240      * - extended_buf and nb_extended_buf must be allocated with av_malloc() by
1241      *   this callback and filled with the extra buffers if there are more
1242      *   buffers than buf[] can hold. extended_buf will be freed in
1243      *   av_frame_unref().
1244      *
1245      * If AV_CODEC_CAP_DR1 is not set then get_buffer2() must call
1246      * avcodec_default_get_buffer2() instead of providing buffers allocated by
1247      * some other means.
1248      *
1249      * Each data plane must be aligned to the maximum required by the target
1250      * CPU.
1251      *
1252      * @see avcodec_default_get_buffer2()
1253      *
1254      * Video:
1255      *
1256      * If AV_GET_BUFFER_FLAG_REF is set in flags then the frame may be reused
1257      * (read and/or written to if it is writable) later by libavcodec.
1258      *
1259      * avcodec_align_dimensions2() should be used to find the required width and
1260      * height, as they normally need to be rounded up to the next multiple of 16.
1261      *
1262      * Some decoders do not support linesizes changing between frames.
1263      *
1264      * If frame multithreading is used, this callback may be called from a
1265      * different thread, but not from more than one at once. Does not need to be
1266      * reentrant.
1267      *
1268      * @see avcodec_align_dimensions2()
1269      *
1270      * Audio:
1271      *
1272      * Decoders request a buffer of a particular size by setting
1273      * AVFrame.nb_samples prior to calling get_buffer2(). The decoder may,
1274      * however, utilize only part of the buffer by setting AVFrame.nb_samples
1275      * to a smaller value in the output frame.
1276      *
1277      * As a convenience, av_samples_get_buffer_size() and
1278      * av_samples_fill_arrays() in libavutil may be used by custom get_buffer2()
1279      * functions to find the required data size and to fill data pointers and
1280      * linesize. In AVFrame.linesize, only linesize[0] may be set for audio
1281      * since all planes must be the same size.
1282      *
1283      * @see av_samples_get_buffer_size(), av_samples_fill_arrays()
1284      *
1285      * - encoding: unused
1286      * - decoding: Set by libavcodec, user can override.
1287      */
1288     int (*get_buffer2)(struct AVCodecContext *s, AVFrame *frame, int flags);
1289
1290 #if FF_API_OLD_ENCDEC
1291     /**
1292      * If non-zero, the decoded audio and video frames returned from
1293      * avcodec_decode_video2() and avcodec_decode_audio4() are reference-counted
1294      * and are valid indefinitely. The caller must free them with
1295      * av_frame_unref() when they are not needed anymore.
1296      * Otherwise, the decoded frames must not be freed by the caller and are
1297      * only valid until the next decode call.
1298      *
1299      * This is always automatically enabled if avcodec_receive_frame() is used.
1300      *
1301      * - encoding: unused
1302      * - decoding: set by the caller before avcodec_open2().
1303      */
1304     attribute_deprecated
1305     int refcounted_frames;
1306 #endif
1307
1308     /* - encoding parameters */
1309     float qcompress;  ///< amount of qscale change between easy & hard scenes (0.0-1.0)
1310     float qblur;      ///< amount of qscale smoothing over time (0.0-1.0)
1311
1312     /**
1313      * minimum quantizer
1314      * - encoding: Set by user.
1315      * - decoding: unused
1316      */
1317     int qmin;
1318
1319     /**
1320      * maximum quantizer
1321      * - encoding: Set by user.
1322      * - decoding: unused
1323      */
1324     int qmax;
1325
1326     /**
1327      * maximum quantizer difference between frames
1328      * - encoding: Set by user.
1329      * - decoding: unused
1330      */
1331     int max_qdiff;
1332
1333     /**
1334      * decoder bitstream buffer size
1335      * - encoding: Set by user.
1336      * - decoding: unused
1337      */
1338     int rc_buffer_size;
1339
1340     /**
1341      * ratecontrol override, see RcOverride
1342      * - encoding: Allocated/set/freed by user.
1343      * - decoding: unused
1344      */
1345     int rc_override_count;
1346     RcOverride *rc_override;
1347
1348     /**
1349      * maximum bitrate
1350      * - encoding: Set by user.
1351      * - decoding: Set by user, may be overwritten by libavcodec.
1352      */
1353     int64_t rc_max_rate;
1354
1355     /**
1356      * minimum bitrate
1357      * - encoding: Set by user.
1358      * - decoding: unused
1359      */
1360     int64_t rc_min_rate;
1361
1362     /**
1363      * Ratecontrol attempt to use, at maximum, <value> of what can be used without an underflow.
1364      * - encoding: Set by user.
1365      * - decoding: unused.
1366      */
1367     float rc_max_available_vbv_use;
1368
1369     /**
1370      * Ratecontrol attempt to use, at least, <value> times the amount needed to prevent a vbv overflow.
1371      * - encoding: Set by user.
1372      * - decoding: unused.
1373      */
1374     float rc_min_vbv_overflow_use;
1375
1376     /**
1377      * Number of bits which should be loaded into the rc buffer before decoding starts.
1378      * - encoding: Set by user.
1379      * - decoding: unused
1380      */
1381     int rc_initial_buffer_occupancy;
1382
1383     /**
1384      * trellis RD quantization
1385      * - encoding: Set by user.
1386      * - decoding: unused
1387      */
1388     int trellis;
1389
1390     /**
1391      * pass1 encoding statistics output buffer
1392      * - encoding: Set by libavcodec.
1393      * - decoding: unused
1394      */
1395     char *stats_out;
1396
1397     /**
1398      * pass2 encoding statistics input buffer
1399      * Concatenated stuff from stats_out of pass1 should be placed here.
1400      * - encoding: Allocated/set/freed by user.
1401      * - decoding: unused
1402      */
1403     char *stats_in;
1404
1405     /**
1406      * Work around bugs in encoders which sometimes cannot be detected automatically.
1407      * - encoding: Set by user
1408      * - decoding: Set by user
1409      */
1410     int workaround_bugs;
1411 #define FF_BUG_AUTODETECT       1  ///< autodetection
1412 #define FF_BUG_XVID_ILACE       4
1413 #define FF_BUG_UMP4             8
1414 #define FF_BUG_NO_PADDING       16
1415 #define FF_BUG_AMV              32
1416 #define FF_BUG_QPEL_CHROMA      64
1417 #define FF_BUG_STD_QPEL         128
1418 #define FF_BUG_QPEL_CHROMA2     256
1419 #define FF_BUG_DIRECT_BLOCKSIZE 512
1420 #define FF_BUG_EDGE             1024
1421 #define FF_BUG_HPEL_CHROMA      2048
1422 #define FF_BUG_DC_CLIP          4096
1423 #define FF_BUG_MS               8192 ///< Work around various bugs in Microsoft's broken decoders.
1424 #define FF_BUG_TRUNCATED       16384
1425 #define FF_BUG_IEDGE           32768
1426
1427     /**
1428      * strictly follow the standard (MPEG-4, ...).
1429      * - encoding: Set by user.
1430      * - decoding: Set by user.
1431      * Setting this to STRICT or higher means the encoder and decoder will
1432      * generally do stupid things, whereas setting it to unofficial or lower
1433      * will mean the encoder might produce output that is not supported by all
1434      * spec-compliant decoders. Decoders don't differentiate between normal,
1435      * unofficial and experimental (that is, they always try to decode things
1436      * when they can) unless they are explicitly asked to behave stupidly
1437      * (=strictly conform to the specs)
1438      */
1439     int strict_std_compliance;
1440 #define FF_COMPLIANCE_VERY_STRICT   2 ///< Strictly conform to an older more strict version of the spec or reference software.
1441 #define FF_COMPLIANCE_STRICT        1 ///< Strictly conform to all the things in the spec no matter what consequences.
1442 #define FF_COMPLIANCE_NORMAL        0
1443 #define FF_COMPLIANCE_UNOFFICIAL   -1 ///< Allow unofficial extensions
1444 #define FF_COMPLIANCE_EXPERIMENTAL -2 ///< Allow nonstandardized experimental things.
1445
1446     /**
1447      * error concealment flags
1448      * - encoding: unused
1449      * - decoding: Set by user.
1450      */
1451     int error_concealment;
1452 #define FF_EC_GUESS_MVS   1
1453 #define FF_EC_DEBLOCK     2
1454 #define FF_EC_FAVOR_INTER 256
1455
1456     /**
1457      * debug
1458      * - encoding: Set by user.
1459      * - decoding: Set by user.
1460      */
1461     int debug;
1462 #define FF_DEBUG_PICT_INFO   1
1463 #define FF_DEBUG_RC          2
1464 #define FF_DEBUG_BITSTREAM   4
1465 #define FF_DEBUG_MB_TYPE     8
1466 #define FF_DEBUG_QP          16
1467 #define FF_DEBUG_DCT_COEFF   0x00000040
1468 #define FF_DEBUG_SKIP        0x00000080
1469 #define FF_DEBUG_STARTCODE   0x00000100
1470 #define FF_DEBUG_ER          0x00000400
1471 #define FF_DEBUG_MMCO        0x00000800
1472 #define FF_DEBUG_BUGS        0x00001000
1473 #define FF_DEBUG_BUFFERS     0x00008000
1474 #define FF_DEBUG_THREADS     0x00010000
1475 #define FF_DEBUG_GREEN_MD    0x00800000
1476 #define FF_DEBUG_NOMC        0x01000000
1477
1478     /**
1479      * Error recognition; may misdetect some more or less valid parts as errors.
1480      * - encoding: Set by user.
1481      * - decoding: Set by user.
1482      */
1483     int err_recognition;
1484
1485 /**
1486  * Verify checksums embedded in the bitstream (could be of either encoded or
1487  * decoded data, depending on the codec) and print an error message on mismatch.
1488  * If AV_EF_EXPLODE is also set, a mismatching checksum will result in the
1489  * decoder returning an error.
1490  */
1491 #define AV_EF_CRCCHECK  (1<<0)
1492 #define AV_EF_BITSTREAM (1<<1)          ///< detect bitstream specification deviations
1493 #define AV_EF_BUFFER    (1<<2)          ///< detect improper bitstream length
1494 #define AV_EF_EXPLODE   (1<<3)          ///< abort decoding on minor error detection
1495
1496 #define AV_EF_IGNORE_ERR (1<<15)        ///< ignore errors and continue
1497 #define AV_EF_CAREFUL    (1<<16)        ///< consider things that violate the spec, are fast to calculate and have not been seen in the wild as errors
1498 #define AV_EF_COMPLIANT  (1<<17)        ///< consider all spec non compliances as errors
1499 #define AV_EF_AGGRESSIVE (1<<18)        ///< consider things that a sane encoder should not do as an error
1500
1501
1502     /**
1503      * opaque 64-bit number (generally a PTS) that will be reordered and
1504      * output in AVFrame.reordered_opaque
1505      * - encoding: Set by libavcodec to the reordered_opaque of the input
1506      *             frame corresponding to the last returned packet. Only
1507      *             supported by encoders with the
1508      *             AV_CODEC_CAP_ENCODER_REORDERED_OPAQUE capability.
1509      * - decoding: Set by user.
1510      */
1511     int64_t reordered_opaque;
1512
1513     /**
1514      * Hardware accelerator in use
1515      * - encoding: unused.
1516      * - decoding: Set by libavcodec
1517      */
1518     const struct AVHWAccel *hwaccel;
1519
1520     /**
1521      * Hardware accelerator context.
1522      * For some hardware accelerators, a global context needs to be
1523      * provided by the user. In that case, this holds display-dependent
1524      * data FFmpeg cannot instantiate itself. Please refer to the
1525      * FFmpeg HW accelerator documentation to know how to fill this
1526      * is. e.g. for VA API, this is a struct vaapi_context.
1527      * - encoding: unused
1528      * - decoding: Set by user
1529      */
1530     void *hwaccel_context;
1531
1532     /**
1533      * error
1534      * - encoding: Set by libavcodec if flags & AV_CODEC_FLAG_PSNR.
1535      * - decoding: unused
1536      */
1537     uint64_t error[AV_NUM_DATA_POINTERS];
1538
1539     /**
1540      * DCT algorithm, see FF_DCT_* below
1541      * - encoding: Set by user.
1542      * - decoding: unused
1543      */
1544     int dct_algo;
1545 #define FF_DCT_AUTO    0
1546 #define FF_DCT_FASTINT 1
1547 #define FF_DCT_INT     2
1548 #define FF_DCT_MMX     3
1549 #define FF_DCT_ALTIVEC 5
1550 #define FF_DCT_FAAN    6
1551
1552     /**
1553      * IDCT algorithm, see FF_IDCT_* below.
1554      * - encoding: Set by user.
1555      * - decoding: Set by user.
1556      */
1557     int idct_algo;
1558 #define FF_IDCT_AUTO          0
1559 #define FF_IDCT_INT           1
1560 #define FF_IDCT_SIMPLE        2
1561 #define FF_IDCT_SIMPLEMMX     3
1562 #define FF_IDCT_ARM           7
1563 #define FF_IDCT_ALTIVEC       8
1564 #define FF_IDCT_SIMPLEARM     10
1565 #define FF_IDCT_XVID          14
1566 #define FF_IDCT_SIMPLEARMV5TE 16
1567 #define FF_IDCT_SIMPLEARMV6   17
1568 #define FF_IDCT_FAAN          20
1569 #define FF_IDCT_SIMPLENEON    22
1570 #define FF_IDCT_NONE          24 /* Used by XvMC to extract IDCT coefficients with FF_IDCT_PERM_NONE */
1571 #define FF_IDCT_SIMPLEAUTO    128
1572
1573     /**
1574      * bits per sample/pixel from the demuxer (needed for huffyuv).
1575      * - encoding: Set by libavcodec.
1576      * - decoding: Set by user.
1577      */
1578      int bits_per_coded_sample;
1579
1580     /**
1581      * Bits per sample/pixel of internal libavcodec pixel/sample format.
1582      * - encoding: set by user.
1583      * - decoding: set by libavcodec.
1584      */
1585     int bits_per_raw_sample;
1586
1587     /**
1588      * low resolution decoding, 1-> 1/2 size, 2->1/4 size
1589      * - encoding: unused
1590      * - decoding: Set by user.
1591      */
1592      int lowres;
1593
1594 #if FF_API_CODED_FRAME
1595     /**
1596      * the picture in the bitstream
1597      * - encoding: Set by libavcodec.
1598      * - decoding: unused
1599      *
1600      * @deprecated use the quality factor packet side data instead
1601      */
1602     attribute_deprecated AVFrame *coded_frame;
1603 #endif
1604
1605     /**
1606      * thread count
1607      * is used to decide how many independent tasks should be passed to execute()
1608      * - encoding: Set by user.
1609      * - decoding: Set by user.
1610      */
1611     int thread_count;
1612
1613     /**
1614      * Which multithreading methods to use.
1615      * Use of FF_THREAD_FRAME will increase decoding delay by one frame per thread,
1616      * so clients which cannot provide future frames should not use it.
1617      *
1618      * - encoding: Set by user, otherwise the default is used.
1619      * - decoding: Set by user, otherwise the default is used.
1620      */
1621     int thread_type;
1622 #define FF_THREAD_FRAME   1 ///< Decode more than one frame at once
1623 #define FF_THREAD_SLICE   2 ///< Decode more than one part of a single frame at once
1624
1625     /**
1626      * Which multithreading methods are in use by the codec.
1627      * - encoding: Set by libavcodec.
1628      * - decoding: Set by libavcodec.
1629      */
1630     int active_thread_type;
1631
1632 #if FF_API_THREAD_SAFE_CALLBACKS
1633     /**
1634      * Set by the client if its custom get_buffer() callback can be called
1635      * synchronously from another thread, which allows faster multithreaded decoding.
1636      * draw_horiz_band() will be called from other threads regardless of this setting.
1637      * Ignored if the default get_buffer() is used.
1638      * - encoding: Set by user.
1639      * - decoding: Set by user.
1640      *
1641      * @deprecated the custom get_buffer2() callback should always be
1642      *   thread-safe. Thread-unsafe get_buffer2() implementations will be
1643      *   invalid starting with LIBAVCODEC_VERSION_MAJOR=60; in other words,
1644      *   libavcodec will behave as if this field was always set to 1.
1645      *   Callers that want to be forward compatible with future libavcodec
1646      *   versions should wrap access to this field in
1647      *     #if LIBAVCODEC_VERSION_MAJOR < 60
1648      */
1649     attribute_deprecated
1650     int thread_safe_callbacks;
1651 #endif
1652
1653     /**
1654      * The codec may call this to execute several independent things.
1655      * It will return only after finishing all tasks.
1656      * The user may replace this with some multithreaded implementation,
1657      * the default implementation will execute the parts serially.
1658      * @param count the number of things to execute
1659      * - encoding: Set by libavcodec, user can override.
1660      * - decoding: Set by libavcodec, user can override.
1661      */
1662     int (*execute)(struct AVCodecContext *c, int (*func)(struct AVCodecContext *c2, void *arg), void *arg2, int *ret, int count, int size);
1663
1664     /**
1665      * The codec may call this to execute several independent things.
1666      * It will return only after finishing all tasks.
1667      * The user may replace this with some multithreaded implementation,
1668      * the default implementation will execute the parts serially.
1669      * Also see avcodec_thread_init and e.g. the --enable-pthread configure option.
1670      * @param c context passed also to func
1671      * @param count the number of things to execute
1672      * @param arg2 argument passed unchanged to func
1673      * @param ret return values of executed functions, must have space for "count" values. May be NULL.
1674      * @param func function that will be called count times, with jobnr from 0 to count-1.
1675      *             threadnr will be in the range 0 to c->thread_count-1 < MAX_THREADS and so that no
1676      *             two instances of func executing at the same time will have the same threadnr.
1677      * @return always 0 currently, but code should handle a future improvement where when any call to func
1678      *         returns < 0 no further calls to func may be done and < 0 is returned.
1679      * - encoding: Set by libavcodec, user can override.
1680      * - decoding: Set by libavcodec, user can override.
1681      */
1682     int (*execute2)(struct AVCodecContext *c, int (*func)(struct AVCodecContext *c2, void *arg, int jobnr, int threadnr), void *arg2, int *ret, int count);
1683
1684     /**
1685      * noise vs. sse weight for the nsse comparison function
1686      * - encoding: Set by user.
1687      * - decoding: unused
1688      */
1689      int nsse_weight;
1690
1691     /**
1692      * profile
1693      * - encoding: Set by user.
1694      * - decoding: Set by libavcodec.
1695      */
1696      int profile;
1697 #define FF_PROFILE_UNKNOWN -99
1698 #define FF_PROFILE_RESERVED -100
1699
1700 #define FF_PROFILE_AAC_MAIN 0
1701 #define FF_PROFILE_AAC_LOW  1
1702 #define FF_PROFILE_AAC_SSR  2
1703 #define FF_PROFILE_AAC_LTP  3
1704 #define FF_PROFILE_AAC_HE   4
1705 #define FF_PROFILE_AAC_HE_V2 28
1706 #define FF_PROFILE_AAC_LD   22
1707 #define FF_PROFILE_AAC_ELD  38
1708 #define FF_PROFILE_MPEG2_AAC_LOW 128
1709 #define FF_PROFILE_MPEG2_AAC_HE  131
1710
1711 #define FF_PROFILE_DNXHD         0
1712 #define FF_PROFILE_DNXHR_LB      1
1713 #define FF_PROFILE_DNXHR_SQ      2
1714 #define FF_PROFILE_DNXHR_HQ      3
1715 #define FF_PROFILE_DNXHR_HQX     4
1716 #define FF_PROFILE_DNXHR_444     5
1717
1718 #define FF_PROFILE_DTS         20
1719 #define FF_PROFILE_DTS_ES      30
1720 #define FF_PROFILE_DTS_96_24   40
1721 #define FF_PROFILE_DTS_HD_HRA  50
1722 #define FF_PROFILE_DTS_HD_MA   60
1723 #define FF_PROFILE_DTS_EXPRESS 70
1724
1725 #define FF_PROFILE_MPEG2_422    0
1726 #define FF_PROFILE_MPEG2_HIGH   1
1727 #define FF_PROFILE_MPEG2_SS     2
1728 #define FF_PROFILE_MPEG2_SNR_SCALABLE  3
1729 #define FF_PROFILE_MPEG2_MAIN   4
1730 #define FF_PROFILE_MPEG2_SIMPLE 5
1731
1732 #define FF_PROFILE_H264_CONSTRAINED  (1<<9)  // 8+1; constraint_set1_flag
1733 #define FF_PROFILE_H264_INTRA        (1<<11) // 8+3; constraint_set3_flag
1734
1735 #define FF_PROFILE_H264_BASELINE             66
1736 #define FF_PROFILE_H264_CONSTRAINED_BASELINE (66|FF_PROFILE_H264_CONSTRAINED)
1737 #define FF_PROFILE_H264_MAIN                 77
1738 #define FF_PROFILE_H264_EXTENDED             88
1739 #define FF_PROFILE_H264_HIGH                 100
1740 #define FF_PROFILE_H264_HIGH_10              110
1741 #define FF_PROFILE_H264_HIGH_10_INTRA        (110|FF_PROFILE_H264_INTRA)
1742 #define FF_PROFILE_H264_MULTIVIEW_HIGH       118
1743 #define FF_PROFILE_H264_HIGH_422             122
1744 #define FF_PROFILE_H264_HIGH_422_INTRA       (122|FF_PROFILE_H264_INTRA)
1745 #define FF_PROFILE_H264_STEREO_HIGH          128
1746 #define FF_PROFILE_H264_HIGH_444             144
1747 #define FF_PROFILE_H264_HIGH_444_PREDICTIVE  244
1748 #define FF_PROFILE_H264_HIGH_444_INTRA       (244|FF_PROFILE_H264_INTRA)
1749 #define FF_PROFILE_H264_CAVLC_444            44
1750
1751 #define FF_PROFILE_VC1_SIMPLE   0
1752 #define FF_PROFILE_VC1_MAIN     1
1753 #define FF_PROFILE_VC1_COMPLEX  2
1754 #define FF_PROFILE_VC1_ADVANCED 3
1755
1756 #define FF_PROFILE_MPEG4_SIMPLE                     0
1757 #define FF_PROFILE_MPEG4_SIMPLE_SCALABLE            1
1758 #define FF_PROFILE_MPEG4_CORE                       2
1759 #define FF_PROFILE_MPEG4_MAIN                       3
1760 #define FF_PROFILE_MPEG4_N_BIT                      4
1761 #define FF_PROFILE_MPEG4_SCALABLE_TEXTURE           5
1762 #define FF_PROFILE_MPEG4_SIMPLE_FACE_ANIMATION      6
1763 #define FF_PROFILE_MPEG4_BASIC_ANIMATED_TEXTURE     7
1764 #define FF_PROFILE_MPEG4_HYBRID                     8
1765 #define FF_PROFILE_MPEG4_ADVANCED_REAL_TIME         9
1766 #define FF_PROFILE_MPEG4_CORE_SCALABLE             10
1767 #define FF_PROFILE_MPEG4_ADVANCED_CODING           11
1768 #define FF_PROFILE_MPEG4_ADVANCED_CORE             12
1769 #define FF_PROFILE_MPEG4_ADVANCED_SCALABLE_TEXTURE 13
1770 #define FF_PROFILE_MPEG4_SIMPLE_STUDIO             14
1771 #define FF_PROFILE_MPEG4_ADVANCED_SIMPLE           15
1772
1773 #define FF_PROFILE_JPEG2000_CSTREAM_RESTRICTION_0   1
1774 #define FF_PROFILE_JPEG2000_CSTREAM_RESTRICTION_1   2
1775 #define FF_PROFILE_JPEG2000_CSTREAM_NO_RESTRICTION  32768
1776 #define FF_PROFILE_JPEG2000_DCINEMA_2K              3
1777 #define FF_PROFILE_JPEG2000_DCINEMA_4K              4
1778
1779 #define FF_PROFILE_VP9_0                            0
1780 #define FF_PROFILE_VP9_1                            1
1781 #define FF_PROFILE_VP9_2                            2
1782 #define FF_PROFILE_VP9_3                            3
1783
1784 #define FF_PROFILE_HEVC_MAIN                        1
1785 #define FF_PROFILE_HEVC_MAIN_10                     2
1786 #define FF_PROFILE_HEVC_MAIN_STILL_PICTURE          3
1787 #define FF_PROFILE_HEVC_REXT                        4
1788
1789 #define FF_PROFILE_VVC_MAIN_10                      1
1790 #define FF_PROFILE_VVC_MAIN_10_444                 33
1791
1792 #define FF_PROFILE_AV1_MAIN                         0
1793 #define FF_PROFILE_AV1_HIGH                         1
1794 #define FF_PROFILE_AV1_PROFESSIONAL                 2
1795
1796 #define FF_PROFILE_MJPEG_HUFFMAN_BASELINE_DCT            0xc0
1797 #define FF_PROFILE_MJPEG_HUFFMAN_EXTENDED_SEQUENTIAL_DCT 0xc1
1798 #define FF_PROFILE_MJPEG_HUFFMAN_PROGRESSIVE_DCT         0xc2
1799 #define FF_PROFILE_MJPEG_HUFFMAN_LOSSLESS                0xc3
1800 #define FF_PROFILE_MJPEG_JPEG_LS                         0xf7
1801
1802 #define FF_PROFILE_SBC_MSBC                         1
1803
1804 #define FF_PROFILE_PRORES_PROXY     0
1805 #define FF_PROFILE_PRORES_LT        1
1806 #define FF_PROFILE_PRORES_STANDARD  2
1807 #define FF_PROFILE_PRORES_HQ        3
1808 #define FF_PROFILE_PRORES_4444      4
1809 #define FF_PROFILE_PRORES_XQ        5
1810
1811 #define FF_PROFILE_ARIB_PROFILE_A 0
1812 #define FF_PROFILE_ARIB_PROFILE_C 1
1813
1814 #define FF_PROFILE_KLVA_SYNC 0
1815 #define FF_PROFILE_KLVA_ASYNC 1
1816
1817     /**
1818      * level
1819      * - encoding: Set by user.
1820      * - decoding: Set by libavcodec.
1821      */
1822      int level;
1823 #define FF_LEVEL_UNKNOWN -99
1824
1825     /**
1826      * Skip loop filtering for selected frames.
1827      * - encoding: unused
1828      * - decoding: Set by user.
1829      */
1830     enum AVDiscard skip_loop_filter;
1831
1832     /**
1833      * Skip IDCT/dequantization for selected frames.
1834      * - encoding: unused
1835      * - decoding: Set by user.
1836      */
1837     enum AVDiscard skip_idct;
1838
1839     /**
1840      * Skip decoding for selected frames.
1841      * - encoding: unused
1842      * - decoding: Set by user.
1843      */
1844     enum AVDiscard skip_frame;
1845
1846     /**
1847      * Header containing style information for text subtitles.
1848      * For SUBTITLE_ASS subtitle type, it should contain the whole ASS
1849      * [Script Info] and [V4+ Styles] section, plus the [Events] line and
1850      * the Format line following. It shouldn't include any Dialogue line.
1851      * - encoding: Set/allocated/freed by user (before avcodec_open2())
1852      * - decoding: Set/allocated/freed by libavcodec (by avcodec_open2())
1853      */
1854     uint8_t *subtitle_header;
1855     int subtitle_header_size;
1856
1857     /**
1858      * Audio only. The number of "priming" samples (padding) inserted by the
1859      * encoder at the beginning of the audio. I.e. this number of leading
1860      * decoded samples must be discarded by the caller to get the original audio
1861      * without leading padding.
1862      *
1863      * - decoding: unused
1864      * - encoding: Set by libavcodec. The timestamps on the output packets are
1865      *             adjusted by the encoder so that they always refer to the
1866      *             first sample of the data actually contained in the packet,
1867      *             including any added padding.  E.g. if the timebase is
1868      *             1/samplerate and the timestamp of the first input sample is
1869      *             0, the timestamp of the first output packet will be
1870      *             -initial_padding.
1871      */
1872     int initial_padding;
1873
1874     /**
1875      * - decoding: For codecs that store a framerate value in the compressed
1876      *             bitstream, the decoder may export it here. { 0, 1} when
1877      *             unknown.
1878      * - encoding: May be used to signal the framerate of CFR content to an
1879      *             encoder.
1880      */
1881     AVRational framerate;
1882
1883     /**
1884      * Nominal unaccelerated pixel format, see AV_PIX_FMT_xxx.
1885      * - encoding: unused.
1886      * - decoding: Set by libavcodec before calling get_format()
1887      */
1888     enum AVPixelFormat sw_pix_fmt;
1889
1890     /**
1891      * Timebase in which pkt_dts/pts and AVPacket.dts/pts are.
1892      * - encoding unused.
1893      * - decoding set by user.
1894      */
1895     AVRational pkt_timebase;
1896
1897     /**
1898      * AVCodecDescriptor
1899      * - encoding: unused.
1900      * - decoding: set by libavcodec.
1901      */
1902     const AVCodecDescriptor *codec_descriptor;
1903
1904     /**
1905      * Current statistics for PTS correction.
1906      * - decoding: maintained and used by libavcodec, not intended to be used by user apps
1907      * - encoding: unused
1908      */
1909     int64_t pts_correction_num_faulty_pts; /// Number of incorrect PTS values so far
1910     int64_t pts_correction_num_faulty_dts; /// Number of incorrect DTS values so far
1911     int64_t pts_correction_last_pts;       /// PTS of the last frame
1912     int64_t pts_correction_last_dts;       /// DTS of the last frame
1913
1914     /**
1915      * Character encoding of the input subtitles file.
1916      * - decoding: set by user
1917      * - encoding: unused
1918      */
1919     char *sub_charenc;
1920
1921     /**
1922      * Subtitles character encoding mode. Formats or codecs might be adjusting
1923      * this setting (if they are doing the conversion themselves for instance).
1924      * - decoding: set by libavcodec
1925      * - encoding: unused
1926      */
1927     int sub_charenc_mode;
1928 #define FF_SUB_CHARENC_MODE_DO_NOTHING  -1  ///< do nothing (demuxer outputs a stream supposed to be already in UTF-8, or the codec is bitmap for instance)
1929 #define FF_SUB_CHARENC_MODE_AUTOMATIC    0  ///< libavcodec will select the mode itself
1930 #define FF_SUB_CHARENC_MODE_PRE_DECODER  1  ///< the AVPacket data needs to be recoded to UTF-8 before being fed to the decoder, requires iconv
1931 #define FF_SUB_CHARENC_MODE_IGNORE       2  ///< neither convert the subtitles, nor check them for valid UTF-8
1932
1933     /**
1934      * Skip processing alpha if supported by codec.
1935      * Note that if the format uses pre-multiplied alpha (common with VP6,
1936      * and recommended due to better video quality/compression)
1937      * the image will look as if alpha-blended onto a black background.
1938      * However for formats that do not use pre-multiplied alpha
1939      * there might be serious artefacts (though e.g. libswscale currently
1940      * assumes pre-multiplied alpha anyway).
1941      *
1942      * - decoding: set by user
1943      * - encoding: unused
1944      */
1945     int skip_alpha;
1946
1947     /**
1948      * Number of samples to skip after a discontinuity
1949      * - decoding: unused
1950      * - encoding: set by libavcodec
1951      */
1952     int seek_preroll;
1953
1954 #if FF_API_DEBUG_MV
1955     /**
1956      * @deprecated unused
1957      */
1958     attribute_deprecated
1959     int debug_mv;
1960 #define FF_DEBUG_VIS_MV_P_FOR  0x00000001 //visualize forward predicted MVs of P frames
1961 #define FF_DEBUG_VIS_MV_B_FOR  0x00000002 //visualize forward predicted MVs of B frames
1962 #define FF_DEBUG_VIS_MV_B_BACK 0x00000004 //visualize backward predicted MVs of B frames
1963 #endif
1964
1965     /**
1966      * custom intra quantization matrix
1967      * - encoding: Set by user, can be NULL.
1968      * - decoding: unused.
1969      */
1970     uint16_t *chroma_intra_matrix;
1971
1972     /**
1973      * dump format separator.
1974      * can be ", " or "\n      " or anything else
1975      * - encoding: Set by user.
1976      * - decoding: Set by user.
1977      */
1978     uint8_t *dump_separator;
1979
1980     /**
1981      * ',' separated list of allowed decoders.
1982      * If NULL then all are allowed
1983      * - encoding: unused
1984      * - decoding: set by user
1985      */
1986     char *codec_whitelist;
1987
1988     /**
1989      * Properties of the stream that gets decoded
1990      * - encoding: unused
1991      * - decoding: set by libavcodec
1992      */
1993     unsigned properties;
1994 #define FF_CODEC_PROPERTY_LOSSLESS        0x00000001
1995 #define FF_CODEC_PROPERTY_CLOSED_CAPTIONS 0x00000002
1996
1997     /**
1998      * Additional data associated with the entire coded stream.
1999      *
2000      * - decoding: unused
2001      * - encoding: may be set by libavcodec after avcodec_open2().
2002      */
2003     AVPacketSideData *coded_side_data;
2004     int            nb_coded_side_data;
2005
2006     /**
2007      * A reference to the AVHWFramesContext describing the input (for encoding)
2008      * or output (decoding) frames. The reference is set by the caller and
2009      * afterwards owned (and freed) by libavcodec - it should never be read by
2010      * the caller after being set.
2011      *
2012      * - decoding: This field should be set by the caller from the get_format()
2013      *             callback. The previous reference (if any) will always be
2014      *             unreffed by libavcodec before the get_format() call.
2015      *
2016      *             If the default get_buffer2() is used with a hwaccel pixel
2017      *             format, then this AVHWFramesContext will be used for
2018      *             allocating the frame buffers.
2019      *
2020      * - encoding: For hardware encoders configured to use a hwaccel pixel
2021      *             format, this field should be set by the caller to a reference
2022      *             to the AVHWFramesContext describing input frames.
2023      *             AVHWFramesContext.format must be equal to
2024      *             AVCodecContext.pix_fmt.
2025      *
2026      *             This field should be set before avcodec_open2() is called.
2027      */
2028     AVBufferRef *hw_frames_ctx;
2029
2030     /**
2031      * Control the form of AVSubtitle.rects[N]->ass
2032      * - decoding: set by user
2033      * - encoding: unused
2034      */
2035     int sub_text_format;
2036 #define FF_SUB_TEXT_FMT_ASS              0
2037
2038     /**
2039      * Audio only. The amount of padding (in samples) appended by the encoder to
2040      * the end of the audio. I.e. this number of decoded samples must be
2041      * discarded by the caller from the end of the stream to get the original
2042      * audio without any trailing padding.
2043      *
2044      * - decoding: unused
2045      * - encoding: unused
2046      */
2047     int trailing_padding;
2048
2049     /**
2050      * The number of pixels per image to maximally accept.
2051      *
2052      * - decoding: set by user
2053      * - encoding: set by user
2054      */
2055     int64_t max_pixels;
2056
2057     /**
2058      * A reference to the AVHWDeviceContext describing the device which will
2059      * be used by a hardware encoder/decoder.  The reference is set by the
2060      * caller and afterwards owned (and freed) by libavcodec.
2061      *
2062      * This should be used if either the codec device does not require
2063      * hardware frames or any that are used are to be allocated internally by
2064      * libavcodec.  If the user wishes to supply any of the frames used as
2065      * encoder input or decoder output then hw_frames_ctx should be used
2066      * instead.  When hw_frames_ctx is set in get_format() for a decoder, this
2067      * field will be ignored while decoding the associated stream segment, but
2068      * may again be used on a following one after another get_format() call.
2069      *
2070      * For both encoders and decoders this field should be set before
2071      * avcodec_open2() is called and must not be written to thereafter.
2072      *
2073      * Note that some decoders may require this field to be set initially in
2074      * order to support hw_frames_ctx at all - in that case, all frames
2075      * contexts used must be created on the same device.
2076      */
2077     AVBufferRef *hw_device_ctx;
2078
2079     /**
2080      * Bit set of AV_HWACCEL_FLAG_* flags, which affect hardware accelerated
2081      * decoding (if active).
2082      * - encoding: unused
2083      * - decoding: Set by user (either before avcodec_open2(), or in the
2084      *             AVCodecContext.get_format callback)
2085      */
2086     int hwaccel_flags;
2087
2088     /**
2089      * Video decoding only. Certain video codecs support cropping, meaning that
2090      * only a sub-rectangle of the decoded frame is intended for display.  This
2091      * option controls how cropping is handled by libavcodec.
2092      *
2093      * When set to 1 (the default), libavcodec will apply cropping internally.
2094      * I.e. it will modify the output frame width/height fields and offset the
2095      * data pointers (only by as much as possible while preserving alignment, or
2096      * by the full amount if the AV_CODEC_FLAG_UNALIGNED flag is set) so that
2097      * the frames output by the decoder refer only to the cropped area. The
2098      * crop_* fields of the output frames will be zero.
2099      *
2100      * When set to 0, the width/height fields of the output frames will be set
2101      * to the coded dimensions and the crop_* fields will describe the cropping
2102      * rectangle. Applying the cropping is left to the caller.
2103      *
2104      * @warning When hardware acceleration with opaque output frames is used,
2105      * libavcodec is unable to apply cropping from the top/left border.
2106      *
2107      * @note when this option is set to zero, the width/height fields of the
2108      * AVCodecContext and output AVFrames have different meanings. The codec
2109      * context fields store display dimensions (with the coded dimensions in
2110      * coded_width/height), while the frame fields store the coded dimensions
2111      * (with the display dimensions being determined by the crop_* fields).
2112      */
2113     int apply_cropping;
2114
2115     /*
2116      * Video decoding only.  Sets the number of extra hardware frames which
2117      * the decoder will allocate for use by the caller.  This must be set
2118      * before avcodec_open2() is called.
2119      *
2120      * Some hardware decoders require all frames that they will use for
2121      * output to be defined in advance before decoding starts.  For such
2122      * decoders, the hardware frame pool must therefore be of a fixed size.
2123      * The extra frames set here are on top of any number that the decoder
2124      * needs internally in order to operate normally (for example, frames
2125      * used as reference pictures).
2126      */
2127     int extra_hw_frames;
2128
2129     /**
2130      * The percentage of damaged samples to discard a frame.
2131      *
2132      * - decoding: set by user
2133      * - encoding: unused
2134      */
2135     int discard_damaged_percentage;
2136
2137     /**
2138      * The number of samples per frame to maximally accept.
2139      *
2140      * - decoding: set by user
2141      * - encoding: set by user
2142      */
2143     int64_t max_samples;
2144
2145     /**
2146      * Bit set of AV_CODEC_EXPORT_DATA_* flags, which affects the kind of
2147      * metadata exported in frame, packet, or coded stream side data by
2148      * decoders and encoders.
2149      *
2150      * - decoding: set by user
2151      * - encoding: set by user
2152      */
2153     int export_side_data;
2154
2155     /**
2156      * This callback is called at the beginning of each packet to get a data
2157      * buffer for it.
2158      *
2159      * The following field will be set in the packet before this callback is
2160      * called:
2161      * - size
2162      * This callback must use the above value to calculate the required buffer size,
2163      * which must padded by at least AV_INPUT_BUFFER_PADDING_SIZE bytes.
2164      *
2165      * This callback must fill the following fields in the packet:
2166      * - data: alignment requirements for AVPacket apply, if any. Some architectures and
2167      *   encoders may benefit from having aligned data.
2168      * - buf: must contain a pointer to an AVBufferRef structure. The packet's
2169      *   data pointer must be contained in it. See: av_buffer_create(), av_buffer_alloc(),
2170      *   and av_buffer_ref().
2171      *
2172      * If AV_CODEC_CAP_DR1 is not set then get_encode_buffer() must call
2173      * avcodec_default_get_encode_buffer() instead of providing a buffer allocated by
2174      * some other means.
2175      *
2176      * The flags field may contain a combination of AV_GET_ENCODE_BUFFER_FLAG_ flags.
2177      * They may be used for example to hint what use the buffer may get after being
2178      * created.
2179      * Implementations of this callback may ignore flags they don't understand.
2180      * If AV_GET_ENCODE_BUFFER_FLAG_REF is set in flags then the packet may be reused
2181      * (read and/or written to if it is writable) later by libavcodec.
2182      *
2183      * This callback must be thread-safe, as when frame threading is used, it may
2184      * be called from multiple threads simultaneously.
2185      *
2186      * @see avcodec_default_get_encode_buffer()
2187      *
2188      * - encoding: Set by libavcodec, user can override.
2189      * - decoding: unused
2190      */
2191     int (*get_encode_buffer)(struct AVCodecContext *s, AVPacket *pkt, int flags);
2192 } AVCodecContext;
2193
2194 struct AVSubtitle;
2195
2196 struct MpegEncContext;
2197
2198 /**
2199  * @defgroup lavc_hwaccel AVHWAccel
2200  *
2201  * @note  Nothing in this structure should be accessed by the user.  At some
2202  *        point in future it will not be externally visible at all.
2203  *
2204  * @{
2205  */
2206 typedef struct AVHWAccel {
2207     /**
2208      * Name of the hardware accelerated codec.
2209      * The name is globally unique among encoders and among decoders (but an
2210      * encoder and a decoder can share the same name).
2211      */
2212     const char *name;
2213
2214     /**
2215      * Type of codec implemented by the hardware accelerator.
2216      *
2217      * See AVMEDIA_TYPE_xxx
2218      */
2219     enum AVMediaType type;
2220
2221     /**
2222      * Codec implemented by the hardware accelerator.
2223      *
2224      * See AV_CODEC_ID_xxx
2225      */
2226     enum AVCodecID id;
2227
2228     /**
2229      * Supported pixel format.
2230      *
2231      * Only hardware accelerated formats are supported here.
2232      */
2233     enum AVPixelFormat pix_fmt;
2234
2235     /**
2236      * Hardware accelerated codec capabilities.
2237      * see AV_HWACCEL_CODEC_CAP_*
2238      */
2239     int capabilities;
2240
2241     /*****************************************************************
2242      * No fields below this line are part of the public API. They
2243      * may not be used outside of libavcodec and can be changed and
2244      * removed at will.
2245      * New public fields should be added right above.
2246      *****************************************************************
2247      */
2248
2249     /**
2250      * Allocate a custom buffer
2251      */
2252     int (*alloc_frame)(AVCodecContext *avctx, AVFrame *frame);
2253
2254     /**
2255      * Called at the beginning of each frame or field picture.
2256      *
2257      * Meaningful frame information (codec specific) is guaranteed to
2258      * be parsed at this point. This function is mandatory.
2259      *
2260      * Note that buf can be NULL along with buf_size set to 0.
2261      * Otherwise, this means the whole frame is available at this point.
2262      *
2263      * @param avctx the codec context
2264      * @param buf the frame data buffer base
2265      * @param buf_size the size of the frame in bytes
2266      * @return zero if successful, a negative value otherwise
2267      */
2268     int (*start_frame)(AVCodecContext *avctx, const uint8_t *buf, uint32_t buf_size);
2269
2270     /**
2271      * Callback for parameter data (SPS/PPS/VPS etc).
2272      *
2273      * Useful for hardware decoders which keep persistent state about the
2274      * video parameters, and need to receive any changes to update that state.
2275      *
2276      * @param avctx the codec context
2277      * @param type the nal unit type
2278      * @param buf the nal unit data buffer
2279      * @param buf_size the size of the nal unit in bytes
2280      * @return zero if successful, a negative value otherwise
2281      */
2282     int (*decode_params)(AVCodecContext *avctx, int type, const uint8_t *buf, uint32_t buf_size);
2283
2284     /**
2285      * Callback for each slice.
2286      *
2287      * Meaningful slice information (codec specific) is guaranteed to
2288      * be parsed at this point. This function is mandatory.
2289      * The only exception is XvMC, that works on MB level.
2290      *
2291      * @param avctx the codec context
2292      * @param buf the slice data buffer base
2293      * @param buf_size the size of the slice in bytes
2294      * @return zero if successful, a negative value otherwise
2295      */
2296     int (*decode_slice)(AVCodecContext *avctx, const uint8_t *buf, uint32_t buf_size);
2297
2298     /**
2299      * Called at the end of each frame or field picture.
2300      *
2301      * The whole picture is parsed at this point and can now be sent
2302      * to the hardware accelerator. This function is mandatory.
2303      *
2304      * @param avctx the codec context
2305      * @return zero if successful, a negative value otherwise
2306      */
2307     int (*end_frame)(AVCodecContext *avctx);
2308
2309     /**
2310      * Size of per-frame hardware accelerator private data.
2311      *
2312      * Private data is allocated with av_mallocz() before
2313      * AVCodecContext.get_buffer() and deallocated after
2314      * AVCodecContext.release_buffer().
2315      */
2316     int frame_priv_data_size;
2317
2318     /**
2319      * Called for every Macroblock in a slice.
2320      *
2321      * XvMC uses it to replace the ff_mpv_reconstruct_mb().
2322      * Instead of decoding to raw picture, MB parameters are
2323      * stored in an array provided by the video driver.
2324      *
2325      * @param s the mpeg context
2326      */
2327     void (*decode_mb)(struct MpegEncContext *s);
2328
2329     /**
2330      * Initialize the hwaccel private data.
2331      *
2332      * This will be called from ff_get_format(), after hwaccel and
2333      * hwaccel_context are set and the hwaccel private data in AVCodecInternal
2334      * is allocated.
2335      */
2336     int (*init)(AVCodecContext *avctx);
2337
2338     /**
2339      * Uninitialize the hwaccel private data.
2340      *
2341      * This will be called from get_format() or avcodec_close(), after hwaccel
2342      * and hwaccel_context are already uninitialized.
2343      */
2344     int (*uninit)(AVCodecContext *avctx);
2345
2346     /**
2347      * Size of the private data to allocate in
2348      * AVCodecInternal.hwaccel_priv_data.
2349      */
2350     int priv_data_size;
2351
2352     /**
2353      * Internal hwaccel capabilities.
2354      */
2355     int caps_internal;
2356
2357     /**
2358      * Fill the given hw_frames context with current codec parameters. Called
2359      * from get_format. Refer to avcodec_get_hw_frames_parameters() for
2360      * details.
2361      *
2362      * This CAN be called before AVHWAccel.init is called, and you must assume
2363      * that avctx->hwaccel_priv_data is invalid.
2364      */
2365     int (*frame_params)(AVCodecContext *avctx, AVBufferRef *hw_frames_ctx);
2366 } AVHWAccel;
2367
2368 /**
2369  * HWAccel is experimental and is thus avoided in favor of non experimental
2370  * codecs
2371  */
2372 #define AV_HWACCEL_CODEC_CAP_EXPERIMENTAL 0x0200
2373
2374 /**
2375  * Hardware acceleration should be used for decoding even if the codec level
2376  * used is unknown or higher than the maximum supported level reported by the
2377  * hardware driver.
2378  *
2379  * It's generally a good idea to pass this flag unless you have a specific
2380  * reason not to, as hardware tends to under-report supported levels.
2381  */
2382 #define AV_HWACCEL_FLAG_IGNORE_LEVEL (1 << 0)
2383
2384 /**
2385  * Hardware acceleration can output YUV pixel formats with a different chroma
2386  * sampling than 4:2:0 and/or other than 8 bits per component.
2387  */
2388 #define AV_HWACCEL_FLAG_ALLOW_HIGH_DEPTH (1 << 1)
2389
2390 /**
2391  * Hardware acceleration should still be attempted for decoding when the
2392  * codec profile does not match the reported capabilities of the hardware.
2393  *
2394  * For example, this can be used to try to decode baseline profile H.264
2395  * streams in hardware - it will often succeed, because many streams marked
2396  * as baseline profile actually conform to constrained baseline profile.
2397  *
2398  * @warning If the stream is actually not supported then the behaviour is
2399  *          undefined, and may include returning entirely incorrect output
2400  *          while indicating success.
2401  */
2402 #define AV_HWACCEL_FLAG_ALLOW_PROFILE_MISMATCH (1 << 2)
2403
2404 /**
2405  * @}
2406  */
2407
2408 enum AVSubtitleType {
2409     SUBTITLE_NONE,
2410
2411     SUBTITLE_BITMAP,                ///< A bitmap, pict will be set
2412
2413     /**
2414      * Plain text, the text field must be set by the decoder and is
2415      * authoritative. ass and pict fields may contain approximations.
2416      */
2417     SUBTITLE_TEXT,
2418
2419     /**
2420      * Formatted text, the ass field must be set by the decoder and is
2421      * authoritative. pict and text fields may contain approximations.
2422      */
2423     SUBTITLE_ASS,
2424 };
2425
2426 #define AV_SUBTITLE_FLAG_FORCED 0x00000001
2427
2428 typedef struct AVSubtitleRect {
2429     int x;         ///< top left corner  of pict, undefined when pict is not set
2430     int y;         ///< top left corner  of pict, undefined when pict is not set
2431     int w;         ///< width            of pict, undefined when pict is not set
2432     int h;         ///< height           of pict, undefined when pict is not set
2433     int nb_colors; ///< number of colors in pict, undefined when pict is not set
2434
2435     /**
2436      * data+linesize for the bitmap of this subtitle.
2437      * Can be set for text/ass as well once they are rendered.
2438      */
2439     uint8_t *data[4];
2440     int linesize[4];
2441
2442     enum AVSubtitleType type;
2443
2444     char *text;                     ///< 0 terminated plain UTF-8 text
2445
2446     /**
2447      * 0 terminated ASS/SSA compatible event line.
2448      * The presentation of this is unaffected by the other values in this
2449      * struct.
2450      */
2451     char *ass;
2452
2453     int flags;
2454 } AVSubtitleRect;
2455
2456 typedef struct AVSubtitle {
2457     uint16_t format; /* 0 = graphics */
2458     uint32_t start_display_time; /* relative to packet pts, in ms */
2459     uint32_t end_display_time; /* relative to packet pts, in ms */
2460     unsigned num_rects;
2461     AVSubtitleRect **rects;
2462     int64_t pts;    ///< Same as packet pts, in AV_TIME_BASE
2463 } AVSubtitle;
2464
2465 /**
2466  * Return the LIBAVCODEC_VERSION_INT constant.
2467  */
2468 unsigned avcodec_version(void);
2469
2470 /**
2471  * Return the libavcodec build-time configuration.
2472  */
2473 const char *avcodec_configuration(void);
2474
2475 /**
2476  * Return the libavcodec license.
2477  */
2478 const char *avcodec_license(void);
2479
2480 /**
2481  * Allocate an AVCodecContext and set its fields to default values. The
2482  * resulting struct should be freed with avcodec_free_context().
2483  *
2484  * @param codec if non-NULL, allocate private data and initialize defaults
2485  *              for the given codec. It is illegal to then call avcodec_open2()
2486  *              with a different codec.
2487  *              If NULL, then the codec-specific defaults won't be initialized,
2488  *              which may result in suboptimal default settings (this is
2489  *              important mainly for encoders, e.g. libx264).
2490  *
2491  * @return An AVCodecContext filled with default values or NULL on failure.
2492  */
2493 AVCodecContext *avcodec_alloc_context3(const AVCodec *codec);
2494
2495 /**
2496  * Free the codec context and everything associated with it and write NULL to
2497  * the provided pointer.
2498  */
2499 void avcodec_free_context(AVCodecContext **avctx);
2500
2501 /**
2502  * Get the AVClass for AVCodecContext. It can be used in combination with
2503  * AV_OPT_SEARCH_FAKE_OBJ for examining options.
2504  *
2505  * @see av_opt_find().
2506  */
2507 const AVClass *avcodec_get_class(void);
2508
2509 #if FF_API_GET_FRAME_CLASS
2510 /**
2511  * @deprecated This function should not be used.
2512  */
2513 attribute_deprecated
2514 const AVClass *avcodec_get_frame_class(void);
2515 #endif
2516
2517 /**
2518  * Get the AVClass for AVSubtitleRect. It can be used in combination with
2519  * AV_OPT_SEARCH_FAKE_OBJ for examining options.
2520  *
2521  * @see av_opt_find().
2522  */
2523 const AVClass *avcodec_get_subtitle_rect_class(void);
2524
2525 /**
2526  * Fill the parameters struct based on the values from the supplied codec
2527  * context. Any allocated fields in par are freed and replaced with duplicates
2528  * of the corresponding fields in codec.
2529  *
2530  * @return >= 0 on success, a negative AVERROR code on failure
2531  */
2532 int avcodec_parameters_from_context(AVCodecParameters *par,
2533                                     const AVCodecContext *codec);
2534
2535 /**
2536  * Fill the codec context based on the values from the supplied codec
2537  * parameters. Any allocated fields in codec that have a corresponding field in
2538  * par are freed and replaced with duplicates of the corresponding field in par.
2539  * Fields in codec that do not have a counterpart in par are not touched.
2540  *
2541  * @return >= 0 on success, a negative AVERROR code on failure.
2542  */
2543 int avcodec_parameters_to_context(AVCodecContext *codec,
2544                                   const AVCodecParameters *par);
2545
2546 /**
2547  * Initialize the AVCodecContext to use the given AVCodec. Prior to using this
2548  * function the context has to be allocated with avcodec_alloc_context3().
2549  *
2550  * The functions avcodec_find_decoder_by_name(), avcodec_find_encoder_by_name(),
2551  * avcodec_find_decoder() and avcodec_find_encoder() provide an easy way for
2552  * retrieving a codec.
2553  *
2554  * @warning This function is not thread safe!
2555  *
2556  * @note Always call this function before using decoding routines (such as
2557  * @ref avcodec_receive_frame()).
2558  *
2559  * @code
2560  * av_dict_set(&opts, "b", "2.5M", 0);
2561  * codec = avcodec_find_decoder(AV_CODEC_ID_H264);
2562  * if (!codec)
2563  *     exit(1);
2564  *
2565  * context = avcodec_alloc_context3(codec);
2566  *
2567  * if (avcodec_open2(context, codec, opts) < 0)
2568  *     exit(1);
2569  * @endcode
2570  *
2571  * @param avctx The context to initialize.
2572  * @param codec The codec to open this context for. If a non-NULL codec has been
2573  *              previously passed to avcodec_alloc_context3() or
2574  *              for this context, then this parameter MUST be either NULL or
2575  *              equal to the previously passed codec.
2576  * @param options A dictionary filled with AVCodecContext and codec-private options.
2577  *                On return this object will be filled with options that were not found.
2578  *
2579  * @return zero on success, a negative value on error
2580  * @see avcodec_alloc_context3(), avcodec_find_decoder(), avcodec_find_encoder(),
2581  *      av_dict_set(), av_opt_find().
2582  */
2583 int avcodec_open2(AVCodecContext *avctx, const AVCodec *codec, AVDictionary **options);
2584
2585 /**
2586  * Close a given AVCodecContext and free all the data associated with it
2587  * (but not the AVCodecContext itself).
2588  *
2589  * Calling this function on an AVCodecContext that hasn't been opened will free
2590  * the codec-specific data allocated in avcodec_alloc_context3() with a non-NULL
2591  * codec. Subsequent calls will do nothing.
2592  *
2593  * @note Do not use this function. Use avcodec_free_context() to destroy a
2594  * codec context (either open or closed). Opening and closing a codec context
2595  * multiple times is not supported anymore -- use multiple codec contexts
2596  * instead.
2597  */
2598 int avcodec_close(AVCodecContext *avctx);
2599
2600 /**
2601  * Free all allocated data in the given subtitle struct.
2602  *
2603  * @param sub AVSubtitle to free.
2604  */
2605 void avsubtitle_free(AVSubtitle *sub);
2606
2607 /**
2608  * @}
2609  */
2610
2611 /**
2612  * @addtogroup lavc_decoding
2613  * @{
2614  */
2615
2616 /**
2617  * The default callback for AVCodecContext.get_buffer2(). It is made public so
2618  * it can be called by custom get_buffer2() implementations for decoders without
2619  * AV_CODEC_CAP_DR1 set.
2620  */
2621 int avcodec_default_get_buffer2(AVCodecContext *s, AVFrame *frame, int flags);
2622
2623 /**
2624  * The default callback for AVCodecContext.get_encode_buffer(). It is made public so
2625  * it can be called by custom get_encode_buffer() implementations for encoders without
2626  * AV_CODEC_CAP_DR1 set.
2627  */
2628 int avcodec_default_get_encode_buffer(AVCodecContext *s, AVPacket *pkt, int flags);
2629
2630 /**
2631  * Modify width and height values so that they will result in a memory
2632  * buffer that is acceptable for the codec if you do not use any horizontal
2633  * padding.
2634  *
2635  * May only be used if a codec with AV_CODEC_CAP_DR1 has been opened.
2636  */
2637 void avcodec_align_dimensions(AVCodecContext *s, int *width, int *height);
2638
2639 /**
2640  * Modify width and height values so that they will result in a memory
2641  * buffer that is acceptable for the codec if you also ensure that all
2642  * line sizes are a multiple of the respective linesize_align[i].
2643  *
2644  * May only be used if a codec with AV_CODEC_CAP_DR1 has been opened.
2645  */
2646 void avcodec_align_dimensions2(AVCodecContext *s, int *width, int *height,
2647                                int linesize_align[AV_NUM_DATA_POINTERS]);
2648
2649 /**
2650  * Converts AVChromaLocation to swscale x/y chroma position.
2651  *
2652  * The positions represent the chroma (0,0) position in a coordinates system
2653  * with luma (0,0) representing the origin and luma(1,1) representing 256,256
2654  *
2655  * @param xpos  horizontal chroma sample position
2656  * @param ypos  vertical   chroma sample position
2657  */
2658 int avcodec_enum_to_chroma_pos(int *xpos, int *ypos, enum AVChromaLocation pos);
2659
2660 /**
2661  * Converts swscale x/y chroma position to AVChromaLocation.
2662  *
2663  * The positions represent the chroma (0,0) position in a coordinates system
2664  * with luma (0,0) representing the origin and luma(1,1) representing 256,256
2665  *
2666  * @param xpos  horizontal chroma sample position
2667  * @param ypos  vertical   chroma sample position
2668  */
2669 enum AVChromaLocation avcodec_chroma_pos_to_enum(int xpos, int ypos);
2670
2671 #if FF_API_OLD_ENCDEC
2672 /**
2673  * Decode the audio frame of size avpkt->size from avpkt->data into frame.
2674  *
2675  * Some decoders may support multiple frames in a single AVPacket. Such
2676  * decoders would then just decode the first frame and the return value would be
2677  * less than the packet size. In this case, avcodec_decode_audio4 has to be
2678  * called again with an AVPacket containing the remaining data in order to
2679  * decode the second frame, etc...  Even if no frames are returned, the packet
2680  * needs to be fed to the decoder with remaining data until it is completely
2681  * consumed or an error occurs.
2682  *
2683  * Some decoders (those marked with AV_CODEC_CAP_DELAY) have a delay between input
2684  * and output. This means that for some packets they will not immediately
2685  * produce decoded output and need to be flushed at the end of decoding to get
2686  * all the decoded data. Flushing is done by calling this function with packets
2687  * with avpkt->data set to NULL and avpkt->size set to 0 until it stops
2688  * returning samples. It is safe to flush even those decoders that are not
2689  * marked with AV_CODEC_CAP_DELAY, then no samples will be returned.
2690  *
2691  * @warning The input buffer, avpkt->data must be AV_INPUT_BUFFER_PADDING_SIZE
2692  *          larger than the actual read bytes because some optimized bitstream
2693  *          readers read 32 or 64 bits at once and could read over the end.
2694  *
2695  * @note The AVCodecContext MUST have been opened with @ref avcodec_open2()
2696  * before packets may be fed to the decoder.
2697  *
2698  * @param      avctx the codec context
2699  * @param[out] frame The AVFrame in which to store decoded audio samples.
2700  *                   The decoder will allocate a buffer for the decoded frame by
2701  *                   calling the AVCodecContext.get_buffer2() callback.
2702  *                   When AVCodecContext.refcounted_frames is set to 1, the frame is
2703  *                   reference counted and the returned reference belongs to the
2704  *                   caller. The caller must release the frame using av_frame_unref()
2705  *                   when the frame is no longer needed. The caller may safely write
2706  *                   to the frame if av_frame_is_writable() returns 1.
2707  *                   When AVCodecContext.refcounted_frames is set to 0, the returned
2708  *                   reference belongs to the decoder and is valid only until the
2709  *                   next call to this function or until closing or flushing the
2710  *                   decoder. The caller may not write to it.
2711  * @param[out] got_frame_ptr Zero if no frame could be decoded, otherwise it is
2712  *                           non-zero. Note that this field being set to zero
2713  *                           does not mean that an error has occurred. For
2714  *                           decoders with AV_CODEC_CAP_DELAY set, no given decode
2715  *                           call is guaranteed to produce a frame.
2716  * @param[in]  avpkt The input AVPacket containing the input buffer.
2717  *                   At least avpkt->data and avpkt->size should be set. Some
2718  *                   decoders might also require additional fields to be set.
2719  * @return A negative error code is returned if an error occurred during
2720  *         decoding, otherwise the number of bytes consumed from the input
2721  *         AVPacket is returned.
2722  *
2723 * @deprecated Use avcodec_send_packet() and avcodec_receive_frame().
2724  */
2725 attribute_deprecated
2726 int avcodec_decode_audio4(AVCodecContext *avctx, AVFrame *frame,
2727                           int *got_frame_ptr, const AVPacket *avpkt);
2728
2729 /**
2730  * Decode the video frame of size avpkt->size from avpkt->data into picture.
2731  * Some decoders may support multiple frames in a single AVPacket, such
2732  * decoders would then just decode the first frame.
2733  *
2734  * @warning The input buffer must be AV_INPUT_BUFFER_PADDING_SIZE larger than
2735  * the actual read bytes because some optimized bitstream readers read 32 or 64
2736  * bits at once and could read over the end.
2737  *
2738  * @warning The end of the input buffer buf should be set to 0 to ensure that
2739  * no overreading happens for damaged MPEG streams.
2740  *
2741  * @note Codecs which have the AV_CODEC_CAP_DELAY capability set have a delay
2742  * between input and output, these need to be fed with avpkt->data=NULL,
2743  * avpkt->size=0 at the end to return the remaining frames.
2744  *
2745  * @note The AVCodecContext MUST have been opened with @ref avcodec_open2()
2746  * before packets may be fed to the decoder.
2747  *
2748  * @param avctx the codec context
2749  * @param[out] picture The AVFrame in which the decoded video frame will be stored.
2750  *             Use av_frame_alloc() to get an AVFrame. The codec will
2751  *             allocate memory for the actual bitmap by calling the
2752  *             AVCodecContext.get_buffer2() callback.
2753  *             When AVCodecContext.refcounted_frames is set to 1, the frame is
2754  *             reference counted and the returned reference belongs to the
2755  *             caller. The caller must release the frame using av_frame_unref()
2756  *             when the frame is no longer needed. The caller may safely write
2757  *             to the frame if av_frame_is_writable() returns 1.
2758  *             When AVCodecContext.refcounted_frames is set to 0, the returned
2759  *             reference belongs to the decoder and is valid only until the
2760  *             next call to this function or until closing or flushing the
2761  *             decoder. The caller may not write to it.
2762  *
2763  * @param[in] avpkt The input AVPacket containing the input buffer.
2764  *            You can create such packet with av_init_packet() and by then setting
2765  *            data and size, some decoders might in addition need other fields like
2766  *            flags&AV_PKT_FLAG_KEY. All decoders are designed to use the least
2767  *            fields possible.
2768  * @param[in,out] got_picture_ptr Zero if no frame could be decompressed, otherwise, it is nonzero.
2769  * @return On error a negative value is returned, otherwise the number of bytes
2770  * used or zero if no frame could be decompressed.
2771  *
2772  * @deprecated Use avcodec_send_packet() and avcodec_receive_frame().
2773  */
2774 attribute_deprecated
2775 int avcodec_decode_video2(AVCodecContext *avctx, AVFrame *picture,
2776                          int *got_picture_ptr,
2777                          const AVPacket *avpkt);
2778 #endif
2779
2780 /**
2781  * Decode a subtitle message.
2782  * Return a negative value on error, otherwise return the number of bytes used.
2783  * If no subtitle could be decompressed, got_sub_ptr is zero.
2784  * Otherwise, the subtitle is stored in *sub.
2785  * Note that AV_CODEC_CAP_DR1 is not available for subtitle codecs. This is for
2786  * simplicity, because the performance difference is expected to be negligible
2787  * and reusing a get_buffer written for video codecs would probably perform badly
2788  * due to a potentially very different allocation pattern.
2789  *
2790  * Some decoders (those marked with AV_CODEC_CAP_DELAY) have a delay between input
2791  * and output. This means that for some packets they will not immediately
2792  * produce decoded output and need to be flushed at the end of decoding to get
2793  * all the decoded data. Flushing is done by calling this function with packets
2794  * with avpkt->data set to NULL and avpkt->size set to 0 until it stops
2795  * returning subtitles. It is safe to flush even those decoders that are not
2796  * marked with AV_CODEC_CAP_DELAY, then no subtitles will be returned.
2797  *
2798  * @note The AVCodecContext MUST have been opened with @ref avcodec_open2()
2799  * before packets may be fed to the decoder.
2800  *
2801  * @param avctx the codec context
2802  * @param[out] sub The preallocated AVSubtitle in which the decoded subtitle will be stored,
2803  *                 must be freed with avsubtitle_free if *got_sub_ptr is set.
2804  * @param[in,out] got_sub_ptr Zero if no subtitle could be decompressed, otherwise, it is nonzero.
2805  * @param[in] avpkt The input AVPacket containing the input buffer.
2806  */
2807 int avcodec_decode_subtitle2(AVCodecContext *avctx, AVSubtitle *sub,
2808                             int *got_sub_ptr,
2809                             AVPacket *avpkt);
2810
2811 /**
2812  * Supply raw packet data as input to a decoder.
2813  *
2814  * Internally, this call will copy relevant AVCodecContext fields, which can
2815  * influence decoding per-packet, and apply them when the packet is actually
2816  * decoded. (For example AVCodecContext.skip_frame, which might direct the
2817  * decoder to drop the frame contained by the packet sent with this function.)
2818  *
2819  * @warning The input buffer, avpkt->data must be AV_INPUT_BUFFER_PADDING_SIZE
2820  *          larger than the actual read bytes because some optimized bitstream
2821  *          readers read 32 or 64 bits at once and could read over the end.
2822  *
2823  * @warning Do not mix this API with the legacy API (like avcodec_decode_video2())
2824  *          on the same AVCodecContext. It will return unexpected results now
2825  *          or in future libavcodec versions.
2826  *
2827  * @note The AVCodecContext MUST have been opened with @ref avcodec_open2()
2828  *       before packets may be fed to the decoder.
2829  *
2830  * @param avctx codec context
2831  * @param[in] avpkt The input AVPacket. Usually, this will be a single video
2832  *                  frame, or several complete audio frames.
2833  *                  Ownership of the packet remains with the caller, and the
2834  *                  decoder will not write to the packet. The decoder may create
2835  *                  a reference to the packet data (or copy it if the packet is
2836  *                  not reference-counted).
2837  *                  Unlike with older APIs, the packet is always fully consumed,
2838  *                  and if it contains multiple frames (e.g. some audio codecs),
2839  *                  will require you to call avcodec_receive_frame() multiple
2840  *                  times afterwards before you can send a new packet.
2841  *                  It can be NULL (or an AVPacket with data set to NULL and
2842  *                  size set to 0); in this case, it is considered a flush
2843  *                  packet, which signals the end of the stream. Sending the
2844  *                  first flush packet will return success. Subsequent ones are
2845  *                  unnecessary and will return AVERROR_EOF. If the decoder
2846  *                  still has frames buffered, it will return them after sending
2847  *                  a flush packet.
2848  *
2849  * @return 0 on success, otherwise negative error code:
2850  *      AVERROR(EAGAIN):   input is not accepted in the current state - user
2851  *                         must read output with avcodec_receive_frame() (once
2852  *                         all output is read, the packet should be resent, and
2853  *                         the call will not fail with EAGAIN).
2854  *      AVERROR_EOF:       the decoder has been flushed, and no new packets can
2855  *                         be sent to it (also returned if more than 1 flush
2856  *                         packet is sent)
2857  *      AVERROR(EINVAL):   codec not opened, it is an encoder, or requires flush
2858  *      AVERROR(ENOMEM):   failed to add packet to internal queue, or similar
2859  *      other errors: legitimate decoding errors
2860  */
2861 int avcodec_send_packet(AVCodecContext *avctx, const AVPacket *avpkt);
2862
2863 /**
2864  * Return decoded output data from a decoder.
2865  *
2866  * @param avctx codec context
2867  * @param frame This will be set to a reference-counted video or audio
2868  *              frame (depending on the decoder type) allocated by the
2869  *              decoder. Note that the function will always call
2870  *              av_frame_unref(frame) before doing anything else.
2871  *
2872  * @return
2873  *      0:                 success, a frame was returned
2874  *      AVERROR(EAGAIN):   output is not available in this state - user must try
2875  *                         to send new input
2876  *      AVERROR_EOF:       the decoder has been fully flushed, and there will be
2877  *                         no more output frames
2878  *      AVERROR(EINVAL):   codec not opened, or it is an encoder
2879  *      AVERROR_INPUT_CHANGED:   current decoded frame has changed parameters
2880  *                               with respect to first decoded frame. Applicable
2881  *                               when flag AV_CODEC_FLAG_DROPCHANGED is set.
2882  *      other negative values: legitimate decoding errors
2883  */
2884 int avcodec_receive_frame(AVCodecContext *avctx, AVFrame *frame);
2885
2886 /**
2887  * Supply a raw video or audio frame to the encoder. Use avcodec_receive_packet()
2888  * to retrieve buffered output packets.
2889  *
2890  * @param avctx     codec context
2891  * @param[in] frame AVFrame containing the raw audio or video frame to be encoded.
2892  *                  Ownership of the frame remains with the caller, and the
2893  *                  encoder will not write to the frame. The encoder may create
2894  *                  a reference to the frame data (or copy it if the frame is
2895  *                  not reference-counted).
2896  *                  It can be NULL, in which case it is considered a flush
2897  *                  packet.  This signals the end of the stream. If the encoder
2898  *                  still has packets buffered, it will return them after this
2899  *                  call. Once flushing mode has been entered, additional flush
2900  *                  packets are ignored, and sending frames will return
2901  *                  AVERROR_EOF.
2902  *
2903  *                  For audio:
2904  *                  If AV_CODEC_CAP_VARIABLE_FRAME_SIZE is set, then each frame
2905  *                  can have any number of samples.
2906  *                  If it is not set, frame->nb_samples must be equal to
2907  *                  avctx->frame_size for all frames except the last.
2908  *                  The final frame may be smaller than avctx->frame_size.
2909  * @return 0 on success, otherwise negative error code:
2910  *      AVERROR(EAGAIN):   input is not accepted in the current state - user
2911  *                         must read output with avcodec_receive_packet() (once
2912  *                         all output is read, the packet should be resent, and
2913  *                         the call will not fail with EAGAIN).
2914  *      AVERROR_EOF:       the encoder has been flushed, and no new frames can
2915  *                         be sent to it
2916  *      AVERROR(EINVAL):   codec not opened, refcounted_frames not set, it is a
2917  *                         decoder, or requires flush
2918  *      AVERROR(ENOMEM):   failed to add packet to internal queue, or similar
2919  *      other errors: legitimate encoding errors
2920  */
2921 int avcodec_send_frame(AVCodecContext *avctx, const AVFrame *frame);
2922
2923 /**
2924  * Read encoded data from the encoder.
2925  *
2926  * @param avctx codec context
2927  * @param avpkt This will be set to a reference-counted packet allocated by the
2928  *              encoder. Note that the function will always call
2929  *              av_packet_unref(avpkt) before doing anything else.
2930  * @return 0 on success, otherwise negative error code:
2931  *      AVERROR(EAGAIN):   output is not available in the current state - user
2932  *                         must try to send input
2933  *      AVERROR_EOF:       the encoder has been fully flushed, and there will be
2934  *                         no more output packets
2935  *      AVERROR(EINVAL):   codec not opened, or it is a decoder
2936  *      other errors: legitimate encoding errors
2937  */
2938 int avcodec_receive_packet(AVCodecContext *avctx, AVPacket *avpkt);
2939
2940 /**
2941  * Create and return a AVHWFramesContext with values adequate for hardware
2942  * decoding. This is meant to get called from the get_format callback, and is
2943  * a helper for preparing a AVHWFramesContext for AVCodecContext.hw_frames_ctx.
2944  * This API is for decoding with certain hardware acceleration modes/APIs only.
2945  *
2946  * The returned AVHWFramesContext is not initialized. The caller must do this
2947  * with av_hwframe_ctx_init().
2948  *
2949  * Calling this function is not a requirement, but makes it simpler to avoid
2950  * codec or hardware API specific details when manually allocating frames.
2951  *
2952  * Alternatively to this, an API user can set AVCodecContext.hw_device_ctx,
2953  * which sets up AVCodecContext.hw_frames_ctx fully automatically, and makes
2954  * it unnecessary to call this function or having to care about
2955  * AVHWFramesContext initialization at all.
2956  *
2957  * There are a number of requirements for calling this function:
2958  *
2959  * - It must be called from get_format with the same avctx parameter that was
2960  *   passed to get_format. Calling it outside of get_format is not allowed, and
2961  *   can trigger undefined behavior.
2962  * - The function is not always supported (see description of return values).
2963  *   Even if this function returns successfully, hwaccel initialization could
2964  *   fail later. (The degree to which implementations check whether the stream
2965  *   is actually supported varies. Some do this check only after the user's
2966  *   get_format callback returns.)
2967  * - The hw_pix_fmt must be one of the choices suggested by get_format. If the
2968  *   user decides to use a AVHWFramesContext prepared with this API function,
2969  *   the user must return the same hw_pix_fmt from get_format.
2970  * - The device_ref passed to this function must support the given hw_pix_fmt.
2971  * - After calling this API function, it is the user's responsibility to
2972  *   initialize the AVHWFramesContext (returned by the out_frames_ref parameter),
2973  *   and to set AVCodecContext.hw_frames_ctx to it. If done, this must be done
2974  *   before returning from get_format (this is implied by the normal
2975  *   AVCodecContext.hw_frames_ctx API rules).
2976  * - The AVHWFramesContext parameters may change every time time get_format is
2977  *   called. Also, AVCodecContext.hw_frames_ctx is reset before get_format. So
2978  *   you are inherently required to go through this process again on every
2979  *   get_format call.
2980  * - It is perfectly possible to call this function without actually using
2981  *   the resulting AVHWFramesContext. One use-case might be trying to reuse a
2982  *   previously initialized AVHWFramesContext, and calling this API function
2983  *   only to test whether the required frame parameters have changed.
2984  * - Fields that use dynamically allocated values of any kind must not be set
2985  *   by the user unless setting them is explicitly allowed by the documentation.
2986  *   If the user sets AVHWFramesContext.free and AVHWFramesContext.user_opaque,
2987  *   the new free callback must call the potentially set previous free callback.
2988  *   This API call may set any dynamically allocated fields, including the free
2989  *   callback.
2990  *
2991  * The function will set at least the following fields on AVHWFramesContext
2992  * (potentially more, depending on hwaccel API):
2993  *
2994  * - All fields set by av_hwframe_ctx_alloc().
2995  * - Set the format field to hw_pix_fmt.
2996  * - Set the sw_format field to the most suited and most versatile format. (An
2997  *   implication is that this will prefer generic formats over opaque formats
2998  *   with arbitrary restrictions, if possible.)
2999  * - Set the width/height fields to the coded frame size, rounded up to the
3000  *   API-specific minimum alignment.
3001  * - Only _if_ the hwaccel requires a pre-allocated pool: set the initial_pool_size
3002  *   field to the number of maximum reference surfaces possible with the codec,
3003  *   plus 1 surface for the user to work (meaning the user can safely reference
3004  *   at most 1 decoded surface at a time), plus additional buffering introduced
3005  *   by frame threading. If the hwaccel does not require pre-allocation, the
3006  *   field is left to 0, and the decoder will allocate new surfaces on demand
3007  *   during decoding.
3008  * - Possibly AVHWFramesContext.hwctx fields, depending on the underlying
3009  *   hardware API.
3010  *
3011  * Essentially, out_frames_ref returns the same as av_hwframe_ctx_alloc(), but
3012  * with basic frame parameters set.
3013  *
3014  * The function is stateless, and does not change the AVCodecContext or the
3015  * device_ref AVHWDeviceContext.
3016  *
3017  * @param avctx The context which is currently calling get_format, and which
3018  *              implicitly contains all state needed for filling the returned
3019  *              AVHWFramesContext properly.
3020  * @param device_ref A reference to the AVHWDeviceContext describing the device
3021  *                   which will be used by the hardware decoder.
3022  * @param hw_pix_fmt The hwaccel format you are going to return from get_format.
3023  * @param out_frames_ref On success, set to a reference to an _uninitialized_
3024  *                       AVHWFramesContext, created from the given device_ref.
3025  *                       Fields will be set to values required for decoding.
3026  *                       Not changed if an error is returned.
3027  * @return zero on success, a negative value on error. The following error codes
3028  *         have special semantics:
3029  *      AVERROR(ENOENT): the decoder does not support this functionality. Setup
3030  *                       is always manual, or it is a decoder which does not
3031  *                       support setting AVCodecContext.hw_frames_ctx at all,
3032  *                       or it is a software format.
3033  *      AVERROR(EINVAL): it is known that hardware decoding is not supported for
3034  *                       this configuration, or the device_ref is not supported
3035  *                       for the hwaccel referenced by hw_pix_fmt.
3036  */
3037 int avcodec_get_hw_frames_parameters(AVCodecContext *avctx,
3038                                      AVBufferRef *device_ref,
3039                                      enum AVPixelFormat hw_pix_fmt,
3040                                      AVBufferRef **out_frames_ref);
3041
3042
3043
3044 /**
3045  * @defgroup lavc_parsing Frame parsing
3046  * @{
3047  */
3048
3049 enum AVPictureStructure {
3050     AV_PICTURE_STRUCTURE_UNKNOWN,      //< unknown
3051     AV_PICTURE_STRUCTURE_TOP_FIELD,    //< coded as top field
3052     AV_PICTURE_STRUCTURE_BOTTOM_FIELD, //< coded as bottom field
3053     AV_PICTURE_STRUCTURE_FRAME,        //< coded as frame
3054 };
3055
3056 typedef struct AVCodecParserContext {
3057     void *priv_data;
3058     struct AVCodecParser *parser;
3059     int64_t frame_offset; /* offset of the current frame */
3060     int64_t cur_offset; /* current offset
3061                            (incremented by each av_parser_parse()) */
3062     int64_t next_frame_offset; /* offset of the next frame */
3063     /* video info */
3064     int pict_type; /* XXX: Put it back in AVCodecContext. */
3065     /**
3066      * This field is used for proper frame duration computation in lavf.
3067      * It signals, how much longer the frame duration of the current frame
3068      * is compared to normal frame duration.
3069      *
3070      * frame_duration = (1 + repeat_pict) * time_base
3071      *
3072      * It is used by codecs like H.264 to display telecined material.
3073      */
3074     int repeat_pict; /* XXX: Put it back in AVCodecContext. */
3075     int64_t pts;     /* pts of the current frame */
3076     int64_t dts;     /* dts of the current frame */
3077
3078     /* private data */
3079     int64_t last_pts;
3080     int64_t last_dts;
3081     int fetch_timestamp;
3082
3083 #define AV_PARSER_PTS_NB 4
3084     int cur_frame_start_index;
3085     int64_t cur_frame_offset[AV_PARSER_PTS_NB];
3086     int64_t cur_frame_pts[AV_PARSER_PTS_NB];
3087     int64_t cur_frame_dts[AV_PARSER_PTS_NB];
3088
3089     int flags;
3090 #define PARSER_FLAG_COMPLETE_FRAMES           0x0001
3091 #define PARSER_FLAG_ONCE                      0x0002
3092 /// Set if the parser has a valid file offset
3093 #define PARSER_FLAG_FETCHED_OFFSET            0x0004
3094 #define PARSER_FLAG_USE_CODEC_TS              0x1000
3095
3096     int64_t offset;      ///< byte offset from starting packet start
3097     int64_t cur_frame_end[AV_PARSER_PTS_NB];
3098
3099     /**
3100      * Set by parser to 1 for key frames and 0 for non-key frames.
3101      * It is initialized to -1, so if the parser doesn't set this flag,
3102      * old-style fallback using AV_PICTURE_TYPE_I picture type as key frames
3103      * will be used.
3104      */
3105     int key_frame;
3106
3107     // Timestamp generation support:
3108     /**
3109      * Synchronization point for start of timestamp generation.
3110      *
3111      * Set to >0 for sync point, 0 for no sync point and <0 for undefined
3112      * (default).
3113      *
3114      * For example, this corresponds to presence of H.264 buffering period
3115      * SEI message.
3116      */
3117     int dts_sync_point;
3118
3119     /**
3120      * Offset of the current timestamp against last timestamp sync point in
3121      * units of AVCodecContext.time_base.
3122      *
3123      * Set to INT_MIN when dts_sync_point unused. Otherwise, it must
3124      * contain a valid timestamp offset.
3125      *
3126      * Note that the timestamp of sync point has usually a nonzero
3127      * dts_ref_dts_delta, which refers to the previous sync point. Offset of
3128      * the next frame after timestamp sync point will be usually 1.
3129      *
3130      * For example, this corresponds to H.264 cpb_removal_delay.
3131      */
3132     int dts_ref_dts_delta;
3133
3134     /**
3135      * Presentation delay of current frame in units of AVCodecContext.time_base.
3136      *
3137      * Set to INT_MIN when dts_sync_point unused. Otherwise, it must
3138      * contain valid non-negative timestamp delta (presentation time of a frame
3139      * must not lie in the past).
3140      *
3141      * This delay represents the difference between decoding and presentation
3142      * time of the frame.
3143      *
3144      * For example, this corresponds to H.264 dpb_output_delay.
3145      */
3146     int pts_dts_delta;
3147
3148     /**
3149      * Position of the packet in file.
3150      *
3151      * Analogous to cur_frame_pts/dts
3152      */
3153     int64_t cur_frame_pos[AV_PARSER_PTS_NB];
3154
3155     /**
3156      * Byte position of currently parsed frame in stream.
3157      */
3158     int64_t pos;
3159
3160     /**
3161      * Previous frame byte position.
3162      */
3163     int64_t last_pos;
3164
3165     /**
3166      * Duration of the current frame.
3167      * For audio, this is in units of 1 / AVCodecContext.sample_rate.
3168      * For all other types, this is in units of AVCodecContext.time_base.
3169      */
3170     int duration;
3171
3172     enum AVFieldOrder field_order;
3173
3174     /**
3175      * Indicate whether a picture is coded as a frame, top field or bottom field.
3176      *
3177      * For example, H.264 field_pic_flag equal to 0 corresponds to
3178      * AV_PICTURE_STRUCTURE_FRAME. An H.264 picture with field_pic_flag
3179      * equal to 1 and bottom_field_flag equal to 0 corresponds to
3180      * AV_PICTURE_STRUCTURE_TOP_FIELD.
3181      */
3182     enum AVPictureStructure picture_structure;
3183
3184     /**
3185      * Picture number incremented in presentation or output order.
3186      * This field may be reinitialized at the first picture of a new sequence.
3187      *
3188      * For example, this corresponds to H.264 PicOrderCnt.
3189      */
3190     int output_picture_number;
3191
3192     /**
3193      * Dimensions of the decoded video intended for presentation.
3194      */
3195     int width;
3196     int height;
3197
3198     /**
3199      * Dimensions of the coded video.
3200      */
3201     int coded_width;
3202     int coded_height;
3203
3204     /**
3205      * The format of the coded data, corresponds to enum AVPixelFormat for video
3206      * and for enum AVSampleFormat for audio.
3207      *
3208      * Note that a decoder can have considerable freedom in how exactly it
3209      * decodes the data, so the format reported here might be different from the
3210      * one returned by a decoder.
3211      */
3212     int format;
3213 } AVCodecParserContext;
3214
3215 typedef struct AVCodecParser {
3216     int codec_ids[5]; /* several codec IDs are permitted */
3217     int priv_data_size;
3218     int (*parser_init)(AVCodecParserContext *s);
3219     /* This callback never returns an error, a negative value means that
3220      * the frame start was in a previous packet. */
3221     int (*parser_parse)(AVCodecParserContext *s,
3222                         AVCodecContext *avctx,
3223                         const uint8_t **poutbuf, int *poutbuf_size,
3224                         const uint8_t *buf, int buf_size);
3225     void (*parser_close)(AVCodecParserContext *s);
3226     int (*split)(AVCodecContext *avctx, const uint8_t *buf, int buf_size);
3227 } AVCodecParser;
3228
3229 /**
3230  * Iterate over all registered codec parsers.
3231  *
3232  * @param opaque a pointer where libavcodec will store the iteration state. Must
3233  *               point to NULL to start the iteration.
3234  *
3235  * @return the next registered codec parser or NULL when the iteration is
3236  *         finished
3237  */
3238 const AVCodecParser *av_parser_iterate(void **opaque);
3239
3240 AVCodecParserContext *av_parser_init(int codec_id);
3241
3242 /**
3243  * Parse a packet.
3244  *
3245  * @param s             parser context.
3246  * @param avctx         codec context.
3247  * @param poutbuf       set to pointer to parsed buffer or NULL if not yet finished.
3248  * @param poutbuf_size  set to size of parsed buffer or zero if not yet finished.
3249  * @param buf           input buffer.
3250  * @param buf_size      buffer size in bytes without the padding. I.e. the full buffer
3251                         size is assumed to be buf_size + AV_INPUT_BUFFER_PADDING_SIZE.
3252                         To signal EOF, this should be 0 (so that the last frame
3253                         can be output).
3254  * @param pts           input presentation timestamp.
3255  * @param dts           input decoding timestamp.
3256  * @param pos           input byte position in stream.
3257  * @return the number of bytes of the input bitstream used.
3258  *
3259  * Example:
3260  * @code
3261  *   while(in_len){
3262  *       len = av_parser_parse2(myparser, AVCodecContext, &data, &size,
3263  *                                        in_data, in_len,
3264  *                                        pts, dts, pos);
3265  *       in_data += len;
3266  *       in_len  -= len;
3267  *
3268  *       if(size)
3269  *          decode_frame(data, size);
3270  *   }
3271  * @endcode
3272  */
3273 int av_parser_parse2(AVCodecParserContext *s,
3274                      AVCodecContext *avctx,
3275                      uint8_t **poutbuf, int *poutbuf_size,
3276                      const uint8_t *buf, int buf_size,
3277                      int64_t pts, int64_t dts,
3278                      int64_t pos);
3279
3280 #if FF_API_PARSER_CHANGE
3281 /**
3282  * @return 0 if the output buffer is a subset of the input, 1 if it is allocated and must be freed
3283  * @deprecated Use dump_extradata, remove_extra or extract_extradata
3284  *             bitstream filters instead.
3285  */
3286 attribute_deprecated
3287 int av_parser_change(AVCodecParserContext *s,
3288                      AVCodecContext *avctx,
3289                      uint8_t **poutbuf, int *poutbuf_size,
3290                      const uint8_t *buf, int buf_size, int keyframe);
3291 #endif
3292 void av_parser_close(AVCodecParserContext *s);
3293
3294 /**
3295  * @}
3296  * @}
3297  */
3298
3299 /**
3300  * @addtogroup lavc_encoding
3301  * @{
3302  */
3303
3304 #if FF_API_OLD_ENCDEC
3305 /**
3306  * Encode a frame of audio.
3307  *
3308  * Takes input samples from frame and writes the next output packet, if
3309  * available, to avpkt. The output packet does not necessarily contain data for
3310  * the most recent frame, as encoders can delay, split, and combine input frames
3311  * internally as needed.
3312  *
3313  * @param avctx     codec context
3314  * @param avpkt     output AVPacket.
3315  *                  The user can supply an output buffer by setting
3316  *                  avpkt->data and avpkt->size prior to calling the
3317  *                  function, but if the size of the user-provided data is not
3318  *                  large enough, encoding will fail. If avpkt->data and
3319  *                  avpkt->size are set, avpkt->destruct must also be set. All
3320  *                  other AVPacket fields will be reset by the encoder using
3321  *                  av_init_packet(). If avpkt->data is NULL, the encoder will
3322  *                  allocate it. The encoder will set avpkt->size to the size
3323  *                  of the output packet.
3324  *
3325  *                  If this function fails or produces no output, avpkt will be
3326  *                  freed using av_packet_unref().
3327  * @param[in] frame AVFrame containing the raw audio data to be encoded.
3328  *                  May be NULL when flushing an encoder that has the
3329  *                  AV_CODEC_CAP_DELAY capability set.
3330  *                  If AV_CODEC_CAP_VARIABLE_FRAME_SIZE is set, then each frame
3331  *                  can have any number of samples.
3332  *                  If it is not set, frame->nb_samples must be equal to
3333  *                  avctx->frame_size for all frames except the last.
3334  *                  The final frame may be smaller than avctx->frame_size.
3335  * @param[out] got_packet_ptr This field is set to 1 by libavcodec if the
3336  *                            output packet is non-empty, and to 0 if it is
3337  *                            empty. If the function returns an error, the
3338  *                            packet can be assumed to be invalid, and the
3339  *                            value of got_packet_ptr is undefined and should
3340  *                            not be used.
3341  * @return          0 on success, negative error code on failure
3342  *
3343  * @deprecated use avcodec_send_frame()/avcodec_receive_packet() instead.
3344  *             If allowed and required, set AVCodecContext.get_encode_buffer to
3345  *             a custom function to pass user supplied output buffers.
3346  */
3347 attribute_deprecated
3348 int avcodec_encode_audio2(AVCodecContext *avctx, AVPacket *avpkt,
3349                           const AVFrame *frame, int *got_packet_ptr);
3350
3351 /**
3352  * Encode a frame of video.
3353  *
3354  * Takes input raw video data from frame and writes the next output packet, if
3355  * available, to avpkt. The output packet does not necessarily contain data for
3356  * the most recent frame, as encoders can delay and reorder input frames
3357  * internally as needed.
3358  *
3359  * @param avctx     codec context
3360  * @param avpkt     output AVPacket.
3361  *                  The user can supply an output buffer by setting
3362  *                  avpkt->data and avpkt->size prior to calling the
3363  *                  function, but if the size of the user-provided data is not
3364  *                  large enough, encoding will fail. All other AVPacket fields
3365  *                  will be reset by the encoder using av_init_packet(). If
3366  *                  avpkt->data is NULL, the encoder will allocate it.
3367  *                  The encoder will set avpkt->size to the size of the
3368  *                  output packet. The returned data (if any) belongs to the
3369  *                  caller, he is responsible for freeing it.
3370  *
3371  *                  If this function fails or produces no output, avpkt will be
3372  *                  freed using av_packet_unref().
3373  * @param[in] frame AVFrame containing the raw video data to be encoded.
3374  *                  May be NULL when flushing an encoder that has the
3375  *                  AV_CODEC_CAP_DELAY capability set.
3376  * @param[out] got_packet_ptr This field is set to 1 by libavcodec if the
3377  *                            output packet is non-empty, and to 0 if it is
3378  *                            empty. If the function returns an error, the
3379  *                            packet can be assumed to be invalid, and the
3380  *                            value of got_packet_ptr is undefined and should
3381  *                            not be used.
3382  * @return          0 on success, negative error code on failure
3383  *
3384  * @deprecated use avcodec_send_frame()/avcodec_receive_packet() instead.
3385  *             If allowed and required, set AVCodecContext.get_encode_buffer to
3386  *             a custom function to pass user supplied output buffers.
3387  */
3388 attribute_deprecated
3389 int avcodec_encode_video2(AVCodecContext *avctx, AVPacket *avpkt,
3390                           const AVFrame *frame, int *got_packet_ptr);
3391 #endif
3392
3393 int avcodec_encode_subtitle(AVCodecContext *avctx, uint8_t *buf, int buf_size,
3394                             const AVSubtitle *sub);
3395
3396
3397 /**
3398  * @}
3399  */
3400
3401 /**
3402  * @defgroup lavc_misc Utility functions
3403  * @ingroup libavc
3404  *
3405  * Miscellaneous utility functions related to both encoding and decoding
3406  * (or neither).
3407  * @{
3408  */
3409
3410 /**
3411  * @defgroup lavc_misc_pixfmt Pixel formats
3412  *
3413  * Functions for working with pixel formats.
3414  * @{
3415  */
3416
3417 /**
3418  * Return a value representing the fourCC code associated to the
3419  * pixel format pix_fmt, or 0 if no associated fourCC code can be
3420  * found.
3421  */
3422 unsigned int avcodec_pix_fmt_to_codec_tag(enum AVPixelFormat pix_fmt);
3423
3424 /**
3425  * Find the best pixel format to convert to given a certain source pixel
3426  * format.  When converting from one pixel format to another, information loss
3427  * may occur.  For example, when converting from RGB24 to GRAY, the color
3428  * information will be lost. Similarly, other losses occur when converting from
3429  * some formats to other formats. avcodec_find_best_pix_fmt_of_2() searches which of
3430  * the given pixel formats should be used to suffer the least amount of loss.
3431  * The pixel formats from which it chooses one, are determined by the
3432  * pix_fmt_list parameter.
3433  *
3434  *
3435  * @param[in] pix_fmt_list AV_PIX_FMT_NONE terminated array of pixel formats to choose from
3436  * @param[in] src_pix_fmt source pixel format
3437  * @param[in] has_alpha Whether the source pixel format alpha channel is used.
3438  * @param[out] loss_ptr Combination of flags informing you what kind of losses will occur.
3439  * @return The best pixel format to convert to or -1 if none was found.
3440  */
3441 enum AVPixelFormat avcodec_find_best_pix_fmt_of_list(const enum AVPixelFormat *pix_fmt_list,
3442                                             enum AVPixelFormat src_pix_fmt,
3443                                             int has_alpha, int *loss_ptr);
3444
3445 enum AVPixelFormat avcodec_default_get_format(struct AVCodecContext *s, const enum AVPixelFormat * fmt);
3446
3447 /**
3448  * @}
3449  */
3450
3451 void avcodec_string(char *buf, int buf_size, AVCodecContext *enc, int encode);
3452
3453 /**
3454  * Return a name for the specified profile, if available.
3455  *
3456  * @param codec the codec that is searched for the given profile
3457  * @param profile the profile value for which a name is requested
3458  * @return A name for the profile if found, NULL otherwise.
3459  */
3460 const char *av_get_profile_name(const AVCodec *codec, int profile);
3461
3462 /**
3463  * Return a name for the specified profile, if available.
3464  *
3465  * @param codec_id the ID of the codec to which the requested profile belongs
3466  * @param profile the profile value for which a name is requested
3467  * @return A name for the profile if found, NULL otherwise.
3468  *
3469  * @note unlike av_get_profile_name(), which searches a list of profiles
3470  *       supported by a specific decoder or encoder implementation, this
3471  *       function searches the list of profiles from the AVCodecDescriptor
3472  */
3473 const char *avcodec_profile_name(enum AVCodecID codec_id, int profile);
3474
3475 int avcodec_default_execute(AVCodecContext *c, int (*func)(AVCodecContext *c2, void *arg2),void *arg, int *ret, int count, int size);
3476 int avcodec_default_execute2(AVCodecContext *c, int (*func)(AVCodecContext *c2, void *arg2, int, int),void *arg, int *ret, int count);
3477 //FIXME func typedef
3478
3479 /**
3480  * Fill AVFrame audio data and linesize pointers.
3481  *
3482  * The buffer buf must be a preallocated buffer with a size big enough
3483  * to contain the specified samples amount. The filled AVFrame data
3484  * pointers will point to this buffer.
3485  *
3486  * AVFrame extended_data channel pointers are allocated if necessary for
3487  * planar audio.
3488  *
3489  * @param frame       the AVFrame
3490  *                    frame->nb_samples must be set prior to calling the
3491  *                    function. This function fills in frame->data,
3492  *                    frame->extended_data, frame->linesize[0].
3493  * @param nb_channels channel count
3494  * @param sample_fmt  sample format
3495  * @param buf         buffer to use for frame data
3496  * @param buf_size    size of buffer
3497  * @param align       plane size sample alignment (0 = default)
3498  * @return            >=0 on success, negative error code on failure
3499  * @todo return the size in bytes required to store the samples in
3500  * case of success, at the next libavutil bump
3501  */
3502 int avcodec_fill_audio_frame(AVFrame *frame, int nb_channels,
3503                              enum AVSampleFormat sample_fmt, const uint8_t *buf,
3504                              int buf_size, int align);
3505
3506 /**
3507  * Reset the internal codec state / flush internal buffers. Should be called
3508  * e.g. when seeking or when switching to a different stream.
3509  *
3510  * @note for decoders, when refcounted frames are not used
3511  * (i.e. avctx->refcounted_frames is 0), this invalidates the frames previously
3512  * returned from the decoder. When refcounted frames are used, the decoder just
3513  * releases any references it might keep internally, but the caller's reference
3514  * remains valid.
3515  *
3516  * @note for encoders, this function will only do something if the encoder
3517  * declares support for AV_CODEC_CAP_ENCODER_FLUSH. When called, the encoder
3518  * will drain any remaining packets, and can then be re-used for a different
3519  * stream (as opposed to sending a null frame which will leave the encoder
3520  * in a permanent EOF state after draining). This can be desirable if the
3521  * cost of tearing down and replacing the encoder instance is high.
3522  */
3523 void avcodec_flush_buffers(AVCodecContext *avctx);
3524
3525 /**
3526  * Return codec bits per sample.
3527  *
3528  * @param[in] codec_id the codec
3529  * @return Number of bits per sample or zero if unknown for the given codec.
3530  */
3531 int av_get_bits_per_sample(enum AVCodecID codec_id);
3532
3533 /**
3534  * Return the PCM codec associated with a sample format.
3535  * @param be  endianness, 0 for little, 1 for big,
3536  *            -1 (or anything else) for native
3537  * @return  AV_CODEC_ID_PCM_* or AV_CODEC_ID_NONE
3538  */
3539 enum AVCodecID av_get_pcm_codec(enum AVSampleFormat fmt, int be);
3540
3541 /**
3542  * Return codec bits per sample.
3543  * Only return non-zero if the bits per sample is exactly correct, not an
3544  * approximation.
3545  *
3546  * @param[in] codec_id the codec
3547  * @return Number of bits per sample or zero if unknown for the given codec.
3548  */
3549 int av_get_exact_bits_per_sample(enum AVCodecID codec_id);
3550
3551 /**
3552  * Return audio frame duration.
3553  *
3554  * @param avctx        codec context
3555  * @param frame_bytes  size of the frame, or 0 if unknown
3556  * @return             frame duration, in samples, if known. 0 if not able to
3557  *                     determine.
3558  */
3559 int av_get_audio_frame_duration(AVCodecContext *avctx, int frame_bytes);
3560
3561 /**
3562  * This function is the same as av_get_audio_frame_duration(), except it works
3563  * with AVCodecParameters instead of an AVCodecContext.
3564  */
3565 int av_get_audio_frame_duration2(AVCodecParameters *par, int frame_bytes);
3566
3567 /* memory */
3568
3569 /**
3570  * Same behaviour av_fast_malloc but the buffer has additional
3571  * AV_INPUT_BUFFER_PADDING_SIZE at the end which will always be 0.
3572  *
3573  * In addition the whole buffer will initially and after resizes
3574  * be 0-initialized so that no uninitialized data will ever appear.
3575  */
3576 void av_fast_padded_malloc(void *ptr, unsigned int *size, size_t min_size);
3577
3578 /**
3579  * Same behaviour av_fast_padded_malloc except that buffer will always
3580  * be 0-initialized after call.
3581  */
3582 void av_fast_padded_mallocz(void *ptr, unsigned int *size, size_t min_size);
3583
3584 /**
3585  * Encode extradata length to a buffer. Used by xiph codecs.
3586  *
3587  * @param s buffer to write to; must be at least (v/255+1) bytes long
3588  * @param v size of extradata in bytes
3589  * @return number of bytes written to the buffer.
3590  */
3591 unsigned int av_xiphlacing(unsigned char *s, unsigned int v);
3592
3593 /**
3594  * @return a positive value if s is open (i.e. avcodec_open2() was called on it
3595  * with no corresponding avcodec_close()), 0 otherwise.
3596  */
3597 int avcodec_is_open(AVCodecContext *s);
3598
3599 /**
3600  * Allocate a CPB properties structure and initialize its fields to default
3601  * values.
3602  *
3603  * @param size if non-NULL, the size of the allocated struct will be written
3604  *             here. This is useful for embedding it in side data.
3605  *
3606  * @return the newly allocated struct or NULL on failure
3607  */
3608 AVCPBProperties *av_cpb_properties_alloc(size_t *size);
3609
3610 /**
3611  * @}
3612  */
3613
3614 #endif /* AVCODEC_AVCODEC_H */