git.sesse.net Git - mlt/blob - src/framework/mlt_frame.h

   1 /**
   2  * \file mlt_frame.h
   3  * \brief interface for all frame classes
   4  * \see mlt_frame_s
   5  *
   6  * Copyright (C) 2003-2013 Ushodaya Enterprises Limited
   7  * \author Charles Yates <charles.yates@pandora.be>
   8  * \author Dan Dennedy <dan@dennedy.org>
   9  *
  10  * This library is free software; you can redistribute it and/or
  11  * modify it under the terms of the GNU Lesser General Public
  12  * License as published by the Free Software Foundation; either
  13  * version 2.1 of the License, or (at your option) any later version.
  14  *
  15  * This library is distributed in the hope that it will be useful,
  16  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  17  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  18  * Lesser General Public License for more details.
  19  *
  20  * You should have received a copy of the GNU Lesser General Public
  21  * License along with this library; if not, write to the Free Software
  22  * Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
  23  */
  24
  25 #ifndef _MLT_FRAME_H_
  26 #define _MLT_FRAME_H_
  27
  28 #include "mlt_properties.h"
  29 #include "mlt_deque.h"
  30 #include "mlt_service.h"
  31
  32 /** Callback function to get video data.
  33  *
  34  */
  35
  36 typedef int ( *mlt_get_image )( mlt_frame self, uint8_t **buffer, mlt_image_format *format, int *width, int *height, int writable );
  37
  38 /** Callback function to get audio data.
  39  *
  40  */
  41
  42 typedef int ( *mlt_get_audio )( mlt_frame self, void **buffer, mlt_audio_format *format, int *frequency, int *channels, int *samples );
  43
  44 /** \brief Frame class
  45  *
  46  * The frame is the primary data object that gets passed around to and through services.
  47  *
  48  * \extends mlt_properties
  49  * \properties \em test_image set if the frame holds a "test card" image
  50  * \properties \em test_audio set if the frame holds "test card" audio
  51  * \properties \em _producer holds a reference to the frame's end producer
  52  * \properties \em _speed the current speed of the producer that generated the frame
  53  * \properties \em _position the position of the frame
  54  * \properties \em meta.* holds metadata
  55  * \properties \em hide set to 1 to hide the video, 2 to mute the audio
  56  * \properties \em last_track a flag to indicate an end-of-tracks frame
  57  * \properties \em previous \em frame a reference to the unfiltered preceding frame
  58  * (no speed factor applied, only available when \em _need_previous_next is set on the producer)
  59  * \properties \em next \em frame a reference to the unfiltered following frame
  60  * (no speed factor applied, only available when \em _need_previous_next is set on the producer)
  61  * \properties \em colorspace the standard for luma coefficients
  62  * \properties \em force_full_luma luma range handling, set to -1 for pass-through, 1 for full range, 0 for scaling
  63  * \properties \em audio_frequency the sample rate of the audio
  64  * \properties \em audio_channels the number of audio channels
  65  * \properties \em audio_samples the number of audio samples
  66  * \properties \em audio_format the mlt_audio_format for the audio on this frame
  67  * \properties \em format the mlt_image_format of the image on this frame
  68  * \properties \em width the horizontal resolution of the image
  69  * \properties \em height the vertical resolution of the image
  70  * \properties \em aspect_ratio the sample aspect ratio of the image
  71  */
  72
  73 struct mlt_frame_s
  74 {
  75         struct mlt_properties_s parent; /**< \private A frame extends properties. */
  76
  77         /** Get the alpha channel (callback function).
  78          * \param self a frame
  79          * \return the 8-bit alpha channel
  80          */
  81         uint8_t * ( *get_alpha_mask )( mlt_frame self );
  82
  83         /** Convert the image format (callback function).
  84          * \param self a frame
  85          * \param[in,out] image a buffer of image data
  86          * \param[in,out] input the image format of supplied image data
  87          * \param output the image format to which to convert
  88          * \return true if error
  89          */
  90         int ( *convert_image )( mlt_frame self, uint8_t **image, mlt_image_format *input, mlt_image_format output );
  91
  92         /** Convert the audio format (callback function).
  93          * \param self a frame
  94          * \param[in,out] audio a buffer of audio data
  95          * \param[in,out] input the audio format of supplied data
  96          * \param output the audio format to which to convert
  97          * \return true if error
  98          */
  99         int ( *convert_audio )( mlt_frame self, void **audio, mlt_audio_format *input, mlt_audio_format output );
 100
 101         mlt_deque stack_image;   /**< \private the image processing stack of operations and data */
 102         mlt_deque stack_audio;   /**< \private the audio processing stack of operations and data */
 103         mlt_deque stack_service; /**< \private a general purpose data stack */
 104         int is_processing;       /**< \private indicates if a frame is or was processed by the parallel consumer */
 105 };
 106
 107 #define MLT_FRAME_PROPERTIES( frame )           ( &( frame )->parent )
 108 #define MLT_FRAME_SERVICE_STACK( frame )        ( ( frame )->stack_service )
 109 #define MLT_FRAME_IMAGE_STACK( frame )          ( ( frame )->stack_image )
 110 #define MLT_FRAME_AUDIO_STACK( frame )          ( ( frame )->stack_audio )
 111
 112 extern mlt_frame mlt_frame_init( mlt_service service );
 113 extern mlt_properties mlt_frame_properties( mlt_frame self );
 114 extern int mlt_frame_is_test_card( mlt_frame self );
 115 extern int mlt_frame_is_test_audio( mlt_frame self );
 116 extern double mlt_frame_get_aspect_ratio( mlt_frame self );
 117 extern int mlt_frame_set_aspect_ratio( mlt_frame self, double value );
 118 extern mlt_position mlt_frame_get_position( mlt_frame self );
 119 extern mlt_position mlt_frame_original_position( mlt_frame self );
 120 extern int mlt_frame_set_position( mlt_frame self, mlt_position value );
 121 extern int mlt_frame_set_image( mlt_frame self, uint8_t *image, int size, mlt_destructor destroy );
 122 extern int mlt_frame_set_alpha( mlt_frame self, uint8_t *alpha, int size, mlt_destructor destroy );
 123 extern void mlt_frame_replace_image( mlt_frame self, uint8_t *image, mlt_image_format format, int width, int height );
 124 extern int mlt_frame_get_image( mlt_frame self, uint8_t **buffer, mlt_image_format *format, int *width, int *height, int writable );
 125 extern uint8_t *mlt_frame_get_alpha_mask( mlt_frame self );
 126 extern int mlt_frame_get_audio( mlt_frame self, void **buffer, mlt_audio_format *format, int *frequency, int *channels, int *samples );
 127 extern int mlt_frame_set_audio( mlt_frame self, void *buffer, mlt_audio_format, int size, mlt_destructor );
 128 extern unsigned char *mlt_frame_get_waveform( mlt_frame self, int w, int h );
 129 extern int mlt_frame_push_get_image( mlt_frame self, mlt_get_image get_image );
 130 extern mlt_get_image mlt_frame_pop_get_image( mlt_frame self );
 131 extern int mlt_frame_push_frame( mlt_frame self, mlt_frame that );
 132 extern mlt_frame mlt_frame_pop_frame( mlt_frame self );
 133 extern int mlt_frame_push_service( mlt_frame self, void *that );
 134 extern void *mlt_frame_pop_service( mlt_frame self );
 135 extern int mlt_frame_push_service_int( mlt_frame self, int that );
 136 extern int mlt_frame_pop_service_int( mlt_frame self );
 137 extern int mlt_frame_push_audio( mlt_frame self, void *that );
 138 extern void *mlt_frame_pop_audio( mlt_frame self );
 139 extern mlt_deque mlt_frame_service_stack( mlt_frame self );
 140 extern mlt_producer mlt_frame_get_original_producer( mlt_frame self );
 141 extern void mlt_frame_close( mlt_frame self );
 142 extern mlt_properties mlt_frame_unique_properties( mlt_frame self, mlt_service service );
 143 extern mlt_frame mlt_frame_clone( mlt_frame self, int is_deep );
 144
 145 /* convenience functions */
 146 extern int mlt_sample_calculator( float fps, int frequency, int64_t position );
 147 extern int64_t mlt_sample_calculator_to_now( float fps, int frequency, int64_t position );
 148 extern const char * mlt_image_format_name( mlt_image_format format );
 149 extern int mlt_image_format_size( mlt_image_format format, int width, int height, int *bpp );
 150 extern const char * mlt_audio_format_name( mlt_audio_format format );
 151 extern int mlt_audio_format_size( mlt_audio_format format, int samples, int channels );
 152 extern void mlt_frame_write_ppm( mlt_frame frame );
 153
 154 /** This macro scales RGB into the YUV gamut - y is scaled by 219/255 and uv by 224/255. */
 155 #define RGB2YUV_601_SCALED(r, g, b, y, u, v)\
 156   y = ((263*r + 516*g + 100*b) >> 10) + 16;\
 157   u = ((-152*r - 300*g + 450*b) >> 10) + 128;\
 158   v = ((450*r - 377*g - 73*b) >> 10) + 128;
 159
 160 /** This macro scales YUV up into the full gamut of the RGB color space. */
 161 #define YUV2RGB_601_SCALED( y, u, v, r, g, b ) \
 162   r = ((1192 * ( y - 16 ) + 1634 * ( v - 128 ) ) >> 10 ); \
 163   g = ((1192 * ( y - 16 ) - 832 * ( v - 128 ) - 401 * ( u - 128 ) ) >> 10 ); \
 164   b = ((1192 * ( y - 16 ) + 2066 * ( u - 128 ) ) >> 10 ); \
 165   r = r < 0 ? 0 : r > 255 ? 255 : r; \
 166   g = g < 0 ? 0 : g > 255 ? 255 : g; \
 167   b = b < 0 ? 0 : b > 255 ? 255 : b;
 168
 169 #endif