]> git.sesse.net Git - mlt/blob - src/modules/core/producer_consumer.c
Fix composite regression with no luma.
[mlt] / src / modules / core / producer_consumer.c
1 /*
2  * producer_consumer.c -- produce as a consumer of an encapsulated producer
3  * Copyright (C) 2008 Ushodaya Enterprises Limited
4  * Author: Dan Dennedy <dan@dennedy.org>
5  *
6  * This library is free software; you can redistribute it and/or
7  * modify it under the terms of the GNU Lesser General Public
8  * License as published by the Free Software Foundation; either
9  * version 2.1 of the License, or (at your option) any later version.
10  *
11  * This library is distributed in the hope that it will be useful,
12  * but WITHOUT ANY WARRANTY; without even the implied warranty of
13  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
14  * Lesser General Public License for more details.
15  *
16  * You should have received a copy of the GNU Lesser General Public
17  * License along with this library; if not, write to the Free Software
18  * Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
19  */
20
21 #include <framework/mlt.h>
22
23 #include <stdio.h>
24 #include <stdlib.h>
25 #include <math.h>
26 #include <string.h>
27
28 struct context_s {
29         mlt_producer this;
30         mlt_producer producer;
31         mlt_consumer consumer;
32         mlt_profile profile;
33         int is_close_profile;
34 };
35 typedef struct context_s *context; 
36
37
38 static int get_image( mlt_frame frame, uint8_t **image, mlt_image_format *format, int *width, int *height, int writable )
39 {
40         context cx = mlt_frame_pop_service( frame );
41         mlt_frame nested_frame = mlt_frame_pop_service( frame );
42
43         *width = cx->profile->width;
44         *height = cx->profile->height;
45
46         int result = mlt_frame_get_image( nested_frame, image, format, width, height, writable );
47
48         // Allocate the image
49         int size = *width * *height * ( *format == mlt_image_yuv422 ? 2 : *format == mlt_image_rgb24 ? 3 :
50                 ( *format == mlt_image_rgb24a || *format == mlt_image_opengl ) ? 4 : ( 3 / 2 ) );
51         uint8_t *new_image = mlt_pool_alloc( size );
52
53         // Update the frame
54         mlt_properties properties = mlt_frame_properties( frame );
55         mlt_properties_set_data( properties, "image", new_image, size, mlt_pool_release, NULL );
56         memcpy( new_image, *image, size );
57         mlt_frame_close( nested_frame );
58         *image = new_image;
59
60 //      mlt_properties_debug( properties, "frame", stderr );
61 //      mlt_properties_debug( mlt_frame_properties( nested_frame ), "nested_frame", stderr );
62
63         return result;
64 }
65
66 static int get_audio( mlt_frame frame, void **buffer, mlt_audio_format *format, int *frequency, int *channels, int *samples )
67 {
68         mlt_frame nested_frame = mlt_frame_pop_audio( frame );
69         int result = mlt_frame_get_audio( nested_frame, buffer, format, frequency, channels, samples );
70         int size = *channels * *samples;
71
72         switch ( *format )
73         {
74                 case mlt_audio_s16:
75                         size *= sizeof( int16_t );
76                         break;
77                 case mlt_audio_s32:
78                         size *= sizeof( int32_t );
79                 case mlt_audio_float:
80                         size *= sizeof( float );
81                 default:
82                         mlt_log_error( NULL, "[producer consumer] Invalid audio format\n" );
83         }
84         int16_t *new_buffer = mlt_pool_alloc( size );
85         mlt_properties_set_data( MLT_FRAME_PROPERTIES( frame ), "audio", new_buffer, size, mlt_pool_release, NULL );
86         memcpy( new_buffer, *buffer, size );
87         *buffer = new_buffer;
88         mlt_frame_close( nested_frame );
89         return result;
90 }
91
92 static int get_frame( mlt_producer this, mlt_frame_ptr frame, int index )
93 {
94         mlt_properties properties = MLT_PRODUCER_PROPERTIES(this);
95         context cx = mlt_properties_get_data( properties, "context", NULL );
96
97         if ( !cx )
98         {
99                 // Allocate and initialize our context
100                 cx = mlt_pool_alloc( sizeof( struct context_s ) );
101                 mlt_properties_set_data( properties, "context", cx, 0, mlt_pool_release, NULL );
102                 cx->this = this;
103                 char *profile_name = mlt_properties_get( properties, "profile" );
104                 mlt_profile profile = mlt_service_profile( MLT_PRODUCER_SERVICE( this ) );
105
106                 if ( profile_name )
107                 {
108                         cx->profile = mlt_profile_init( profile_name );
109                         cx->is_close_profile = 1;
110                 }
111                 else
112                 {
113                         cx->profile = profile;
114                         cx->is_close_profile = 0;
115                 }
116
117                 // For now, we must conform the nested network's frame rate to the parent network's
118                 // framerate.
119                 cx->profile->frame_rate_num = profile->frame_rate_num;
120                 cx->profile->frame_rate_den = profile->frame_rate_den;
121
122                 // We will encapsulate a consumer
123                 cx->consumer = mlt_consumer_new( cx->profile );
124                 // Do not use _pass_list on real_time so that it defaults to 0 in the absence of
125                 // an explicit real_time property.
126                 mlt_properties_set_int( MLT_CONSUMER_PROPERTIES( cx->consumer ), "real_time",
127                         mlt_properties_get_int( properties, "real_time" ) );
128                 mlt_properties_pass_list( MLT_CONSUMER_PROPERTIES( cx->consumer ), properties,
129                         "buffer, prefill" );
130         
131                 // Encapsulate a real producer for the resource
132                 cx->producer = mlt_factory_producer( cx->profile, NULL,
133                         mlt_properties_get( properties, "resource" ) );
134                 mlt_properties_pass_list( properties, MLT_PRODUCER_PROPERTIES( cx->producer ),
135                         "out, length" );
136
137                 // Since we control the seeking, prevent it from seeking on its own
138                 mlt_producer_set_speed( cx->producer, 0 );
139
140                 // Connect it all together
141                 mlt_consumer_connect( cx->consumer, MLT_PRODUCER_SERVICE( cx->producer ) );
142                 mlt_consumer_start( cx->consumer );
143         }
144
145         // Generate a frame
146         *frame = mlt_frame_init( MLT_PRODUCER_SERVICE( this ) );
147         if ( frame )
148         {
149                 // Our "in" needs to be the same, keep it so
150                 mlt_properties_pass_list( MLT_PRODUCER_PROPERTIES( cx->producer ), properties, "in, out" );
151
152                 // Seek the producer to the correct place
153                 // Calculate our positions
154                 double actual_position = mlt_producer_get_speed( this ) * (double)mlt_producer_position( this );
155                 mlt_position need_first = floor( actual_position );
156                 mlt_producer_seek( cx->producer, need_first );
157                 
158                 // Get the nested frame
159                 mlt_frame nested_frame = mlt_consumer_rt_frame( cx->consumer );
160
161                 // Stack the producer and our methods on the nested frame
162                 mlt_frame_push_service( *frame, nested_frame );
163                 mlt_frame_push_service( *frame, cx );
164                 mlt_frame_push_get_image( *frame, get_image );
165                 mlt_frame_push_audio( *frame, nested_frame );
166                 mlt_frame_push_audio( *frame, get_audio );
167                 
168                 // Give the returned frame temporal identity
169                 mlt_frame_set_position( *frame, mlt_producer_position( this ) );
170                 
171                 // Put additional references on the frame so both get_image and get_audio
172                 // methods can close it.
173                 mlt_properties_inc_ref( MLT_FRAME_PROPERTIES( nested_frame ) );
174
175                 // Inform the normalizers about our video properties
176                 mlt_properties frame_props = MLT_FRAME_PROPERTIES( *frame );
177                 mlt_properties_set_double( frame_props, "aspect_ratio", mlt_profile_sar( cx->profile ) );
178                 mlt_properties_set_int( frame_props, "width", cx->profile->width );
179                 mlt_properties_set_int( frame_props, "height", cx->profile->height );
180                 mlt_properties_set_int( frame_props, "real_width", cx->profile->width );
181                 mlt_properties_set_int( frame_props, "real_height", cx->profile->height );
182                 mlt_properties_set_int( frame_props, "progressive", cx->profile->progressive );
183         }
184
185         // Calculate the next timecode
186         mlt_producer_prepare_next( this );
187
188         return 0;
189 }
190
191 static void producer_close( mlt_producer this )
192 {
193         context cx = mlt_properties_get_data( MLT_PRODUCER_PROPERTIES( this ), "context", NULL );
194         
195         // Shut down all the encapsulated services
196         if ( cx )
197         {
198                 mlt_consumer_stop( cx->consumer );
199                 mlt_consumer_close( cx->consumer );
200                 mlt_producer_close( cx->producer );
201                 if ( cx->is_close_profile )
202                         mlt_profile_close( cx->profile );
203         }
204         
205         this->close = NULL;
206         mlt_producer_close( this );
207         free( this );
208 }
209
210 mlt_producer producer_consumer_init( mlt_profile profile, mlt_service_type type, const char *id, char *arg )
211 {
212         mlt_producer this = mlt_producer_new( );
213
214         // Encapsulate the real producer
215         mlt_producer real_producer = mlt_factory_producer( profile, NULL, arg );
216
217         if ( this && real_producer )
218         {
219                 // Override some producer methods
220                 this->close = ( mlt_destructor )producer_close;
221                 this->get_frame = get_frame;
222                 
223                 // Get the properties of this producer
224                 mlt_properties properties = MLT_PRODUCER_PROPERTIES( this );
225                 mlt_properties_set( properties, "resource", arg );
226                 mlt_properties_pass_list( properties, MLT_PRODUCER_PROPERTIES( real_producer ), "out, length" );
227
228                 // Done with the producer - will re-open later when we have the profile property
229                 mlt_producer_close( real_producer );
230         }
231         else
232         {
233                 if ( this )
234                         mlt_producer_close( this );
235                 if ( real_producer )
236                         mlt_producer_close( real_producer );
237
238                 this = NULL;
239         }
240         return this;
241 }