]> git.sesse.net Git - x264/blob - output/mp4.c
Fix crash with MP4-muxing if zero frames were encoded
[x264] / output / mp4.c
1 /*****************************************************************************
2  * mp4.c: x264 mp4 output module
3  *****************************************************************************
4  * Copyright (C) 2003-2009 x264 project
5  *
6  * Authors: Laurent Aimar <fenrir@via.ecp.fr>
7  *          Loren Merritt <lorenm@u.washington.edu>
8  *
9  * This program is free software; you can redistribute it and/or modify
10  * it under the terms of the GNU General Public License as published by
11  * the Free Software Foundation; either version 2 of the License, or
12  * (at your option) any later version.
13  *
14  * This program is distributed in the hope that it will be useful,
15  * but WITHOUT ANY WARRANTY; without even the implied warranty of
16  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
17  * GNU General Public License for more details.
18  *
19  * You should have received a copy of the GNU General Public License
20  * along with this program; if not, write to the Free Software
21  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA  02111, USA.
22  *****************************************************************************/
23
24 #include "muxers.h"
25 #include <gpac/isomedia.h>
26
27 #ifdef HAVE_GF_MALLOC
28 #undef malloc
29 #undef free
30 #define malloc gf_malloc
31 #define free gf_free
32 #endif
33
34 typedef struct
35 {
36     GF_ISOFile *p_file;
37     GF_AVCConfig *p_config;
38     GF_ISOSample *p_sample;
39     int i_track;
40     uint32_t i_descidx;
41     uint32_t i_time_res;
42     int64_t i_time_inc;
43     int i_numframe;
44     int i_delay_time;
45 } mp4_hnd_t;
46
47 static void recompute_bitrate_mp4( GF_ISOFile *p_file, int i_track )
48 {
49     u32 count, di, timescale, time_wnd, rate;
50     u64 offset;
51     Double br;
52     GF_ESD *esd;
53
54     esd = gf_isom_get_esd( p_file, i_track, 1 );
55     if( !esd )
56         return;
57
58     esd->decoderConfig->avgBitrate = 0;
59     esd->decoderConfig->maxBitrate = 0;
60     rate = time_wnd = 0;
61
62     timescale = gf_isom_get_media_timescale( p_file, i_track );
63     count = gf_isom_get_sample_count( p_file, i_track );
64     for( int i = 0; i < count; i++ )
65     {
66         GF_ISOSample *samp = gf_isom_get_sample_info( p_file, i_track, i+1, &di, &offset );
67         if( !samp )
68         {
69             fprintf( stderr, "mp4 [error]: failure reading back frame %u\n", i );
70             break;
71         }
72
73         if( esd->decoderConfig->bufferSizeDB < samp->dataLength )
74             esd->decoderConfig->bufferSizeDB = samp->dataLength;
75
76         esd->decoderConfig->avgBitrate += samp->dataLength;
77         rate += samp->dataLength;
78         if( samp->DTS > time_wnd + timescale )
79         {
80             if( rate > esd->decoderConfig->maxBitrate )
81                 esd->decoderConfig->maxBitrate = rate;
82             time_wnd = samp->DTS;
83             rate = 0;
84         }
85
86         gf_isom_sample_del( &samp );
87     }
88
89     br = (Double)(s64)gf_isom_get_media_duration( p_file, i_track );
90     br /= timescale;
91     esd->decoderConfig->avgBitrate = (u32)(esd->decoderConfig->avgBitrate / br);
92     /*move to bps*/
93     esd->decoderConfig->avgBitrate *= 8;
94     esd->decoderConfig->maxBitrate *= 8;
95
96     gf_isom_change_mpeg4_description( p_file, i_track, 1, esd );
97     gf_odf_desc_del( (GF_Descriptor*)esd );
98 }
99
100 static int close_file( hnd_t handle, int64_t largest_pts, int64_t second_largest_pts )
101 {
102     mp4_hnd_t *p_mp4 = handle;
103
104     if( !p_mp4 )
105         return 0;
106
107     if( p_mp4->p_config )
108         gf_odf_avc_cfg_del( p_mp4->p_config );
109
110     if( p_mp4->p_sample )
111     {
112         if( p_mp4->p_sample->data )
113             free( p_mp4->p_sample->data );
114
115         p_mp4->p_sample->dataLength = 0;
116         gf_isom_sample_del( &p_mp4->p_sample );
117     }
118
119     if( p_mp4->p_file )
120     {
121         /* The mdhd duration is defined as CTS[final] - CTS[0] + duration of last frame.
122          * The mdhd duration (in seconds) should be able to be longer than the tkhd duration since the track is managed by edts.
123          * So, if mdhd duration is equal to the last DTS or less, we give the last composition time delta to the last sample duration.
124          * And then, the mdhd duration is updated, but it time-wise doesn't give the actual duration.
125          * The tkhd duration is the actual track duration. */
126         uint64_t mdhd_duration = (2 * largest_pts - second_largest_pts) * p_mp4->i_time_inc;
127         if( mdhd_duration != gf_isom_get_media_duration( p_mp4->p_file, p_mp4->i_track ) )
128         {
129             uint64_t last_dts = gf_isom_get_sample_dts( p_mp4->p_file, p_mp4->i_track, p_mp4->i_numframe );
130             uint32_t last_duration = (uint32_t)( mdhd_duration > last_dts ? mdhd_duration - last_dts : (largest_pts - second_largest_pts) * p_mp4->i_time_inc );
131             gf_isom_set_last_sample_duration( p_mp4->p_file, p_mp4->i_track, last_duration );
132         }
133
134         /* Write an Edit Box if the first CTS offset is positive.
135          * A media_time is given by not the mvhd timescale but rather the mdhd timescale.
136          * The reason is that an Edit Box maps the presentation time-line to the media time-line.
137          * Any demuxers should follow the Edit Box if it exists. */
138         GF_ISOSample *sample = gf_isom_get_sample_info( p_mp4->p_file, p_mp4->i_track, 1, NULL, NULL );
139         if( sample && sample->CTS_Offset > 0 )
140         {
141             uint32_t mvhd_timescale = gf_isom_get_timescale( p_mp4->p_file );
142             uint64_t tkhd_duration = (uint64_t)( mdhd_duration * ( (double)mvhd_timescale / p_mp4->i_time_res ) );
143             gf_isom_append_edit_segment( p_mp4->p_file, p_mp4->i_track, tkhd_duration, sample->CTS_Offset, GF_ISOM_EDIT_NORMAL );
144         }
145         gf_isom_sample_del( &sample );
146
147         recompute_bitrate_mp4( p_mp4->p_file, p_mp4->i_track );
148         gf_isom_set_pl_indication( p_mp4->p_file, GF_ISOM_PL_VISUAL, 0x15 );
149         gf_isom_set_storage_mode( p_mp4->p_file, GF_ISOM_STORE_FLAT );
150         gf_isom_close( p_mp4->p_file );
151     }
152
153     free( p_mp4 );
154
155     return 0;
156 }
157
158 static int open_file( char *psz_filename, hnd_t *p_handle )
159 {
160     mp4_hnd_t *p_mp4;
161
162     *p_handle = NULL;
163     FILE *fh = fopen( psz_filename, "w" );
164     if( !fh )
165         return -1;
166     else if( !x264_is_regular_file( fh ) )
167     {
168         fprintf( stderr, "mp4 [error]: MP4 output is incompatible with non-regular file `%s'\n", psz_filename );
169         return -1;
170     }
171     fclose( fh );
172
173     if( !(p_mp4 = malloc( sizeof(mp4_hnd_t) )) )
174         return -1;
175
176     memset( p_mp4, 0, sizeof(mp4_hnd_t) );
177     p_mp4->p_file = gf_isom_open( psz_filename, GF_ISOM_OPEN_WRITE, NULL );
178
179     if( !(p_mp4->p_sample = gf_isom_sample_new()) )
180     {
181         close_file( p_mp4, 0, 0 );
182         return -1;
183     }
184
185     gf_isom_set_brand_info( p_mp4->p_file, GF_ISOM_BRAND_AVC1, 0 );
186
187     *p_handle = p_mp4;
188
189     return 0;
190 }
191
192 static int set_param( hnd_t handle, x264_param_t *p_param )
193 {
194     mp4_hnd_t *p_mp4 = handle;
195
196     p_mp4->i_time_res = p_param->i_timebase_den;
197     p_mp4->i_time_inc = p_param->i_timebase_num;
198
199     p_mp4->i_track = gf_isom_new_track( p_mp4->p_file, 0, GF_ISOM_MEDIA_VISUAL,
200                                         p_mp4->i_time_res );
201
202     p_mp4->p_config = gf_odf_avc_cfg_new();
203     gf_isom_avc_config_new( p_mp4->p_file, p_mp4->i_track, p_mp4->p_config,
204                             NULL, NULL, &p_mp4->i_descidx );
205
206     gf_isom_set_track_enabled( p_mp4->p_file, p_mp4->i_track, 1 );
207
208     gf_isom_set_visual_info( p_mp4->p_file, p_mp4->i_track, p_mp4->i_descidx,
209                              p_param->i_width, p_param->i_height );
210
211     if( p_param->vui.i_sar_width && p_param->vui.i_sar_height )
212     {
213         uint64_t dw = p_param->i_width << 16;
214         uint64_t dh = p_param->i_height << 16;
215         double sar = (double)p_param->vui.i_sar_width / p_param->vui.i_sar_height;
216         if( sar > 1.0 )
217             dw *= sar ;
218         else
219             dh /= sar;
220         gf_isom_set_pixel_aspect_ratio( p_mp4->p_file, p_mp4->i_track, p_mp4->i_descidx, p_param->vui.i_sar_width, p_param->vui.i_sar_height );
221         gf_isom_set_track_layout_info( p_mp4->p_file, p_mp4->i_track, dw, dh, 0, 0, 0 );
222     }
223
224     p_mp4->p_sample->data = malloc( p_param->i_width * p_param->i_height * 3 / 2 );
225     if( !p_mp4->p_sample->data )
226         return -1;
227
228     return 0;
229 }
230
231 static int write_headers( hnd_t handle, x264_nal_t *p_nal )
232 {
233     mp4_hnd_t *p_mp4 = handle;
234     GF_AVCConfigSlot *p_slot;
235
236     int sps_size = p_nal[0].i_payload - 4;
237     int pps_size = p_nal[1].i_payload - 4;
238     int sei_size = p_nal[2].i_payload;
239
240     uint8_t *sps = p_nal[0].p_payload + 4;
241     uint8_t *pps = p_nal[1].p_payload + 4;
242     uint8_t *sei = p_nal[2].p_payload;
243
244     // SPS
245
246     p_mp4->p_config->configurationVersion = 1;
247     p_mp4->p_config->AVCProfileIndication = sps[1];
248     p_mp4->p_config->profile_compatibility = sps[2];
249     p_mp4->p_config->AVCLevelIndication = sps[3];
250     p_slot = malloc( sizeof(GF_AVCConfigSlot) );
251     if( !p_slot )
252         return -1;
253     p_slot->size = sps_size;
254     p_slot->data = malloc( p_slot->size );
255     if( !p_slot->data )
256         return -1;
257     memcpy( p_slot->data, sps, sps_size );
258     gf_list_add( p_mp4->p_config->sequenceParameterSets, p_slot );
259
260     // PPS
261
262     p_slot = malloc( sizeof(GF_AVCConfigSlot) );
263     if( !p_slot )
264         return -1;
265     p_slot->size = pps_size;
266     p_slot->data = malloc( p_slot->size );
267     if( !p_slot->data )
268         return -1;
269     memcpy( p_slot->data, pps, pps_size );
270     gf_list_add( p_mp4->p_config->pictureParameterSets, p_slot );
271     gf_isom_avc_config_update( p_mp4->p_file, p_mp4->i_track, 1, p_mp4->p_config );
272
273     // SEI
274
275     memcpy( p_mp4->p_sample->data + p_mp4->p_sample->dataLength, sei, sei_size );
276     p_mp4->p_sample->dataLength += sei_size;
277
278     return sei_size + sps_size + pps_size;
279 }
280 static int write_frame( hnd_t handle, uint8_t *p_nalu, int i_size, x264_picture_t *p_picture )
281 {
282     mp4_hnd_t *p_mp4 = handle;
283     int64_t dts;
284     int64_t cts;
285
286     memcpy( p_mp4->p_sample->data + p_mp4->p_sample->dataLength, p_nalu, i_size );
287     p_mp4->p_sample->dataLength += i_size;
288
289     if( !p_mp4->i_numframe )
290         p_mp4->i_delay_time = p_picture->i_dts * -1;
291
292     dts = (p_picture->i_dts + p_mp4->i_delay_time) * p_mp4->i_time_inc;
293     cts = (p_picture->i_pts + p_mp4->i_delay_time) * p_mp4->i_time_inc;
294
295     p_mp4->p_sample->IsRAP = p_picture->b_keyframe;
296     p_mp4->p_sample->DTS = dts;
297     p_mp4->p_sample->CTS_Offset = (uint32_t)(cts - dts);
298     gf_isom_add_sample( p_mp4->p_file, p_mp4->i_track, p_mp4->i_descidx, p_mp4->p_sample );
299
300     p_mp4->p_sample->dataLength = 0;
301     p_mp4->i_numframe++;
302
303     return i_size;
304 }
305
306 const cli_output_t mp4_output = { open_file, set_param, write_headers, write_frame, close_file };