]> git.sesse.net Git - x264/blobdiff - output/flv.c
Switch to exponential interpolation between presets.
[x264] / output / flv.c
index b3e5d16dd6cf1a68c88fe2616793d8893b4509ff..54647dd0edc1c13339a9c17fc143d23a776b35ad 100644 (file)
@@ -1,7 +1,9 @@
 /*****************************************************************************
- * flv.c:
+ * flv.c: flv muxer
  *****************************************************************************
- * Copyright (C) 2009 Kieran Kunhya <kieran@kunhya.com>
+ * Copyright (C) 2009-2016 x264 project
+ *
+ * Authors: Kieran Kunhya <kieran@kunhya.com>
  *
  * This program is free software; you can redistribute it and/or modify
  * it under the terms of the GNU General Public License as published by
  * You should have received a copy of the GNU General Public License
  * along with this program; if not, write to the Free Software
  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA  02111, USA.
+ *
+ * This program is also available under a commercial proprietary license.
+ * For more information, contact us at licensing@x264.com.
  *****************************************************************************/
 
-#include "muxers.h"
+#include "output.h"
 #include "flv_bytestream.h"
 
 #define CHECK(x)\
@@ -45,42 +50,54 @@ typedef struct
 
     uint8_t b_write_length;
     int64_t i_prev_dts;
-    int64_t i_prev_pts;
+    int64_t i_prev_cts;
+    int64_t i_delay_time;
+    int64_t i_init_delta;
+    int i_delay_frames;
 
-    int i_timebase_num;
-    int i_timebase_den;
+    double d_timebase;
     int b_vfr_input;
+    int b_dts_compress;
 
     unsigned start;
 } flv_hnd_t;
 
 static int write_header( flv_buffer *c )
 {
-    x264_put_tag( c, "FLV" ); // Signature
-    x264_put_byte( c, 1 );    // Version
-    x264_put_byte( c, 1 );    // Video Only
-    x264_put_be32( c, 9 );    // DataOffset
-    x264_put_be32( c, 0 );    // PreviousTagSize0
+    flv_put_tag( c, "FLV" ); // Signature
+    flv_put_byte( c, 1 );    // Version
+    flv_put_byte( c, 1 );    // Video Only
+    flv_put_be32( c, 9 );    // DataOffset
+    flv_put_be32( c, 0 );    // PreviousTagSize0
 
     return flv_flush_data( c );
 }
 
-static int open_file( char *psz_filename, hnd_t *p_handle )
+static int open_file( char *psz_filename, hnd_t *p_handle, cli_output_opt_t *opt )
 {
-    flv_hnd_t *p_flv = malloc( sizeof(*p_flv) );
-    *p_handle = NULL;
-    if( !p_flv )
-        return -1;
-    memset( p_flv, 0, sizeof(*p_flv) );
-
-    p_flv->c = flv_create_writer( psz_filename );
-    if( !p_flv->c )
-        return -1;
-
-    CHECK( write_header( p_flv->c ) );
-    *p_handle = p_flv;
+    flv_hnd_t *p_flv = calloc( 1, sizeof(flv_hnd_t) );
+    if( p_flv )
+    {
+        flv_buffer *c = flv_create_writer( psz_filename );
+        if( c )
+        {
+            if( !write_header( c ) )
+            {
+                p_flv->c = c;
+                p_flv->b_dts_compress = opt->use_dts_compress;
+                *p_handle = p_flv;
+                return 0;
+            }
+
+            fclose( c->fp );
+            free( c->data );
+            free( c );
+        }
+        free( p_flv );
+    }
 
-    return 0;
+    *p_handle = NULL;
+    return -1;
 }
 
 static int set_param( hnd_t handle, x264_param_t *p_param )
@@ -88,63 +105,63 @@ static int set_param( hnd_t handle, x264_param_t *p_param )
     flv_hnd_t *p_flv = handle;
     flv_buffer *c = p_flv->c;
 
-    x264_put_byte( c, FLV_TAG_TYPE_META ); // Tag Type "script data"
+    flv_put_byte( c, FLV_TAG_TYPE_META ); // Tag Type "script data"
 
     int start = c->d_cur;
-    x264_put_be24( c, 0 ); // data length
-    x264_put_be24( c, 0 ); // timestamp
-    x264_put_be32( c, 0 ); // reserved
+    flv_put_be24( c, 0 ); // data length
+    flv_put_be24( c, 0 ); // timestamp
+    flv_put_be32( c, 0 ); // reserved
 
-    x264_put_byte( c, AMF_DATA_TYPE_STRING );
-    x264_put_amf_string( c, "onMetaData" );
+    flv_put_byte( c, AMF_DATA_TYPE_STRING );
+    flv_put_amf_string( c, "onMetaData" );
 
-    x264_put_byte( c, AMF_DATA_TYPE_MIXEDARRAY );
-    x264_put_be32( c, 7 );
+    flv_put_byte( c, AMF_DATA_TYPE_MIXEDARRAY );
+    flv_put_be32( c, 7 );
 
-    x264_put_amf_string( c, "width" );
-    x264_put_amf_double( c, p_param->i_width );
+    flv_put_amf_string( c, "width" );
+    flv_put_amf_double( c, p_param->i_width );
 
-    x264_put_amf_string( c, "height" );
-    x264_put_amf_double( c, p_param->i_height );
+    flv_put_amf_string( c, "height" );
+    flv_put_amf_double( c, p_param->i_height );
 
-    x264_put_amf_string( c, "framerate" );
+    flv_put_amf_string( c, "framerate" );
 
     if( !p_param->b_vfr_input )
-        x264_put_amf_double( c, (double)p_param->i_fps_num / p_param->i_fps_den );
+        flv_put_amf_double( c, (double)p_param->i_fps_num / p_param->i_fps_den );
     else
     {
         p_flv->i_framerate_pos = c->d_cur + c->d_total + 1;
-        x264_put_amf_double( c, 0 ); // written at end of encoding
+        flv_put_amf_double( c, 0 ); // written at end of encoding
     }
 
-    x264_put_amf_string( c, "videocodecid" );
-    x264_put_amf_double( c, FLV_CODECID_H264 );
+    flv_put_amf_string( c, "videocodecid" );
+    flv_put_amf_double( c, FLV_CODECID_H264 );
 
-    x264_put_amf_string( c, "duration" );
+    flv_put_amf_string( c, "duration" );
     p_flv->i_duration_pos = c->d_cur + c->d_total + 1;
-    x264_put_amf_double( c, 0 ); // written at end of encoding
+    flv_put_amf_double( c, 0 ); // written at end of encoding
 
-    x264_put_amf_string( c, "filesize" );
+    flv_put_amf_string( c, "filesize" );
     p_flv->i_filesize_pos = c->d_cur + c->d_total + 1;
-    x264_put_amf_double( c, 0 ); // written at end of encoding
+    flv_put_amf_double( c, 0 ); // written at end of encoding
 
-    x264_put_amf_string( c, "videodatarate" );
+    flv_put_amf_string( c, "videodatarate" );
     p_flv->i_bitrate_pos = c->d_cur + c->d_total + 1;
-    x264_put_amf_double( c, 0 ); // written at end of encoding
+    flv_put_amf_double( c, 0 ); // written at end of encoding
 
-    x264_put_amf_string( c, "" );
-    x264_put_byte( c, AMF_END_OF_OBJECT );
+    flv_put_amf_string( c, "" );
+    flv_put_byte( c, AMF_END_OF_OBJECT );
 
     unsigned length = c->d_cur - start;
-    rewrite_amf_be24( c, length - 10, start );
+    flv_rewrite_amf_be24( c, length - 10, start );
 
-    x264_put_be32( c, length + 1 ); // tag length
+    flv_put_be32( c, length + 1 ); // tag length
 
     p_flv->i_fps_num = p_param->i_fps_num;
     p_flv->i_fps_den = p_param->i_fps_den;
-    p_flv->i_timebase_num = p_param->i_timebase_num;
-    p_flv->i_timebase_den = p_param->i_timebase_den;
+    p_flv->d_timebase = (double)p_param->i_timebase_num / p_param->i_timebase_den;
     p_flv->b_vfr_input = p_param->b_vfr_input;
+    p_flv->i_delay_frames = p_param->i_bframe ? (p_param->i_bframe_pyramid ? 2 : 1) : 0;
 
     return 0;
 }
@@ -154,9 +171,9 @@ static int write_headers( hnd_t handle, x264_nal_t *p_nal )
     flv_hnd_t *p_flv = handle;
     flv_buffer *c = p_flv->c;
 
-    int sei_size = p_nal[0].i_payload;
-    int sps_size = p_nal[1].i_payload;
-    int pps_size = p_nal[2].i_payload;
+    int sps_size = p_nal[0].i_payload;
+    int pps_size = p_nal[1].i_payload;
+    int sei_size = p_nal[2].i_payload;
 
     // SEI
     /* It is within the spec to write this as-is but for
@@ -167,41 +184,41 @@ static int write_headers( hnd_t handle, x264_nal_t *p_nal )
         return -1;
     p_flv->sei_len = sei_size;
 
-    memcpy( p_flv->sei, p_nal[0].p_payload, sei_size );
+    memcpy( p_flv->sei, p_nal[2].p_payload, sei_size );
 
     // SPS
-    uint8_t *sps = p_nal[1].p_payload + 4;
+    uint8_t *sps = p_nal[0].p_payload + 4;
 
-    x264_put_byte( c, FLV_TAG_TYPE_VIDEO );
-    x264_put_be24( c, 0 ); // rewrite later
-    x264_put_be24( c, 0 ); // timestamp
-    x264_put_byte( c, 0 ); // timestamp extended
-    x264_put_be24( c, 0 ); // StreamID - Always 0
+    flv_put_byte( c, FLV_TAG_TYPE_VIDEO );
+    flv_put_be24( c, 0 ); // rewrite later
+    flv_put_be24( c, 0 ); // timestamp
+    flv_put_byte( c, 0 ); // timestamp extended
+    flv_put_be24( c, 0 ); // StreamID - Always 0
     p_flv->start = c->d_cur; // needed for overwriting length
 
-    x264_put_byte( c, 7 | FLV_FRAME_KEY ); // Frametype and CodecID
-    x264_put_byte( c, 0 ); // AVC sequence header
-    x264_put_be24( c, 0 ); // composition time
+    flv_put_byte( c, 7 | FLV_FRAME_KEY ); // Frametype and CodecID
+    flv_put_byte( c, 0 ); // AVC sequence header
+    flv_put_be24( c, 0 ); // composition time
 
-    x264_put_byte( c, 1 );      // version
-    x264_put_byte( c, sps[1] ); // profile
-    x264_put_byte( c, sps[2] ); // profile
-    x264_put_byte( c, sps[3] ); // level
-    x264_put_byte( c, 0xff );   // 6 bits reserved (111111) + 2 bits nal size length - 1 (11)
-    x264_put_byte( c, 0xe1 );   // 3 bits reserved (111) + 5 bits number of sps (00001)
+    flv_put_byte( c, 1 );      // version
+    flv_put_byte( c, sps[1] ); // profile
+    flv_put_byte( c, sps[2] ); // profile
+    flv_put_byte( c, sps[3] ); // level
+    flv_put_byte( c, 0xff );   // 6 bits reserved (111111) + 2 bits nal size length - 1 (11)
+    flv_put_byte( c, 0xe1 );   // 3 bits reserved (111) + 5 bits number of sps (00001)
 
-    x264_put_be16( c, sps_size - 4 );
+    flv_put_be16( c, sps_size - 4 );
     flv_append_data( c, sps, sps_size - 4 );
 
     // PPS
-    x264_put_byte( c, 1 ); // number of pps
-    x264_put_be16( c, pps_size - 4 );
-    flv_append_data( c, p_nal[2].p_payload + 4, pps_size - 4 );
+    flv_put_byte( c, 1 ); // number of pps
+    flv_put_be16( c, pps_size - 4 );
+    flv_append_data( c, p_nal[1].p_payload + 4, pps_size - 4 );
 
     // rewrite data length info
     unsigned length = c->d_cur - p_flv->start;
-    rewrite_amf_be24( c, length, p_flv->start - 10 );
-    x264_put_be32( c, length + 11 ); // Last tag size
+    flv_rewrite_amf_be24( c, length, p_flv->start - 10 );
+    flv_put_be32( c, length + 11 ); // Last tag size
     CHECK( flv_flush_data( c ) );
 
     return sei_size + sps_size + pps_size;
@@ -212,41 +229,59 @@ static int write_frame( hnd_t handle, uint8_t *p_nalu, int i_size, x264_picture_
     flv_hnd_t *p_flv = handle;
     flv_buffer *c = p_flv->c;
 
-    int64_t dts = (int64_t)( (p_picture->i_dts * 1000 * ((double)p_flv->i_timebase_num / p_flv->i_timebase_den)) + 0.5 );
-    int64_t cts = (int64_t)( (p_picture->i_pts * 1000 * ((double)p_flv->i_timebase_num / p_flv->i_timebase_den)) + 0.5 );
-    int64_t offset = cts - dts;
+#define convert_timebase_ms( timestamp, timebase ) (int64_t)((timestamp) * (timebase) * 1000 + 0.5)
+
+    if( !p_flv->i_framenum )
+    {
+        p_flv->i_delay_time = p_picture->i_dts * -1;
+        if( !p_flv->b_dts_compress && p_flv->i_delay_time )
+            x264_cli_log( "flv", X264_LOG_INFO, "initial delay %"PRId64" ms\n",
+                          convert_timebase_ms( p_picture->i_pts + p_flv->i_delay_time, p_flv->d_timebase ) );
+    }
+
+    int64_t dts;
+    int64_t cts;
+    int64_t offset;
+
+    if( p_flv->b_dts_compress )
+    {
+        if( p_flv->i_framenum == 1 )
+            p_flv->i_init_delta = convert_timebase_ms( p_picture->i_dts + p_flv->i_delay_time, p_flv->d_timebase );
+        dts = p_flv->i_framenum > p_flv->i_delay_frames
+            ? convert_timebase_ms( p_picture->i_dts, p_flv->d_timebase )
+            : p_flv->i_framenum * p_flv->i_init_delta / (p_flv->i_delay_frames + 1);
+        cts = convert_timebase_ms( p_picture->i_pts, p_flv->d_timebase );
+    }
+    else
+    {
+        dts = convert_timebase_ms( p_picture->i_dts + p_flv->i_delay_time, p_flv->d_timebase );
+        cts = convert_timebase_ms( p_picture->i_pts + p_flv->i_delay_time, p_flv->d_timebase );
+    }
+    offset = cts - dts;
 
     if( p_flv->i_framenum )
     {
-        int64_t prev_dts = (int64_t)( (p_flv->i_prev_dts * 1000 * ((double)p_flv->i_timebase_num / p_flv->i_timebase_den)) + 0.5 );
-        int64_t prev_cts = (int64_t)( (p_flv->i_prev_pts * 1000 * ((double)p_flv->i_timebase_num / p_flv->i_timebase_den)) + 0.5 );
-        if( prev_dts == dts )
-        {
-            double fps = ((double)p_flv->i_timebase_den / p_flv->i_timebase_num) / (p_picture->i_dts - p_flv->i_prev_dts);
-            fprintf( stderr, "flv [warning]: duplicate DTS %"PRId64" generated by rounding\n"
-                             "               current internal decoding framerate: %.6f fps\n", dts, fps );
-        }
-        if( prev_cts == cts )
-        {
-            double fps = ((double)p_flv->i_timebase_den / p_flv->i_timebase_num) / (p_picture->i_pts - p_flv->i_prev_pts);
-            fprintf( stderr, "flv [warning]: duplicate CTS %"PRId64" generated by rounding\n"
-                             "               current internal composition framerate: %.6f fps\n", cts, fps );
-        }
+        if( p_flv->i_prev_dts == dts )
+            x264_cli_log( "flv", X264_LOG_WARNING, "duplicate DTS %"PRId64" generated by rounding\n"
+                          "               decoding framerate cannot exceed 1000fps\n", dts );
+        if( p_flv->i_prev_cts == cts )
+            x264_cli_log( "flv", X264_LOG_WARNING, "duplicate CTS %"PRId64" generated by rounding\n"
+                          "               composition framerate cannot exceed 1000fps\n", cts );
     }
-    p_flv->i_prev_dts = p_picture->i_dts;
-    p_flv->i_prev_pts = p_picture->i_pts;
+    p_flv->i_prev_dts = dts;
+    p_flv->i_prev_cts = cts;
 
     // A new frame - write packet header
-    x264_put_byte( c, FLV_TAG_TYPE_VIDEO );
-    x264_put_be24( c, 0 ); // calculated later
-    x264_put_be24( c, dts );
-    x264_put_byte( c, dts >> 24 );
-    x264_put_be24( c, 0 );
+    flv_put_byte( c, FLV_TAG_TYPE_VIDEO );
+    flv_put_be24( c, 0 ); // calculated later
+    flv_put_be24( c, dts );
+    flv_put_byte( c, dts >> 24 );
+    flv_put_be24( c, 0 );
 
     p_flv->start = c->d_cur;
-    x264_put_byte( c, p_picture->b_keyframe ? FLV_FRAME_KEY : FLV_FRAME_INTER );
-    x264_put_byte( c, 1 ); // AVC NALU
-    x264_put_be24( c, offset );
+    flv_put_byte( c, p_picture->b_keyframe ? FLV_FRAME_KEY : FLV_FRAME_INTER );
+    flv_put_byte( c, 1 ); // AVC NALU
+    flv_put_be24( c, offset );
 
     if( p_flv->sei )
     {
@@ -257,8 +292,8 @@ static int write_frame( hnd_t handle, uint8_t *p_nalu, int i_size, x264_picture_
     flv_append_data( c, p_nalu, i_size );
 
     unsigned length = c->d_cur - p_flv->start;
-    rewrite_amf_be24( c, length, p_flv->start - 10 );
-    x264_put_be32( c, 11 + length ); // Last tag size
+    flv_rewrite_amf_be24( c, length, p_flv->start - 10 );
+    flv_put_be32( c, 11 + length ); // Last tag size
     CHECK( flv_flush_data( c ) );
 
     p_flv->i_framenum++;
@@ -266,23 +301,30 @@ static int write_frame( hnd_t handle, uint8_t *p_nalu, int i_size, x264_picture_
     return i_size;
 }
 
-static void rewrite_amf_double( FILE *fp, uint64_t position, double value )
+static int rewrite_amf_double( FILE *fp, uint64_t position, double value )
 {
-    uint64_t x = endian_fix64( dbl2int( value ) );
-    fseek( fp, position, SEEK_SET );
-    fwrite( &x, 8, 1, fp );
+    uint64_t x = endian_fix64( flv_dbl2int( value ) );
+    return !fseek( fp, position, SEEK_SET ) && fwrite( &x, 8, 1, fp ) == 1 ? 0 : -1;
 }
 
+#undef CHECK
+#define CHECK(x)\
+do {\
+    if( (x) < 0 )\
+        goto error;\
+} while( 0 )
+
 static int close_file( hnd_t handle, int64_t largest_pts, int64_t second_largest_pts )
 {
+    int ret = -1;
     flv_hnd_t *p_flv = handle;
     flv_buffer *c = p_flv->c;
 
     CHECK( flv_flush_data( c ) );
 
-    double total_duration = (double)(2 * largest_pts - second_largest_pts) * p_flv->i_timebase_num / p_flv->i_timebase_den;
+    double total_duration = (2 * largest_pts - second_largest_pts) * p_flv->d_timebase;
 
-    if( x264_is_regular_file( c->fp ) )
+    if( x264_is_regular_file( c->fp ) && total_duration > 0 )
     {
         double framerate;
         uint64_t filesize = ftell( c->fp );
@@ -290,19 +332,22 @@ static int close_file( hnd_t handle, int64_t largest_pts, int64_t second_largest
         if( p_flv->i_framerate_pos )
         {
             framerate = (double)p_flv->i_framenum / total_duration;
-            rewrite_amf_double( c->fp, p_flv->i_framerate_pos, framerate );
+            CHECK( rewrite_amf_double( c->fp, p_flv->i_framerate_pos, framerate ) );
         }
 
-        rewrite_amf_double( c->fp, p_flv->i_duration_pos, total_duration );
-        rewrite_amf_double( c->fp, p_flv->i_filesize_pos, filesize );
-        rewrite_amf_double( c->fp, p_flv->i_bitrate_pos, filesize * 8 / ( total_duration * 1000 ) );
+        CHECK( rewrite_amf_double( c->fp, p_flv->i_duration_pos, total_duration ) );
+        CHECK( rewrite_amf_double( c->fp, p_flv->i_filesize_pos, filesize ) );
+        CHECK( rewrite_amf_double( c->fp, p_flv->i_bitrate_pos, filesize * 8 / ( total_duration * 1000 ) ) );
     }
+    ret = 0;
 
+error:
     fclose( c->fp );
-    free( p_flv );
+    free( c->data );
     free( c );
+    free( p_flv );
 
-    return 0;
+    return ret;
 }
 
-cli_output_t flv_output = { open_file, set_param, write_headers, write_frame, close_file };
+const cli_output_t flv_output = { open_file, set_param, write_headers, write_frame, close_file };