]> git.sesse.net Git - vlc/blob - modules/access_output/livehttp.c
livehttp: try to comply draft 11 section 6.2.2 for how long to keep segments around...
[vlc] / modules / access_output / livehttp.c
1 /*****************************************************************************
2  * livehttp.c: Live HTTP Streaming
3  *****************************************************************************
4  * Copyright © 2001, 2002, 2013 VLC authors and VideoLAN
5  * Copyright © 2009-2010 by Keary Griffin
6  *
7  * Authors: Keary Griffin <kearygriffin at gmail.com>
8  *          Ilkka Ollakka <ileoo at videolan dot org>
9  *
10  * This program is free software; you can redistribute it and/or modify it
11  * under the terms of the GNU Lesser General Public License as published by
12  * the Free Software Foundation; either version 2.1 of the License, or
13  * (at your option) any later version.
14  *
15  * This program is distributed in the hope that it will be useful,
16  * but WITHOUT ANY WARRANTY; without even the implied warranty of
17  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
18  * GNU Lesser General Public License for more details.
19  *
20  * You should have received a copy of the GNU Lesser General Public License
21  * along with this program; if not, write to the Free Software Foundation,
22  * Inc., 51 Franklin Street, Fifth Floor, Boston MA 02110-1301, USA.
23  *****************************************************************************/
24
25 /*****************************************************************************
26  * Preamble
27  *****************************************************************************/
28
29 #ifdef HAVE_CONFIG_H
30 # include "config.h"
31 #endif
32
33 #include <sys/types.h>
34 #include <time.h>
35 #include <fcntl.h>
36 #include <errno.h>
37 #ifdef HAVE_UNISTD_H
38 # include <unistd.h>
39 #endif
40
41 #include <vlc_common.h>
42 #include <vlc_plugin.h>
43 #include <vlc_sout.h>
44 #include <vlc_block.h>
45 #include <vlc_fs.h>
46 #include <vlc_strings.h>
47 #include <vlc_charset.h>
48
49 #include <gcrypt.h>
50 #include <vlc_gcrypt.h>
51
52 #include <vlc_rand.h>
53
54 #ifndef O_LARGEFILE
55 #   define O_LARGEFILE 0
56 #endif
57
58 #define STR_ENDLIST "#EXT-X-ENDLIST\n"
59
60 #define MAX_RENAME_RETRIES        10
61
62 /*****************************************************************************
63  * Module descriptor
64  *****************************************************************************/
65 static int  Open ( vlc_object_t * );
66 static void Close( vlc_object_t * );
67
68 #define SOUT_CFG_PREFIX "sout-livehttp-"
69 #define SEGLEN_TEXT N_("Segment length")
70 #define SEGLEN_LONGTEXT N_("Length of TS stream segments")
71
72 #define SPLITANYWHERE_TEXT N_("Split segments anywhere")
73 #define SPLITANYWHERE_LONGTEXT N_("Don't require a keyframe before splitting "\
74                                 "a segment. Needed for audio only.")
75
76 #define NUMSEGS_TEXT N_("Number of segments")
77 #define NUMSEGS_LONGTEXT N_("Number of segments to include in index")
78
79 #define NOCACHE_TEXT N_("Allow cache")
80 #define NOCACHE_LONGTEXT N_("Add EXT-X-ALLOW-CACHE:NO directive in playlist-file if this is disabled")
81
82 #define INDEX_TEXT N_("Index file")
83 #define INDEX_LONGTEXT N_("Path to the index file to create")
84
85 #define INDEXURL_TEXT N_("Full URL to put in index file")
86 #define INDEXURL_LONGTEXT N_("Full URL to put in index file. "\
87                           "Use #'s to represent segment number")
88
89 #define DELSEGS_TEXT N_("Delete segments")
90 #define DELSEGS_LONGTEXT N_("Delete segments when they are no longer needed")
91
92 #define RATECONTROL_TEXT N_("Use muxers rate control mechanism")
93
94 #define KEYURI_TEXT N_("AES key URI to place in playlist")
95
96 #define KEYFILE_TEXT N_("AES key file")
97 #define KEYFILE_LONGTEXT N_("File containing the 16 bytes encryption key")
98
99 #define KEYLOADFILE_TEXT N_("File where vlc reads key-uri and keyfile-location")
100 #define KEYLOADFILE_LONGTEXT N_("File is read when segment starts and is assumet to be in format: "\
101                                 "key-uri\\nkey-file. File is read on the segment opening and "\
102                                 "values are used on that segment.")
103
104 #define RANDOMIV_TEXT N_("Use randomized IV for encryption")
105 #define RANDOMIV_LONGTEXT N_("Generate IV instead using segment-number as IV")
106
107 vlc_module_begin ()
108     set_description( N_("HTTP Live streaming output") )
109     set_shortname( N_("LiveHTTP" ))
110     add_shortcut( "livehttp" )
111     set_capability( "sout access", 0 )
112     set_category( CAT_SOUT )
113     set_subcategory( SUBCAT_SOUT_ACO )
114     add_integer( SOUT_CFG_PREFIX "seglen", 10, SEGLEN_TEXT, SEGLEN_LONGTEXT, false )
115     add_integer( SOUT_CFG_PREFIX "numsegs", 0, NUMSEGS_TEXT, NUMSEGS_LONGTEXT, false )
116     add_bool( SOUT_CFG_PREFIX "splitanywhere", false,
117               SPLITANYWHERE_TEXT, SPLITANYWHERE_LONGTEXT, true )
118     add_bool( SOUT_CFG_PREFIX "delsegs", true,
119               DELSEGS_TEXT, DELSEGS_LONGTEXT, true )
120     add_bool( SOUT_CFG_PREFIX "ratecontrol", false,
121               RATECONTROL_TEXT, RATECONTROL_TEXT, true )
122     add_bool( SOUT_CFG_PREFIX "caching", false,
123               NOCACHE_TEXT, NOCACHE_LONGTEXT, true )
124     add_bool( SOUT_CFG_PREFIX "generate-iv", false,
125               RANDOMIV_TEXT, RANDOMIV_LONGTEXT, true )
126     add_string( SOUT_CFG_PREFIX "index", NULL,
127                 INDEX_TEXT, INDEX_LONGTEXT, false )
128     add_string( SOUT_CFG_PREFIX "index-url", NULL,
129                 INDEXURL_TEXT, INDEXURL_LONGTEXT, false )
130     add_string( SOUT_CFG_PREFIX "key-uri", NULL,
131                 KEYURI_TEXT, KEYURI_TEXT, true )
132     add_loadfile( SOUT_CFG_PREFIX "key-file", NULL,
133                 KEYFILE_TEXT, KEYFILE_LONGTEXT, true )
134     add_loadfile( SOUT_CFG_PREFIX "key-loadfile", NULL,
135                 KEYLOADFILE_TEXT, KEYLOADFILE_LONGTEXT, true )
136     set_callbacks( Open, Close )
137 vlc_module_end ()
138
139
140 /*****************************************************************************
141  * Exported prototypes
142  *****************************************************************************/
143 static const char *const ppsz_sout_options[] = {
144     "seglen",
145     "splitanywhere",
146     "numsegs",
147     "delsegs",
148     "index",
149     "index-url",
150     "ratecontrol",
151     "caching",
152     "key-uri",
153     "key-file",
154     "key-loadfile",
155     "generate-iv",
156     NULL
157 };
158
159 static ssize_t Write( sout_access_out_t *, block_t * );
160 static int Seek ( sout_access_out_t *, off_t  );
161 static int Control( sout_access_out_t *, int, va_list );
162
163 typedef struct output_segment
164 {
165     char *psz_filename;
166     char *psz_uri;
167     char *psz_key_uri;
168     char *psz_duration;
169     float f_seglength;
170     uint32_t i_segment_number;
171     uint8_t aes_ivs[16];
172 } output_segment_t;
173
174 struct sout_access_out_sys_t
175 {
176     char *psz_cursegPath;
177     char *psz_indexPath;
178     char *psz_indexUrl;
179     char *psz_keyfile;
180     mtime_t i_keyfile_modification;
181     mtime_t i_opendts;
182     mtime_t  i_seglenm;
183     uint32_t i_segment;
184     size_t  i_seglen;
185     float   f_seglen;
186     block_t *block_buffer;
187     int i_handle;
188     unsigned i_numsegs;
189     bool b_delsegs;
190     bool b_ratecontrol;
191     bool b_splitanywhere;
192     bool b_caching;
193     bool b_generate_iv;
194     uint8_t aes_ivs[16];
195     gcry_cipher_hd_t aes_ctx;
196     char *key_uri;
197     uint8_t stuffing_bytes[16];
198     ssize_t stuffing_size;
199     vlc_array_t *segments_t;
200 };
201
202 static int LoadCryptFile( sout_access_out_t *p_access);
203 static int CryptSetup( sout_access_out_t *p_access, char *keyfile );
204 /*****************************************************************************
205  * Open: open the file
206  *****************************************************************************/
207 static int Open( vlc_object_t *p_this )
208 {
209     sout_access_out_t   *p_access = (sout_access_out_t*)p_this;
210     sout_access_out_sys_t *p_sys;
211     char *psz_idx;
212
213     config_ChainParse( p_access, SOUT_CFG_PREFIX, ppsz_sout_options, p_access->p_cfg );
214
215     if( !p_access->psz_path )
216     {
217         msg_Err( p_access, "no file name specified" );
218         return VLC_EGENERIC;
219     }
220
221     if( unlikely( !( p_sys = malloc ( sizeof( *p_sys ) ) ) ) )
222         return VLC_ENOMEM;
223
224     p_sys->i_seglen = var_GetInteger( p_access, SOUT_CFG_PREFIX "seglen" );
225     /* Try to get within asked segment length */
226     p_sys->i_seglenm = CLOCK_FREQ * p_sys->i_seglen;
227     p_sys->block_buffer = NULL;
228
229     p_sys->i_numsegs = var_GetInteger( p_access, SOUT_CFG_PREFIX "numsegs" );
230     p_sys->b_splitanywhere = var_GetBool( p_access, SOUT_CFG_PREFIX "splitanywhere" );
231     p_sys->b_delsegs = var_GetBool( p_access, SOUT_CFG_PREFIX "delsegs" );
232     p_sys->b_ratecontrol = var_GetBool( p_access, SOUT_CFG_PREFIX "ratecontrol") ;
233     p_sys->b_caching = var_GetBool( p_access, SOUT_CFG_PREFIX "caching") ;
234     p_sys->b_generate_iv = var_GetBool( p_access, SOUT_CFG_PREFIX "generate-iv") ;
235
236     p_sys->segments_t = vlc_array_new();
237
238     p_sys->stuffing_size = 0;
239
240     p_sys->psz_indexPath = NULL;
241     psz_idx = var_GetNonEmptyString( p_access, SOUT_CFG_PREFIX "index" );
242     if ( psz_idx )
243     {
244         char *psz_tmp;
245         psz_tmp = str_format_time( psz_idx );
246         free( psz_idx );
247         if ( !psz_tmp )
248         {
249             free( p_sys );
250             return VLC_ENOMEM;
251         }
252         path_sanitize( psz_tmp );
253         p_sys->psz_indexPath = psz_tmp;
254         vlc_unlink( p_sys->psz_indexPath );
255     }
256
257     p_sys->psz_indexUrl = var_GetNonEmptyString( p_access, SOUT_CFG_PREFIX "index-url" );
258     p_sys->psz_keyfile  = var_GetNonEmptyString( p_access, SOUT_CFG_PREFIX "key-loadfile" );
259     p_sys->key_uri      = var_GetNonEmptyString( p_access, SOUT_CFG_PREFIX "key-uri" );
260
261     p_access->p_sys = p_sys;
262
263     if( p_sys->psz_keyfile && ( LoadCryptFile( p_access ) < 0 ) )
264     {
265         free( p_sys->psz_indexUrl );
266         free( p_sys->psz_indexPath );
267         free( p_sys );
268         msg_Err( p_access, "Encryption init failed" );
269         return VLC_EGENERIC;
270     }
271     else if( !p_sys->psz_keyfile && ( CryptSetup( p_access, NULL ) < 0 ) )
272     {
273         free( p_sys->psz_indexUrl );
274         free( p_sys->psz_indexPath );
275         free( p_sys );
276         msg_Err( p_access, "Encryption init failed" );
277         return VLC_EGENERIC;
278     }
279
280     p_sys->i_handle = -1;
281     p_sys->i_segment = 0;
282     p_sys->psz_cursegPath = NULL;
283
284     p_access->pf_write = Write;
285     p_access->pf_seek  = Seek;
286     p_access->pf_control = Control;
287
288     return VLC_SUCCESS;
289 }
290
291 /************************************************************************
292  * CryptSetup: Initialize encryption
293  ************************************************************************/
294 static int CryptSetup( sout_access_out_t *p_access, char *key_file )
295 {
296     sout_access_out_sys_t *p_sys = p_access->p_sys;
297     uint8_t key[16];
298     char *keyfile = NULL;
299
300     if( key_file )
301         keyfile = strdup( key_file );
302     else
303         keyfile = var_InheritString( p_access, SOUT_CFG_PREFIX "key-file" );
304
305     if( !p_sys->key_uri ) /*No key uri, assume no encryption wanted*/
306     {
307         msg_Dbg( p_access, "No key uri, no encryption");
308         return VLC_SUCCESS;
309     }
310     vlc_gcrypt_init();
311
312     /*Setup encryption cipher*/
313     gcry_error_t err = gcry_cipher_open( &p_sys->aes_ctx, GCRY_CIPHER_AES,
314                                          GCRY_CIPHER_MODE_CBC, 0 );
315     if( err )
316     {
317         msg_Err( p_access, "Openin AES Cipher failed: %s", gpg_strerror(err));
318         return VLC_EGENERIC;
319     }
320
321     if( unlikely(keyfile == NULL) )
322     {
323         msg_Err( p_access, "No key-file, no encryption" );
324         return VLC_EGENERIC;
325     }
326
327     int keyfd = vlc_open( keyfile, O_RDONLY | O_NONBLOCK );
328     if( unlikely( keyfd == -1 ) )
329     {
330         msg_Err( p_access, "Unable to open keyfile %s: %m", keyfile );
331         free( keyfile );
332         return VLC_EGENERIC;
333     }
334     free( keyfile );
335
336     ssize_t keylen = read( keyfd, key, 16 );
337
338     close( keyfd );
339     if( keylen < 16 )
340     {
341         msg_Err( p_access, "No key at least 16 octects (you provided %zd), no encryption", keylen );
342         return VLC_EGENERIC;
343     }
344
345     err = gcry_cipher_setkey( p_sys->aes_ctx, key, 16 );
346     if(err)
347     {
348         msg_Err(p_access, "Setting AES key failed: %s", gpg_strerror(err));
349         gcry_cipher_close( p_sys->aes_ctx);
350         return VLC_EGENERIC;
351     }
352
353     if( p_sys->b_generate_iv )
354         vlc_rand_bytes( p_sys->aes_ivs, sizeof(uint8_t)*16);
355
356     return VLC_SUCCESS;
357 }
358
359
360 /************************************************************************
361  * LoadCryptFile: Try to parse key_uri and keyfile-location from file
362  ************************************************************************/
363 static int LoadCryptFile( sout_access_out_t *p_access )
364 {
365     sout_access_out_sys_t *p_sys = p_access->p_sys;
366
367     FILE *stream = vlc_fopen( p_sys->psz_keyfile, "rt" );
368     char *key_file=NULL,*key_uri=NULL;
369
370     if( unlikely( stream == NULL ) )
371     {
372         msg_Err( p_access, "Unable to open keyloadfile %s: %m", p_sys->psz_keyfile );
373         return VLC_EGENERIC;
374     }
375
376
377     //First read key_uri
378     ssize_t len = getline( &key_uri, &(size_t){0}, stream );
379     if( unlikely( len == -1 ) )
380     {
381         msg_Err( p_access, "Cannot read %s: %m", p_sys->psz_keyfile );
382         clearerr( stream );
383         fclose( stream );
384         free( key_uri );
385         return VLC_EGENERIC;
386     }
387     //Strip the newline from uri, maybe scanf would be better?
388     key_uri[len-1]='\0';
389
390     len = getline( &key_file, &(size_t){0}, stream );
391     if( unlikely( len == -1 ) )
392     {
393         msg_Err( p_access, "Cannot read %s: %m", p_sys->psz_keyfile );
394         clearerr( stream );
395         fclose( stream );
396
397         free( key_uri );
398         free( key_file );
399         return VLC_EGENERIC;
400     }
401     // Strip the last newline from filename
402     key_file[len-1]='\0';
403     fclose( stream );
404
405     int returncode = VLC_SUCCESS;
406     if( !p_sys->key_uri || strcmp( p_sys->key_uri, key_uri ) )
407     {
408         if( p_sys->key_uri )
409         {
410             free( p_sys->key_uri );
411             p_sys->key_uri = NULL;
412         }
413         p_sys->key_uri = strdup( key_uri );
414         returncode = CryptSetup( p_access, key_file );
415     }
416     free( key_file );
417     free( key_uri );
418     return returncode;
419 }
420
421 /************************************************************************
422  * CryptKey: Set encryption IV to current segment number
423  ************************************************************************/
424 static int CryptKey( sout_access_out_t *p_access, uint32_t i_segment )
425 {
426     sout_access_out_sys_t *p_sys = p_access->p_sys;
427
428     if( !p_sys->b_generate_iv )
429     {
430         /* Use segment number as IV if randomIV isn't selected*/
431         memset( p_sys->aes_ivs, 0, 16 * sizeof(uint8_t));
432         p_sys->aes_ivs[15] = i_segment & 0xff;
433         p_sys->aes_ivs[14] = (i_segment >> 8 ) & 0xff;
434         p_sys->aes_ivs[13] = (i_segment >> 16 ) & 0xff;
435         p_sys->aes_ivs[12] = (i_segment >> 24 ) & 0xff;
436     }
437
438     gcry_error_t err = gcry_cipher_setiv( p_sys->aes_ctx,
439                                           p_sys->aes_ivs, 16);
440     if( err )
441     {
442         msg_Err(p_access, "Setting AES IVs failed: %s", gpg_strerror(err) );
443         gcry_cipher_close( p_sys->aes_ctx);
444         return VLC_EGENERIC;
445     }
446     return VLC_SUCCESS;
447 }
448
449
450 #define SEG_NUMBER_PLACEHOLDER "#"
451 /*****************************************************************************
452  * formatSegmentPath: create segment path name based on seg #
453  *****************************************************************************/
454 static char *formatSegmentPath( char *psz_path, uint32_t i_seg, bool b_sanitize )
455 {
456     char *psz_result;
457     char *psz_firstNumSign;
458
459     if ( ! ( psz_result  = str_format_time( psz_path ) ) )
460         return NULL;
461
462     psz_firstNumSign = psz_result + strcspn( psz_result, SEG_NUMBER_PLACEHOLDER );
463     if ( *psz_firstNumSign )
464     {
465         char *psz_newResult;
466         int i_cnt = strspn( psz_firstNumSign, SEG_NUMBER_PLACEHOLDER );
467         int ret;
468
469         *psz_firstNumSign = '\0';
470         ret = asprintf( &psz_newResult, "%s%0*d%s", psz_result, i_cnt, i_seg, psz_firstNumSign + i_cnt );
471         free ( psz_result );
472         if ( ret < 0 )
473             return NULL;
474         psz_result = psz_newResult;
475     }
476
477     if ( b_sanitize )
478         path_sanitize( psz_result );
479
480     return psz_result;
481 }
482
483 static void destroySegment( output_segment_t *segment )
484 {
485     free( segment->psz_filename );
486     free( segment->psz_duration );
487     free( segment->psz_uri );
488     free( segment->psz_key_uri );
489     free( segment );
490 }
491
492 /************************************************************************
493  * isFirstItemRemovable: Check for draft 11 section 6.2.2 
494  * check that the first item has been around outside playlist 
495  * segment->f_seglength + p_sys->i_seglen before it is removed.
496  ************************************************************************/
497 static bool isFirstItemRemovable( sout_access_out_sys_t *p_sys, uint32_t i_firstseg, uint32_t i_index_offset )
498 {
499     float duration = .0f;
500
501     /* Check that segment has been out of playlist for seglenght + p_sys->i_seglen amount
502      * We check this by calculating duration of the items that replaced first item in playlist
503      */
504     for(int index=0; index < i_index_offset; index++ )
505     {
506         output_segment_t *segment = vlc_array_item_at_index( p_sys->segments_t, p_sys->i_segment - i_firstseg + index );
507         duration += segment->f_seglength;
508     }
509     output_segment_t *first = vlc_array_item_at_index( p_sys->segments_t, 0 );
510
511     return duration >= (first->f_seglength + (float)p_sys->i_seglen);
512 }
513
514 /************************************************************************
515  * updateIndexAndDel: If necessary, update index file & delete old segments
516  ************************************************************************/
517 static int updateIndexAndDel( sout_access_out_t *p_access, sout_access_out_sys_t *p_sys, bool b_isend )
518 {
519
520     uint32_t i_firstseg;
521     unsigned i_index_offset = 0;
522
523     if ( p_sys->i_numsegs == 0 || p_sys->i_segment < p_sys->i_numsegs )
524         i_firstseg = 1;
525     else
526     {
527         i_firstseg = ( p_sys->i_segment - p_sys->i_numsegs ) + 1;
528         i_index_offset = vlc_array_count( p_sys->segments_t ) - p_sys->i_numsegs;
529     }
530
531     // First update index
532     if ( p_sys->psz_indexPath )
533     {
534         int val;
535         FILE *fp;
536         char *psz_idxTmp;
537         if ( asprintf( &psz_idxTmp, "%s.tmp", p_sys->psz_indexPath ) < 0)
538             return -1;
539
540         fp = vlc_fopen( psz_idxTmp, "wt");
541         if ( !fp )
542         {
543             msg_Err( p_access, "cannot open index file `%s'", psz_idxTmp );
544             free( psz_idxTmp );
545             return -1;
546         }
547
548         if ( fprintf( fp, "#EXTM3U\n#EXT-X-TARGETDURATION:%zu\n#EXT-X-VERSION:3\n#EXT-X-ALLOW-CACHE:%s"
549                           "%s\n#EXT-X-MEDIA-SEQUENCE:%"PRIu32"\n", p_sys->i_seglen,
550                           p_sys->b_caching ? "YES" : "NO",
551                           p_sys->i_numsegs > 0 ? "" : b_isend ? "\n#EXT-X-PLAYLIST-TYPE:VOD" : "\n#EXT-X-PLAYLIST-TYPE:EVENT",
552                           i_firstseg ) < 0 )
553         {
554             free( psz_idxTmp );
555             fclose( fp );
556             return -1;
557         }
558         char *psz_current_uri=NULL;
559
560
561         for ( uint32_t i = i_firstseg; i <= p_sys->i_segment; i++ )
562         {
563             //scale to i_index_offset..numsegs + i_index_offset
564             uint32_t index = i - i_firstseg + i_index_offset;
565
566             output_segment_t *segment = (output_segment_t *)vlc_array_item_at_index( p_sys->segments_t, index );
567             if( p_sys->key_uri &&
568                 ( !psz_current_uri ||  strcmp( psz_current_uri, segment->psz_key_uri ) )
569               )
570             {
571                 int ret = 0;
572                 free( psz_current_uri );
573                 psz_current_uri = strdup( segment->psz_key_uri );
574                 if( p_sys->b_generate_iv )
575                 {
576                     unsigned long long iv_hi = 0, iv_lo = 0;
577                     for( unsigned short i = 0; i < 8; i++ )
578                     {
579                         iv_hi |= segment->aes_ivs[i] & 0xff;
580                         iv_hi <<= 8;
581                         iv_lo |= segment->aes_ivs[8+i] & 0xff;
582                         iv_lo <<= 8;
583                     }
584                     ret = fprintf( fp, "#EXT-X-KEY:METHOD=AES-128,URI=\"%s\",IV=0X%16.16llx%16.16llx\n",
585                                    segment->psz_key_uri, iv_hi, iv_lo );
586
587                 } else {
588                     ret = fprintf( fp, "#EXT-X-KEY:METHOD=AES-128,URI=\"%s\"\n", segment->psz_key_uri );
589                 }
590                 if( ret < 0 )
591                 {
592                     free( psz_idxTmp );
593                     fclose( fp );
594                     return -1;
595                 }
596             }
597
598             val = fprintf( fp, "#EXTINF:%s,\n%s\n", segment->psz_duration, segment->psz_uri);
599             if ( val < 0 )
600             {
601                 fclose( fp );
602                 return -1;
603             }
604         }
605         free( psz_current_uri );
606
607         if ( b_isend )
608         {
609             if ( fputs ( STR_ENDLIST, fp ) < 0)
610             {
611                 free( psz_idxTmp );
612                 fclose( fp ) ;
613                 return -1;
614             }
615
616         }
617         fclose( fp );
618
619         val = vlc_rename ( psz_idxTmp, p_sys->psz_indexPath);
620
621         if ( val < 0 )
622         {
623             vlc_unlink( psz_idxTmp );
624             msg_Err( p_access, "Error moving LiveHttp index file" );
625         }
626         else
627             msg_Dbg( p_access, "LiveHttpIndexComplete: %s" , p_sys->psz_indexPath );
628
629         free( psz_idxTmp );
630     }
631
632     // Then take care of deletion
633     // Try to follow pantos draft 11 section 6.2.2
634     while( p_sys->b_delsegs && p_sys->i_numsegs &&
635            isFirstItemRemovable( p_sys, i_firstseg, i_index_offset )
636          )
637     {
638          output_segment_t *segment = vlc_array_item_at_index( p_sys->segments_t, 0 );
639          msg_Dbg( p_access, "Removing segment number %d", segment->i_segment_number );
640          vlc_array_remove( p_sys->segments_t, 0 );
641
642          if ( segment->psz_filename )
643          {
644              vlc_unlink( segment->psz_filename );
645          }
646
647          destroySegment( segment );
648          i_index_offset -=1;
649     }
650
651
652     return 0;
653 }
654
655 /*****************************************************************************
656  * closeCurrentSegment: Close the segment file
657  *****************************************************************************/
658 static void closeCurrentSegment( sout_access_out_t *p_access, sout_access_out_sys_t *p_sys, bool b_isend )
659 {
660     if ( p_sys->i_handle >= 0 )
661     {
662         output_segment_t *segment = (output_segment_t *)vlc_array_item_at_index( p_sys->segments_t, vlc_array_count( p_sys->segments_t ) - 1 );
663
664         if( p_sys->key_uri )
665         {
666             size_t pad = 16 - p_sys->stuffing_size;
667             memset(&p_sys->stuffing_bytes[p_sys->stuffing_size], pad, pad);
668             gcry_error_t err = gcry_cipher_encrypt( p_sys->aes_ctx, p_sys->stuffing_bytes, 16, NULL, 0 );
669
670             if( err ) {
671                msg_Err( p_access, "Couldn't encrypt 16 bytes: %s", gpg_strerror(err) );
672             } else {
673             int ret = write( p_sys->i_handle, p_sys->stuffing_bytes, 16 );
674             if( ret != 16 )
675                 msg_Err( p_access, "Couldn't write 16 bytes" );
676             }
677             p_sys->stuffing_size = 0;
678         }
679
680
681         close( p_sys->i_handle );
682         p_sys->i_handle = -1;
683
684         if( ! ( us_asprintf( &segment->psz_duration, "%.2f", p_sys->f_seglen ) ) )
685         {
686             msg_Err( p_access, "Couldn't set duration on closed segment");
687             return;
688         }
689         segment->f_seglength = p_sys->f_seglen;
690
691         segment->i_segment_number = p_sys->i_segment;
692
693         if ( p_sys->psz_cursegPath )
694         {
695             msg_Dbg( p_access, "LiveHttpSegmentComplete: %s (%"PRIu32")" , p_sys->psz_cursegPath, p_sys->i_segment );
696             free( p_sys->psz_cursegPath );
697             p_sys->psz_cursegPath = 0;
698             updateIndexAndDel( p_access, p_sys, b_isend );
699         }
700     }
701 }
702
703 /*****************************************************************************
704  * Close: close the target
705  *****************************************************************************/
706 static void Close( vlc_object_t * p_this )
707 {
708     sout_access_out_t *p_access = (sout_access_out_t*)p_this;
709     sout_access_out_sys_t *p_sys = p_access->p_sys;
710
711     msg_Dbg( p_access, "Flushing buffer to last file");
712     bool crypted = false;
713     while( p_sys->block_buffer )
714     {
715         if( p_sys->key_uri && !crypted)
716         {
717             if( p_sys->stuffing_size )
718             {
719                 p_sys->block_buffer = block_Realloc( p_sys->block_buffer, p_sys->stuffing_size, p_sys->block_buffer->i_buffer );
720                 if( unlikely(!p_sys->block_buffer) )
721                     return;
722                 memcpy( p_sys->block_buffer->p_buffer, p_sys->stuffing_bytes, p_sys->stuffing_size );
723                 p_sys->stuffing_size = 0;
724             }
725             size_t original = p_sys->block_buffer->i_buffer;
726             size_t padded = (original + 15 ) & ~15;
727             size_t pad = padded - original;
728             if( pad )
729             {
730                 p_sys->stuffing_size = 16 - pad;
731                 p_sys->block_buffer->i_buffer -= p_sys->stuffing_size;
732                 memcpy( p_sys->stuffing_bytes, &p_sys->block_buffer->p_buffer[p_sys->block_buffer->i_buffer], p_sys->stuffing_size );
733             }
734
735             gcry_error_t err = gcry_cipher_encrypt( p_sys->aes_ctx,
736                                 p_sys->block_buffer->p_buffer, p_sys->block_buffer->i_buffer, NULL, 0 );
737             if( err )
738             {
739                 msg_Err( p_access, "Encryption failure: %s ", gpg_strerror(err) );
740                 break;
741             }
742             crypted = true;
743         }
744         ssize_t val = write( p_sys->i_handle, p_sys->block_buffer->p_buffer, p_sys->block_buffer->i_buffer );
745         if ( val == -1 )
746         {
747            if ( errno == EINTR )
748               continue;
749            block_ChainRelease ( p_sys->block_buffer);
750            break;
751         }
752         if( !p_sys->block_buffer->p_next )
753         {
754             p_sys->f_seglen = (float)( p_sys->block_buffer->i_length / (1000000)) +
755                                (float)(p_sys->block_buffer->i_dts - p_sys->i_opendts) / CLOCK_FREQ;
756         }
757
758         if ( likely( (size_t)val >= p_sys->block_buffer->i_buffer ) )
759         {
760            block_t *p_next = p_sys->block_buffer->p_next;
761            block_Release (p_sys->block_buffer);
762            p_sys->block_buffer = p_next;
763            crypted=false;
764         }
765         else
766         {
767            p_sys->block_buffer->p_buffer += val;
768            p_sys->block_buffer->i_buffer -= val;
769         }
770     }
771
772     closeCurrentSegment( p_access, p_sys, true );
773
774     if( p_sys->key_uri )
775     {
776         gcry_cipher_close( p_sys->aes_ctx );
777         free( p_sys->key_uri );
778     }
779
780     while( vlc_array_count( p_sys->segments_t ) > 0 )
781     {
782         output_segment_t *segment = vlc_array_item_at_index( p_sys->segments_t, 0 );
783         vlc_array_remove( p_sys->segments_t, 0 );
784         destroySegment( segment );
785     }
786     vlc_array_destroy( p_sys->segments_t );
787
788     free( p_sys->psz_indexUrl );
789     free( p_sys->psz_indexPath );
790     free( p_sys );
791
792     msg_Dbg( p_access, "livehttp access output closed" );
793 }
794
795 static int Control( sout_access_out_t *p_access, int i_query, va_list args )
796 {
797     sout_access_out_sys_t *p_sys = p_access->p_sys;
798
799     switch( i_query )
800     {
801         case ACCESS_OUT_CONTROLS_PACE:
802         {
803             bool *pb = va_arg( args, bool * );
804             *pb = !p_sys->b_ratecontrol;
805             //*pb = true;
806             break;
807         }
808
809         default:
810             return VLC_EGENERIC;
811     }
812     return VLC_SUCCESS;
813 }
814
815 /*****************************************************************************
816  * openNextFile: Open the segment file
817  *****************************************************************************/
818 static ssize_t openNextFile( sout_access_out_t *p_access, sout_access_out_sys_t *p_sys )
819 {
820     int fd;
821
822     uint32_t i_newseg = p_sys->i_segment + 1;
823
824     /* Create segment and fill it info that we can (everything excluding duration */
825     output_segment_t *segment = (output_segment_t*)malloc(sizeof(output_segment_t));
826     if( unlikely( !segment ) )
827         return -1;
828
829     memset( segment, 0 , sizeof( output_segment_t ) );
830
831     segment->i_segment_number = i_newseg;
832     segment->psz_filename = formatSegmentPath( p_access->psz_path, i_newseg, true );
833     char *psz_idxFormat = p_sys->psz_indexUrl ? p_sys->psz_indexUrl : p_access->psz_path;
834     segment->psz_uri = formatSegmentPath( psz_idxFormat , i_newseg, false );
835
836     if ( unlikely( !segment->psz_filename ) )
837     {
838         msg_Err( p_access, "Format segmentpath failed");
839         return -1;
840     }
841
842     fd = vlc_open( segment->psz_filename, O_WRONLY | O_CREAT | O_LARGEFILE |
843                      O_TRUNC, 0666 );
844     if ( fd == -1 )
845     {
846         msg_Err( p_access, "cannot open `%s' (%m)", segment->psz_filename );
847         destroySegment( segment );
848         return -1;
849     }
850
851     vlc_array_append( p_sys->segments_t, segment);
852
853     if( p_sys->psz_keyfile )
854     {
855         LoadCryptFile( p_access );
856     }
857
858     if( p_sys->key_uri )
859     {
860         segment->psz_key_uri = strdup( p_sys->key_uri );
861         CryptKey( p_access, i_newseg );
862         if( p_sys->b_generate_iv )
863             memcpy( segment->aes_ivs, p_sys->aes_ivs, sizeof(uint8_t)*16 );
864     }
865     msg_Dbg( p_access, "Successfully opened livehttp file: %s (%"PRIu32")" , segment->psz_filename, i_newseg );
866
867     p_sys->psz_cursegPath = strdup(segment->psz_filename);
868     p_sys->i_handle = fd;
869     p_sys->i_segment = i_newseg;
870     return fd;
871 }
872
873 /*****************************************************************************
874  * Write: standard write on a file descriptor.
875  *****************************************************************************/
876 static ssize_t Write( sout_access_out_t *p_access, block_t *p_buffer )
877 {
878     size_t i_write = 0;
879     sout_access_out_sys_t *p_sys = p_access->p_sys;
880     block_t *p_temp;
881
882     while( p_buffer )
883     {
884         if ( ( p_sys->b_splitanywhere || ( p_buffer->i_flags & BLOCK_FLAG_HEADER ) ) )
885         {
886             bool crypted = false;
887             block_t *output = p_sys->block_buffer;
888             p_sys->block_buffer = NULL;
889
890
891             if( p_sys->i_handle > 0 &&
892                 ( p_buffer->i_dts - p_sys->i_opendts +
893                   p_buffer->i_length * CLOCK_FREQ / INT64_C(1000000)
894                 ) >= p_sys->i_seglenm )
895                 closeCurrentSegment( p_access, p_sys, false );
896
897             if ( p_sys->i_handle < 0 )
898             {
899                 p_sys->i_opendts = output ? output->i_dts : p_buffer->i_dts;
900                 if ( openNextFile( p_access, p_sys ) < 0 )
901                    return -1;
902             }
903
904             while( output )
905             {
906                 if( p_sys->key_uri && !crypted )
907                 {
908                     if( p_sys->stuffing_size )
909                     {
910                         output = block_Realloc( output, p_sys->stuffing_size, output->i_buffer );
911                         if( unlikely(!output ) )
912                             return VLC_ENOMEM;
913                         memcpy( output->p_buffer, p_sys->stuffing_bytes, p_sys->stuffing_size );
914                         p_sys->stuffing_size = 0;
915                     }
916                     size_t original = output->i_buffer;
917                     size_t padded = (output->i_buffer + 15 ) & ~15;
918                     size_t pad = padded - original;
919                     if( pad )
920                     {
921                         p_sys->stuffing_size = 16-pad;
922                         output->i_buffer -= p_sys->stuffing_size;
923                         memcpy(p_sys->stuffing_bytes, &output->p_buffer[output->i_buffer], p_sys->stuffing_size);
924                     }
925
926                     gcry_error_t err = gcry_cipher_encrypt( p_sys->aes_ctx,
927                                         output->p_buffer, output->i_buffer, NULL, 0 );
928                     if( err )
929                     {
930                         msg_Err( p_access, "Encryption failure: %s ", gpg_strerror(err) );
931                         return -1;
932                     }
933                     crypted=true;
934
935                 }
936                 ssize_t val = write( p_sys->i_handle, output->p_buffer, output->i_buffer );
937                 if ( val == -1 )
938                 {
939                    if ( errno == EINTR )
940                       continue;
941                    block_ChainRelease ( p_buffer );
942                    return -1;
943                 }
944                 p_sys->f_seglen =
945                     (float)output->i_length / INT64_C(1000000) +
946                     (float)(output->i_dts - p_sys->i_opendts) / CLOCK_FREQ;
947
948                 if ( (size_t)val >= output->i_buffer )
949                 {
950                    block_t *p_next = output->p_next;
951                    block_Release (output);
952                    output = p_next;
953                    crypted=false;
954                 }
955                 else
956                 {
957                    output->p_buffer += val;
958                    output->i_buffer -= val;
959                 }
960                 i_write += val;
961             }
962         }
963
964         p_temp = p_buffer->p_next;
965         p_buffer->p_next = NULL;
966         block_ChainAppend( &p_sys->block_buffer, p_buffer );
967         p_buffer = p_temp;
968     }
969
970     return i_write;
971 }
972
973 /*****************************************************************************
974  * Seek: seek to a specific location in a file
975  *****************************************************************************/
976 static int Seek( sout_access_out_t *p_access, off_t i_pos )
977 {
978     (void) i_pos;
979     msg_Err( p_access, "livehttp sout access cannot seek" );
980     return -1;
981 }