]> git.sesse.net Git - vlc/blob - src/input/es_out.c
97e6b65524d6159a804896d6f0c5e200089d9087
[vlc] / src / input / es_out.c
1 /*****************************************************************************
2  * es_out.c: Es Out handler for input.
3  *****************************************************************************
4  * Copyright (C) 2003-2004 VLC authors and VideoLAN
5  * $Id$
6  *
7  * Authors: Laurent Aimar <fenrir@via.ecp.fr>
8  *          Jean-Paul Saman <jpsaman #_at_# m2x dot nl>
9  *
10  * This program is free software; you can redistribute it and/or modify it
11  * under the terms of the GNU Lesser General Public License as published by
12  * the Free Software Foundation; either version 2.1 of the License, or
13  * (at your option) any later version.
14  *
15  * This program is distributed in the hope that it will be useful,
16  * but WITHOUT ANY WARRANTY; without even the implied warranty of
17  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE. See the
18  * GNU Lesser General Public License for more details.
19  *
20  * You should have received a copy of the GNU Lesser General Public License
21  * along with this program; if not, write to the Free Software Foundation,
22  * Inc., 51 Franklin Street, Fifth Floor, Boston MA 02110-1301, USA.
23  *****************************************************************************/
24
25 /*****************************************************************************
26  * Preamble
27  *****************************************************************************/
28 #ifdef HAVE_CONFIG_H
29 # include "config.h"
30 #endif
31
32 #include <stdio.h>
33 #include <assert.h>
34 #include <vlc_common.h>
35
36 #include <vlc_input.h>
37 #include <vlc_es_out.h>
38 #include <vlc_block.h>
39 #include <vlc_aout.h>
40 #include <vlc_fourcc.h>
41
42 #include "input_internal.h"
43 #include "clock.h"
44 #include "decoder.h"
45 #include "es_out.h"
46 #include "event.h"
47 #include "info.h"
48 #include "item.h"
49
50 #include "../stream_output/stream_output.h"
51
52 #include <vlc_iso_lang.h>
53 /* FIXME we should find a better way than including that */
54 #include "../text/iso-639_def.h"
55
56 /*****************************************************************************
57  * Local prototypes
58  *****************************************************************************/
59 typedef struct
60 {
61     /* Program ID */
62     int i_id;
63
64     /* Number of es for this pgrm */
65     int i_es;
66
67     bool b_selected;
68     bool b_scrambled;
69
70     /* Clock for this program */
71     input_clock_t *p_clock;
72
73     char    *psz_name;
74     char    *psz_now_playing;
75     char    *psz_publisher;
76 } es_out_pgrm_t;
77
78 struct es_out_id_t
79 {
80     /* ES ID */
81     int       i_id;
82     es_out_pgrm_t *p_pgrm;
83
84     /* */
85     bool b_scrambled;
86
87     /* Channel in the track type */
88     int         i_channel;
89     es_format_t fmt;
90     char        *psz_language;
91     char        *psz_language_code;
92
93     decoder_t   *p_dec;
94     decoder_t   *p_dec_record;
95
96     /* Fields for Video with CC */
97     bool  pb_cc_present[4];
98     es_out_id_t  *pp_cc_es[4];
99
100     /* Field for CC track from a master video */
101     es_out_id_t *p_master;
102
103     /* ID for the meta data */
104     int         i_meta_id;
105 };
106
107 struct es_out_sys_t
108 {
109     input_thread_t *p_input;
110
111     /* */
112     vlc_mutex_t   lock;
113
114     /* all programs */
115     int           i_pgrm;
116     es_out_pgrm_t **pgrm;
117     es_out_pgrm_t *p_pgrm;  /* Master program */
118
119     /* all es */
120     int         i_id;
121     int         i_es;
122     es_out_id_t **es;
123
124     /* mode gestion */
125     bool  b_active;
126     int         i_mode;
127
128     /* es count */
129     int         i_audio;
130     int         i_video;
131     int         i_sub;
132
133     /* es/group to select */
134     int         i_group_id;
135     int         i_audio_last, i_audio_id;
136     int         i_sub_last, i_sub_id;
137     int         i_default_sub_id;   /* As specified in container; if applicable */
138     char        **ppsz_audio_language;
139     char        **ppsz_sub_language;
140
141     /* current main es */
142     es_out_id_t *p_es_audio;
143     es_out_id_t *p_es_video;
144     es_out_id_t *p_es_sub;
145
146     /* delay */
147     int64_t i_audio_delay;
148     int64_t i_spu_delay;
149
150     /* Clock configuration */
151     mtime_t     i_pts_delay;
152     mtime_t     i_pts_jitter;
153     int         i_cr_average;
154     int         i_rate;
155
156     /* */
157     bool        b_paused;
158     mtime_t     i_pause_date;
159
160     /* Current preroll */
161     mtime_t     i_preroll_end;
162
163     /* Used for buffering */
164     bool        b_buffering;
165     mtime_t     i_buffering_extra_initial;
166     mtime_t     i_buffering_extra_stream;
167     mtime_t     i_buffering_extra_system;
168
169     /* Record */
170     sout_instance_t *p_sout_record;
171 };
172
173 static es_out_id_t *EsOutAdd    ( es_out_t *, const es_format_t * );
174 static int          EsOutSend   ( es_out_t *, es_out_id_t *, block_t * );
175 static void         EsOutDel    ( es_out_t *, es_out_id_t * );
176 static int          EsOutControl( es_out_t *, int i_query, va_list );
177 static void         EsOutDelete ( es_out_t * );
178
179 static void         EsOutTerminate( es_out_t * );
180 static void         EsOutSelect( es_out_t *, es_out_id_t *es, bool b_force );
181 static void         EsOutUpdateInfo( es_out_t *, es_out_id_t *es, const es_format_t *, const vlc_meta_t * );
182 static int          EsOutSetRecord(  es_out_t *, bool b_record );
183
184 static bool EsIsSelected( es_out_id_t *es );
185 static void EsSelect( es_out_t *out, es_out_id_t *es );
186 static void EsUnselect( es_out_t *out, es_out_id_t *es, bool b_update );
187 static void EsOutDecoderChangeDelay( es_out_t *out, es_out_id_t *p_es );
188 static void EsOutDecodersChangePause( es_out_t *out, bool b_paused, mtime_t i_date );
189 static void EsOutProgramChangePause( es_out_t *out, bool b_paused, mtime_t i_date );
190 static void EsOutProgramsChangeRate( es_out_t *out );
191 static void EsOutDecodersStopBuffering( es_out_t *out, bool b_forced );
192
193 static char *LanguageGetName( const char *psz_code );
194 static char *LanguageGetCode( const char *psz_lang );
195 static char **LanguageSplit( const char *psz_langs, bool b_default_any );
196 static int LanguageArrayIndex( char **ppsz_langs, const char *psz_lang );
197
198 static char *EsOutProgramGetMetaName( es_out_pgrm_t *p_pgrm );
199
200 static const vlc_fourcc_t EsOutFourccClosedCaptions[4] = {
201     VLC_FOURCC('c', 'c', '1', ' '),
202     VLC_FOURCC('c', 'c', '2', ' '),
203     VLC_FOURCC('c', 'c', '3', ' '),
204     VLC_FOURCC('c', 'c', '4', ' '),
205 };
206 static inline int EsOutGetClosedCaptionsChannel( vlc_fourcc_t fcc )
207 {
208     int i;
209     for( i = 0; i < 4; i++ )
210     {
211         if( fcc == EsOutFourccClosedCaptions[i] )
212             return i;
213     }
214     return -1;
215 }
216 static inline bool EsFmtIsTeletext( const es_format_t *p_fmt )
217 {
218     return p_fmt->i_cat == SPU_ES && p_fmt->i_codec == VLC_CODEC_TELETEXT;
219 }
220
221 /*****************************************************************************
222  * input_EsOutNew:
223  *****************************************************************************/
224 es_out_t *input_EsOutNew( input_thread_t *p_input, int i_rate )
225 {
226     es_out_t     *out = malloc( sizeof( *out ) );
227     if( !out )
228         return NULL;
229
230     es_out_sys_t *p_sys = calloc( 1, sizeof( *p_sys ) );
231     if( !p_sys )
232     {
233         free( out );
234         return NULL;
235     }
236
237     out->pf_add     = EsOutAdd;
238     out->pf_send    = EsOutSend;
239     out->pf_del     = EsOutDel;
240     out->pf_control = EsOutControl;
241     out->pf_destroy = EsOutDelete;
242     out->p_sys      = p_sys;
243
244     vlc_mutex_init_recursive( &p_sys->lock );
245     p_sys->p_input = p_input;
246
247     p_sys->b_active = false;
248     p_sys->i_mode   = ES_OUT_MODE_NONE;
249
250
251     TAB_INIT( p_sys->i_pgrm, p_sys->pgrm );
252
253     TAB_INIT( p_sys->i_es, p_sys->es );
254
255     /* */
256     p_sys->i_group_id = var_GetInteger( p_input, "program" );
257     p_sys->i_audio_last = var_GetInteger( p_input, "audio-track" );
258     p_sys->i_sub_last = var_GetInteger( p_input, "sub-track" );
259
260     p_sys->i_default_sub_id   = -1;
261
262     if( !p_input->b_preparsing )
263     {
264         char *psz_string;
265
266         psz_string = var_GetString( p_input, "audio-language" );
267         p_sys->ppsz_audio_language = LanguageSplit( psz_string, true );
268         if( p_sys->ppsz_audio_language )
269         {
270             for( int i = 0; p_sys->ppsz_audio_language[i]; i++ )
271                 msg_Dbg( p_input, "selected audio language[%d] %s",
272                          i, p_sys->ppsz_audio_language[i] );
273         }
274         free( psz_string );
275
276         psz_string = var_GetString( p_input, "sub-language" );
277         p_sys->ppsz_sub_language = LanguageSplit( psz_string, false );
278         if( p_sys->ppsz_sub_language )
279         {
280             for( int i = 0; p_sys->ppsz_sub_language[i]; i++ )
281                 msg_Dbg( p_input, "selected subtitle language[%d] %s",
282                          i, p_sys->ppsz_sub_language[i] );
283         }
284         free( psz_string );
285     }
286
287     p_sys->i_audio_id = var_GetInteger( p_input, "audio-track-id" );
288
289     p_sys->i_sub_id = var_GetInteger( p_input, "sub-track-id" );
290
291     p_sys->i_pause_date = -1;
292
293     p_sys->i_rate = i_rate;
294
295     p_sys->b_buffering = true;
296     p_sys->i_preroll_end = -1;
297
298     return out;
299 }
300
301 /*****************************************************************************
302  *
303  *****************************************************************************/
304 static void EsOutDelete( es_out_t *out )
305 {
306     es_out_sys_t *p_sys = out->p_sys;
307
308     assert( !p_sys->i_es && !p_sys->i_pgrm && !p_sys->p_pgrm );
309     if( p_sys->ppsz_audio_language )
310     {
311         for( int i = 0; p_sys->ppsz_audio_language[i]; i++ )
312             free( p_sys->ppsz_audio_language[i] );
313         free( p_sys->ppsz_audio_language );
314     }
315     if( p_sys->ppsz_sub_language )
316     {
317         for( int i = 0; p_sys->ppsz_sub_language[i]; i++ )
318             free( p_sys->ppsz_sub_language[i] );
319         free( p_sys->ppsz_sub_language );
320     }
321
322     vlc_mutex_destroy( &p_sys->lock );
323
324     free( p_sys );
325     free( out );
326 }
327
328 static void EsOutTerminate( es_out_t *out )
329 {
330     es_out_sys_t *p_sys = out->p_sys;
331
332     if( p_sys->p_sout_record )
333         EsOutSetRecord( out, false );
334
335     for( int i = 0; i < p_sys->i_es; i++ )
336     {
337         if( p_sys->es[i]->p_dec )
338             input_DecoderDelete( p_sys->es[i]->p_dec );
339
340         free( p_sys->es[i]->psz_language );
341         free( p_sys->es[i]->psz_language_code );
342         es_format_Clean( &p_sys->es[i]->fmt );
343
344         free( p_sys->es[i] );
345     }
346     TAB_CLEAN( p_sys->i_es, p_sys->es );
347
348     /* FIXME duplicate work EsOutProgramDel (but we cannot use it) add a EsOutProgramClean ? */
349     for( int i = 0; i < p_sys->i_pgrm; i++ )
350     {
351         es_out_pgrm_t *p_pgrm = p_sys->pgrm[i];
352         input_clock_Delete( p_pgrm->p_clock );
353         free( p_pgrm->psz_now_playing );
354         free( p_pgrm->psz_publisher );
355         free( p_pgrm->psz_name );
356
357         free( p_pgrm );
358     }
359     TAB_CLEAN( p_sys->i_pgrm, p_sys->pgrm );
360
361     p_sys->p_pgrm = NULL;
362
363     input_item_SetEpgOffline( p_sys->p_input->p->p_item );
364     input_SendEventMetaEpg( p_sys->p_input );
365 }
366
367 static mtime_t EsOutGetWakeup( es_out_t *out )
368 {
369     es_out_sys_t   *p_sys = out->p_sys;
370     input_thread_t *p_input = p_sys->p_input;
371
372     if( !p_sys->p_pgrm )
373         return 0;
374
375     /* We do not have a wake up date if the input cannot have its speed
376      * controlled or sout is imposing its own or while buffering
377      *
378      * FIXME for !p_input->p->b_can_pace_control a wake-up time is still needed
379      * to avoid too heavy buffering */
380     if( !p_input->p->b_can_pace_control ||
381         p_input->p->b_out_pace_control ||
382         p_sys->b_buffering )
383         return 0;
384
385     return input_clock_GetWakeup( p_sys->p_pgrm->p_clock );
386 }
387
388 static es_out_id_t *EsOutGetFromID( es_out_t *out, int i_id )
389 {
390     if( i_id < 0 )
391     {
392         /* Special HACK, -i_id is the cat of the stream */
393         return (es_out_id_t*)((uint8_t*)NULL-i_id);
394     }
395
396     for( int i = 0; i < out->p_sys->i_es; i++ )
397     {
398         if( out->p_sys->es[i]->i_id == i_id )
399             return out->p_sys->es[i];
400     }
401     return NULL;
402 }
403
404 static bool EsOutDecodersIsEmpty( es_out_t *out )
405 {
406     es_out_sys_t      *p_sys = out->p_sys;
407
408     if( p_sys->b_buffering && p_sys->p_pgrm )
409     {
410         EsOutDecodersStopBuffering( out, true );
411         if( p_sys->b_buffering )
412             return true;
413     }
414
415     for( int i = 0; i < p_sys->i_es; i++ )
416     {
417         es_out_id_t *es = p_sys->es[i];
418
419         if( es->p_dec && !input_DecoderIsEmpty( es->p_dec ) )
420             return false;
421         if( es->p_dec_record && !input_DecoderIsEmpty( es->p_dec_record ) )
422             return false;
423     }
424     return true;
425 }
426
427 static void EsOutSetDelay( es_out_t *out, int i_cat, int64_t i_delay )
428 {
429     es_out_sys_t *p_sys = out->p_sys;
430
431     if( i_cat == AUDIO_ES )
432         p_sys->i_audio_delay = i_delay;
433     else if( i_cat == SPU_ES )
434         p_sys->i_spu_delay = i_delay;
435
436     for( int i = 0; i < p_sys->i_es; i++ )
437         EsOutDecoderChangeDelay( out, p_sys->es[i] );
438 }
439
440 static int EsOutSetRecord(  es_out_t *out, bool b_record )
441 {
442     es_out_sys_t   *p_sys = out->p_sys;
443     input_thread_t *p_input = p_sys->p_input;
444
445     assert( ( b_record && !p_sys->p_sout_record ) || ( !b_record && p_sys->p_sout_record ) );
446
447     if( b_record )
448     {
449         char *psz_path = var_CreateGetNonEmptyString( p_input, "input-record-path" );
450         if( !psz_path )
451         {
452             if( var_CountChoices( p_input, "video-es" ) )
453                 psz_path = config_GetUserDir( VLC_VIDEOS_DIR );
454             else if( var_CountChoices( p_input, "audio-es" ) )
455                 psz_path = config_GetUserDir( VLC_MUSIC_DIR );
456             else
457                 psz_path = config_GetUserDir( VLC_DOWNLOAD_DIR );
458         }
459
460         char *psz_sout = NULL;  // TODO conf
461
462         if( !psz_sout && psz_path )
463         {
464             char *psz_file = input_CreateFilename( VLC_OBJECT(p_input), psz_path, INPUT_RECORD_PREFIX, NULL );
465             if( psz_file )
466             {
467                 if( asprintf( &psz_sout, "#record{dst-prefix='%s'}", psz_file ) < 0 )
468                     psz_sout = NULL;
469                 free( psz_file );
470             }
471         }
472         free( psz_path );
473
474         if( !psz_sout )
475             return VLC_EGENERIC;
476
477 #ifdef ENABLE_SOUT
478         p_sys->p_sout_record = sout_NewInstance( p_input, psz_sout );
479 #endif
480         free( psz_sout );
481
482         if( !p_sys->p_sout_record )
483             return VLC_EGENERIC;
484
485         for( int i = 0; i < p_sys->i_es; i++ )
486         {
487             es_out_id_t *p_es = p_sys->es[i];
488
489             if( !p_es->p_dec || p_es->p_master )
490                 continue;
491
492             p_es->p_dec_record = input_DecoderNew( p_input, &p_es->fmt, p_es->p_pgrm->p_clock, p_sys->p_sout_record );
493             if( p_es->p_dec_record && p_sys->b_buffering )
494                 input_DecoderStartBuffering( p_es->p_dec_record );
495         }
496     }
497     else
498     {
499         for( int i = 0; i < p_sys->i_es; i++ )
500         {
501             es_out_id_t *p_es = p_sys->es[i];
502
503             if( !p_es->p_dec_record )
504                 continue;
505
506             input_DecoderDelete( p_es->p_dec_record );
507             p_es->p_dec_record = NULL;
508         }
509 #ifdef ENABLE_SOUT
510         sout_DeleteInstance( p_sys->p_sout_record );
511 #endif
512         p_sys->p_sout_record = NULL;
513     }
514
515     return VLC_SUCCESS;
516 }
517 static void EsOutChangePause( es_out_t *out, bool b_paused, mtime_t i_date )
518 {
519     es_out_sys_t *p_sys = out->p_sys;
520
521     /* XXX the order is important */
522     if( b_paused )
523     {
524         EsOutDecodersChangePause( out, true, i_date );
525         EsOutProgramChangePause( out, true, i_date );
526     }
527     else
528     {
529         if( p_sys->i_buffering_extra_initial > 0 )
530         {
531             mtime_t i_stream_start;
532             mtime_t i_system_start;
533             mtime_t i_stream_duration;
534             mtime_t i_system_duration;
535             int i_ret;
536             i_ret = input_clock_GetState( p_sys->p_pgrm->p_clock,
537                                           &i_stream_start, &i_system_start,
538                                           &i_stream_duration, &i_system_duration );
539             if( !i_ret )
540             {
541                 /* FIXME pcr != exactly what wanted */
542                 const mtime_t i_used = /*(i_stream_duration - p_sys->p_input->p->i_pts_delay)*/ p_sys->i_buffering_extra_system - p_sys->i_buffering_extra_initial;
543                 i_date -= i_used;
544             }
545             p_sys->i_buffering_extra_initial = 0;
546             p_sys->i_buffering_extra_stream = 0;
547             p_sys->i_buffering_extra_system = 0;
548         }
549         EsOutProgramChangePause( out, false, i_date );
550         EsOutDecodersChangePause( out, false, i_date );
551
552         EsOutProgramsChangeRate( out );
553     }
554     p_sys->b_paused = b_paused;
555     p_sys->i_pause_date = i_date;
556 }
557
558 static void EsOutChangeRate( es_out_t *out, int i_rate )
559 {
560     es_out_sys_t      *p_sys = out->p_sys;
561
562     p_sys->i_rate = i_rate;
563     EsOutProgramsChangeRate( out );
564 }
565
566 static void EsOutChangePosition( es_out_t *out )
567 {
568     es_out_sys_t      *p_sys = out->p_sys;
569
570     input_SendEventCache( p_sys->p_input, 0.0 );
571
572     for( int i = 0; i < p_sys->i_es; i++ )
573     {
574         es_out_id_t *p_es = p_sys->es[i];
575
576         if( !p_es->p_dec )
577             continue;
578
579         input_DecoderStartBuffering( p_es->p_dec );
580
581         if( p_es->p_dec_record )
582             input_DecoderStartBuffering( p_es->p_dec_record );
583     }
584
585     for( int i = 0; i < p_sys->i_pgrm; i++ )
586         input_clock_Reset( p_sys->pgrm[i]->p_clock );
587
588     p_sys->b_buffering = true;
589     p_sys->i_buffering_extra_initial = 0;
590     p_sys->i_buffering_extra_stream = 0;
591     p_sys->i_buffering_extra_system = 0;
592     p_sys->i_preroll_end = -1;
593 }
594
595
596
597 static void EsOutDecodersStopBuffering( es_out_t *out, bool b_forced )
598 {
599     es_out_sys_t *p_sys = out->p_sys;
600     int i_ret;
601
602     mtime_t i_stream_start;
603     mtime_t i_system_start;
604     mtime_t i_stream_duration;
605     mtime_t i_system_duration;
606     i_ret = input_clock_GetState( p_sys->p_pgrm->p_clock,
607                                   &i_stream_start, &i_system_start,
608                                   &i_stream_duration, &i_system_duration );
609     assert( !i_ret || b_forced );
610     if( i_ret )
611         return;
612
613     mtime_t i_preroll_duration = 0;
614     if( p_sys->i_preroll_end >= 0 )
615         i_preroll_duration = __MAX( p_sys->i_preroll_end - i_stream_start, 0 );
616
617     const mtime_t i_buffering_duration = p_sys->i_pts_delay +
618                                          i_preroll_duration +
619                                          p_sys->i_buffering_extra_stream - p_sys->i_buffering_extra_initial;
620
621     if( i_stream_duration <= i_buffering_duration && !b_forced )
622     {
623         const double f_level = __MAX( (double)i_stream_duration / i_buffering_duration, 0 );
624         input_SendEventCache( p_sys->p_input, f_level );
625
626         msg_Dbg( p_sys->p_input, "Buffering %d%%", (int)(100 * f_level) );
627         return;
628     }
629     input_SendEventCache( p_sys->p_input, 1.0 );
630
631     msg_Dbg( p_sys->p_input, "Stream buffering done (%d ms in %d ms)",
632               (int)(i_stream_duration/1000), (int)(i_system_duration/1000) );
633     p_sys->b_buffering = false;
634     p_sys->i_preroll_end = -1;
635
636     if( p_sys->i_buffering_extra_initial > 0 )
637     {
638         /* FIXME wrong ? */
639         return;
640     }
641
642     const mtime_t i_decoder_buffering_start = mdate();
643     for( int i = 0; i < p_sys->i_es; i++ )
644     {
645         es_out_id_t *p_es = p_sys->es[i];
646
647         if( !p_es->p_dec || p_es->fmt.i_cat == SPU_ES )
648             continue;
649         input_DecoderWaitBuffering( p_es->p_dec );
650         if( p_es->p_dec_record )
651             input_DecoderWaitBuffering( p_es->p_dec_record );
652     }
653
654     msg_Dbg( p_sys->p_input, "Decoder buffering done in %d ms",
655               (int)(mdate() - i_decoder_buffering_start)/1000 );
656
657     /* Here is a good place to destroy unused vout with every demuxer */
658     input_resource_TerminateVout( p_sys->p_input->p->p_resource );
659
660     /* */
661     const mtime_t i_wakeup_delay = 10*1000; /* FIXME CLEANUP thread wake up time*/
662     const mtime_t i_current_date = p_sys->b_paused ? p_sys->i_pause_date : mdate();
663
664     input_clock_ChangeSystemOrigin( p_sys->p_pgrm->p_clock, true,
665                                     i_current_date + i_wakeup_delay - i_buffering_duration );
666
667     for( int i = 0; i < p_sys->i_es; i++ )
668     {
669         es_out_id_t *p_es = p_sys->es[i];
670
671         if( !p_es->p_dec )
672             continue;
673
674         input_DecoderStopBuffering( p_es->p_dec );
675         if( p_es->p_dec_record )
676             input_DecoderStopBuffering( p_es->p_dec_record );
677     }
678 }
679 static void EsOutDecodersChangePause( es_out_t *out, bool b_paused, mtime_t i_date )
680 {
681     es_out_sys_t *p_sys = out->p_sys;
682
683     /* Pause decoders first */
684     for( int i = 0; i < p_sys->i_es; i++ )
685     {
686         es_out_id_t *es = p_sys->es[i];
687
688         if( es->p_dec )
689         {
690             input_DecoderChangePause( es->p_dec, b_paused, i_date );
691             if( es->p_dec_record )
692                 input_DecoderChangePause( es->p_dec_record, b_paused, i_date );
693         }
694     }
695 }
696
697 static bool EsOutIsExtraBufferingAllowed( es_out_t *out )
698 {
699     es_out_sys_t *p_sys = out->p_sys;
700
701     size_t i_size = 0;
702     for( int i = 0; i < p_sys->i_es; i++ )
703     {
704         es_out_id_t *p_es = p_sys->es[i];
705
706         if( p_es->p_dec )
707             i_size += input_DecoderGetFifoSize( p_es->p_dec );
708         if( p_es->p_dec_record )
709             i_size += input_DecoderGetFifoSize( p_es->p_dec_record );
710     }
711     //msg_Info( out, "----- EsOutIsExtraBufferingAllowed =% 5d KiB -- ", i_size / 1024 );
712
713     /* TODO maybe we want to be able to tune it ? */
714 #if defined(OPTIMIZE_MEMORY)
715     const size_t i_level_high = 512*1024;  /* 0.5 MiB */
716 #else
717     const size_t i_level_high = 10*1024*1024; /* 10 MiB */
718 #endif
719     return i_size < i_level_high;
720 }
721
722 static void EsOutProgramChangePause( es_out_t *out, bool b_paused, mtime_t i_date )
723 {
724     es_out_sys_t *p_sys = out->p_sys;
725
726     for( int i = 0; i < p_sys->i_pgrm; i++ )
727         input_clock_ChangePause( p_sys->pgrm[i]->p_clock, b_paused, i_date );
728 }
729
730 static void EsOutDecoderChangeDelay( es_out_t *out, es_out_id_t *p_es )
731 {
732     es_out_sys_t *p_sys = out->p_sys;
733
734     mtime_t i_delay = 0;
735     if( p_es->fmt.i_cat == AUDIO_ES )
736         i_delay = p_sys->i_audio_delay;
737     else if( p_es->fmt.i_cat == SPU_ES )
738         i_delay = p_sys->i_spu_delay;
739     else
740         return;
741
742     if( p_es->p_dec )
743         input_DecoderChangeDelay( p_es->p_dec, i_delay );
744     if( p_es->p_dec_record )
745         input_DecoderChangeDelay( p_es->p_dec_record, i_delay );
746 }
747 static void EsOutProgramsChangeRate( es_out_t *out )
748 {
749     es_out_sys_t      *p_sys = out->p_sys;
750
751     for( int i = 0; i < p_sys->i_pgrm; i++ )
752         input_clock_ChangeRate( p_sys->pgrm[i]->p_clock, p_sys->i_rate );
753 }
754
755 static void EsOutFrameNext( es_out_t *out )
756 {
757     es_out_sys_t *p_sys = out->p_sys;
758     es_out_id_t *p_es_video = NULL;
759
760     if( p_sys->b_buffering )
761     {
762         msg_Warn( p_sys->p_input, "buffering, ignoring 'frame next'" );
763         return;
764     }
765
766     assert( p_sys->b_paused );
767
768     for( int i = 0; i < p_sys->i_es; i++ )
769     {
770         es_out_id_t *p_es = p_sys->es[i];
771
772         if( p_es->fmt.i_cat == VIDEO_ES && p_es->p_dec )
773         {
774             p_es_video = p_es;
775             break;
776         }
777     }
778
779     if( !p_es_video )
780     {
781         msg_Warn( p_sys->p_input, "No video track selected, ignoring 'frame next'" );
782         return;
783     }
784
785     mtime_t i_duration;
786     input_DecoderFrameNext( p_es_video->p_dec, &i_duration );
787
788     msg_Dbg( out->p_sys->p_input, "EsOutFrameNext consummed %d ms", (int)(i_duration/1000) );
789
790     if( i_duration <= 0 )
791         i_duration = 40*1000;
792
793     /* FIXME it is not a clean way ? */
794     if( p_sys->i_buffering_extra_initial <= 0 )
795     {
796         mtime_t i_stream_start;
797         mtime_t i_system_start;
798         mtime_t i_stream_duration;
799         mtime_t i_system_duration;
800         int i_ret;
801
802         i_ret = input_clock_GetState( p_sys->p_pgrm->p_clock,
803                                       &i_stream_start, &i_system_start,
804                                       &i_stream_duration, &i_system_duration );
805         if( i_ret )
806             return;
807
808         p_sys->i_buffering_extra_initial = 1 + i_stream_duration - p_sys->i_pts_delay; /* FIXME < 0 ? */
809         p_sys->i_buffering_extra_system =
810         p_sys->i_buffering_extra_stream = p_sys->i_buffering_extra_initial;
811     }
812
813     const int i_rate = input_clock_GetRate( p_sys->p_pgrm->p_clock );
814
815     p_sys->b_buffering = true;
816     p_sys->i_buffering_extra_system += i_duration;
817     p_sys->i_buffering_extra_stream = p_sys->i_buffering_extra_initial +
818                                       ( p_sys->i_buffering_extra_system - p_sys->i_buffering_extra_initial ) *
819                                                 INPUT_RATE_DEFAULT / i_rate;
820
821     p_sys->i_preroll_end = -1;
822 }
823 static mtime_t EsOutGetBuffering( es_out_t *out )
824 {
825     es_out_sys_t *p_sys = out->p_sys;
826
827     if( !p_sys->p_pgrm )
828         return 0;
829
830     int i_ret;
831     mtime_t i_stream_start;
832     mtime_t i_system_start;
833     mtime_t i_stream_duration;
834     mtime_t i_system_duration;
835     i_ret = input_clock_GetState( p_sys->p_pgrm->p_clock,
836                                   &i_stream_start, &i_system_start,
837                                   &i_stream_duration, &i_system_duration );
838
839     if( i_ret )
840         return 0;
841
842     mtime_t i_delay;
843
844     if( p_sys->b_buffering && p_sys->i_buffering_extra_initial <= 0 )
845     {
846         i_delay = i_stream_duration;
847     }
848     else
849     {
850         mtime_t i_system_duration;
851         if( p_sys->b_paused )
852         {
853             i_system_duration = p_sys->i_pause_date  - i_system_start;
854             if( p_sys->i_buffering_extra_initial > 0 )
855                 i_system_duration += p_sys->i_buffering_extra_system - p_sys->i_buffering_extra_initial;
856         }
857         else
858         {
859             i_system_duration = mdate() - i_system_start;
860         }
861
862         const mtime_t i_consumed = i_system_duration * INPUT_RATE_DEFAULT / p_sys->i_rate - i_stream_duration;
863         i_delay = p_sys->i_pts_delay - i_consumed;
864     }
865     if( i_delay < 0 )
866         return 0;
867     return i_delay;
868 }
869
870 static void EsOutESVarUpdateGeneric( es_out_t *out, int i_id,
871                                      const es_format_t *fmt, const char *psz_language,
872                                      bool b_delete )
873 {
874     es_out_sys_t      *p_sys = out->p_sys;
875     input_thread_t    *p_input = p_sys->p_input;
876     vlc_value_t       val, text;
877
878     if( b_delete )
879     {
880         if( EsFmtIsTeletext( fmt ) )
881             input_SendEventTeletextDel( p_sys->p_input, i_id );
882
883         input_SendEventEsDel( p_input, fmt->i_cat, i_id );
884         return;
885     }
886
887     /* Get the number of ES already added */
888     const char *psz_var;
889     if( fmt->i_cat == AUDIO_ES )
890         psz_var = "audio-es";
891     else if( fmt->i_cat == VIDEO_ES )
892         psz_var = "video-es";
893     else
894         psz_var = "spu-es";
895
896     var_Change( p_input, psz_var, VLC_VAR_CHOICESCOUNT, &val, NULL );
897     if( val.i_int == 0 )
898     {
899         vlc_value_t val2;
900
901         /* First one, we need to add the "Disable" choice */
902         val2.i_int = -1; text.psz_string = _("Disable");
903         var_Change( p_input, psz_var, VLC_VAR_ADDCHOICE, &val2, &text );
904         val.i_int++;
905     }
906
907     /* Take care of the ES description */
908     if( fmt->psz_description && *fmt->psz_description )
909     {
910         if( psz_language && *psz_language )
911         {
912             if( asprintf( &text.psz_string, "%s - [%s]", fmt->psz_description,
913                           psz_language ) == -1 )
914                 text.psz_string = NULL;
915         }
916         else text.psz_string = strdup( fmt->psz_description );
917     }
918     else
919     {
920         if( psz_language && *psz_language )
921         {
922             if( asprintf( &text.psz_string, "%s %"PRId64" - [%s]", _( "Track" ), val.i_int, psz_language ) == -1 )
923                 text.psz_string = NULL;
924         }
925         else
926         {
927             if( asprintf( &text.psz_string, "%s %"PRId64, _( "Track" ), val.i_int ) == -1 )
928                 text.psz_string = NULL;
929         }
930     }
931
932     input_SendEventEsAdd( p_input, fmt->i_cat, i_id, text.psz_string );
933     if( EsFmtIsTeletext( fmt ) )
934     {
935         char psz_page[3+1];
936         snprintf( psz_page, sizeof(psz_page), "%d%2.2x",
937                   fmt->subs.teletext.i_magazine,
938                   fmt->subs.teletext.i_page );
939         input_SendEventTeletextAdd( p_sys->p_input,
940                                     i_id, fmt->subs.teletext.i_magazine >= 0 ? psz_page : NULL );
941     }
942
943     free( text.psz_string );
944 }
945
946 static void EsOutESVarUpdate( es_out_t *out, es_out_id_t *es,
947                               bool b_delete )
948 {
949     EsOutESVarUpdateGeneric( out, es->i_id, &es->fmt, es->psz_language, b_delete );
950 }
951
952 static bool EsOutIsProgramVisible( es_out_t *out, int i_group )
953 {
954     return out->p_sys->i_group_id == 0 || out->p_sys->i_group_id == i_group;
955 }
956
957 /* EsOutProgramSelect:
958  *  Select a program and update the object variable
959  */
960 static void EsOutProgramSelect( es_out_t *out, es_out_pgrm_t *p_pgrm )
961 {
962     es_out_sys_t      *p_sys = out->p_sys;
963     input_thread_t    *p_input = p_sys->p_input;
964     int               i;
965
966     if( p_sys->p_pgrm == p_pgrm )
967         return; /* Nothing to do */
968
969     if( p_sys->p_pgrm )
970     {
971         es_out_pgrm_t *old = p_sys->p_pgrm;
972         msg_Dbg( p_input, "unselecting program id=%d", old->i_id );
973
974         for( i = 0; i < p_sys->i_es; i++ )
975         {
976             if( p_sys->es[i]->p_pgrm == old && EsIsSelected( p_sys->es[i] ) &&
977                 p_sys->i_mode != ES_OUT_MODE_ALL )
978                 EsUnselect( out, p_sys->es[i], true );
979         }
980
981         p_sys->p_es_audio = NULL;
982         p_sys->p_es_sub = NULL;
983         p_sys->p_es_video = NULL;
984     }
985
986     msg_Dbg( p_input, "selecting program id=%d", p_pgrm->i_id );
987
988     /* Mark it selected */
989     p_pgrm->b_selected = true;
990
991     /* Switch master stream */
992     p_sys->p_pgrm = p_pgrm;
993
994     /* Update "program" */
995     input_SendEventProgramSelect( p_input, p_pgrm->i_id );
996
997     /* Update "es-*" */
998     input_SendEventEsDel( p_input, AUDIO_ES, -1 );
999     input_SendEventEsDel( p_input, VIDEO_ES, -1 );
1000     input_SendEventEsDel( p_input, SPU_ES, -1 );
1001     input_SendEventTeletextDel( p_input, -1 );
1002     input_SendEventProgramScrambled( p_input, p_pgrm->i_id, p_pgrm->b_scrambled );
1003
1004     /* TODO event */
1005     var_SetInteger( p_input, "teletext-es", -1 );
1006
1007     for( i = 0; i < p_sys->i_es; i++ )
1008     {
1009         if( p_sys->es[i]->p_pgrm == p_sys->p_pgrm )
1010             EsOutESVarUpdate( out, p_sys->es[i], false );
1011         EsOutSelect( out, p_sys->es[i], false );
1012     }
1013
1014     /* Update now playing */
1015     input_item_SetNowPlaying( p_input->p->p_item, p_pgrm->psz_now_playing );
1016     input_item_SetPublisher( p_input->p->p_item, p_pgrm->psz_publisher );
1017
1018     input_SendEventMeta( p_input );
1019 }
1020
1021 /* EsOutAddProgram:
1022  *  Add a program
1023  */
1024 static es_out_pgrm_t *EsOutProgramAdd( es_out_t *out, int i_group )
1025 {
1026     es_out_sys_t      *p_sys = out->p_sys;
1027     input_thread_t    *p_input = p_sys->p_input;
1028
1029     es_out_pgrm_t *p_pgrm = malloc( sizeof( es_out_pgrm_t ) );
1030     if( !p_pgrm )
1031         return NULL;
1032
1033     /* Init */
1034     p_pgrm->i_id = i_group;
1035     p_pgrm->i_es = 0;
1036     p_pgrm->b_selected = false;
1037     p_pgrm->b_scrambled = false;
1038     p_pgrm->psz_name = NULL;
1039     p_pgrm->psz_now_playing = NULL;
1040     p_pgrm->psz_publisher = NULL;
1041     p_pgrm->p_clock = input_clock_New( p_sys->i_rate );
1042     if( !p_pgrm->p_clock )
1043     {
1044         free( p_pgrm );
1045         return NULL;
1046     }
1047     if( p_sys->b_paused )
1048         input_clock_ChangePause( p_pgrm->p_clock, p_sys->b_paused, p_sys->i_pause_date );
1049     input_clock_SetJitter( p_pgrm->p_clock, p_sys->i_pts_delay, p_sys->i_cr_average );
1050
1051     /* Append it */
1052     TAB_APPEND( p_sys->i_pgrm, p_sys->pgrm, p_pgrm );
1053
1054     /* Update "program" variable */
1055     if( EsOutIsProgramVisible( out, i_group ) )
1056         input_SendEventProgramAdd( p_input, i_group, NULL );
1057
1058     if( i_group == p_sys->i_group_id || ( !p_sys->p_pgrm && p_sys->i_group_id == 0 ) )
1059         EsOutProgramSelect( out, p_pgrm );
1060
1061     return p_pgrm;
1062 }
1063
1064 /* EsOutDelProgram:
1065  *  Delete a program
1066  */
1067 static int EsOutProgramDel( es_out_t *out, int i_group )
1068 {
1069     es_out_sys_t      *p_sys = out->p_sys;
1070     input_thread_t    *p_input = p_sys->p_input;
1071     es_out_pgrm_t     *p_pgrm = NULL;
1072     int               i;
1073
1074     for( i = 0; i < p_sys->i_pgrm; i++ )
1075     {
1076         if( p_sys->pgrm[i]->i_id == i_group )
1077         {
1078             p_pgrm = p_sys->pgrm[i];
1079             break;
1080         }
1081     }
1082
1083     if( p_pgrm == NULL )
1084         return VLC_EGENERIC;
1085
1086     if( p_pgrm->i_es )
1087     {
1088         msg_Dbg( p_input, "can't delete program %d which still has %i ES",
1089                  i_group, p_pgrm->i_es );
1090         return VLC_EGENERIC;
1091     }
1092
1093     TAB_REMOVE( p_sys->i_pgrm, p_sys->pgrm, p_pgrm );
1094
1095     /* If program is selected we need to unselect it */
1096     if( p_sys->p_pgrm == p_pgrm )
1097         p_sys->p_pgrm = NULL;
1098
1099     input_clock_Delete( p_pgrm->p_clock );
1100
1101     free( p_pgrm->psz_name );
1102     free( p_pgrm->psz_now_playing );
1103     free( p_pgrm->psz_publisher );
1104     free( p_pgrm );
1105
1106     /* Update "program" variable */
1107     input_SendEventProgramDel( p_input, i_group );
1108
1109     return VLC_SUCCESS;
1110 }
1111
1112 /* EsOutProgramFind
1113  */
1114 static es_out_pgrm_t *EsOutProgramFind( es_out_t *p_out, int i_group )
1115 {
1116     es_out_sys_t *p_sys = p_out->p_sys;
1117
1118     for( int i = 0; i < p_sys->i_pgrm; i++ )
1119     {
1120         if( p_sys->pgrm[i]->i_id == i_group )
1121             return p_sys->pgrm[i];
1122     }
1123     return EsOutProgramAdd( p_out, i_group );
1124 }
1125
1126 /* EsOutProgramMeta:
1127  */
1128 static char *EsOutProgramGetMetaName( es_out_pgrm_t *p_pgrm )
1129 {
1130     char *psz = NULL;
1131     if( p_pgrm->psz_name )
1132     {
1133         if( asprintf( &psz, _("%s [%s %d]"), p_pgrm->psz_name, _("Program"), p_pgrm->i_id ) == -1 )
1134             return NULL;
1135     }
1136     else
1137     {
1138         if( asprintf( &psz, "%s %d", _("Program"), p_pgrm->i_id ) == -1 )
1139             return NULL;
1140     }
1141     return psz;
1142 }
1143
1144 static void EsOutProgramMeta( es_out_t *out, int i_group, const vlc_meta_t *p_meta )
1145 {
1146     es_out_sys_t      *p_sys = out->p_sys;
1147     es_out_pgrm_t     *p_pgrm;
1148     input_thread_t    *p_input = p_sys->p_input;
1149     const char        *psz_title = NULL;
1150     const char        *psz_provider = NULL;
1151     int i;
1152
1153     msg_Dbg( p_input, "EsOutProgramMeta: number=%d", i_group );
1154
1155     /* Check against empty meta data (empty for what we handle) */
1156     if( !vlc_meta_Get( p_meta, vlc_meta_Title) &&
1157         !vlc_meta_Get( p_meta, vlc_meta_NowPlaying) &&
1158         !vlc_meta_Get( p_meta, vlc_meta_Publisher) &&
1159         vlc_meta_GetExtraCount( p_meta ) <= 0 )
1160     {
1161         return;
1162     }
1163     /* Find program */
1164     if( !EsOutIsProgramVisible( out, i_group ) )
1165         return;
1166     p_pgrm = EsOutProgramFind( out, i_group );
1167     if( !p_pgrm )
1168         return;
1169
1170     /* */
1171     psz_title = vlc_meta_Get( p_meta, vlc_meta_Title);
1172     psz_provider = vlc_meta_Get( p_meta, vlc_meta_Publisher);
1173
1174     /* Update the description text of the program */
1175     if( psz_title && *psz_title )
1176     {
1177         if( !p_pgrm->psz_name || strcmp( p_pgrm->psz_name, psz_title ) )
1178         {
1179             char *psz_cat = EsOutProgramGetMetaName( p_pgrm );
1180
1181             /* Remove old entries */
1182             input_Control( p_input, INPUT_DEL_INFO, psz_cat, NULL );
1183             /* TODO update epg name ?
1184              * TODO update scrambled info name ? */
1185             free( psz_cat );
1186         }
1187         free( p_pgrm->psz_name );
1188         p_pgrm->psz_name = strdup( psz_title );
1189
1190         char *psz_text;
1191         if( psz_provider && *psz_provider )
1192         {
1193             if( asprintf( &psz_text, "%s [%s]", psz_title, psz_provider ) < 0 )
1194                 psz_text = NULL;
1195         }
1196         else
1197         {
1198             psz_text = strdup( psz_title );
1199         }
1200
1201         /* ugly but it works */
1202         if( psz_text )
1203         {
1204             input_SendEventProgramDel( p_input, i_group );
1205             input_SendEventProgramAdd( p_input, i_group, psz_text );
1206             if( p_sys->p_pgrm == p_pgrm )
1207                 input_SendEventProgramSelect( p_input, i_group );
1208             free( psz_text );
1209         }
1210     }
1211
1212     /* */
1213     char **ppsz_all_keys = vlc_meta_CopyExtraNames(p_meta );
1214
1215     info_category_t *p_cat = NULL;
1216     if( psz_provider || ( ppsz_all_keys[0] && *ppsz_all_keys[0] ) )
1217     {
1218         char *psz_cat = EsOutProgramGetMetaName( p_pgrm );
1219         if( psz_cat )
1220             p_cat = info_category_New( psz_cat );
1221         free( psz_cat );
1222     }
1223
1224     for( i = 0; ppsz_all_keys[i]; i++ )
1225     {
1226         if( p_cat )
1227             info_category_AddInfo( p_cat, vlc_gettext(ppsz_all_keys[i]), "%s",
1228                                    vlc_meta_GetExtra( p_meta, ppsz_all_keys[i] ) );
1229         free( ppsz_all_keys[i] );
1230     }
1231     free( ppsz_all_keys );
1232
1233     if( psz_provider )
1234     {
1235         if( p_sys->p_pgrm == p_pgrm )
1236         {
1237             input_item_SetPublisher( p_input->p->p_item, psz_provider );
1238             input_SendEventMeta( p_input );
1239         }
1240         if( p_cat )
1241             info_category_AddInfo( p_cat, vlc_meta_TypeToLocalizedString(vlc_meta_Publisher),
1242                                    "%s",psz_provider );
1243     }
1244     if( p_cat )
1245         input_Control( p_input, INPUT_MERGE_INFOS, p_cat );
1246 }
1247
1248 static void EsOutProgramEpg( es_out_t *out, int i_group, const vlc_epg_t *p_epg )
1249 {
1250     es_out_sys_t      *p_sys = out->p_sys;
1251     input_thread_t    *p_input = p_sys->p_input;
1252     input_item_t      *p_item = p_input->p->p_item;
1253     es_out_pgrm_t     *p_pgrm;
1254     char *psz_cat;
1255
1256     /* Find program */
1257     if( !EsOutIsProgramVisible( out, i_group ) )
1258         return;
1259     p_pgrm = EsOutProgramFind( out, i_group );
1260     if( !p_pgrm )
1261         return;
1262
1263     /* Update info */
1264     psz_cat = EsOutProgramGetMetaName( p_pgrm );
1265     msg_Dbg( p_input, "EsOutProgramEpg: number=%d name=%s", i_group, psz_cat );
1266
1267     /* Merge EPG */
1268     vlc_epg_t epg;
1269
1270     epg = *p_epg;
1271     epg.psz_name = psz_cat;
1272
1273     input_item_SetEpg( p_item, &epg );
1274     input_SendEventMetaEpg( p_sys->p_input );
1275
1276     /* Update now playing */
1277     free( p_pgrm->psz_now_playing );
1278     p_pgrm->psz_now_playing = NULL;
1279
1280     vlc_mutex_lock( &p_item->lock );
1281     for( int i = 0; i < p_item->i_epg; i++ )
1282     {
1283         const vlc_epg_t *p_tmp = p_item->pp_epg[i];
1284
1285         if( p_tmp->psz_name && !strcmp(p_tmp->psz_name, psz_cat) )
1286         {
1287             if( p_tmp->p_current && p_tmp->p_current->psz_name && *p_tmp->p_current->psz_name )
1288                 p_pgrm->psz_now_playing = strdup( p_tmp->p_current->psz_name );
1289             break;
1290         }
1291     }
1292     vlc_mutex_unlock( &p_item->lock );
1293
1294     if( p_pgrm == p_sys->p_pgrm )
1295     {
1296         input_item_SetNowPlaying( p_input->p->p_item, p_pgrm->psz_now_playing );
1297         input_SendEventMeta( p_input );
1298     }
1299
1300     if( p_pgrm->psz_now_playing )
1301     {
1302         input_Control( p_input, INPUT_ADD_INFO, psz_cat,
1303             vlc_meta_TypeToLocalizedString(vlc_meta_NowPlaying),
1304             p_pgrm->psz_now_playing );
1305     }
1306     else
1307     {
1308         input_Control( p_input, INPUT_DEL_INFO, psz_cat,
1309             vlc_meta_TypeToLocalizedString(vlc_meta_NowPlaying) );
1310     }
1311
1312     free( psz_cat );
1313 }
1314
1315 static void EsOutProgramUpdateScrambled( es_out_t *p_out, es_out_pgrm_t *p_pgrm )
1316 {
1317     es_out_sys_t    *p_sys = p_out->p_sys;
1318     input_thread_t  *p_input = p_sys->p_input;
1319     bool b_scrambled = false;
1320
1321     for( int i = 0; i < p_sys->i_es; i++ )
1322     {
1323         if( p_sys->es[i]->p_pgrm == p_pgrm && p_sys->es[i]->b_scrambled )
1324         {
1325             b_scrambled = true;
1326             break;
1327         }
1328     }
1329     if( !p_pgrm->b_scrambled == !b_scrambled )
1330         return;
1331
1332     p_pgrm->b_scrambled = b_scrambled;
1333     char *psz_cat = EsOutProgramGetMetaName( p_pgrm );
1334
1335     if( b_scrambled )
1336         input_Control( p_input, INPUT_ADD_INFO, psz_cat, _("Scrambled"), _("Yes") );
1337     else
1338         input_Control( p_input, INPUT_DEL_INFO, psz_cat, _("Scrambled") );
1339
1340     input_SendEventProgramScrambled( p_input, p_pgrm->i_id, b_scrambled );
1341 }
1342
1343 static void EsOutMeta( es_out_t *p_out, const vlc_meta_t *p_meta )
1344 {
1345     es_out_sys_t    *p_sys = p_out->p_sys;
1346     input_thread_t  *p_input = p_sys->p_input;
1347
1348     input_item_t *p_item = input_GetItem( p_input );
1349
1350     char *psz_title = NULL;
1351     char *psz_arturl = input_item_GetArtURL( p_item );
1352
1353     vlc_mutex_lock( &p_item->lock );
1354
1355     if( vlc_meta_Get( p_meta, vlc_meta_Title ) && !p_item->b_fixed_name )
1356         psz_title = strdup( vlc_meta_Get( p_meta, vlc_meta_Title ) );
1357
1358     vlc_meta_Merge( p_item->p_meta, p_meta );
1359
1360     if( !psz_arturl || *psz_arturl == '\0' )
1361     {
1362         const char *psz_tmp = vlc_meta_Get( p_item->p_meta, vlc_meta_ArtworkURL );
1363         if( psz_tmp )
1364             psz_arturl = strdup( psz_tmp );
1365     }
1366     vlc_mutex_unlock( &p_item->lock );
1367
1368     if( psz_arturl && *psz_arturl )
1369     {
1370         input_item_SetArtURL( p_item, psz_arturl );
1371
1372         if( !strncmp( psz_arturl, "attachment://", strlen("attachment") ) )
1373         {
1374             /* Don't look for art cover if sout
1375              * XXX It can change when sout has meta data support */
1376             if( p_input->p->p_sout && !p_input->b_preparsing )
1377                 input_item_SetArtURL( p_item, "" );
1378             else
1379                 input_ExtractAttachmentAndCacheArt( p_input );
1380         }
1381     }
1382     free( psz_arturl );
1383
1384     if( psz_title )
1385     {
1386         input_item_SetName( p_item, psz_title );
1387         free( psz_title );
1388     }
1389     input_item_SetPreparsed( p_item, true );
1390
1391     input_SendEventMeta( p_input );
1392     /* TODO handle sout meta ? */
1393 }
1394
1395 /* EsOutAdd:
1396  *  Add an es_out
1397  */
1398 static es_out_id_t *EsOutAdd( es_out_t *out, const es_format_t *fmt )
1399 {
1400     es_out_sys_t      *p_sys = out->p_sys;
1401     input_thread_t    *p_input = p_sys->p_input;
1402
1403     if( fmt->i_group < 0 )
1404     {
1405         msg_Err( p_input, "invalid group number" );
1406         return NULL;
1407     }
1408
1409     es_out_id_t   *es = malloc( sizeof( *es ) );
1410     es_out_pgrm_t *p_pgrm;
1411     int i;
1412
1413     if( !es )
1414         return NULL;
1415
1416     vlc_mutex_lock( &p_sys->lock );
1417
1418     /* Search the program */
1419     p_pgrm = EsOutProgramFind( out, fmt->i_group );
1420     if( !p_pgrm )
1421     {
1422         vlc_mutex_unlock( &p_sys->lock );
1423         free( es );
1424         return NULL;
1425     }
1426
1427     /* Increase ref count for program */
1428     p_pgrm->i_es++;
1429
1430     /* Set up ES */
1431     es->p_pgrm = p_pgrm;
1432     es_format_Copy( &es->fmt, fmt );
1433     if( es->fmt.i_id < 0 )
1434         es->fmt.i_id = out->p_sys->i_id;
1435     if( !es->fmt.i_original_fourcc )
1436         es->fmt.i_original_fourcc = es->fmt.i_codec;
1437     if( es->fmt.i_cat == AUDIO_ES )
1438         es->fmt.i_codec = vlc_fourcc_GetCodecAudio( es->fmt.i_codec,
1439                                                     es->fmt.audio.i_bitspersample );
1440     else
1441         es->fmt.i_codec = vlc_fourcc_GetCodec( es->fmt.i_cat,
1442                                                es->fmt.i_codec );
1443
1444     es->i_id = es->fmt.i_id;
1445     es->i_meta_id = out->p_sys->i_id;
1446     es->b_scrambled = false;
1447
1448     switch( es->fmt.i_cat )
1449     {
1450     case AUDIO_ES:
1451     {
1452         audio_replay_gain_t rg;
1453
1454         es->i_channel = p_sys->i_audio;
1455
1456         memset( &rg, 0, sizeof(rg) );
1457         vlc_mutex_lock( &p_input->p->p_item->lock );
1458         vlc_audio_replay_gain_MergeFromMeta( &rg, p_input->p->p_item->p_meta );
1459         vlc_mutex_unlock( &p_input->p->p_item->lock );
1460
1461         for( i = 0; i < AUDIO_REPLAY_GAIN_MAX; i++ )
1462         {
1463             if( !es->fmt.audio_replay_gain.pb_peak[i] )
1464             {
1465                 es->fmt.audio_replay_gain.pb_peak[i] = rg.pb_peak[i];
1466                 es->fmt.audio_replay_gain.pf_peak[i] = rg.pf_peak[i];
1467             }
1468             if( !es->fmt.audio_replay_gain.pb_gain[i] )
1469             {
1470                 es->fmt.audio_replay_gain.pb_gain[i] = rg.pb_gain[i];
1471                 es->fmt.audio_replay_gain.pf_gain[i] = rg.pf_gain[i];
1472             }
1473         }
1474         break;
1475     }
1476
1477     case VIDEO_ES:
1478         es->i_channel = p_sys->i_video;
1479         if( es->fmt.video.i_frame_rate && es->fmt.video.i_frame_rate_base )
1480             vlc_ureduce( &es->fmt.video.i_frame_rate,
1481                          &es->fmt.video.i_frame_rate_base,
1482                          es->fmt.video.i_frame_rate,
1483                          es->fmt.video.i_frame_rate_base, 0 );
1484         break;
1485
1486     case SPU_ES:
1487         es->i_channel = p_sys->i_sub;
1488         break;
1489
1490     default:
1491         es->i_channel = 0;
1492         break;
1493     }
1494     es->psz_language = LanguageGetName( es->fmt.psz_language ); /* remember so we only need to do it once */
1495     es->psz_language_code = LanguageGetCode( es->fmt.psz_language );
1496     es->p_dec = NULL;
1497     es->p_dec_record = NULL;
1498     for( i = 0; i < 4; i++ )
1499         es->pb_cc_present[i] = false;
1500     es->p_master = NULL;
1501
1502     if( es->p_pgrm == p_sys->p_pgrm )
1503         EsOutESVarUpdate( out, es, false );
1504
1505     /* Select it if needed */
1506     EsOutSelect( out, es, false );
1507
1508
1509     TAB_APPEND( out->p_sys->i_es, out->p_sys->es, es );
1510     p_sys->i_id++;  /* always incremented */
1511     switch( es->fmt.i_cat )
1512     {
1513         case AUDIO_ES:
1514             p_sys->i_audio++;
1515             break;
1516         case SPU_ES:
1517             p_sys->i_sub++;
1518             break;
1519         case VIDEO_ES:
1520             p_sys->i_video++;
1521             break;
1522     }
1523
1524     EsOutUpdateInfo( out, es, &es->fmt, NULL );
1525
1526     if( es->b_scrambled )
1527         EsOutProgramUpdateScrambled( out, es->p_pgrm );
1528
1529     vlc_mutex_unlock( &p_sys->lock );
1530
1531     return es;
1532 }
1533
1534 static bool EsIsSelected( es_out_id_t *es )
1535 {
1536     if( es->p_master )
1537     {
1538         bool b_decode = false;
1539         if( es->p_master->p_dec )
1540         {
1541             int i_channel = EsOutGetClosedCaptionsChannel( es->fmt.i_codec );
1542             if( i_channel != -1 )
1543                 input_DecoderGetCcState( es->p_master->p_dec, &b_decode, i_channel );
1544         }
1545         return b_decode;
1546     }
1547     else
1548     {
1549         return es->p_dec != NULL;
1550     }
1551 }
1552 static void EsCreateDecoder( es_out_t *out, es_out_id_t *p_es )
1553 {
1554     es_out_sys_t   *p_sys = out->p_sys;
1555     input_thread_t *p_input = p_sys->p_input;
1556
1557     p_es->p_dec = input_DecoderNew( p_input, &p_es->fmt, p_es->p_pgrm->p_clock, p_input->p->p_sout );
1558     if( p_es->p_dec )
1559     {
1560         if( p_sys->b_buffering )
1561             input_DecoderStartBuffering( p_es->p_dec );
1562
1563         if( !p_es->p_master && p_sys->p_sout_record )
1564         {
1565             p_es->p_dec_record = input_DecoderNew( p_input, &p_es->fmt, p_es->p_pgrm->p_clock, p_sys->p_sout_record );
1566             if( p_es->p_dec_record && p_sys->b_buffering )
1567                 input_DecoderStartBuffering( p_es->p_dec_record );
1568         }
1569     }
1570
1571     EsOutDecoderChangeDelay( out, p_es );
1572 }
1573 static void EsDestroyDecoder( es_out_t *out, es_out_id_t *p_es )
1574 {
1575     VLC_UNUSED(out);
1576
1577     if( !p_es->p_dec )
1578         return;
1579
1580     input_DecoderDelete( p_es->p_dec );
1581     p_es->p_dec = NULL;
1582
1583     if( p_es->p_dec_record )
1584     {
1585         input_DecoderDelete( p_es->p_dec_record );
1586         p_es->p_dec_record = NULL;
1587     }
1588 }
1589
1590 static void EsSelect( es_out_t *out, es_out_id_t *es )
1591 {
1592     es_out_sys_t   *p_sys = out->p_sys;
1593     input_thread_t *p_input = p_sys->p_input;
1594
1595     if( EsIsSelected( es ) )
1596     {
1597         msg_Warn( p_input, "ES 0x%x is already selected", es->i_id );
1598         return;
1599     }
1600
1601     if( es->p_master )
1602     {
1603         int i_channel;
1604         if( !es->p_master->p_dec )
1605             return;
1606
1607         i_channel = EsOutGetClosedCaptionsChannel( es->fmt.i_codec );
1608         if( i_channel == -1 || input_DecoderSetCcState( es->p_master->p_dec, true, i_channel ) )
1609             return;
1610     }
1611     else
1612     {
1613         const bool b_sout = p_input->p->p_sout != NULL;
1614         if( es->fmt.i_cat == VIDEO_ES || es->fmt.i_cat == SPU_ES )
1615         {
1616             if( !var_GetBool( p_input, b_sout ? "sout-video" : "video" ) )
1617             {
1618                 msg_Dbg( p_input, "video is disabled, not selecting ES 0x%x",
1619                          es->i_id );
1620                 return;
1621             }
1622         }
1623         else if( es->fmt.i_cat == AUDIO_ES )
1624         {
1625             if( !var_GetBool( p_input, b_sout ? "sout-audio" : "audio" ) )
1626             {
1627                 msg_Dbg( p_input, "audio is disabled, not selecting ES 0x%x",
1628                          es->i_id );
1629                 return;
1630             }
1631         }
1632         if( es->fmt.i_cat == SPU_ES )
1633         {
1634             if( !var_GetBool( p_input, b_sout ? "sout-spu" : "spu" ) )
1635             {
1636                 msg_Dbg( p_input, "spu is disabled, not selecting ES 0x%x",
1637                          es->i_id );
1638                 return;
1639             }
1640         }
1641
1642         EsCreateDecoder( out, es );
1643
1644         if( es->p_dec == NULL || es->p_pgrm != p_sys->p_pgrm )
1645             return;
1646     }
1647
1648     /* Mark it as selected */
1649     input_SendEventEsSelect( p_input, es->fmt.i_cat, es->i_id );
1650     input_SendEventTeletextSelect( p_input, EsFmtIsTeletext( &es->fmt ) ? es->i_id : -1 );
1651 }
1652
1653 static void EsUnselect( es_out_t *out, es_out_id_t *es, bool b_update )
1654 {
1655     es_out_sys_t   *p_sys = out->p_sys;
1656     input_thread_t *p_input = p_sys->p_input;
1657
1658     if( !EsIsSelected( es ) )
1659     {
1660         msg_Warn( p_input, "ES 0x%x is already unselected", es->i_id );
1661         return;
1662     }
1663
1664     if( es->p_master )
1665     {
1666         if( es->p_master->p_dec )
1667         {
1668             int i_channel = EsOutGetClosedCaptionsChannel( es->fmt.i_codec );
1669             if( i_channel != -1 )
1670                 input_DecoderSetCcState( es->p_master->p_dec, false, i_channel );
1671         }
1672     }
1673     else
1674     {
1675         const int i_spu_id = var_GetInteger( p_input, "spu-es");
1676         int i;
1677         for( i = 0; i < 4; i++ )
1678         {
1679             if( !es->pb_cc_present[i] || !es->pp_cc_es[i] )
1680                 continue;
1681
1682             if( i_spu_id == es->pp_cc_es[i]->i_id )
1683             {
1684                 /* Force unselection of the CC */
1685                 input_SendEventEsSelect( p_input, SPU_ES, -1 );
1686             }
1687             EsOutDel( out, es->pp_cc_es[i] );
1688
1689             es->pb_cc_present[i] = false;
1690         }
1691         EsDestroyDecoder( out, es );
1692     }
1693
1694     if( !b_update )
1695         return;
1696
1697     /* Mark it as unselected */
1698     input_SendEventEsSelect( p_input, es->fmt.i_cat, -1 );
1699     if( EsFmtIsTeletext( &es->fmt ) )
1700         input_SendEventTeletextSelect( p_input, -1 );
1701 }
1702
1703 /**
1704  * Select an ES given the current mode
1705  * XXX: you need to take a the lock before (stream.stream_lock)
1706  *
1707  * \param out The es_out structure
1708  * \param es es_out_id structure
1709  * \param b_force ...
1710  * \return nothing
1711  */
1712 static void EsOutSelect( es_out_t *out, es_out_id_t *es, bool b_force )
1713 {
1714     es_out_sys_t      *p_sys = out->p_sys;
1715
1716     int i_cat = es->fmt.i_cat;
1717
1718     if( !p_sys->b_active ||
1719         ( !b_force && es->fmt.i_priority < ES_PRIORITY_SELECTABLE_MIN ) )
1720     {
1721         return;
1722     }
1723
1724     if( p_sys->i_mode == ES_OUT_MODE_ALL || b_force )
1725     {
1726         if( !EsIsSelected( es ) )
1727             EsSelect( out, es );
1728     }
1729     else if( p_sys->i_mode == ES_OUT_MODE_PARTIAL )
1730     {
1731         char *prgms = var_GetNonEmptyString( p_sys->p_input, "programs" );
1732         if( prgms != NULL )
1733         {
1734             char *buf;
1735
1736             for ( const char *prgm = strtok_r( prgms, ",", &buf );
1737                   prgm != NULL;
1738                   prgm = strtok_r( NULL, ",", &buf ) )
1739             {
1740                 if( atoi( prgm ) == es->p_pgrm->i_id || b_force )
1741                 {
1742                     if( !EsIsSelected( es ) )
1743                         EsSelect( out, es );
1744                     break;
1745                 }
1746             }
1747             free( prgms );
1748         }
1749     }
1750     else if( p_sys->i_mode == ES_OUT_MODE_AUTO )
1751     {
1752         int i_wanted  = -1;
1753
1754         if( es->p_pgrm != p_sys->p_pgrm )
1755             return;
1756
1757         if( i_cat == AUDIO_ES )
1758         {
1759             if( p_sys->ppsz_audio_language )
1760             {
1761                 int es_idx = LanguageArrayIndex( p_sys->ppsz_audio_language,
1762                                                  es->psz_language_code );
1763                 if( !p_sys->p_es_audio )
1764                 {
1765                     /* Only select the language if it's in the list */
1766                     if( es_idx >= 0 )
1767                         i_wanted = es->i_channel;
1768                 }
1769                 else
1770                 {
1771                     int selected_es_idx =
1772                         LanguageArrayIndex( p_sys->ppsz_audio_language,
1773                                             p_sys->p_es_audio->psz_language_code );
1774                     if( es_idx >= 0 &&
1775                         ( selected_es_idx < 0 || es_idx < selected_es_idx ||
1776                           ( es_idx == selected_es_idx &&
1777                             p_sys->p_es_audio->fmt.i_priority < es->fmt.i_priority ) ) )
1778                         i_wanted = es->i_channel;
1779                 }
1780             }
1781             else
1782             {
1783                 /* Select the first one if there is no selected audio yet 
1784                  * then choose by ES priority */
1785                 if( !p_sys->p_es_audio ||
1786                     p_sys->p_es_audio->fmt.i_priority < es->fmt.i_priority )
1787                     i_wanted = es->i_channel;
1788             }
1789
1790             if( p_sys->i_audio_last >= 0 )
1791                 i_wanted = p_sys->i_audio_last;
1792
1793             if( p_sys->i_audio_id >= 0 )
1794             {
1795                 if( es->i_id == p_sys->i_audio_id )
1796                     i_wanted = es->i_channel;
1797                 else
1798                     return;
1799             }
1800         }
1801         else if( i_cat == SPU_ES )
1802         {
1803             if( p_sys->ppsz_sub_language )
1804             {
1805                 int es_idx = LanguageArrayIndex( p_sys->ppsz_sub_language,
1806                                      es->psz_language_code );
1807                 if( !p_sys->p_es_sub )
1808                 {
1809                     /* Select the language if it's in the list */
1810                     if( es_idx >= 0 ||
1811                         /*FIXME: Should default subtitle not in the list be 
1812                          * displayed if not forbidden by none? */
1813                         ( p_sys->i_default_sub_id >= 0 &&
1814                           /* check if the subtitle isn't forbidden by none */
1815                           LanguageArrayIndex( p_sys->ppsz_sub_language, "none" ) < 0 &&
1816                           es->i_id == p_sys->i_default_sub_id ) )
1817                         i_wanted = es->i_channel;
1818                 }
1819                 else
1820                 {
1821                     int selected_es_idx =
1822                         LanguageArrayIndex( p_sys->ppsz_sub_language,
1823                                             p_sys->p_es_sub->psz_language_code );
1824
1825                     if( es_idx >= 0 &&
1826                         ( selected_es_idx < 0 || es_idx < selected_es_idx ||
1827                           ( es_idx == selected_es_idx &&
1828                             p_sys->p_es_sub->fmt.i_priority < es->fmt.i_priority ) ) )
1829                         i_wanted = es->i_channel;
1830                 }
1831             }
1832             else
1833             {
1834                 /* If there is no user preference, select the default subtitle 
1835                  * or adapt by ES priority */
1836                 if( ( !p_sys->p_es_sub &&
1837                       ( p_sys->i_default_sub_id >= 0 &&
1838                         es->i_id == p_sys->i_default_sub_id ) ) ||
1839                     ( p_sys->p_es_sub && 
1840                       p_sys->p_es_sub->fmt.i_priority < es->fmt.i_priority ) )
1841                     i_wanted = es->i_channel;
1842             }
1843
1844             if( p_sys->i_sub_last >= 0 )
1845                 i_wanted  = p_sys->i_sub_last;
1846
1847             if( p_sys->i_sub_id >= 0 )
1848             {
1849                 if( es->i_id == p_sys->i_sub_id )
1850                     i_wanted = es->i_channel;
1851                 else
1852                     return;
1853             }
1854         }
1855         else if( i_cat == VIDEO_ES )
1856         {
1857             i_wanted  = es->i_channel;
1858         }
1859
1860         if( i_wanted == es->i_channel && !EsIsSelected( es ) )
1861             EsSelect( out, es );
1862     }
1863
1864     /* FIXME TODO handle priority here */
1865     if( EsIsSelected( es ) )
1866     {
1867         if( i_cat == AUDIO_ES )
1868         {
1869             if( p_sys->i_mode == ES_OUT_MODE_AUTO &&
1870                 p_sys->p_es_audio &&
1871                 p_sys->p_es_audio != es &&
1872                 EsIsSelected( p_sys->p_es_audio ) )
1873             {
1874                 EsUnselect( out, p_sys->p_es_audio, false );
1875             }
1876             p_sys->p_es_audio = es;
1877         }
1878         else if( i_cat == SPU_ES )
1879         {
1880             if( p_sys->i_mode == ES_OUT_MODE_AUTO &&
1881                 p_sys->p_es_sub &&
1882                 p_sys->p_es_sub != es &&
1883                 EsIsSelected( p_sys->p_es_sub ) )
1884             {
1885                 EsUnselect( out, p_sys->p_es_sub, false );
1886             }
1887             p_sys->p_es_sub = es;
1888         }
1889         else if( i_cat == VIDEO_ES )
1890         {
1891             p_sys->p_es_video = es;
1892         }
1893     }
1894 }
1895
1896 /**
1897  * Send a block for the given es_out
1898  *
1899  * \param out the es_out to send from
1900  * \param es the es_out_id
1901  * \param p_block the data block to send
1902  */
1903 static int EsOutSend( es_out_t *out, es_out_id_t *es, block_t *p_block )
1904 {
1905     es_out_sys_t   *p_sys = out->p_sys;
1906     input_thread_t *p_input = p_sys->p_input;
1907
1908     if( libvlc_stats( p_input ) )
1909     {
1910         uint64_t i_total;
1911
1912         vlc_mutex_lock( &p_input->p->counters.counters_lock );
1913         stats_Update( p_input->p->counters.p_demux_read,
1914                       p_block->i_buffer, &i_total );
1915         stats_Update( p_input->p->counters.p_demux_bitrate, i_total, NULL );
1916
1917         /* Update number of corrupted data packats */
1918         if( p_block->i_flags & BLOCK_FLAG_CORRUPTED )
1919         {
1920             stats_Update( p_input->p->counters.p_demux_corrupted, 1, NULL );
1921         }
1922         /* Update number of discontinuities */
1923         if( p_block->i_flags & BLOCK_FLAG_DISCONTINUITY )
1924         {
1925             stats_Update( p_input->p->counters.p_demux_discontinuity, 1, NULL );
1926         }
1927         vlc_mutex_unlock( &p_input->p->counters.counters_lock );
1928     }
1929
1930     vlc_mutex_lock( &p_sys->lock );
1931
1932     /* Mark preroll blocks */
1933     if( p_sys->i_preroll_end >= 0 )
1934     {
1935         int64_t i_date = p_block->i_pts;
1936         if( p_block->i_pts <= VLC_TS_INVALID )
1937             i_date = p_block->i_dts;
1938
1939         if( i_date < p_sys->i_preroll_end )
1940             p_block->i_flags |= BLOCK_FLAG_PREROLL;
1941     }
1942
1943     if( !es->p_dec )
1944     {
1945         block_Release( p_block );
1946         vlc_mutex_unlock( &p_sys->lock );
1947         return VLC_SUCCESS;
1948     }
1949
1950     /* Check for sout mode */
1951     if( p_input->p->p_sout )
1952     {
1953         /* FIXME review this, proper lock may be missing */
1954         if( p_input->p->p_sout->i_out_pace_nocontrol > 0 &&
1955             p_input->p->b_out_pace_control )
1956         {
1957             msg_Dbg( p_input, "switching to sync mode" );
1958             p_input->p->b_out_pace_control = false;
1959         }
1960         else if( p_input->p->p_sout->i_out_pace_nocontrol <= 0 &&
1961                  !p_input->p->b_out_pace_control )
1962         {
1963             msg_Dbg( p_input, "switching to async mode" );
1964             p_input->p->b_out_pace_control = true;
1965         }
1966     }
1967
1968     /* Decode */
1969     if( es->p_dec_record )
1970     {
1971         block_t *p_dup = block_Duplicate( p_block );
1972         if( p_dup )
1973             input_DecoderDecode( es->p_dec_record, p_dup,
1974                                  p_input->p->b_out_pace_control );
1975     }
1976     input_DecoderDecode( es->p_dec, p_block,
1977                          p_input->p->b_out_pace_control );
1978
1979     es_format_t fmt_dsc;
1980     vlc_meta_t  *p_meta_dsc;
1981     if( input_DecoderHasFormatChanged( es->p_dec, &fmt_dsc, &p_meta_dsc ) )
1982     {
1983         EsOutUpdateInfo( out, es, &fmt_dsc, p_meta_dsc );
1984
1985         es_format_Clean( &fmt_dsc );
1986         if( p_meta_dsc )
1987             vlc_meta_Delete( p_meta_dsc );
1988     }
1989
1990     /* Check CC status */
1991     bool pb_cc[4];
1992
1993     input_DecoderIsCcPresent( es->p_dec, pb_cc );
1994     for( int i = 0; i < 4; i++ )
1995     {
1996         es_format_t fmt;
1997
1998         if(  es->pb_cc_present[i] || !pb_cc[i] )
1999             continue;
2000         msg_Dbg( p_input, "Adding CC track %d for es[%d]", 1+i, es->i_id );
2001
2002         es_format_Init( &fmt, SPU_ES, EsOutFourccClosedCaptions[i] );
2003         fmt.i_group = es->fmt.i_group;
2004         if( asprintf( &fmt.psz_description,
2005                       _("Closed captions %u"), 1 + i ) == -1 )
2006             fmt.psz_description = NULL;
2007         es->pp_cc_es[i] = EsOutAdd( out, &fmt );
2008         es->pp_cc_es[i]->p_master = es;
2009         es_format_Clean( &fmt );
2010
2011         /* */
2012         es->pb_cc_present[i] = true;
2013     }
2014
2015     vlc_mutex_unlock( &p_sys->lock );
2016
2017     return VLC_SUCCESS;
2018 }
2019
2020 /*****************************************************************************
2021  * EsOutDel:
2022  *****************************************************************************/
2023 static void EsOutDel( es_out_t *out, es_out_id_t *es )
2024 {
2025     es_out_sys_t *p_sys = out->p_sys;
2026     bool b_reselect = false;
2027     int i;
2028
2029     vlc_mutex_lock( &p_sys->lock );
2030
2031     /* We don't try to reselect */
2032     if( es->p_dec )
2033     {
2034         while( vlc_object_alive(p_sys->p_input) && !p_sys->b_buffering && es->p_dec )
2035         {
2036             if( input_DecoderIsEmpty( es->p_dec ) &&
2037                 ( !es->p_dec_record || input_DecoderIsEmpty( es->p_dec_record ) ))
2038                 break;
2039             /* FIXME there should be a way to have auto deleted es, but there will be
2040              * a problem when another codec of the same type is created (mainly video) */
2041             msleep( 20*1000 );
2042         }
2043         EsUnselect( out, es, es->p_pgrm == p_sys->p_pgrm );
2044     }
2045
2046     if( es->p_pgrm == p_sys->p_pgrm )
2047         EsOutESVarUpdate( out, es, true );
2048
2049     TAB_REMOVE( p_sys->i_es, p_sys->es, es );
2050
2051     /* Update program */
2052     es->p_pgrm->i_es--;
2053     if( es->p_pgrm->i_es == 0 )
2054         msg_Dbg( p_sys->p_input, "Program doesn't contain anymore ES" );
2055
2056     if( es->b_scrambled )
2057         EsOutProgramUpdateScrambled( out, es->p_pgrm );
2058
2059     /* */
2060     if( p_sys->p_es_audio == es || p_sys->p_es_video == es ||
2061         p_sys->p_es_sub == es ) b_reselect = true;
2062
2063     if( p_sys->p_es_audio == es ) p_sys->p_es_audio = NULL;
2064     if( p_sys->p_es_video == es ) p_sys->p_es_video = NULL;
2065     if( p_sys->p_es_sub   == es ) p_sys->p_es_sub   = NULL;
2066
2067     switch( es->fmt.i_cat )
2068     {
2069         case AUDIO_ES:
2070             p_sys->i_audio--;
2071             break;
2072         case SPU_ES:
2073             p_sys->i_sub--;
2074             break;
2075         case VIDEO_ES:
2076             p_sys->i_video--;
2077             break;
2078     }
2079
2080     /* Re-select another track when needed */
2081     if( b_reselect )
2082     {
2083         for( i = 0; i < p_sys->i_es; i++ )
2084         {
2085             if( es->fmt.i_cat == p_sys->es[i]->fmt.i_cat )
2086                 EsOutSelect( out, p_sys->es[i], false );
2087         }
2088     }
2089
2090     free( es->psz_language );
2091     free( es->psz_language_code );
2092
2093     es_format_Clean( &es->fmt );
2094
2095     vlc_mutex_unlock( &p_sys->lock );
2096
2097     free( es );
2098 }
2099
2100 /**
2101  * Control query handler
2102  *
2103  * \param out the es_out to control
2104  * \param i_query A es_out query as defined in include/ninput.h
2105  * \param args a variable list of arguments for the query
2106  * \return VLC_SUCCESS or an error code
2107  */
2108 static int EsOutControlLocked( es_out_t *out, int i_query, va_list args )
2109 {
2110     es_out_sys_t *p_sys = out->p_sys;
2111
2112     switch( i_query )
2113     {
2114     case ES_OUT_SET_ES_STATE:
2115     {
2116         es_out_id_t *es = va_arg( args, es_out_id_t * );
2117         bool b = va_arg( args, int );
2118         if( b && !EsIsSelected( es ) )
2119         {
2120             EsSelect( out, es );
2121             return EsIsSelected( es ) ? VLC_SUCCESS : VLC_EGENERIC;
2122         }
2123         else if( !b && EsIsSelected( es ) )
2124         {
2125             EsUnselect( out, es, es->p_pgrm == p_sys->p_pgrm );
2126             return VLC_SUCCESS;
2127         }
2128         return VLC_SUCCESS;
2129     }
2130
2131     case ES_OUT_GET_ES_STATE:
2132     {
2133         es_out_id_t *es = va_arg( args, es_out_id_t * );
2134         bool *pb = va_arg( args, bool * );
2135
2136         *pb = EsIsSelected( es );
2137         return VLC_SUCCESS;
2138     }
2139
2140     case ES_OUT_GET_GROUP_FORCED:
2141     {
2142         int *pi_group = va_arg( args, int * );
2143         *pi_group = p_sys->i_group_id;
2144         return VLC_SUCCESS;
2145     }
2146
2147     case ES_OUT_SET_MODE:
2148     {
2149         const int i_mode = va_arg( args, int );
2150         assert( i_mode == ES_OUT_MODE_NONE || i_mode == ES_OUT_MODE_ALL ||
2151                 i_mode == ES_OUT_MODE_AUTO || i_mode == ES_OUT_MODE_PARTIAL ||
2152                 i_mode == ES_OUT_MODE_END );
2153
2154         if( i_mode != ES_OUT_MODE_NONE && !p_sys->b_active && p_sys->i_es > 0 )
2155         {
2156             /* XXX Terminate vout if there are tracks but no video one.
2157              * This one is not mandatory but is he earliest place where it
2158              * can be done */
2159             int i;
2160             for( i = 0; i < p_sys->i_es; i++ )
2161             {
2162                 es_out_id_t *p_es = p_sys->es[i];
2163                 if( p_es->fmt.i_cat == VIDEO_ES )
2164                     break;
2165             }
2166             if( i >= p_sys->i_es )
2167                 input_resource_TerminateVout( p_sys->p_input->p->p_resource );
2168         }
2169         p_sys->b_active = i_mode != ES_OUT_MODE_NONE;
2170         p_sys->i_mode = i_mode;
2171
2172         /* Reapply policy mode */
2173         for( int i = 0; i < p_sys->i_es; i++ )
2174         {
2175             if( EsIsSelected( p_sys->es[i] ) )
2176                 EsUnselect( out, p_sys->es[i],
2177                             p_sys->es[i]->p_pgrm == p_sys->p_pgrm );
2178         }
2179         for( int i = 0; i < p_sys->i_es; i++ )
2180             EsOutSelect( out, p_sys->es[i], false );
2181         if( i_mode == ES_OUT_MODE_END )
2182             EsOutTerminate( out );
2183         return VLC_SUCCESS;
2184     }
2185
2186     case ES_OUT_SET_ES:
2187     case ES_OUT_RESTART_ES:
2188     {
2189         es_out_id_t *es = va_arg( args, es_out_id_t * );
2190
2191         int i_cat;
2192         if( es == NULL )
2193             i_cat = UNKNOWN_ES;
2194         else if( es == (es_out_id_t*)((uint8_t*)NULL+AUDIO_ES) )
2195             i_cat = AUDIO_ES;
2196         else if( es == (es_out_id_t*)((uint8_t*)NULL+VIDEO_ES) )
2197             i_cat = VIDEO_ES;
2198         else if( es == (es_out_id_t*)((uint8_t*)NULL+SPU_ES) )
2199             i_cat = SPU_ES;
2200         else
2201             i_cat = -1;
2202
2203         for( int i = 0; i < p_sys->i_es; i++ )
2204         {
2205             if( i_cat == -1 )
2206             {
2207                 if( es == p_sys->es[i] )
2208                 {
2209                     EsOutSelect( out, es, true );
2210                     break;
2211                 }
2212             }
2213             else
2214             {
2215                 if( i_cat == UNKNOWN_ES || p_sys->es[i]->fmt.i_cat == i_cat )
2216                 {
2217                     if( EsIsSelected( p_sys->es[i] ) )
2218                     {
2219                         if( i_query == ES_OUT_RESTART_ES )
2220                         {
2221                             if( p_sys->es[i]->p_dec )
2222                             {
2223                                 EsDestroyDecoder( out, p_sys->es[i] );
2224                                 EsCreateDecoder( out, p_sys->es[i] );
2225                             }
2226                         }
2227                         else
2228                         {
2229                             EsUnselect( out, p_sys->es[i],
2230                                         p_sys->es[i]->p_pgrm == p_sys->p_pgrm );
2231                         }
2232                     }
2233                 }
2234             }
2235         }
2236         return VLC_SUCCESS;
2237     }
2238
2239     case ES_OUT_SET_ES_DEFAULT:
2240     {
2241         es_out_id_t *es = va_arg( args, es_out_id_t * );
2242
2243         if( es == NULL )
2244         {
2245             /*p_sys->i_default_video_id = -1;*/
2246             /*p_sys->i_default_audio_id = -1;*/
2247             p_sys->i_default_sub_id = -1;
2248         }
2249         else if( es == (es_out_id_t*)((uint8_t*)NULL+AUDIO_ES) )
2250         {
2251             /*p_sys->i_default_video_id = -1;*/
2252         }
2253         else if( es == (es_out_id_t*)((uint8_t*)NULL+VIDEO_ES) )
2254         {
2255             /*p_sys->i_default_audio_id = -1;*/
2256         }
2257         else if( es == (es_out_id_t*)((uint8_t*)NULL+SPU_ES) )
2258         {
2259             p_sys->i_default_sub_id = -1;
2260         }
2261         else
2262         {
2263             /*if( es->fmt.i_cat == VIDEO_ES )
2264                 p_sys->i_default_video_id = es->i_id;
2265             else
2266             if( es->fmt.i_cat == AUDIO_ES )
2267                 p_sys->i_default_audio_id = es->i_id;
2268             else*/
2269             if( es->fmt.i_cat == SPU_ES )
2270                 p_sys->i_default_sub_id = es->i_id;
2271         }
2272         return VLC_SUCCESS;
2273     }
2274
2275     case ES_OUT_SET_PCR:
2276     case ES_OUT_SET_GROUP_PCR:
2277     {
2278         es_out_pgrm_t *p_pgrm = NULL;
2279         int            i_group = 0;
2280         int64_t        i_pcr;
2281
2282         /* Search program */
2283         if( i_query == ES_OUT_SET_PCR )
2284         {
2285             p_pgrm = p_sys->p_pgrm;
2286             if( !p_pgrm )
2287                 p_pgrm = EsOutProgramAdd( out, i_group );   /* Create it */
2288         }
2289         else
2290         {
2291             i_group = (int)va_arg( args, int );
2292             p_pgrm = EsOutProgramFind( out, i_group );
2293         }
2294         if( !p_pgrm )
2295             return VLC_EGENERIC;
2296
2297         i_pcr = (int64_t)va_arg( args, int64_t );
2298         if( i_pcr <= VLC_TS_INVALID )
2299         {
2300             msg_Err( p_sys->p_input, "Invalid PCR value in ES_OUT_SET_(GROUP_)PCR !" );
2301             return VLC_EGENERIC;
2302         }
2303
2304         /* TODO do not use mdate() but proper stream acquisition date */
2305         bool b_late;
2306         input_clock_Update( p_pgrm->p_clock, VLC_OBJECT(p_sys->p_input),
2307                             &b_late,
2308                             p_sys->p_input->p->b_can_pace_control || p_sys->b_buffering,
2309                             EsOutIsExtraBufferingAllowed( out ),
2310                             i_pcr, mdate() );
2311
2312         if( p_sys->b_buffering )
2313         {
2314             /* Check buffering state on master clock update */
2315             EsOutDecodersStopBuffering( out, false );
2316         }
2317         else if( p_pgrm == p_sys->p_pgrm )
2318         {
2319             if( b_late && ( !p_sys->p_input->p->p_sout ||
2320                                  !p_sys->p_input->p->b_out_pace_control ) )
2321             {
2322                 const mtime_t i_pts_delay_base = p_sys->i_pts_delay - p_sys->i_pts_jitter;
2323                 mtime_t i_pts_delay = input_clock_GetJitter( p_pgrm->p_clock );
2324
2325                 /* Avoid dangerously high value */
2326                 const mtime_t i_jitter_max = INT64_C(1000) * var_InheritInteger( p_sys->p_input, "clock-jitter" );
2327                 if( i_pts_delay > __MIN( i_pts_delay_base + i_jitter_max, INPUT_PTS_DELAY_MAX ) )
2328                 {
2329                     msg_Err( p_sys->p_input,
2330                              "ES_OUT_SET_(GROUP_)PCR  is called too late (jitter of %d ms ignored)",
2331                              (int)(i_pts_delay - i_pts_delay_base) / 1000 );
2332                     i_pts_delay = p_sys->i_pts_delay;
2333
2334                     /* reset clock */
2335                     for( int i = 0; i < p_sys->i_pgrm; i++ )
2336                       input_clock_Reset( p_sys->pgrm[i]->p_clock );
2337                 }
2338                 else
2339                 {
2340                     msg_Err( p_sys->p_input,
2341                              "ES_OUT_SET_(GROUP_)PCR  is called too late (pts_delay increased to %d ms)",
2342                              (int)(i_pts_delay/1000) );
2343
2344                     /* Force a rebufferization when we are too late */
2345
2346                     /* It is not really good, as we throw away already buffered data
2347                      * TODO have a mean to correctly reenter bufferization */
2348                     es_out_Control( out, ES_OUT_RESET_PCR );
2349                 }
2350
2351                 es_out_SetJitter( out, i_pts_delay_base, i_pts_delay - i_pts_delay_base, p_sys->i_cr_average );
2352             }
2353         }
2354         return VLC_SUCCESS;
2355     }
2356
2357     case ES_OUT_RESET_PCR:
2358         msg_Err( p_sys->p_input, "ES_OUT_RESET_PCR called" );
2359         EsOutChangePosition( out );
2360         return VLC_SUCCESS;
2361
2362     case ES_OUT_SET_GROUP:
2363     {
2364         int i = va_arg( args, int );
2365         for( int j = 0; j < p_sys->i_pgrm; j++ )
2366         {
2367             es_out_pgrm_t *p_pgrm = p_sys->pgrm[j];
2368             if( p_pgrm->i_id == i )
2369             {
2370                 EsOutProgramSelect( out, p_pgrm );
2371                 return VLC_SUCCESS;
2372             }
2373         }
2374         return VLC_EGENERIC;
2375     }
2376
2377     case ES_OUT_SET_ES_FMT:
2378     {
2379         /* This ain't pretty but is need by some demuxers (eg. Ogg )
2380          * to update the p_extra data */
2381         es_out_id_t *es = va_arg( args, es_out_id_t * );
2382         es_format_t *p_fmt = va_arg( args, es_format_t * );
2383         if( es == NULL )
2384             return VLC_EGENERIC;
2385
2386         if( p_fmt->i_extra )
2387         {
2388             es->fmt.i_extra = p_fmt->i_extra;
2389             es->fmt.p_extra = xrealloc( es->fmt.p_extra, p_fmt->i_extra );
2390             memcpy( es->fmt.p_extra, p_fmt->p_extra, p_fmt->i_extra );
2391
2392             if( !es->p_dec )
2393                 return VLC_SUCCESS;
2394 #if 1
2395             EsDestroyDecoder( out, es );
2396
2397             EsCreateDecoder( out, es );
2398 #else
2399             es->p_dec->fmt_in.i_extra = p_fmt->i_extra;
2400             es->p_dec->fmt_in.p_extra =
2401               xrealloc( es->p_dec->fmt_in.p_extra, p_fmt->i_extra );
2402             memcpy( es->p_dec->fmt_in.p_extra,
2403                     p_fmt->p_extra, p_fmt->i_extra );
2404 #endif
2405         }
2406
2407         return VLC_SUCCESS;
2408     }
2409
2410     case ES_OUT_SET_ES_SCRAMBLED_STATE:
2411     {
2412         es_out_id_t *es = va_arg( args, es_out_id_t * );
2413         bool b_scrambled = (bool)va_arg( args, int );
2414
2415         if( !es->b_scrambled != !b_scrambled )
2416         {
2417             es->b_scrambled = b_scrambled;
2418             EsOutProgramUpdateScrambled( out, es->p_pgrm );
2419         }
2420         return VLC_SUCCESS;
2421     }
2422
2423     case ES_OUT_SET_NEXT_DISPLAY_TIME:
2424     {
2425         const int64_t i_date = (int64_t)va_arg( args, int64_t );
2426
2427         if( i_date < 0 )
2428             return VLC_EGENERIC;
2429
2430         p_sys->i_preroll_end = i_date;
2431
2432         return VLC_SUCCESS;
2433     }
2434     case ES_OUT_SET_GROUP_META:
2435     {
2436         int i_group = (int)va_arg( args, int );
2437         const vlc_meta_t *p_meta = va_arg( args, const vlc_meta_t * );
2438
2439         EsOutProgramMeta( out, i_group, p_meta );
2440         return VLC_SUCCESS;
2441     }
2442     case ES_OUT_SET_GROUP_EPG:
2443     {
2444         int i_group = (int)va_arg( args, int );
2445         const vlc_epg_t *p_epg = va_arg( args, const vlc_epg_t * );
2446
2447         EsOutProgramEpg( out, i_group, p_epg );
2448         return VLC_SUCCESS;
2449     }
2450
2451     case ES_OUT_DEL_GROUP:
2452     {
2453         int i_group = (int)va_arg( args, int );
2454
2455         return EsOutProgramDel( out, i_group );
2456     }
2457
2458     case ES_OUT_SET_META:
2459     {
2460         const vlc_meta_t *p_meta = va_arg( args, const vlc_meta_t * );
2461
2462         EsOutMeta( out, p_meta );
2463         return VLC_SUCCESS;
2464     }
2465
2466     case ES_OUT_GET_WAKE_UP:
2467     {
2468         mtime_t *pi_wakeup = (mtime_t*)va_arg( args, mtime_t* );
2469         *pi_wakeup = EsOutGetWakeup( out );
2470         return VLC_SUCCESS;
2471     }
2472
2473     case ES_OUT_SET_ES_BY_ID:
2474     case ES_OUT_RESTART_ES_BY_ID:
2475     case ES_OUT_SET_ES_DEFAULT_BY_ID:
2476     {
2477         const int i_id = (int)va_arg( args, int );
2478         es_out_id_t *p_es = EsOutGetFromID( out, i_id );
2479         int i_new_query;
2480
2481         switch( i_query )
2482         {
2483         case ES_OUT_SET_ES_BY_ID:         i_new_query = ES_OUT_SET_ES; break;
2484         case ES_OUT_RESTART_ES_BY_ID:     i_new_query = ES_OUT_RESTART_ES; break;
2485         case ES_OUT_SET_ES_DEFAULT_BY_ID: i_new_query = ES_OUT_SET_ES_DEFAULT; break;
2486         default:
2487           assert(0);
2488         }
2489         /* TODO if the lock is made non recursive it should be changed */
2490         int i_ret = es_out_Control( out, i_new_query, p_es );
2491
2492         /* Clean up vout after user action (in active mode only).
2493          * FIXME it does not work well with multiple video windows */
2494         if( p_sys->b_active )
2495             input_resource_TerminateVout( p_sys->p_input->p->p_resource );
2496         return i_ret;
2497     }
2498
2499     case ES_OUT_GET_ES_OBJECTS_BY_ID:
2500     {
2501         const int i_id = va_arg( args, int );
2502         es_out_id_t *p_es = EsOutGetFromID( out, i_id );
2503         if( !p_es )
2504             return VLC_EGENERIC;
2505
2506         vlc_object_t    **pp_decoder = va_arg( args, vlc_object_t ** );
2507         vout_thread_t   **pp_vout    = va_arg( args, vout_thread_t ** );
2508         audio_output_t **pp_aout    = va_arg( args, audio_output_t ** );
2509         if( p_es->p_dec )
2510         {
2511             if( pp_decoder )
2512                 *pp_decoder = vlc_object_hold( p_es->p_dec );
2513             input_DecoderGetObjects( p_es->p_dec, pp_vout, pp_aout );
2514         }
2515         else
2516         {
2517             if( pp_decoder )
2518                 *pp_decoder = NULL;
2519             if( pp_vout )
2520                 *pp_vout = NULL;
2521             if( pp_aout )
2522                 *pp_aout = NULL;
2523         }
2524         return VLC_SUCCESS;
2525     }
2526
2527     case ES_OUT_GET_BUFFERING:
2528     {
2529         bool *pb = va_arg( args, bool* );
2530         *pb = p_sys->b_buffering;
2531         return VLC_SUCCESS;
2532     }
2533
2534     case ES_OUT_GET_EMPTY:
2535     {
2536         bool *pb = va_arg( args, bool* );
2537         *pb = EsOutDecodersIsEmpty( out );
2538         return VLC_SUCCESS;
2539     }
2540
2541     case ES_OUT_SET_DELAY:
2542     {
2543         const int i_cat = (int)va_arg( args, int );
2544         const mtime_t i_delay = (mtime_t)va_arg( args, mtime_t );
2545         EsOutSetDelay( out, i_cat, i_delay );
2546         return VLC_SUCCESS;
2547     }
2548
2549     case ES_OUT_SET_RECORD_STATE:
2550     {
2551         bool b = va_arg( args, int );
2552         return EsOutSetRecord( out, b );
2553     }
2554
2555     case ES_OUT_SET_PAUSE_STATE:
2556     {
2557         const bool b_source_paused = (bool)va_arg( args, int );
2558         const bool b_paused = (bool)va_arg( args, int );
2559         const mtime_t i_date = (mtime_t) va_arg( args, mtime_t );
2560
2561         assert( !b_source_paused == !b_paused );
2562         EsOutChangePause( out, b_paused, i_date );
2563
2564         return VLC_SUCCESS;
2565     }
2566
2567     case ES_OUT_SET_RATE:
2568     {
2569         const int i_src_rate = (int)va_arg( args, int );
2570         const int i_rate = (int)va_arg( args, int );
2571
2572         assert( i_src_rate == i_rate );
2573         EsOutChangeRate( out, i_rate );
2574
2575         return VLC_SUCCESS;
2576     }
2577
2578     case ES_OUT_SET_TIME:
2579     {
2580         const mtime_t i_date = (mtime_t)va_arg( args, mtime_t );
2581
2582         assert( i_date == -1 );
2583         EsOutChangePosition( out );
2584
2585         return VLC_SUCCESS;
2586     }
2587
2588     case ES_OUT_SET_FRAME_NEXT:
2589         EsOutFrameNext( out );
2590         return VLC_SUCCESS;
2591
2592     case ES_OUT_SET_TIMES:
2593     {
2594         double f_position = (double)va_arg( args, double );
2595         mtime_t i_time = (mtime_t)va_arg( args, mtime_t );
2596         mtime_t i_length = (mtime_t)va_arg( args, mtime_t );
2597
2598         input_SendEventLength( p_sys->p_input, i_length );
2599
2600         if( !p_sys->b_buffering )
2601         {
2602             mtime_t i_delay;
2603
2604             /* Fix for buffering delay */
2605             if( !p_sys->p_input->p->p_sout ||
2606                 !p_sys->p_input->p->b_out_pace_control )
2607                 i_delay = EsOutGetBuffering( out );
2608             else
2609                 i_delay = 0;
2610
2611             i_time -= i_delay;
2612             if( i_time < 0 )
2613                 i_time = 0;
2614
2615             if( i_length > 0 )
2616                 f_position -= (double)i_delay / i_length;
2617             if( f_position < 0 )
2618                 f_position = 0;
2619
2620             input_SendEventPosition( p_sys->p_input, f_position, i_time );
2621         }
2622         return VLC_SUCCESS;
2623     }
2624     case ES_OUT_SET_JITTER:
2625     {
2626         mtime_t i_pts_delay  = (mtime_t)va_arg( args, mtime_t );
2627         mtime_t i_pts_jitter = (mtime_t)va_arg( args, mtime_t );
2628         int     i_cr_average = (int)va_arg( args, int );
2629
2630         bool b_change_clock =
2631             i_pts_delay + i_pts_jitter != p_sys->i_pts_delay ||
2632             i_cr_average != p_sys->i_cr_average;
2633
2634         assert( i_pts_jitter >= 0 );
2635         p_sys->i_pts_delay  = i_pts_delay + i_pts_jitter;
2636         p_sys->i_pts_jitter = i_pts_jitter;
2637         p_sys->i_cr_average = i_cr_average;
2638
2639         for( int i = 0; i < p_sys->i_pgrm && b_change_clock; i++ )
2640             input_clock_SetJitter( p_sys->pgrm[i]->p_clock,
2641                                    i_pts_delay + i_pts_jitter, i_cr_average );
2642         return VLC_SUCCESS;
2643     }
2644
2645     case ES_OUT_GET_PCR_SYSTEM:
2646     {
2647         if( p_sys->b_buffering )
2648             return VLC_EGENERIC;
2649
2650         es_out_pgrm_t *p_pgrm = p_sys->p_pgrm;
2651         if( !p_pgrm )
2652             return VLC_EGENERIC;
2653
2654         mtime_t *pi_system = va_arg( args, mtime_t *);
2655         mtime_t *pi_delay  = va_arg( args, mtime_t *);
2656         input_clock_GetSystemOrigin( p_pgrm->p_clock, pi_system, pi_delay );
2657         return VLC_SUCCESS;
2658     }
2659
2660     case ES_OUT_MODIFY_PCR_SYSTEM:
2661     {
2662         if( p_sys->b_buffering )
2663             return VLC_EGENERIC;
2664
2665         es_out_pgrm_t *p_pgrm = p_sys->p_pgrm;
2666         if( !p_pgrm )
2667             return VLC_EGENERIC;
2668
2669         const bool    b_absolute = va_arg( args, int );
2670         const mtime_t i_system   = va_arg( args, mtime_t );
2671         input_clock_ChangeSystemOrigin( p_pgrm->p_clock, b_absolute, i_system );
2672         return VLC_SUCCESS;
2673     }
2674     case ES_OUT_SET_EOS:
2675     {
2676         for (int i = 0; i < p_sys->i_es; i++) {
2677             es_out_id_t *id = p_sys->es[i];
2678             decoder_t *p_dec = id->p_dec;
2679             if (!p_dec)
2680                 continue;
2681             block_t *p_block = block_Alloc(0);
2682             if( !p_block )
2683                 break;
2684
2685             p_block->i_flags |= BLOCK_FLAG_CORE_EOS;
2686             input_DecoderDecode(p_dec, p_block, false);
2687         }
2688         return VLC_SUCCESS;
2689     }
2690
2691     default:
2692         msg_Err( p_sys->p_input, "unknown query in es_out_Control" );
2693         return VLC_EGENERIC;
2694     }
2695 }
2696 static int EsOutControl( es_out_t *out, int i_query, va_list args )
2697 {
2698     es_out_sys_t *p_sys = out->p_sys;
2699     int i_ret;
2700
2701     vlc_mutex_lock( &p_sys->lock );
2702     i_ret = EsOutControlLocked( out, i_query, args );
2703     vlc_mutex_unlock( &p_sys->lock );
2704
2705     return i_ret;
2706 }
2707
2708 /****************************************************************************
2709  * LanguageGetName: try to expend iso639 into plain name
2710  ****************************************************************************/
2711 static char *LanguageGetName( const char *psz_code )
2712 {
2713     const iso639_lang_t *pl;
2714
2715     if( psz_code == NULL || !strcmp( psz_code, "und" ) )
2716     {
2717         return strdup( "" );
2718     }
2719
2720     if( strlen( psz_code ) == 2 )
2721     {
2722         pl = GetLang_1( psz_code );
2723     }
2724     else if( strlen( psz_code ) == 3 )
2725     {
2726         pl = GetLang_2B( psz_code );
2727         if( !strcmp( pl->psz_iso639_1, "??" ) )
2728         {
2729             pl = GetLang_2T( psz_code );
2730         }
2731     }
2732     else
2733     {
2734         return strdup( psz_code );
2735     }
2736
2737     if( !strcmp( pl->psz_iso639_1, "??" ) )
2738     {
2739        return strdup( psz_code );
2740     }
2741     else
2742     {
2743         return strdup( vlc_gettext(pl->psz_eng_name) );
2744     }
2745 }
2746
2747 /* Get a 2 char code */
2748 static char *LanguageGetCode( const char *psz_lang )
2749 {
2750     const iso639_lang_t *pl;
2751
2752     if( psz_lang == NULL || *psz_lang == '\0' )
2753         return strdup("??");
2754
2755     for( pl = p_languages; pl->psz_eng_name != NULL; pl++ )
2756     {
2757         if( !strcasecmp( pl->psz_eng_name, psz_lang ) ||
2758             !strcasecmp( pl->psz_iso639_1, psz_lang ) ||
2759             !strcasecmp( pl->psz_iso639_2T, psz_lang ) ||
2760             !strcasecmp( pl->psz_iso639_2B, psz_lang ) )
2761             return strdup( pl->psz_iso639_1 );
2762     }
2763
2764     return strdup("??");
2765 }
2766
2767 static char **LanguageSplit( const char *psz_langs, bool b_default_any )
2768 {
2769     char *psz_dup;
2770     char *psz_parser;
2771     char **ppsz = NULL;
2772     int i_psz = 0;
2773
2774     if( psz_langs == NULL ) return NULL;
2775
2776     psz_parser = psz_dup = strdup(psz_langs);
2777
2778     while( psz_parser && *psz_parser )
2779     {
2780         char *psz;
2781         char *psz_code;
2782
2783         psz = strchr(psz_parser, ',' );
2784         if( psz ) *psz++ = '\0';
2785
2786         if( !strcmp( psz_parser, "any" ) )
2787         {
2788             TAB_APPEND( i_psz, ppsz, strdup("any") );
2789         }
2790         else if( !strcmp( psz_parser, "none" ) )
2791         {
2792             TAB_APPEND( i_psz, ppsz, strdup("none") );
2793         }
2794         else
2795         {
2796             psz_code = LanguageGetCode( psz_parser );
2797             if( strcmp( psz_code, "??" ) )
2798             {
2799                 TAB_APPEND( i_psz, ppsz, psz_code );
2800             }
2801             else
2802             {
2803                 free( psz_code );
2804             }
2805         }
2806
2807         psz_parser = psz;
2808     }
2809
2810     if( i_psz )
2811     {
2812         if( b_default_any && strcmp( ppsz[i_psz - 1], "none" ) )
2813             TAB_APPEND( i_psz, ppsz, strdup("any") );
2814         TAB_APPEND( i_psz, ppsz, NULL );
2815     }
2816
2817     free( psz_dup );
2818     return ppsz;
2819 }
2820
2821 static int LanguageArrayIndex( char **ppsz_langs, const char *psz_lang )
2822 {
2823     if( !ppsz_langs || !psz_lang )
2824         return -1;
2825
2826     for( int i = 0; ppsz_langs[i]; i++ )
2827     {
2828         if( !strcasecmp( ppsz_langs[i], psz_lang ) ||
2829             !strcasecmp( ppsz_langs[i], "any" ) )
2830             return i;
2831         if( !strcasecmp( ppsz_langs[i], "none" ) )
2832             break;
2833     }
2834
2835     return -1;
2836 }
2837
2838 /****************************************************************************
2839  * EsOutUpdateInfo:
2840  * - add meta info to the playlist item
2841  ****************************************************************************/
2842 static void EsOutUpdateInfo( es_out_t *out, es_out_id_t *es, const es_format_t *fmt, const vlc_meta_t *p_meta )
2843 {
2844     es_out_sys_t   *p_sys = out->p_sys;
2845     input_thread_t *p_input = p_sys->p_input;
2846     const es_format_t *p_fmt_es = &es->fmt;
2847     lldiv_t         div;
2848
2849     if( es->fmt.i_cat == fmt->i_cat )
2850     {
2851         es_format_t update = *fmt;
2852         update.i_id = es->i_meta_id;
2853         update.i_codec = es->fmt.i_codec;
2854         update.i_original_fourcc = es->fmt.i_original_fourcc;
2855         input_item_UpdateTracksInfo(input_GetItem(p_input), &update);
2856     }
2857
2858     /* Create category */
2859     char psz_cat[128];
2860     snprintf( psz_cat, sizeof(psz_cat),_("Stream %d"), es->i_meta_id );
2861     info_category_t *p_cat = info_category_New( psz_cat );
2862     if( !p_cat )
2863         return;
2864
2865     /* Add information */
2866     const char *psz_type;
2867     switch( fmt->i_cat )
2868     {
2869     case AUDIO_ES:
2870         psz_type = _("Audio");
2871         break;
2872     case VIDEO_ES:
2873         psz_type = _("Video");
2874         break;
2875     case SPU_ES:
2876         psz_type = _("Subtitle");
2877         break;
2878     default:
2879         psz_type = NULL;
2880         break;
2881     }
2882
2883     if( psz_type )
2884         info_category_AddInfo( p_cat, _("Type"), "%s", psz_type );
2885
2886     if( es->i_meta_id != es->i_id )
2887         info_category_AddInfo( p_cat, _("Original ID"),
2888                        "%d", es->i_id );
2889
2890     const char *psz_codec_description =
2891         vlc_fourcc_GetDescription( p_fmt_es->i_cat, p_fmt_es->i_codec );
2892     const vlc_fourcc_t i_codec_fourcc = ( p_fmt_es->i_original_fourcc )?
2893                                p_fmt_es->i_original_fourcc : p_fmt_es->i_codec;
2894     if( psz_codec_description && *psz_codec_description )
2895         info_category_AddInfo( p_cat, _("Codec"), "%s (%.4s)",
2896                                psz_codec_description, (char*)&i_codec_fourcc );
2897     else if ( i_codec_fourcc != VLC_FOURCC(0,0,0,0) )
2898         info_category_AddInfo( p_cat, _("Codec"), "%.4s",
2899                                (char*)&i_codec_fourcc );
2900
2901     if( es->psz_language && *es->psz_language )
2902         info_category_AddInfo( p_cat, _("Language"), "%s",
2903                                es->psz_language );
2904     if( fmt->psz_description && *fmt->psz_description )
2905         info_category_AddInfo( p_cat, _("Description"), "%s",
2906                                fmt->psz_description );
2907
2908     switch( fmt->i_cat )
2909     {
2910     case AUDIO_ES:
2911         info_category_AddInfo( p_cat, _("Type"), _("Audio") );
2912
2913         if( fmt->audio.i_physical_channels )
2914             info_category_AddInfo( p_cat, _("Channels"), "%s",
2915                                    _( aout_FormatPrintChannels( &fmt->audio ) ) );
2916
2917         if( fmt->audio.i_rate > 0 )
2918         {
2919             info_category_AddInfo( p_cat, _("Sample rate"), _("%u Hz"),
2920                                    fmt->audio.i_rate );
2921             /* FIXME that should be removed or improved ! (used by text/strings.c) */
2922             var_SetInteger( p_input, "sample-rate", fmt->audio.i_rate );
2923         }
2924
2925         unsigned int i_bitspersample = fmt->audio.i_bitspersample;
2926         if( i_bitspersample <= 0 )
2927             i_bitspersample = aout_BitsPerSample( p_fmt_es->i_codec );
2928         if( i_bitspersample > 0 )
2929             info_category_AddInfo( p_cat, _("Bits per sample"), "%u",
2930                                    i_bitspersample );
2931
2932         if( fmt->i_bitrate > 0 )
2933         {
2934             info_category_AddInfo( p_cat, _("Bitrate"), _("%u kb/s"),
2935                                    fmt->i_bitrate / 1000 );
2936             /* FIXME that should be removed or improved ! (used by text/strings.c) */
2937             var_SetInteger( p_input, "bit-rate", fmt->i_bitrate );
2938         }
2939         for( int i = 0; i < AUDIO_REPLAY_GAIN_MAX; i++ )
2940         {
2941             const audio_replay_gain_t *p_rg = &fmt->audio_replay_gain;
2942             if( !p_rg->pb_gain[i] )
2943                 continue;
2944             const char *psz_name;
2945             if( i == AUDIO_REPLAY_GAIN_TRACK )
2946                 psz_name = _("Track replay gain");
2947             else
2948                 psz_name = _("Album replay gain");
2949             info_category_AddInfo( p_cat, psz_name, _("%.2f dB"),
2950                                    p_rg->pf_gain[i] );
2951         }
2952         break;
2953
2954     case VIDEO_ES:
2955         info_category_AddInfo( p_cat, _("Type"), _("Video") );
2956
2957         if( fmt->video.i_width > 0 && fmt->video.i_height > 0 )
2958             info_category_AddInfo( p_cat, _("Resolution"), "%ux%u",
2959                                    fmt->video.i_width, fmt->video.i_height );
2960
2961         if( fmt->video.i_visible_width > 0 &&
2962             fmt->video.i_visible_height > 0 )
2963             info_category_AddInfo( p_cat, _("Display resolution"), "%ux%u",
2964                                    fmt->video.i_visible_width,
2965                                    fmt->video.i_visible_height);
2966        if( fmt->video.i_frame_rate > 0 &&
2967            fmt->video.i_frame_rate_base > 0 )
2968        {
2969            div = lldiv( (float)fmt->video.i_frame_rate /
2970                                fmt->video.i_frame_rate_base * 1000000,
2971                                1000000 );
2972            if( div.rem > 0 )
2973                info_category_AddInfo( p_cat, _("Frame rate"), "%"PRId64".%06u",
2974                                       div.quot, (unsigned int )div.rem );
2975            else
2976                info_category_AddInfo( p_cat, _("Frame rate"), "%"PRId64,
2977                                       div.quot );
2978        }
2979        if( fmt->i_codec != p_fmt_es->i_codec )
2980        {
2981            const char *psz_chroma_description =
2982                 vlc_fourcc_GetDescription( VIDEO_ES, fmt->i_codec );
2983            if( psz_chroma_description )
2984                info_category_AddInfo( p_cat, _("Decoded format"), "%s",
2985                                       psz_chroma_description );
2986        }
2987
2988        break;
2989
2990     case SPU_ES:
2991         info_category_AddInfo( p_cat, _("Type"), _("Subtitle") );
2992         break;
2993
2994     default:
2995         break;
2996     }
2997
2998     /* Append generic meta */
2999     if( p_meta )
3000     {
3001         char **ppsz_all_keys = vlc_meta_CopyExtraNames( p_meta );
3002         for( int i = 0; ppsz_all_keys && ppsz_all_keys[i]; i++ )
3003         {
3004             char *psz_key = ppsz_all_keys[i];
3005             const char *psz_value = vlc_meta_GetExtra( p_meta, psz_key );
3006
3007             if( psz_value )
3008                 info_category_AddInfo( p_cat, vlc_gettext(psz_key), "%s",
3009                                        vlc_gettext(psz_value) );
3010             free( psz_key );
3011         }
3012         free( ppsz_all_keys );
3013     }
3014     /* */
3015     input_Control( p_input, INPUT_REPLACE_INFOS, p_cat );
3016 }