]> git.sesse.net Git - vlc/blob - src/input/es_out.c
Add VLSub to find subtitles
[vlc] / src / input / es_out.c
1 /*****************************************************************************
2  * es_out.c: Es Out handler for input.
3  *****************************************************************************
4  * Copyright (C) 2003-2004 VLC authors and VideoLAN
5  * $Id$
6  *
7  * Authors: Laurent Aimar <fenrir@via.ecp.fr>
8  *          Jean-Paul Saman <jpsaman #_at_# m2x dot nl>
9  *
10  * This program is free software; you can redistribute it and/or modify it
11  * under the terms of the GNU Lesser General Public License as published by
12  * the Free Software Foundation; either version 2.1 of the License, or
13  * (at your option) any later version.
14  *
15  * This program is distributed in the hope that it will be useful,
16  * but WITHOUT ANY WARRANTY; without even the implied warranty of
17  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE. See the
18  * GNU Lesser General Public License for more details.
19  *
20  * You should have received a copy of the GNU Lesser General Public License
21  * along with this program; if not, write to the Free Software Foundation,
22  * Inc., 51 Franklin Street, Fifth Floor, Boston MA 02110-1301, USA.
23  *****************************************************************************/
24
25 /*****************************************************************************
26  * Preamble
27  *****************************************************************************/
28 #ifdef HAVE_CONFIG_H
29 # include "config.h"
30 #endif
31
32 #include <stdio.h>
33 #include <assert.h>
34 #include <vlc_common.h>
35
36 #include <vlc_input.h>
37 #include <vlc_es_out.h>
38 #include <vlc_block.h>
39 #include <vlc_aout.h>
40 #include <vlc_fourcc.h>
41
42 #include "input_internal.h"
43 #include "clock.h"
44 #include "decoder.h"
45 #include "es_out.h"
46 #include "event.h"
47 #include "info.h"
48 #include "item.h"
49
50 #include "../stream_output/stream_output.h"
51
52 #include <vlc_iso_lang.h>
53 /* FIXME we should find a better way than including that */
54 #include "../text/iso-639_def.h"
55
56 /*****************************************************************************
57  * Local prototypes
58  *****************************************************************************/
59 typedef struct
60 {
61     /* Program ID */
62     int i_id;
63
64     /* Number of es for this pgrm */
65     int i_es;
66
67     bool b_selected;
68     bool b_scrambled;
69
70     /* Clock for this program */
71     input_clock_t *p_clock;
72
73     char    *psz_name;
74     char    *psz_now_playing;
75     char    *psz_publisher;
76 } es_out_pgrm_t;
77
78 struct es_out_id_t
79 {
80     /* ES ID */
81     int       i_id;
82     es_out_pgrm_t *p_pgrm;
83
84     /* */
85     bool b_scrambled;
86
87     /* Channel in the track type */
88     int         i_channel;
89     es_format_t fmt;
90     char        *psz_language;
91     char        *psz_language_code;
92
93     decoder_t   *p_dec;
94     decoder_t   *p_dec_record;
95
96     /* Fields for Video with CC */
97     bool  pb_cc_present[4];
98     es_out_id_t  *pp_cc_es[4];
99
100     /* Field for CC track from a master video */
101     es_out_id_t *p_master;
102
103     /* ID for the meta data */
104     int         i_meta_id;
105 };
106
107 struct es_out_sys_t
108 {
109     input_thread_t *p_input;
110
111     /* */
112     vlc_mutex_t   lock;
113
114     /* all programs */
115     int           i_pgrm;
116     es_out_pgrm_t **pgrm;
117     es_out_pgrm_t *p_pgrm;  /* Master program */
118
119     /* all es */
120     int         i_id;
121     int         i_es;
122     es_out_id_t **es;
123
124     /* mode gestion */
125     bool  b_active;
126     int         i_mode;
127
128     /* es count */
129     int         i_audio;
130     int         i_video;
131     int         i_sub;
132
133     /* es/group to select */
134     int         i_group_id;
135     int         i_audio_last, i_audio_id;
136     int         i_sub_last, i_sub_id;
137     int         i_default_sub_id;   /* As specified in container; if applicable */
138     char        **ppsz_audio_language;
139     char        **ppsz_sub_language;
140
141     /* current main es */
142     es_out_id_t *p_es_audio;
143     es_out_id_t *p_es_video;
144     es_out_id_t *p_es_sub;
145
146     /* delay */
147     int64_t i_audio_delay;
148     int64_t i_spu_delay;
149
150     /* Clock configuration */
151     mtime_t     i_pts_delay;
152     mtime_t     i_pts_jitter;
153     int         i_cr_average;
154     int         i_rate;
155
156     /* */
157     bool        b_paused;
158     mtime_t     i_pause_date;
159
160     /* Current preroll */
161     mtime_t     i_preroll_end;
162
163     /* Used for buffering */
164     bool        b_buffering;
165     mtime_t     i_buffering_extra_initial;
166     mtime_t     i_buffering_extra_stream;
167     mtime_t     i_buffering_extra_system;
168
169     /* Record */
170     sout_instance_t *p_sout_record;
171 };
172
173 static es_out_id_t *EsOutAdd    ( es_out_t *, const es_format_t * );
174 static int          EsOutSend   ( es_out_t *, es_out_id_t *, block_t * );
175 static void         EsOutDel    ( es_out_t *, es_out_id_t * );
176 static int          EsOutControl( es_out_t *, int i_query, va_list );
177 static void         EsOutDelete ( es_out_t * );
178
179 static void         EsOutTerminate( es_out_t * );
180 static void         EsOutSelect( es_out_t *, es_out_id_t *es, bool b_force );
181 static void         EsOutUpdateInfo( es_out_t *, es_out_id_t *es, const es_format_t *, const vlc_meta_t * );
182 static int          EsOutSetRecord(  es_out_t *, bool b_record );
183
184 static bool EsIsSelected( es_out_id_t *es );
185 static void EsSelect( es_out_t *out, es_out_id_t *es );
186 static void EsUnselect( es_out_t *out, es_out_id_t *es, bool b_update );
187 static void EsOutDecoderChangeDelay( es_out_t *out, es_out_id_t *p_es );
188 static void EsOutDecodersChangePause( es_out_t *out, bool b_paused, mtime_t i_date );
189 static void EsOutProgramChangePause( es_out_t *out, bool b_paused, mtime_t i_date );
190 static void EsOutProgramsChangeRate( es_out_t *out );
191 static void EsOutDecodersStopBuffering( es_out_t *out, bool b_forced );
192
193 static char *LanguageGetName( const char *psz_code );
194 static char *LanguageGetCode( const char *psz_lang );
195 static char **LanguageSplit( const char *psz_langs, bool b_default_any );
196 static int LanguageArrayIndex( char **ppsz_langs, char *psz_lang );
197
198 static char *EsOutProgramGetMetaName( es_out_pgrm_t *p_pgrm );
199
200 static const vlc_fourcc_t EsOutFourccClosedCaptions[4] = {
201     VLC_FOURCC('c', 'c', '1', ' '),
202     VLC_FOURCC('c', 'c', '2', ' '),
203     VLC_FOURCC('c', 'c', '3', ' '),
204     VLC_FOURCC('c', 'c', '4', ' '),
205 };
206 static inline int EsOutGetClosedCaptionsChannel( vlc_fourcc_t fcc )
207 {
208     int i;
209     for( i = 0; i < 4; i++ )
210     {
211         if( fcc == EsOutFourccClosedCaptions[i] )
212             return i;
213     }
214     return -1;
215 }
216 static inline bool EsFmtIsTeletext( const es_format_t *p_fmt )
217 {
218     return p_fmt->i_cat == SPU_ES && p_fmt->i_codec == VLC_CODEC_TELETEXT;
219 }
220
221 /*****************************************************************************
222  * input_EsOutNew:
223  *****************************************************************************/
224 es_out_t *input_EsOutNew( input_thread_t *p_input, int i_rate )
225 {
226     es_out_t     *out = malloc( sizeof( *out ) );
227     if( !out )
228         return NULL;
229
230     es_out_sys_t *p_sys = calloc( 1, sizeof( *p_sys ) );
231     if( !p_sys )
232     {
233         free( out );
234         return NULL;
235     }
236
237     out->pf_add     = EsOutAdd;
238     out->pf_send    = EsOutSend;
239     out->pf_del     = EsOutDel;
240     out->pf_control = EsOutControl;
241     out->pf_destroy = EsOutDelete;
242     out->p_sys      = p_sys;
243
244     vlc_mutex_init_recursive( &p_sys->lock );
245     p_sys->p_input = p_input;
246
247     p_sys->b_active = false;
248     p_sys->i_mode   = ES_OUT_MODE_NONE;
249
250
251     TAB_INIT( p_sys->i_pgrm, p_sys->pgrm );
252
253     TAB_INIT( p_sys->i_es, p_sys->es );
254
255     /* */
256     p_sys->i_group_id = var_GetInteger( p_input, "program" );
257     p_sys->i_audio_last = var_GetInteger( p_input, "audio-track" );
258     p_sys->i_sub_last = var_GetInteger( p_input, "sub-track" );
259
260     p_sys->i_default_sub_id   = -1;
261
262     if( !p_input->b_preparsing )
263     {
264         char *psz_string;
265
266         psz_string = var_GetString( p_input, "audio-language" );
267         p_sys->ppsz_audio_language = LanguageSplit( psz_string, true );
268         if( p_sys->ppsz_audio_language )
269         {
270             for( int i = 0; p_sys->ppsz_audio_language[i]; i++ )
271                 msg_Dbg( p_input, "selected audio language[%d] %s",
272                          i, p_sys->ppsz_audio_language[i] );
273         }
274         free( psz_string );
275
276         psz_string = var_GetString( p_input, "sub-language" );
277         p_sys->ppsz_sub_language = LanguageSplit( psz_string, false );
278         if( p_sys->ppsz_sub_language )
279         {
280             for( int i = 0; p_sys->ppsz_sub_language[i]; i++ )
281                 msg_Dbg( p_input, "selected subtitle language[%d] %s",
282                          i, p_sys->ppsz_sub_language[i] );
283         }
284         free( psz_string );
285     }
286
287     p_sys->i_audio_id = var_GetInteger( p_input, "audio-track-id" );
288
289     p_sys->i_sub_id = var_GetInteger( p_input, "sub-track-id" );
290
291     p_sys->i_pause_date = -1;
292
293     p_sys->i_rate = i_rate;
294
295     p_sys->b_buffering = true;
296     p_sys->i_preroll_end = -1;
297
298     return out;
299 }
300
301 /*****************************************************************************
302  *
303  *****************************************************************************/
304 static void EsOutDelete( es_out_t *out )
305 {
306     es_out_sys_t *p_sys = out->p_sys;
307
308     assert( !p_sys->i_es && !p_sys->i_pgrm && !p_sys->p_pgrm );
309     if( p_sys->ppsz_audio_language )
310     {
311         for( int i = 0; p_sys->ppsz_audio_language[i]; i++ )
312             free( p_sys->ppsz_audio_language[i] );
313         free( p_sys->ppsz_audio_language );
314     }
315     if( p_sys->ppsz_sub_language )
316     {
317         for( int i = 0; p_sys->ppsz_sub_language[i]; i++ )
318             free( p_sys->ppsz_sub_language[i] );
319         free( p_sys->ppsz_sub_language );
320     }
321
322     vlc_mutex_destroy( &p_sys->lock );
323
324     free( p_sys );
325     free( out );
326 }
327
328 static void EsOutTerminate( es_out_t *out )
329 {
330     es_out_sys_t *p_sys = out->p_sys;
331
332     if( p_sys->p_sout_record )
333         EsOutSetRecord( out, false );
334
335     for( int i = 0; i < p_sys->i_es; i++ )
336     {
337         if( p_sys->es[i]->p_dec )
338             input_DecoderDelete( p_sys->es[i]->p_dec );
339
340         free( p_sys->es[i]->psz_language );
341         free( p_sys->es[i]->psz_language_code );
342         es_format_Clean( &p_sys->es[i]->fmt );
343
344         free( p_sys->es[i] );
345     }
346     TAB_CLEAN( p_sys->i_es, p_sys->es );
347
348     /* FIXME duplicate work EsOutProgramDel (but we cannot use it) add a EsOutProgramClean ? */
349     for( int i = 0; i < p_sys->i_pgrm; i++ )
350     {
351         es_out_pgrm_t *p_pgrm = p_sys->pgrm[i];
352         input_clock_Delete( p_pgrm->p_clock );
353         free( p_pgrm->psz_now_playing );
354         free( p_pgrm->psz_publisher );
355         free( p_pgrm->psz_name );
356
357         free( p_pgrm );
358     }
359     TAB_CLEAN( p_sys->i_pgrm, p_sys->pgrm );
360
361     p_sys->p_pgrm = NULL;
362
363     input_item_SetEpgOffline( p_sys->p_input->p->p_item );
364     input_SendEventMetaEpg( p_sys->p_input );
365 }
366
367 static mtime_t EsOutGetWakeup( es_out_t *out )
368 {
369     es_out_sys_t   *p_sys = out->p_sys;
370     input_thread_t *p_input = p_sys->p_input;
371
372     if( !p_sys->p_pgrm )
373         return 0;
374
375     /* We do not have a wake up date if the input cannot have its speed
376      * controlled or sout is imposing its own or while buffering
377      *
378      * FIXME for !p_input->p->b_can_pace_control a wake-up time is still needed
379      * to avoid too heavy buffering */
380     if( !p_input->p->b_can_pace_control ||
381         p_input->p->b_out_pace_control ||
382         p_sys->b_buffering )
383         return 0;
384
385     return input_clock_GetWakeup( p_sys->p_pgrm->p_clock );
386 }
387
388 static es_out_id_t *EsOutGetFromID( es_out_t *out, int i_id )
389 {
390     if( i_id < 0 )
391     {
392         /* Special HACK, -i_id is the cat of the stream */
393         return (es_out_id_t*)((uint8_t*)NULL-i_id);
394     }
395
396     for( int i = 0; i < out->p_sys->i_es; i++ )
397     {
398         if( out->p_sys->es[i]->i_id == i_id )
399             return out->p_sys->es[i];
400     }
401     return NULL;
402 }
403
404 static bool EsOutDecodersIsEmpty( es_out_t *out )
405 {
406     es_out_sys_t      *p_sys = out->p_sys;
407
408     if( p_sys->b_buffering && p_sys->p_pgrm )
409     {
410         EsOutDecodersStopBuffering( out, true );
411         if( p_sys->b_buffering )
412             return true;
413     }
414
415     for( int i = 0; i < p_sys->i_es; i++ )
416     {
417         es_out_id_t *es = p_sys->es[i];
418
419         if( es->p_dec && !input_DecoderIsEmpty( es->p_dec ) )
420             return false;
421         if( es->p_dec_record && !input_DecoderIsEmpty( es->p_dec_record ) )
422             return false;
423     }
424     return true;
425 }
426
427 static void EsOutSetDelay( es_out_t *out, int i_cat, int64_t i_delay )
428 {
429     es_out_sys_t *p_sys = out->p_sys;
430
431     if( i_cat == AUDIO_ES )
432         p_sys->i_audio_delay = i_delay;
433     else if( i_cat == SPU_ES )
434         p_sys->i_spu_delay = i_delay;
435
436     for( int i = 0; i < p_sys->i_es; i++ )
437         EsOutDecoderChangeDelay( out, p_sys->es[i] );
438 }
439
440 static int EsOutSetRecord(  es_out_t *out, bool b_record )
441 {
442     es_out_sys_t   *p_sys = out->p_sys;
443     input_thread_t *p_input = p_sys->p_input;
444
445     assert( ( b_record && !p_sys->p_sout_record ) || ( !b_record && p_sys->p_sout_record ) );
446
447     if( b_record )
448     {
449         char *psz_path = var_CreateGetNonEmptyString( p_input, "input-record-path" );
450         if( !psz_path )
451         {
452             if( var_CountChoices( p_input, "video-es" ) )
453                 psz_path = config_GetUserDir( VLC_VIDEOS_DIR );
454             else if( var_CountChoices( p_input, "audio-es" ) )
455                 psz_path = config_GetUserDir( VLC_MUSIC_DIR );
456             else
457                 psz_path = config_GetUserDir( VLC_DOWNLOAD_DIR );
458         }
459
460         char *psz_sout = NULL;  // TODO conf
461
462         if( !psz_sout && psz_path )
463         {
464             char *psz_file = input_CreateFilename( VLC_OBJECT(p_input), psz_path, INPUT_RECORD_PREFIX, NULL );
465             if( psz_file )
466             {
467                 if( asprintf( &psz_sout, "#record{dst-prefix='%s'}", psz_file ) < 0 )
468                     psz_sout = NULL;
469                 free( psz_file );
470             }
471         }
472         free( psz_path );
473
474         if( !psz_sout )
475             return VLC_EGENERIC;
476
477 #ifdef ENABLE_SOUT
478         p_sys->p_sout_record = sout_NewInstance( p_input, psz_sout );
479 #endif
480         free( psz_sout );
481
482         if( !p_sys->p_sout_record )
483             return VLC_EGENERIC;
484
485         for( int i = 0; i < p_sys->i_es; i++ )
486         {
487             es_out_id_t *p_es = p_sys->es[i];
488
489             if( !p_es->p_dec || p_es->p_master )
490                 continue;
491
492             p_es->p_dec_record = input_DecoderNew( p_input, &p_es->fmt, p_es->p_pgrm->p_clock, p_sys->p_sout_record );
493             if( p_es->p_dec_record && p_sys->b_buffering )
494                 input_DecoderStartBuffering( p_es->p_dec_record );
495         }
496     }
497     else
498     {
499         for( int i = 0; i < p_sys->i_es; i++ )
500         {
501             es_out_id_t *p_es = p_sys->es[i];
502
503             if( !p_es->p_dec_record )
504                 continue;
505
506             input_DecoderDelete( p_es->p_dec_record );
507             p_es->p_dec_record = NULL;
508         }
509 #ifdef ENABLE_SOUT
510         sout_DeleteInstance( p_sys->p_sout_record );
511 #endif
512         p_sys->p_sout_record = NULL;
513     }
514
515     return VLC_SUCCESS;
516 }
517 static void EsOutChangePause( es_out_t *out, bool b_paused, mtime_t i_date )
518 {
519     es_out_sys_t *p_sys = out->p_sys;
520
521     /* XXX the order is important */
522     if( b_paused )
523     {
524         EsOutDecodersChangePause( out, true, i_date );
525         EsOutProgramChangePause( out, true, i_date );
526     }
527     else
528     {
529         if( p_sys->i_buffering_extra_initial > 0 )
530         {
531             mtime_t i_stream_start;
532             mtime_t i_system_start;
533             mtime_t i_stream_duration;
534             mtime_t i_system_duration;
535             int i_ret;
536             i_ret = input_clock_GetState( p_sys->p_pgrm->p_clock,
537                                           &i_stream_start, &i_system_start,
538                                           &i_stream_duration, &i_system_duration );
539             if( !i_ret )
540             {
541                 /* FIXME pcr != exactly what wanted */
542                 const mtime_t i_used = /*(i_stream_duration - p_sys->p_input->p->i_pts_delay)*/ p_sys->i_buffering_extra_system - p_sys->i_buffering_extra_initial;
543                 i_date -= i_used;
544             }
545             p_sys->i_buffering_extra_initial = 0;
546             p_sys->i_buffering_extra_stream = 0;
547             p_sys->i_buffering_extra_system = 0;
548         }
549         EsOutProgramChangePause( out, false, i_date );
550         EsOutDecodersChangePause( out, false, i_date );
551
552         EsOutProgramsChangeRate( out );
553     }
554     p_sys->b_paused = b_paused;
555     p_sys->i_pause_date = i_date;
556 }
557
558 static void EsOutChangeRate( es_out_t *out, int i_rate )
559 {
560     es_out_sys_t      *p_sys = out->p_sys;
561
562     p_sys->i_rate = i_rate;
563     EsOutProgramsChangeRate( out );
564 }
565
566 static void EsOutChangePosition( es_out_t *out )
567 {
568     es_out_sys_t      *p_sys = out->p_sys;
569
570     input_SendEventCache( p_sys->p_input, 0.0 );
571
572     for( int i = 0; i < p_sys->i_es; i++ )
573     {
574         es_out_id_t *p_es = p_sys->es[i];
575
576         if( !p_es->p_dec )
577             continue;
578
579         input_DecoderStartBuffering( p_es->p_dec );
580
581         if( p_es->p_dec_record )
582             input_DecoderStartBuffering( p_es->p_dec_record );
583     }
584
585     for( int i = 0; i < p_sys->i_pgrm; i++ )
586         input_clock_Reset( p_sys->pgrm[i]->p_clock );
587
588     p_sys->b_buffering = true;
589     p_sys->i_buffering_extra_initial = 0;
590     p_sys->i_buffering_extra_stream = 0;
591     p_sys->i_buffering_extra_system = 0;
592     p_sys->i_preroll_end = -1;
593 }
594
595
596
597 static void EsOutDecodersStopBuffering( es_out_t *out, bool b_forced )
598 {
599     es_out_sys_t *p_sys = out->p_sys;
600     int i_ret;
601
602     mtime_t i_stream_start;
603     mtime_t i_system_start;
604     mtime_t i_stream_duration;
605     mtime_t i_system_duration;
606     i_ret = input_clock_GetState( p_sys->p_pgrm->p_clock,
607                                   &i_stream_start, &i_system_start,
608                                   &i_stream_duration, &i_system_duration );
609     assert( !i_ret || b_forced );
610     if( i_ret )
611         return;
612
613     mtime_t i_preroll_duration = 0;
614     if( p_sys->i_preroll_end >= 0 )
615         i_preroll_duration = __MAX( p_sys->i_preroll_end - i_stream_start, 0 );
616
617     const mtime_t i_buffering_duration = p_sys->i_pts_delay +
618                                          i_preroll_duration +
619                                          p_sys->i_buffering_extra_stream - p_sys->i_buffering_extra_initial;
620
621     if( i_stream_duration <= i_buffering_duration && !b_forced )
622     {
623         const double f_level = __MAX( (double)i_stream_duration / i_buffering_duration, 0 );
624         input_SendEventCache( p_sys->p_input, f_level );
625
626         msg_Dbg( p_sys->p_input, "Buffering %d%%", (int)(100 * f_level) );
627         return;
628     }
629     input_SendEventCache( p_sys->p_input, 1.0 );
630
631     msg_Dbg( p_sys->p_input, "Stream buffering done (%d ms in %d ms)",
632               (int)(i_stream_duration/1000), (int)(i_system_duration/1000) );
633     p_sys->b_buffering = false;
634     p_sys->i_preroll_end = -1;
635
636     if( p_sys->i_buffering_extra_initial > 0 )
637     {
638         /* FIXME wrong ? */
639         return;
640     }
641
642     const mtime_t i_decoder_buffering_start = mdate();
643     for( int i = 0; i < p_sys->i_es; i++ )
644     {
645         es_out_id_t *p_es = p_sys->es[i];
646
647         if( !p_es->p_dec || p_es->fmt.i_cat == SPU_ES )
648             continue;
649         input_DecoderWaitBuffering( p_es->p_dec );
650         if( p_es->p_dec_record )
651             input_DecoderWaitBuffering( p_es->p_dec_record );
652     }
653
654     msg_Dbg( p_sys->p_input, "Decoder buffering done in %d ms",
655               (int)(mdate() - i_decoder_buffering_start)/1000 );
656
657     /* Here is a good place to destroy unused vout with every demuxer */
658     input_resource_TerminateVout( p_sys->p_input->p->p_resource );
659
660     /* */
661     const mtime_t i_wakeup_delay = 10*1000; /* FIXME CLEANUP thread wake up time*/
662     const mtime_t i_current_date = p_sys->b_paused ? p_sys->i_pause_date : mdate();
663
664     input_clock_ChangeSystemOrigin( p_sys->p_pgrm->p_clock, true,
665                                     i_current_date + i_wakeup_delay - i_buffering_duration );
666
667     for( int i = 0; i < p_sys->i_es; i++ )
668     {
669         es_out_id_t *p_es = p_sys->es[i];
670
671         if( !p_es->p_dec )
672             continue;
673
674         input_DecoderStopBuffering( p_es->p_dec );
675         if( p_es->p_dec_record )
676             input_DecoderStopBuffering( p_es->p_dec_record );
677     }
678 }
679 static void EsOutDecodersChangePause( es_out_t *out, bool b_paused, mtime_t i_date )
680 {
681     es_out_sys_t *p_sys = out->p_sys;
682
683     /* Pause decoders first */
684     for( int i = 0; i < p_sys->i_es; i++ )
685     {
686         es_out_id_t *es = p_sys->es[i];
687
688         if( es->p_dec )
689         {
690             input_DecoderChangePause( es->p_dec, b_paused, i_date );
691             if( es->p_dec_record )
692                 input_DecoderChangePause( es->p_dec_record, b_paused, i_date );
693         }
694     }
695 }
696
697 static bool EsOutIsExtraBufferingAllowed( es_out_t *out )
698 {
699     es_out_sys_t *p_sys = out->p_sys;
700
701     size_t i_size = 0;
702     for( int i = 0; i < p_sys->i_es; i++ )
703     {
704         es_out_id_t *p_es = p_sys->es[i];
705
706         if( p_es->p_dec )
707             i_size += input_DecoderGetFifoSize( p_es->p_dec );
708         if( p_es->p_dec_record )
709             i_size += input_DecoderGetFifoSize( p_es->p_dec_record );
710     }
711     //msg_Info( out, "----- EsOutIsExtraBufferingAllowed =% 5d KiB -- ", i_size / 1024 );
712
713     /* TODO maybe we want to be able to tune it ? */
714 #if defined(OPTIMIZE_MEMORY)
715     const size_t i_level_high = 512*1024;  /* 0.5 MiB */
716 #else
717     const size_t i_level_high = 10*1024*1024; /* 10 MiB */
718 #endif
719     return i_size < i_level_high;
720 }
721
722 static void EsOutProgramChangePause( es_out_t *out, bool b_paused, mtime_t i_date )
723 {
724     es_out_sys_t *p_sys = out->p_sys;
725
726     for( int i = 0; i < p_sys->i_pgrm; i++ )
727         input_clock_ChangePause( p_sys->pgrm[i]->p_clock, b_paused, i_date );
728 }
729
730 static void EsOutDecoderChangeDelay( es_out_t *out, es_out_id_t *p_es )
731 {
732     es_out_sys_t *p_sys = out->p_sys;
733
734     mtime_t i_delay = 0;
735     if( p_es->fmt.i_cat == AUDIO_ES )
736         i_delay = p_sys->i_audio_delay;
737     else if( p_es->fmt.i_cat == SPU_ES )
738         i_delay = p_sys->i_spu_delay;
739     else
740         return;
741
742     if( p_es->p_dec )
743         input_DecoderChangeDelay( p_es->p_dec, i_delay );
744     if( p_es->p_dec_record )
745         input_DecoderChangeDelay( p_es->p_dec_record, i_delay );
746 }
747 static void EsOutProgramsChangeRate( es_out_t *out )
748 {
749     es_out_sys_t      *p_sys = out->p_sys;
750
751     for( int i = 0; i < p_sys->i_pgrm; i++ )
752         input_clock_ChangeRate( p_sys->pgrm[i]->p_clock, p_sys->i_rate );
753 }
754
755 static void EsOutFrameNext( es_out_t *out )
756 {
757     es_out_sys_t *p_sys = out->p_sys;
758     es_out_id_t *p_es_video = NULL;
759
760     if( p_sys->b_buffering )
761     {
762         msg_Warn( p_sys->p_input, "buffering, ignoring 'frame next'" );
763         return;
764     }
765
766     assert( p_sys->b_paused );
767
768     for( int i = 0; i < p_sys->i_es; i++ )
769     {
770         es_out_id_t *p_es = p_sys->es[i];
771
772         if( p_es->fmt.i_cat == VIDEO_ES && p_es->p_dec )
773         {
774             p_es_video = p_es;
775             break;
776         }
777     }
778
779     if( !p_es_video )
780     {
781         msg_Warn( p_sys->p_input, "No video track selected, ignoring 'frame next'" );
782         return;
783     }
784
785     mtime_t i_duration;
786     input_DecoderFrameNext( p_es_video->p_dec, &i_duration );
787
788     msg_Dbg( out->p_sys->p_input, "EsOutFrameNext consummed %d ms", (int)(i_duration/1000) );
789
790     if( i_duration <= 0 )
791         i_duration = 40*1000;
792
793     /* FIXME it is not a clean way ? */
794     if( p_sys->i_buffering_extra_initial <= 0 )
795     {
796         mtime_t i_stream_start;
797         mtime_t i_system_start;
798         mtime_t i_stream_duration;
799         mtime_t i_system_duration;
800         int i_ret;
801
802         i_ret = input_clock_GetState( p_sys->p_pgrm->p_clock,
803                                       &i_stream_start, &i_system_start,
804                                       &i_stream_duration, &i_system_duration );
805         if( i_ret )
806             return;
807
808         p_sys->i_buffering_extra_initial = 1 + i_stream_duration - p_sys->i_pts_delay; /* FIXME < 0 ? */
809         p_sys->i_buffering_extra_system =
810         p_sys->i_buffering_extra_stream = p_sys->i_buffering_extra_initial;
811     }
812
813     const int i_rate = input_clock_GetRate( p_sys->p_pgrm->p_clock );
814
815     p_sys->b_buffering = true;
816     p_sys->i_buffering_extra_system += i_duration;
817     p_sys->i_buffering_extra_stream = p_sys->i_buffering_extra_initial +
818                                       ( p_sys->i_buffering_extra_system - p_sys->i_buffering_extra_initial ) *
819                                                 INPUT_RATE_DEFAULT / i_rate;
820
821     p_sys->i_preroll_end = -1;
822 }
823 static mtime_t EsOutGetBuffering( es_out_t *out )
824 {
825     es_out_sys_t *p_sys = out->p_sys;
826
827     if( !p_sys->p_pgrm )
828         return 0;
829
830     int i_ret;
831     mtime_t i_stream_start;
832     mtime_t i_system_start;
833     mtime_t i_stream_duration;
834     mtime_t i_system_duration;
835     i_ret = input_clock_GetState( p_sys->p_pgrm->p_clock,
836                                   &i_stream_start, &i_system_start,
837                                   &i_stream_duration, &i_system_duration );
838
839     if( i_ret )
840         return 0;
841
842     mtime_t i_delay;
843
844     if( p_sys->b_buffering && p_sys->i_buffering_extra_initial <= 0 )
845     {
846         i_delay = i_stream_duration;
847     }
848     else
849     {
850         mtime_t i_system_duration;
851         if( p_sys->b_paused )
852         {
853             i_system_duration = p_sys->i_pause_date  - i_system_start;
854             if( p_sys->i_buffering_extra_initial > 0 )
855                 i_system_duration += p_sys->i_buffering_extra_system - p_sys->i_buffering_extra_initial;
856         }
857         else
858         {
859             i_system_duration = mdate() - i_system_start;
860         }
861
862         const mtime_t i_consumed = i_system_duration * INPUT_RATE_DEFAULT / p_sys->i_rate - i_stream_duration;
863         i_delay = p_sys->i_pts_delay - i_consumed;
864     }
865     if( i_delay < 0 )
866         return 0;
867     return i_delay;
868 }
869
870 static void EsOutESVarUpdateGeneric( es_out_t *out, int i_id,
871                                      const es_format_t *fmt, const char *psz_language,
872                                      bool b_delete )
873 {
874     es_out_sys_t      *p_sys = out->p_sys;
875     input_thread_t    *p_input = p_sys->p_input;
876     vlc_value_t       val, text;
877
878     if( b_delete )
879     {
880         if( EsFmtIsTeletext( fmt ) )
881             input_SendEventTeletextDel( p_sys->p_input, i_id );
882
883         input_SendEventEsDel( p_input, fmt->i_cat, i_id );
884         return;
885     }
886
887     /* Get the number of ES already added */
888     const char *psz_var;
889     if( fmt->i_cat == AUDIO_ES )
890         psz_var = "audio-es";
891     else if( fmt->i_cat == VIDEO_ES )
892         psz_var = "video-es";
893     else
894         psz_var = "spu-es";
895
896     var_Change( p_input, psz_var, VLC_VAR_CHOICESCOUNT, &val, NULL );
897     if( val.i_int == 0 )
898     {
899         vlc_value_t val2;
900
901         /* First one, we need to add the "Disable" choice */
902         val2.i_int = -1; text.psz_string = _("Disable");
903         var_Change( p_input, psz_var, VLC_VAR_ADDCHOICE, &val2, &text );
904         val.i_int++;
905     }
906
907     /* Take care of the ES description */
908     if( fmt->psz_description && *fmt->psz_description )
909     {
910         if( psz_language && *psz_language )
911         {
912             if( asprintf( &text.psz_string, "%s - [%s]", fmt->psz_description,
913                           psz_language ) == -1 )
914                 text.psz_string = NULL;
915         }
916         else text.psz_string = strdup( fmt->psz_description );
917     }
918     else
919     {
920         if( psz_language && *psz_language )
921         {
922             if( asprintf( &text.psz_string, "%s %"PRId64" - [%s]", _( "Track" ), val.i_int, psz_language ) == -1 )
923                 text.psz_string = NULL;
924         }
925         else
926         {
927             if( asprintf( &text.psz_string, "%s %"PRId64, _( "Track" ), val.i_int ) == -1 )
928                 text.psz_string = NULL;
929         }
930     }
931
932     input_SendEventEsAdd( p_input, fmt->i_cat, i_id, text.psz_string );
933     if( EsFmtIsTeletext( fmt ) )
934     {
935         char psz_page[3+1];
936         snprintf( psz_page, sizeof(psz_page), "%d%2.2x",
937                   fmt->subs.teletext.i_magazine,
938                   fmt->subs.teletext.i_page );
939         input_SendEventTeletextAdd( p_sys->p_input,
940                                     i_id, fmt->subs.teletext.i_magazine >= 0 ? psz_page : NULL );
941     }
942
943     free( text.psz_string );
944 }
945
946 static void EsOutESVarUpdate( es_out_t *out, es_out_id_t *es,
947                               bool b_delete )
948 {
949     EsOutESVarUpdateGeneric( out, es->i_id, &es->fmt, es->psz_language, b_delete );
950 }
951
952 static bool EsOutIsProgramVisible( es_out_t *out, int i_group )
953 {
954     return out->p_sys->i_group_id == 0 || out->p_sys->i_group_id == i_group;
955 }
956
957 /* EsOutProgramSelect:
958  *  Select a program and update the object variable
959  */
960 static void EsOutProgramSelect( es_out_t *out, es_out_pgrm_t *p_pgrm )
961 {
962     es_out_sys_t      *p_sys = out->p_sys;
963     input_thread_t    *p_input = p_sys->p_input;
964     int               i;
965
966     if( p_sys->p_pgrm == p_pgrm )
967         return; /* Nothing to do */
968
969     if( p_sys->p_pgrm )
970     {
971         es_out_pgrm_t *old = p_sys->p_pgrm;
972         msg_Dbg( p_input, "unselecting program id=%d", old->i_id );
973
974         for( i = 0; i < p_sys->i_es; i++ )
975         {
976             if( p_sys->es[i]->p_pgrm == old && EsIsSelected( p_sys->es[i] ) &&
977                 p_sys->i_mode != ES_OUT_MODE_ALL )
978                 EsUnselect( out, p_sys->es[i], true );
979         }
980
981         p_sys->p_es_audio = NULL;
982         p_sys->p_es_sub = NULL;
983         p_sys->p_es_video = NULL;
984     }
985
986     msg_Dbg( p_input, "selecting program id=%d", p_pgrm->i_id );
987
988     /* Mark it selected */
989     p_pgrm->b_selected = true;
990
991     /* Switch master stream */
992     p_sys->p_pgrm = p_pgrm;
993
994     /* Update "program" */
995     input_SendEventProgramSelect( p_input, p_pgrm->i_id );
996
997     /* Update "es-*" */
998     input_SendEventEsDel( p_input, AUDIO_ES, -1 );
999     input_SendEventEsDel( p_input, VIDEO_ES, -1 );
1000     input_SendEventEsDel( p_input, SPU_ES, -1 );
1001     input_SendEventTeletextDel( p_input, -1 );
1002     input_SendEventProgramScrambled( p_input, p_pgrm->i_id, p_pgrm->b_scrambled );
1003
1004     /* TODO event */
1005     var_SetInteger( p_input, "teletext-es", -1 );
1006
1007     for( i = 0; i < p_sys->i_es; i++ )
1008     {
1009         if( p_sys->es[i]->p_pgrm == p_sys->p_pgrm )
1010             EsOutESVarUpdate( out, p_sys->es[i], false );
1011         EsOutSelect( out, p_sys->es[i], false );
1012     }
1013
1014     /* Update now playing */
1015     input_item_SetNowPlaying( p_input->p->p_item, p_pgrm->psz_now_playing );
1016     input_item_SetPublisher( p_input->p->p_item, p_pgrm->psz_publisher );
1017
1018     input_SendEventMeta( p_input );
1019 }
1020
1021 /* EsOutAddProgram:
1022  *  Add a program
1023  */
1024 static es_out_pgrm_t *EsOutProgramAdd( es_out_t *out, int i_group )
1025 {
1026     es_out_sys_t      *p_sys = out->p_sys;
1027     input_thread_t    *p_input = p_sys->p_input;
1028
1029     es_out_pgrm_t *p_pgrm = malloc( sizeof( es_out_pgrm_t ) );
1030     if( !p_pgrm )
1031         return NULL;
1032
1033     /* Init */
1034     p_pgrm->i_id = i_group;
1035     p_pgrm->i_es = 0;
1036     p_pgrm->b_selected = false;
1037     p_pgrm->b_scrambled = false;
1038     p_pgrm->psz_name = NULL;
1039     p_pgrm->psz_now_playing = NULL;
1040     p_pgrm->psz_publisher = NULL;
1041     p_pgrm->p_clock = input_clock_New( p_sys->i_rate );
1042     if( !p_pgrm->p_clock )
1043     {
1044         free( p_pgrm );
1045         return NULL;
1046     }
1047     if( p_sys->b_paused )
1048         input_clock_ChangePause( p_pgrm->p_clock, p_sys->b_paused, p_sys->i_pause_date );
1049     input_clock_SetJitter( p_pgrm->p_clock, p_sys->i_pts_delay, p_sys->i_cr_average );
1050
1051     /* Append it */
1052     TAB_APPEND( p_sys->i_pgrm, p_sys->pgrm, p_pgrm );
1053
1054     /* Update "program" variable */
1055     if( EsOutIsProgramVisible( out, i_group ) )
1056         input_SendEventProgramAdd( p_input, i_group, NULL );
1057
1058     if( i_group == p_sys->i_group_id || ( !p_sys->p_pgrm && p_sys->i_group_id == 0 ) )
1059         EsOutProgramSelect( out, p_pgrm );
1060
1061     return p_pgrm;
1062 }
1063
1064 /* EsOutDelProgram:
1065  *  Delete a program
1066  */
1067 static int EsOutProgramDel( es_out_t *out, int i_group )
1068 {
1069     es_out_sys_t      *p_sys = out->p_sys;
1070     input_thread_t    *p_input = p_sys->p_input;
1071     es_out_pgrm_t     *p_pgrm = NULL;
1072     int               i;
1073
1074     for( i = 0; i < p_sys->i_pgrm; i++ )
1075     {
1076         if( p_sys->pgrm[i]->i_id == i_group )
1077         {
1078             p_pgrm = p_sys->pgrm[i];
1079             break;
1080         }
1081     }
1082
1083     if( p_pgrm == NULL )
1084         return VLC_EGENERIC;
1085
1086     if( p_pgrm->i_es )
1087     {
1088         msg_Dbg( p_input, "can't delete program %d which still has %i ES",
1089                  i_group, p_pgrm->i_es );
1090         return VLC_EGENERIC;
1091     }
1092
1093     TAB_REMOVE( p_sys->i_pgrm, p_sys->pgrm, p_pgrm );
1094
1095     /* If program is selected we need to unselect it */
1096     if( p_sys->p_pgrm == p_pgrm )
1097         p_sys->p_pgrm = NULL;
1098
1099     input_clock_Delete( p_pgrm->p_clock );
1100
1101     free( p_pgrm->psz_name );
1102     free( p_pgrm->psz_now_playing );
1103     free( p_pgrm->psz_publisher );
1104     free( p_pgrm );
1105
1106     /* Update "program" variable */
1107     input_SendEventProgramDel( p_input, i_group );
1108
1109     return VLC_SUCCESS;
1110 }
1111
1112 /* EsOutProgramFind
1113  */
1114 static es_out_pgrm_t *EsOutProgramFind( es_out_t *p_out, int i_group )
1115 {
1116     es_out_sys_t *p_sys = p_out->p_sys;
1117
1118     for( int i = 0; i < p_sys->i_pgrm; i++ )
1119     {
1120         if( p_sys->pgrm[i]->i_id == i_group )
1121             return p_sys->pgrm[i];
1122     }
1123     return EsOutProgramAdd( p_out, i_group );
1124 }
1125
1126 /* EsOutProgramMeta:
1127  */
1128 static char *EsOutProgramGetMetaName( es_out_pgrm_t *p_pgrm )
1129 {
1130     char *psz = NULL;
1131     if( p_pgrm->psz_name )
1132     {
1133         if( asprintf( &psz, _("%s [%s %d]"), p_pgrm->psz_name, _("Program"), p_pgrm->i_id ) == -1 )
1134             return NULL;
1135     }
1136     else
1137     {
1138         if( asprintf( &psz, "%s %d", _("Program"), p_pgrm->i_id ) == -1 )
1139             return NULL;
1140     }
1141     return psz;
1142 }
1143
1144 static void EsOutProgramMeta( es_out_t *out, int i_group, const vlc_meta_t *p_meta )
1145 {
1146     es_out_sys_t      *p_sys = out->p_sys;
1147     es_out_pgrm_t     *p_pgrm;
1148     input_thread_t    *p_input = p_sys->p_input;
1149     const char        *psz_title = NULL;
1150     const char        *psz_provider = NULL;
1151     int i;
1152
1153     msg_Dbg( p_input, "EsOutProgramMeta: number=%d", i_group );
1154
1155     /* Check against empty meta data (empty for what we handle) */
1156     if( !vlc_meta_Get( p_meta, vlc_meta_Title) &&
1157         !vlc_meta_Get( p_meta, vlc_meta_NowPlaying) &&
1158         !vlc_meta_Get( p_meta, vlc_meta_Publisher) &&
1159         vlc_meta_GetExtraCount( p_meta ) <= 0 )
1160     {
1161         return;
1162     }
1163     /* Find program */
1164     if( !EsOutIsProgramVisible( out, i_group ) )
1165         return;
1166     p_pgrm = EsOutProgramFind( out, i_group );
1167     if( !p_pgrm )
1168         return;
1169
1170     /* */
1171     psz_title = vlc_meta_Get( p_meta, vlc_meta_Title);
1172     psz_provider = vlc_meta_Get( p_meta, vlc_meta_Publisher);
1173
1174     /* Update the description text of the program */
1175     if( psz_title && *psz_title )
1176     {
1177         if( !p_pgrm->psz_name || strcmp( p_pgrm->psz_name, psz_title ) )
1178         {
1179             char *psz_cat = EsOutProgramGetMetaName( p_pgrm );
1180
1181             /* Remove old entries */
1182             input_Control( p_input, INPUT_DEL_INFO, psz_cat, NULL );
1183             /* TODO update epg name ?
1184              * TODO update scrambled info name ? */
1185             free( psz_cat );
1186         }
1187         free( p_pgrm->psz_name );
1188         p_pgrm->psz_name = strdup( psz_title );
1189
1190         char *psz_text;
1191         if( psz_provider && *psz_provider )
1192         {
1193             if( asprintf( &psz_text, "%s [%s]", psz_title, psz_provider ) < 0 )
1194                 psz_text = NULL;
1195         }
1196         else
1197         {
1198             psz_text = strdup( psz_title );
1199         }
1200
1201         /* ugly but it works */
1202         if( psz_text )
1203         {
1204             input_SendEventProgramDel( p_input, i_group );
1205             input_SendEventProgramAdd( p_input, i_group, psz_text );
1206             if( p_sys->p_pgrm == p_pgrm )
1207                 input_SendEventProgramSelect( p_input, i_group );
1208             free( psz_text );
1209         }
1210     }
1211
1212     /* */
1213     char **ppsz_all_keys = vlc_meta_CopyExtraNames(p_meta );
1214
1215     info_category_t *p_cat = NULL;
1216     if( psz_provider || ( ppsz_all_keys[0] && *ppsz_all_keys[0] ) )
1217     {
1218         char *psz_cat = EsOutProgramGetMetaName( p_pgrm );
1219         if( psz_cat )
1220             p_cat = info_category_New( psz_cat );
1221         free( psz_cat );
1222     }
1223
1224     for( i = 0; ppsz_all_keys[i]; i++ )
1225     {
1226         if( p_cat )
1227             info_category_AddInfo( p_cat, vlc_gettext(ppsz_all_keys[i]), "%s",
1228                                    vlc_meta_GetExtra( p_meta, ppsz_all_keys[i] ) );
1229         free( ppsz_all_keys[i] );
1230     }
1231     free( ppsz_all_keys );
1232
1233     if( psz_provider )
1234     {
1235         if( p_sys->p_pgrm == p_pgrm )
1236         {
1237             input_item_SetPublisher( p_input->p->p_item, psz_provider );
1238             input_SendEventMeta( p_input );
1239         }
1240         if( p_cat )
1241             info_category_AddInfo( p_cat, vlc_meta_TypeToLocalizedString(vlc_meta_Publisher),
1242                                    "%s",psz_provider );
1243     }
1244     if( p_cat )
1245         input_Control( p_input, INPUT_MERGE_INFOS, p_cat );
1246 }
1247
1248 static void EsOutProgramEpg( es_out_t *out, int i_group, const vlc_epg_t *p_epg )
1249 {
1250     es_out_sys_t      *p_sys = out->p_sys;
1251     input_thread_t    *p_input = p_sys->p_input;
1252     input_item_t      *p_item = p_input->p->p_item;
1253     es_out_pgrm_t     *p_pgrm;
1254     char *psz_cat;
1255
1256     /* Find program */
1257     if( !EsOutIsProgramVisible( out, i_group ) )
1258         return;
1259     p_pgrm = EsOutProgramFind( out, i_group );
1260     if( !p_pgrm )
1261         return;
1262
1263     /* Update info */
1264     psz_cat = EsOutProgramGetMetaName( p_pgrm );
1265     msg_Dbg( p_input, "EsOutProgramEpg: number=%d name=%s", i_group, psz_cat );
1266
1267     /* Merge EPG */
1268     vlc_epg_t epg;
1269
1270     epg = *p_epg;
1271     epg.psz_name = psz_cat;
1272
1273     input_item_SetEpg( p_item, &epg );
1274     input_SendEventMetaEpg( p_sys->p_input );
1275
1276     /* Update now playing */
1277     free( p_pgrm->psz_now_playing );
1278     p_pgrm->psz_now_playing = NULL;
1279
1280     vlc_mutex_lock( &p_item->lock );
1281     for( int i = 0; i < p_item->i_epg; i++ )
1282     {
1283         const vlc_epg_t *p_tmp = p_item->pp_epg[i];
1284
1285         if( p_tmp->psz_name && !strcmp(p_tmp->psz_name, psz_cat) )
1286         {
1287             if( p_tmp->p_current && p_tmp->p_current->psz_name && *p_tmp->p_current->psz_name )
1288                 p_pgrm->psz_now_playing = strdup( p_tmp->p_current->psz_name );
1289             break;
1290         }
1291     }
1292     vlc_mutex_unlock( &p_item->lock );
1293
1294     if( p_pgrm == p_sys->p_pgrm )
1295     {
1296         input_item_SetNowPlaying( p_input->p->p_item, p_pgrm->psz_now_playing );
1297         input_SendEventMeta( p_input );
1298     }
1299
1300     if( p_pgrm->psz_now_playing )
1301     {
1302         input_Control( p_input, INPUT_ADD_INFO, psz_cat,
1303             vlc_meta_TypeToLocalizedString(vlc_meta_NowPlaying),
1304             p_pgrm->psz_now_playing );
1305     }
1306     else
1307     {
1308         input_Control( p_input, INPUT_DEL_INFO, psz_cat,
1309             vlc_meta_TypeToLocalizedString(vlc_meta_NowPlaying) );
1310     }
1311
1312     free( psz_cat );
1313 }
1314
1315 static void EsOutProgramUpdateScrambled( es_out_t *p_out, es_out_pgrm_t *p_pgrm )
1316 {
1317     es_out_sys_t    *p_sys = p_out->p_sys;
1318     input_thread_t  *p_input = p_sys->p_input;
1319     bool b_scrambled = false;
1320
1321     for( int i = 0; i < p_sys->i_es; i++ )
1322     {
1323         if( p_sys->es[i]->p_pgrm == p_pgrm && p_sys->es[i]->b_scrambled )
1324         {
1325             b_scrambled = true;
1326             break;
1327         }
1328     }
1329     if( !p_pgrm->b_scrambled == !b_scrambled )
1330         return;
1331
1332     p_pgrm->b_scrambled = b_scrambled;
1333     char *psz_cat = EsOutProgramGetMetaName( p_pgrm );
1334
1335     if( b_scrambled )
1336         input_Control( p_input, INPUT_ADD_INFO, psz_cat, _("Scrambled"), _("Yes") );
1337     else
1338         input_Control( p_input, INPUT_DEL_INFO, psz_cat, _("Scrambled") );
1339
1340     input_SendEventProgramScrambled( p_input, p_pgrm->i_id, b_scrambled );
1341 }
1342
1343 static void EsOutMeta( es_out_t *p_out, const vlc_meta_t *p_meta )
1344 {
1345     es_out_sys_t    *p_sys = p_out->p_sys;
1346     input_thread_t  *p_input = p_sys->p_input;
1347
1348     input_item_t *p_item = input_GetItem( p_input );
1349
1350     char *psz_title = NULL;
1351     char *psz_arturl = input_item_GetArtURL( p_item );
1352
1353     vlc_mutex_lock( &p_item->lock );
1354
1355     if( vlc_meta_Get( p_meta, vlc_meta_Title ) && !p_item->b_fixed_name )
1356         psz_title = strdup( vlc_meta_Get( p_meta, vlc_meta_Title ) );
1357
1358     vlc_meta_Merge( p_item->p_meta, p_meta );
1359
1360     if( !psz_arturl || *psz_arturl == '\0' )
1361     {
1362         const char *psz_tmp = vlc_meta_Get( p_item->p_meta, vlc_meta_ArtworkURL );
1363         if( psz_tmp )
1364             psz_arturl = strdup( psz_tmp );
1365     }
1366     vlc_mutex_unlock( &p_item->lock );
1367
1368     if( psz_arturl && *psz_arturl )
1369     {
1370         input_item_SetArtURL( p_item, psz_arturl );
1371
1372         if( !strncmp( psz_arturl, "attachment://", strlen("attachment") ) )
1373         {
1374             /* Don't look for art cover if sout
1375              * XXX It can change when sout has meta data support */
1376             if( p_input->p->p_sout && !p_input->b_preparsing )
1377                 input_item_SetArtURL( p_item, "" );
1378             else
1379                 input_ExtractAttachmentAndCacheArt( p_input );
1380         }
1381     }
1382     free( psz_arturl );
1383
1384     if( psz_title )
1385     {
1386         input_item_SetName( p_item, psz_title );
1387         free( psz_title );
1388     }
1389     input_item_SetPreparsed( p_item, true );
1390
1391     input_SendEventMeta( p_input );
1392     /* TODO handle sout meta ? */
1393 }
1394
1395 /* EsOutAdd:
1396  *  Add an es_out
1397  */
1398 static es_out_id_t *EsOutAdd( es_out_t *out, const es_format_t *fmt )
1399 {
1400     es_out_sys_t      *p_sys = out->p_sys;
1401     input_thread_t    *p_input = p_sys->p_input;
1402
1403     if( fmt->i_group < 0 )
1404     {
1405         msg_Err( p_input, "invalid group number" );
1406         return NULL;
1407     }
1408
1409     es_out_id_t   *es = malloc( sizeof( *es ) );
1410     es_out_pgrm_t *p_pgrm;
1411     int i;
1412
1413     if( !es )
1414         return NULL;
1415
1416     vlc_mutex_lock( &p_sys->lock );
1417
1418     /* Search the program */
1419     p_pgrm = EsOutProgramFind( out, fmt->i_group );
1420     if( !p_pgrm )
1421     {
1422         vlc_mutex_unlock( &p_sys->lock );
1423         free( es );
1424         return NULL;
1425     }
1426
1427     /* Increase ref count for program */
1428     p_pgrm->i_es++;
1429
1430     /* Set up ES */
1431     es->p_pgrm = p_pgrm;
1432     es_format_Copy( &es->fmt, fmt );
1433     if( es->fmt.i_id < 0 )
1434         es->fmt.i_id = out->p_sys->i_id;
1435     if( !es->fmt.i_original_fourcc )
1436         es->fmt.i_original_fourcc = es->fmt.i_codec;
1437     if( es->fmt.i_cat == AUDIO_ES )
1438         es->fmt.i_codec = vlc_fourcc_GetCodecAudio( es->fmt.i_codec,
1439                                                     es->fmt.audio.i_bitspersample );
1440     else
1441         es->fmt.i_codec = vlc_fourcc_GetCodec( es->fmt.i_cat,
1442                                                es->fmt.i_codec );
1443
1444     es->i_id = es->fmt.i_id;
1445     es->i_meta_id = out->p_sys->i_id;
1446     es->b_scrambled = false;
1447
1448     switch( es->fmt.i_cat )
1449     {
1450     case AUDIO_ES:
1451     {
1452         audio_replay_gain_t rg;
1453
1454         es->i_channel = p_sys->i_audio;
1455
1456         memset( &rg, 0, sizeof(rg) );
1457         vlc_mutex_lock( &p_input->p->p_item->lock );
1458         vlc_audio_replay_gain_MergeFromMeta( &rg, p_input->p->p_item->p_meta );
1459         vlc_mutex_unlock( &p_input->p->p_item->lock );
1460
1461         for( i = 0; i < AUDIO_REPLAY_GAIN_MAX; i++ )
1462         {
1463             if( !es->fmt.audio_replay_gain.pb_peak[i] )
1464             {
1465                 es->fmt.audio_replay_gain.pb_peak[i] = rg.pb_peak[i];
1466                 es->fmt.audio_replay_gain.pf_peak[i] = rg.pf_peak[i];
1467             }
1468             if( !es->fmt.audio_replay_gain.pb_gain[i] )
1469             {
1470                 es->fmt.audio_replay_gain.pb_gain[i] = rg.pb_gain[i];
1471                 es->fmt.audio_replay_gain.pf_gain[i] = rg.pf_gain[i];
1472             }
1473         }
1474         break;
1475     }
1476
1477     case VIDEO_ES:
1478         es->i_channel = p_sys->i_video;
1479         if( es->fmt.video.i_frame_rate && es->fmt.video.i_frame_rate_base )
1480             vlc_ureduce( &es->fmt.video.i_frame_rate,
1481                          &es->fmt.video.i_frame_rate_base,
1482                          es->fmt.video.i_frame_rate,
1483                          es->fmt.video.i_frame_rate_base, 0 );
1484         break;
1485
1486     case SPU_ES:
1487         es->i_channel = p_sys->i_sub;
1488         break;
1489
1490     default:
1491         es->i_channel = 0;
1492         break;
1493     }
1494     es->psz_language = LanguageGetName( es->fmt.psz_language ); /* remember so we only need to do it once */
1495     es->psz_language_code = LanguageGetCode( es->fmt.psz_language );
1496     es->p_dec = NULL;
1497     es->p_dec_record = NULL;
1498     for( i = 0; i < 4; i++ )
1499         es->pb_cc_present[i] = false;
1500     es->p_master = NULL;
1501
1502     if( es->p_pgrm == p_sys->p_pgrm )
1503         EsOutESVarUpdate( out, es, false );
1504
1505     /* Select it if needed */
1506     EsOutSelect( out, es, false );
1507
1508
1509     TAB_APPEND( out->p_sys->i_es, out->p_sys->es, es );
1510     p_sys->i_id++;  /* always incremented */
1511     switch( es->fmt.i_cat )
1512     {
1513         case AUDIO_ES:
1514             p_sys->i_audio++;
1515             break;
1516         case SPU_ES:
1517             p_sys->i_sub++;
1518             break;
1519         case VIDEO_ES:
1520             p_sys->i_video++;
1521             break;
1522     }
1523
1524     EsOutUpdateInfo( out, es, &es->fmt, NULL );
1525
1526     if( es->b_scrambled )
1527         EsOutProgramUpdateScrambled( out, es->p_pgrm );
1528
1529     vlc_mutex_unlock( &p_sys->lock );
1530
1531     return es;
1532 }
1533
1534 static bool EsIsSelected( es_out_id_t *es )
1535 {
1536     if( es->p_master )
1537     {
1538         bool b_decode = false;
1539         if( es->p_master->p_dec )
1540         {
1541             int i_channel = EsOutGetClosedCaptionsChannel( es->fmt.i_codec );
1542             if( i_channel != -1 )
1543                 input_DecoderGetCcState( es->p_master->p_dec, &b_decode, i_channel );
1544         }
1545         return b_decode;
1546     }
1547     else
1548     {
1549         return es->p_dec != NULL;
1550     }
1551 }
1552 static void EsCreateDecoder( es_out_t *out, es_out_id_t *p_es )
1553 {
1554     es_out_sys_t   *p_sys = out->p_sys;
1555     input_thread_t *p_input = p_sys->p_input;
1556
1557     p_es->p_dec = input_DecoderNew( p_input, &p_es->fmt, p_es->p_pgrm->p_clock, p_input->p->p_sout );
1558     if( p_es->p_dec )
1559     {
1560         if( p_sys->b_buffering )
1561             input_DecoderStartBuffering( p_es->p_dec );
1562
1563         if( !p_es->p_master && p_sys->p_sout_record )
1564         {
1565             p_es->p_dec_record = input_DecoderNew( p_input, &p_es->fmt, p_es->p_pgrm->p_clock, p_sys->p_sout_record );
1566             if( p_es->p_dec_record && p_sys->b_buffering )
1567                 input_DecoderStartBuffering( p_es->p_dec_record );
1568         }
1569     }
1570
1571     EsOutDecoderChangeDelay( out, p_es );
1572 }
1573 static void EsDestroyDecoder( es_out_t *out, es_out_id_t *p_es )
1574 {
1575     VLC_UNUSED(out);
1576
1577     if( !p_es->p_dec )
1578         return;
1579
1580     input_DecoderDelete( p_es->p_dec );
1581     p_es->p_dec = NULL;
1582
1583     if( p_es->p_dec_record )
1584     {
1585         input_DecoderDelete( p_es->p_dec_record );
1586         p_es->p_dec_record = NULL;
1587     }
1588 }
1589
1590 static void EsSelect( es_out_t *out, es_out_id_t *es )
1591 {
1592     es_out_sys_t   *p_sys = out->p_sys;
1593     input_thread_t *p_input = p_sys->p_input;
1594
1595     if( EsIsSelected( es ) )
1596     {
1597         msg_Warn( p_input, "ES 0x%x is already selected", es->i_id );
1598         return;
1599     }
1600
1601     if( es->p_master )
1602     {
1603         int i_channel;
1604         if( !es->p_master->p_dec )
1605             return;
1606
1607         i_channel = EsOutGetClosedCaptionsChannel( es->fmt.i_codec );
1608         if( i_channel == -1 || input_DecoderSetCcState( es->p_master->p_dec, true, i_channel ) )
1609             return;
1610     }
1611     else
1612     {
1613         const bool b_sout = p_input->p->p_sout != NULL;
1614         if( es->fmt.i_cat == VIDEO_ES || es->fmt.i_cat == SPU_ES )
1615         {
1616             if( !var_GetBool( p_input, b_sout ? "sout-video" : "video" ) )
1617             {
1618                 msg_Dbg( p_input, "video is disabled, not selecting ES 0x%x",
1619                          es->i_id );
1620                 return;
1621             }
1622         }
1623         else if( es->fmt.i_cat == AUDIO_ES )
1624         {
1625             if( !var_GetBool( p_input, b_sout ? "sout-audio" : "audio" ) )
1626             {
1627                 msg_Dbg( p_input, "audio is disabled, not selecting ES 0x%x",
1628                          es->i_id );
1629                 return;
1630             }
1631         }
1632         if( es->fmt.i_cat == SPU_ES )
1633         {
1634             if( !var_GetBool( p_input, b_sout ? "sout-spu" : "spu" ) )
1635             {
1636                 msg_Dbg( p_input, "spu is disabled, not selecting ES 0x%x",
1637                          es->i_id );
1638                 return;
1639             }
1640         }
1641
1642         EsCreateDecoder( out, es );
1643
1644         if( es->p_dec == NULL || es->p_pgrm != p_sys->p_pgrm )
1645             return;
1646     }
1647
1648     /* Mark it as selected */
1649     input_SendEventEsSelect( p_input, es->fmt.i_cat, es->i_id );
1650     input_SendEventTeletextSelect( p_input, EsFmtIsTeletext( &es->fmt ) ? es->i_id : -1 );
1651 }
1652
1653 static void EsUnselect( es_out_t *out, es_out_id_t *es, bool b_update )
1654 {
1655     es_out_sys_t   *p_sys = out->p_sys;
1656     input_thread_t *p_input = p_sys->p_input;
1657
1658     if( !EsIsSelected( es ) )
1659     {
1660         msg_Warn( p_input, "ES 0x%x is already unselected", es->i_id );
1661         return;
1662     }
1663
1664     if( es->p_master )
1665     {
1666         if( es->p_master->p_dec )
1667         {
1668             int i_channel = EsOutGetClosedCaptionsChannel( es->fmt.i_codec );
1669             if( i_channel != -1 )
1670                 input_DecoderSetCcState( es->p_master->p_dec, false, i_channel );
1671         }
1672     }
1673     else
1674     {
1675         const int i_spu_id = var_GetInteger( p_input, "spu-es");
1676         int i;
1677         for( i = 0; i < 4; i++ )
1678         {
1679             if( !es->pb_cc_present[i] || !es->pp_cc_es[i] )
1680                 continue;
1681
1682             if( i_spu_id == es->pp_cc_es[i]->i_id )
1683             {
1684                 /* Force unselection of the CC */
1685                 input_SendEventEsSelect( p_input, SPU_ES, -1 );
1686             }
1687             EsOutDel( out, es->pp_cc_es[i] );
1688
1689             es->pb_cc_present[i] = false;
1690         }
1691         EsDestroyDecoder( out, es );
1692     }
1693
1694     if( !b_update )
1695         return;
1696
1697     /* Mark it as unselected */
1698     input_SendEventEsSelect( p_input, es->fmt.i_cat, -1 );
1699     if( EsFmtIsTeletext( &es->fmt ) )
1700         input_SendEventTeletextSelect( p_input, -1 );
1701 }
1702
1703 /**
1704  * Select an ES given the current mode
1705  * XXX: you need to take a the lock before (stream.stream_lock)
1706  *
1707  * \param out The es_out structure
1708  * \param es es_out_id structure
1709  * \param b_force ...
1710  * \return nothing
1711  */
1712 static void EsOutSelect( es_out_t *out, es_out_id_t *es, bool b_force )
1713 {
1714     es_out_sys_t      *p_sys = out->p_sys;
1715
1716     int i_cat = es->fmt.i_cat;
1717
1718     if( !p_sys->b_active ||
1719         ( !b_force && es->fmt.i_priority < 0 ) )
1720     {
1721         return;
1722     }
1723
1724     if( p_sys->i_mode == ES_OUT_MODE_ALL || b_force )
1725     {
1726         if( !EsIsSelected( es ) )
1727             EsSelect( out, es );
1728     }
1729     else if( p_sys->i_mode == ES_OUT_MODE_PARTIAL )
1730     {
1731         char *prgms = var_GetNonEmptyString( p_sys->p_input, "programs" );
1732         if( prgms != NULL )
1733         {
1734             char *buf;
1735
1736             for ( const char *prgm = strtok_r( prgms, ",", &buf );
1737                   prgm != NULL;
1738                   prgm = strtok_r( NULL, ",", &buf ) )
1739             {
1740                 if( atoi( prgm ) == es->p_pgrm->i_id || b_force )
1741                 {
1742                     if( !EsIsSelected( es ) )
1743                         EsSelect( out, es );
1744                     break;
1745                 }
1746             }
1747             free( prgms );
1748         }
1749     }
1750     else if( p_sys->i_mode == ES_OUT_MODE_AUTO )
1751     {
1752         int i_wanted  = -1;
1753
1754         if( es->p_pgrm != p_sys->p_pgrm )
1755             return;
1756
1757         if( i_cat == AUDIO_ES )
1758         {
1759             int idx1 = LanguageArrayIndex( p_sys->ppsz_audio_language,
1760                                      es->psz_language_code );
1761
1762             if( p_sys->p_es_audio &&
1763                 p_sys->p_es_audio->fmt.i_priority >= es->fmt.i_priority )
1764             {
1765                 int idx2 = LanguageArrayIndex( p_sys->ppsz_audio_language,
1766                                          p_sys->p_es_audio->psz_language_code );
1767
1768                 if( idx1 < 0 || ( idx2 >= 0 && idx2 <= idx1 ) )
1769                     return;
1770                 i_wanted = es->i_channel;
1771             }
1772             else
1773             {
1774                 /* Select audio if (no audio selected yet)
1775                  * - no audio-language
1776                  * - no audio code for the ES
1777                  * - audio code in the requested list */
1778                 if( idx1 >= 0 ||
1779                     !strcmp( es->psz_language_code, "??" ) ||
1780                     !p_sys->ppsz_audio_language )
1781                     i_wanted = es->i_channel;
1782             }
1783
1784             if( p_sys->i_audio_last >= 0 )
1785                 i_wanted = p_sys->i_audio_last;
1786
1787             if( p_sys->i_audio_id >= 0 )
1788             {
1789                 if( es->i_id == p_sys->i_audio_id )
1790                     i_wanted = es->i_channel;
1791                 else
1792                     return;
1793             }
1794         }
1795         else if( i_cat == SPU_ES )
1796         {
1797             int idx1 = LanguageArrayIndex( p_sys->ppsz_sub_language,
1798                                      es->psz_language_code );
1799
1800             if( p_sys->p_es_sub &&
1801                 p_sys->p_es_sub->fmt.i_priority >= es->fmt.i_priority )
1802             {
1803                 int idx2 = LanguageArrayIndex( p_sys->ppsz_sub_language,
1804                                          p_sys->p_es_sub->psz_language_code );
1805
1806                 msg_Dbg( p_sys->p_input, "idx1=%d(%s) idx2=%d(%s)",
1807                         idx1, es->psz_language_code, idx2,
1808                         p_sys->p_es_sub->psz_language_code );
1809
1810                 if( idx1 < 0 || ( idx2 >= 0 && idx2 <= idx1 ) )
1811                     return;
1812                 /* We found a SPU that matches our language request */
1813                 i_wanted  = es->i_channel;
1814             }
1815             else if( idx1 >= 0 )
1816             {
1817                 msg_Dbg( p_sys->p_input, "idx1=%d(%s)",
1818                         idx1, es->psz_language_code );
1819
1820                 i_wanted  = es->i_channel;
1821             }
1822             else if( p_sys->i_default_sub_id >= 0 )
1823             {
1824                 if( es->i_id == p_sys->i_default_sub_id )
1825                     i_wanted = es->i_channel;
1826             }
1827
1828             if( p_sys->i_sub_last >= 0 )
1829                 i_wanted  = p_sys->i_sub_last;
1830
1831             if( p_sys->i_sub_id >= 0 )
1832             {
1833                 if( es->i_id == p_sys->i_sub_id )
1834                     i_wanted = es->i_channel;
1835                 else
1836                     return;
1837             }
1838         }
1839         else if( i_cat == VIDEO_ES )
1840         {
1841             i_wanted  = es->i_channel;
1842         }
1843
1844         if( i_wanted == es->i_channel && !EsIsSelected( es ) )
1845             EsSelect( out, es );
1846     }
1847
1848     /* FIXME TODO handle priority here */
1849     if( EsIsSelected( es ) )
1850     {
1851         if( i_cat == AUDIO_ES )
1852         {
1853             if( p_sys->i_mode == ES_OUT_MODE_AUTO &&
1854                 p_sys->p_es_audio &&
1855                 p_sys->p_es_audio != es &&
1856                 EsIsSelected( p_sys->p_es_audio ) )
1857             {
1858                 EsUnselect( out, p_sys->p_es_audio, false );
1859             }
1860             p_sys->p_es_audio = es;
1861         }
1862         else if( i_cat == SPU_ES )
1863         {
1864             if( p_sys->i_mode == ES_OUT_MODE_AUTO &&
1865                 p_sys->p_es_sub &&
1866                 p_sys->p_es_sub != es &&
1867                 EsIsSelected( p_sys->p_es_sub ) )
1868             {
1869                 EsUnselect( out, p_sys->p_es_sub, false );
1870             }
1871             p_sys->p_es_sub = es;
1872         }
1873         else if( i_cat == VIDEO_ES )
1874         {
1875             p_sys->p_es_video = es;
1876         }
1877     }
1878 }
1879
1880 /**
1881  * Send a block for the given es_out
1882  *
1883  * \param out the es_out to send from
1884  * \param es the es_out_id
1885  * \param p_block the data block to send
1886  */
1887 static int EsOutSend( es_out_t *out, es_out_id_t *es, block_t *p_block )
1888 {
1889     es_out_sys_t   *p_sys = out->p_sys;
1890     input_thread_t *p_input = p_sys->p_input;
1891
1892     if( libvlc_stats( p_input ) )
1893     {
1894         uint64_t i_total;
1895
1896         vlc_mutex_lock( &p_input->p->counters.counters_lock );
1897         stats_Update( p_input->p->counters.p_demux_read,
1898                       p_block->i_buffer, &i_total );
1899         stats_Update( p_input->p->counters.p_demux_bitrate, i_total, NULL );
1900
1901         /* Update number of corrupted data packats */
1902         if( p_block->i_flags & BLOCK_FLAG_CORRUPTED )
1903         {
1904             stats_Update( p_input->p->counters.p_demux_corrupted, 1, NULL );
1905         }
1906         /* Update number of discontinuities */
1907         if( p_block->i_flags & BLOCK_FLAG_DISCONTINUITY )
1908         {
1909             stats_Update( p_input->p->counters.p_demux_discontinuity, 1, NULL );
1910         }
1911         vlc_mutex_unlock( &p_input->p->counters.counters_lock );
1912     }
1913
1914     vlc_mutex_lock( &p_sys->lock );
1915
1916     /* Mark preroll blocks */
1917     if( p_sys->i_preroll_end >= 0 )
1918     {
1919         int64_t i_date = p_block->i_pts;
1920         if( p_block->i_pts <= VLC_TS_INVALID )
1921             i_date = p_block->i_dts;
1922
1923         if( i_date < p_sys->i_preroll_end )
1924             p_block->i_flags |= BLOCK_FLAG_PREROLL;
1925     }
1926
1927     if( !es->p_dec )
1928     {
1929         block_Release( p_block );
1930         vlc_mutex_unlock( &p_sys->lock );
1931         return VLC_SUCCESS;
1932     }
1933
1934     /* Check for sout mode */
1935     if( p_input->p->p_sout )
1936     {
1937         /* FIXME review this, proper lock may be missing */
1938         if( p_input->p->p_sout->i_out_pace_nocontrol > 0 &&
1939             p_input->p->b_out_pace_control )
1940         {
1941             msg_Dbg( p_input, "switching to sync mode" );
1942             p_input->p->b_out_pace_control = false;
1943         }
1944         else if( p_input->p->p_sout->i_out_pace_nocontrol <= 0 &&
1945                  !p_input->p->b_out_pace_control )
1946         {
1947             msg_Dbg( p_input, "switching to async mode" );
1948             p_input->p->b_out_pace_control = true;
1949         }
1950     }
1951
1952     /* Decode */
1953     if( es->p_dec_record )
1954     {
1955         block_t *p_dup = block_Duplicate( p_block );
1956         if( p_dup )
1957             input_DecoderDecode( es->p_dec_record, p_dup,
1958                                  p_input->p->b_out_pace_control );
1959     }
1960     input_DecoderDecode( es->p_dec, p_block,
1961                          p_input->p->b_out_pace_control );
1962
1963     es_format_t fmt_dsc;
1964     vlc_meta_t  *p_meta_dsc;
1965     if( input_DecoderHasFormatChanged( es->p_dec, &fmt_dsc, &p_meta_dsc ) )
1966     {
1967         EsOutUpdateInfo( out, es, &fmt_dsc, p_meta_dsc );
1968
1969         es_format_Clean( &fmt_dsc );
1970         if( p_meta_dsc )
1971             vlc_meta_Delete( p_meta_dsc );
1972     }
1973
1974     /* Check CC status */
1975     bool pb_cc[4];
1976
1977     input_DecoderIsCcPresent( es->p_dec, pb_cc );
1978     for( int i = 0; i < 4; i++ )
1979     {
1980         es_format_t fmt;
1981
1982         if(  es->pb_cc_present[i] || !pb_cc[i] )
1983             continue;
1984         msg_Dbg( p_input, "Adding CC track %d for es[%d]", 1+i, es->i_id );
1985
1986         es_format_Init( &fmt, SPU_ES, EsOutFourccClosedCaptions[i] );
1987         fmt.i_group = es->fmt.i_group;
1988         if( asprintf( &fmt.psz_description,
1989                       _("Closed captions %u"), 1 + i ) == -1 )
1990             fmt.psz_description = NULL;
1991         es->pp_cc_es[i] = EsOutAdd( out, &fmt );
1992         es->pp_cc_es[i]->p_master = es;
1993         es_format_Clean( &fmt );
1994
1995         /* */
1996         es->pb_cc_present[i] = true;
1997     }
1998
1999     vlc_mutex_unlock( &p_sys->lock );
2000
2001     return VLC_SUCCESS;
2002 }
2003
2004 /*****************************************************************************
2005  * EsOutDel:
2006  *****************************************************************************/
2007 static void EsOutDel( es_out_t *out, es_out_id_t *es )
2008 {
2009     es_out_sys_t *p_sys = out->p_sys;
2010     bool b_reselect = false;
2011     int i;
2012
2013     vlc_mutex_lock( &p_sys->lock );
2014
2015     /* We don't try to reselect */
2016     if( es->p_dec )
2017     {
2018         while( vlc_object_alive(p_sys->p_input) && !p_sys->b_buffering && es->p_dec )
2019         {
2020             if( input_DecoderIsEmpty( es->p_dec ) &&
2021                 ( !es->p_dec_record || input_DecoderIsEmpty( es->p_dec_record ) ))
2022                 break;
2023             /* FIXME there should be a way to have auto deleted es, but there will be
2024              * a problem when another codec of the same type is created (mainly video) */
2025             msleep( 20*1000 );
2026         }
2027         EsUnselect( out, es, es->p_pgrm == p_sys->p_pgrm );
2028     }
2029
2030     if( es->p_pgrm == p_sys->p_pgrm )
2031         EsOutESVarUpdate( out, es, true );
2032
2033     TAB_REMOVE( p_sys->i_es, p_sys->es, es );
2034
2035     /* Update program */
2036     es->p_pgrm->i_es--;
2037     if( es->p_pgrm->i_es == 0 )
2038         msg_Dbg( p_sys->p_input, "Program doesn't contain anymore ES" );
2039
2040     if( es->b_scrambled )
2041         EsOutProgramUpdateScrambled( out, es->p_pgrm );
2042
2043     /* */
2044     if( p_sys->p_es_audio == es || p_sys->p_es_video == es ||
2045         p_sys->p_es_sub == es ) b_reselect = true;
2046
2047     if( p_sys->p_es_audio == es ) p_sys->p_es_audio = NULL;
2048     if( p_sys->p_es_video == es ) p_sys->p_es_video = NULL;
2049     if( p_sys->p_es_sub   == es ) p_sys->p_es_sub   = NULL;
2050
2051     switch( es->fmt.i_cat )
2052     {
2053         case AUDIO_ES:
2054             p_sys->i_audio--;
2055             break;
2056         case SPU_ES:
2057             p_sys->i_sub--;
2058             break;
2059         case VIDEO_ES:
2060             p_sys->i_video--;
2061             break;
2062     }
2063
2064     /* Re-select another track when needed */
2065     if( b_reselect )
2066     {
2067         for( i = 0; i < p_sys->i_es; i++ )
2068         {
2069             if( es->fmt.i_cat == p_sys->es[i]->fmt.i_cat )
2070                 EsOutSelect( out, p_sys->es[i], false );
2071         }
2072     }
2073
2074     free( es->psz_language );
2075     free( es->psz_language_code );
2076
2077     es_format_Clean( &es->fmt );
2078
2079     vlc_mutex_unlock( &p_sys->lock );
2080
2081     free( es );
2082 }
2083
2084 /**
2085  * Control query handler
2086  *
2087  * \param out the es_out to control
2088  * \param i_query A es_out query as defined in include/ninput.h
2089  * \param args a variable list of arguments for the query
2090  * \return VLC_SUCCESS or an error code
2091  */
2092 static int EsOutControlLocked( es_out_t *out, int i_query, va_list args )
2093 {
2094     es_out_sys_t *p_sys = out->p_sys;
2095
2096     switch( i_query )
2097     {
2098     case ES_OUT_SET_ES_STATE:
2099     {
2100         es_out_id_t *es = va_arg( args, es_out_id_t * );
2101         bool b = va_arg( args, int );
2102         if( b && !EsIsSelected( es ) )
2103         {
2104             EsSelect( out, es );
2105             return EsIsSelected( es ) ? VLC_SUCCESS : VLC_EGENERIC;
2106         }
2107         else if( !b && EsIsSelected( es ) )
2108         {
2109             EsUnselect( out, es, es->p_pgrm == p_sys->p_pgrm );
2110             return VLC_SUCCESS;
2111         }
2112         return VLC_SUCCESS;
2113     }
2114
2115     case ES_OUT_GET_ES_STATE:
2116     {
2117         es_out_id_t *es = va_arg( args, es_out_id_t * );
2118         bool *pb = va_arg( args, bool * );
2119
2120         *pb = EsIsSelected( es );
2121         return VLC_SUCCESS;
2122     }
2123
2124     case ES_OUT_GET_GROUP_FORCED:
2125     {
2126         int *pi_group = va_arg( args, int * );
2127         *pi_group = p_sys->i_group_id;
2128         return VLC_SUCCESS;
2129     }
2130
2131     case ES_OUT_SET_MODE:
2132     {
2133         const int i_mode = va_arg( args, int );
2134         assert( i_mode == ES_OUT_MODE_NONE || i_mode == ES_OUT_MODE_ALL ||
2135                 i_mode == ES_OUT_MODE_AUTO || i_mode == ES_OUT_MODE_PARTIAL ||
2136                 i_mode == ES_OUT_MODE_END );
2137
2138         if( i_mode != ES_OUT_MODE_NONE && !p_sys->b_active && p_sys->i_es > 0 )
2139         {
2140             /* XXX Terminate vout if there are tracks but no video one.
2141              * This one is not mandatory but is he earliest place where it
2142              * can be done */
2143             int i;
2144             for( i = 0; i < p_sys->i_es; i++ )
2145             {
2146                 es_out_id_t *p_es = p_sys->es[i];
2147                 if( p_es->fmt.i_cat == VIDEO_ES )
2148                     break;
2149             }
2150             if( i >= p_sys->i_es )
2151                 input_resource_TerminateVout( p_sys->p_input->p->p_resource );
2152         }
2153         p_sys->b_active = i_mode != ES_OUT_MODE_NONE;
2154         p_sys->i_mode = i_mode;
2155
2156         /* Reapply policy mode */
2157         for( int i = 0; i < p_sys->i_es; i++ )
2158         {
2159             if( EsIsSelected( p_sys->es[i] ) )
2160                 EsUnselect( out, p_sys->es[i],
2161                             p_sys->es[i]->p_pgrm == p_sys->p_pgrm );
2162         }
2163         for( int i = 0; i < p_sys->i_es; i++ )
2164             EsOutSelect( out, p_sys->es[i], false );
2165         if( i_mode == ES_OUT_MODE_END )
2166             EsOutTerminate( out );
2167         return VLC_SUCCESS;
2168     }
2169
2170     case ES_OUT_SET_ES:
2171     case ES_OUT_RESTART_ES:
2172     {
2173         es_out_id_t *es = va_arg( args, es_out_id_t * );
2174
2175         int i_cat;
2176         if( es == NULL )
2177             i_cat = UNKNOWN_ES;
2178         else if( es == (es_out_id_t*)((uint8_t*)NULL+AUDIO_ES) )
2179             i_cat = AUDIO_ES;
2180         else if( es == (es_out_id_t*)((uint8_t*)NULL+VIDEO_ES) )
2181             i_cat = VIDEO_ES;
2182         else if( es == (es_out_id_t*)((uint8_t*)NULL+SPU_ES) )
2183             i_cat = SPU_ES;
2184         else
2185             i_cat = -1;
2186
2187         for( int i = 0; i < p_sys->i_es; i++ )
2188         {
2189             if( i_cat == -1 )
2190             {
2191                 if( es == p_sys->es[i] )
2192                 {
2193                     EsOutSelect( out, es, true );
2194                     break;
2195                 }
2196             }
2197             else
2198             {
2199                 if( i_cat == UNKNOWN_ES || p_sys->es[i]->fmt.i_cat == i_cat )
2200                 {
2201                     if( EsIsSelected( p_sys->es[i] ) )
2202                     {
2203                         if( i_query == ES_OUT_RESTART_ES )
2204                         {
2205                             if( p_sys->es[i]->p_dec )
2206                             {
2207                                 EsDestroyDecoder( out, p_sys->es[i] );
2208                                 EsCreateDecoder( out, p_sys->es[i] );
2209                             }
2210                         }
2211                         else
2212                         {
2213                             EsUnselect( out, p_sys->es[i],
2214                                         p_sys->es[i]->p_pgrm == p_sys->p_pgrm );
2215                         }
2216                     }
2217                 }
2218             }
2219         }
2220         return VLC_SUCCESS;
2221     }
2222
2223     case ES_OUT_SET_ES_DEFAULT:
2224     {
2225         es_out_id_t *es = va_arg( args, es_out_id_t * );
2226
2227         if( es == NULL )
2228         {
2229             /*p_sys->i_default_video_id = -1;*/
2230             /*p_sys->i_default_audio_id = -1;*/
2231             p_sys->i_default_sub_id = -1;
2232         }
2233         else if( es == (es_out_id_t*)((uint8_t*)NULL+AUDIO_ES) )
2234         {
2235             /*p_sys->i_default_video_id = -1;*/
2236         }
2237         else if( es == (es_out_id_t*)((uint8_t*)NULL+VIDEO_ES) )
2238         {
2239             /*p_sys->i_default_audio_id = -1;*/
2240         }
2241         else if( es == (es_out_id_t*)((uint8_t*)NULL+SPU_ES) )
2242         {
2243             p_sys->i_default_sub_id = -1;
2244         }
2245         else
2246         {
2247             /*if( es->fmt.i_cat == VIDEO_ES )
2248                 p_sys->i_default_video_id = es->i_id;
2249             else
2250             if( es->fmt.i_cat == AUDIO_ES )
2251                 p_sys->i_default_audio_id = es->i_id;
2252             else*/
2253             if( es->fmt.i_cat == SPU_ES )
2254                 p_sys->i_default_sub_id = es->i_id;
2255         }
2256         return VLC_SUCCESS;
2257     }
2258
2259     case ES_OUT_SET_PCR:
2260     case ES_OUT_SET_GROUP_PCR:
2261     {
2262         es_out_pgrm_t *p_pgrm = NULL;
2263         int            i_group = 0;
2264         int64_t        i_pcr;
2265
2266         /* Search program */
2267         if( i_query == ES_OUT_SET_PCR )
2268         {
2269             p_pgrm = p_sys->p_pgrm;
2270             if( !p_pgrm )
2271                 p_pgrm = EsOutProgramAdd( out, i_group );   /* Create it */
2272         }
2273         else
2274         {
2275             i_group = (int)va_arg( args, int );
2276             p_pgrm = EsOutProgramFind( out, i_group );
2277         }
2278         if( !p_pgrm )
2279             return VLC_EGENERIC;
2280
2281         i_pcr = (int64_t)va_arg( args, int64_t );
2282         if( i_pcr <= VLC_TS_INVALID )
2283         {
2284             msg_Err( p_sys->p_input, "Invalid PCR value in ES_OUT_SET_(GROUP_)PCR !" );
2285             return VLC_EGENERIC;
2286         }
2287
2288         /* TODO do not use mdate() but proper stream acquisition date */
2289         bool b_late;
2290         input_clock_Update( p_pgrm->p_clock, VLC_OBJECT(p_sys->p_input),
2291                             &b_late,
2292                             p_sys->p_input->p->b_can_pace_control || p_sys->b_buffering,
2293                             EsOutIsExtraBufferingAllowed( out ),
2294                             i_pcr, mdate() );
2295
2296         if( p_pgrm == p_sys->p_pgrm )
2297         {
2298             if( p_sys->b_buffering )
2299             {
2300                 /* Check buffering state on master clock update */
2301                 EsOutDecodersStopBuffering( out, false );
2302             }
2303             else if( b_late && ( !p_sys->p_input->p->p_sout ||
2304                                  !p_sys->p_input->p->b_out_pace_control ) )
2305             {
2306                 const mtime_t i_pts_delay_base = p_sys->i_pts_delay - p_sys->i_pts_jitter;
2307                 mtime_t i_pts_delay = input_clock_GetJitter( p_pgrm->p_clock );
2308
2309                 /* Avoid dangerously high value */
2310                 const mtime_t i_jitter_max = INT64_C(1000) * var_InheritInteger( p_sys->p_input, "clock-jitter" );
2311                 if( i_pts_delay > __MIN( i_pts_delay_base + i_jitter_max, INPUT_PTS_DELAY_MAX ) )
2312                 {
2313                     msg_Err( p_sys->p_input,
2314                              "ES_OUT_SET_(GROUP_)PCR  is called too late (jitter of %d ms ignored)",
2315                              (int)(i_pts_delay - i_pts_delay_base) / 1000 );
2316                     i_pts_delay = p_sys->i_pts_delay;
2317                 }
2318                 else
2319                 {
2320                     msg_Err( p_sys->p_input,
2321                              "ES_OUT_SET_(GROUP_)PCR  is called too late (pts_delay increased to %d ms)",
2322                              (int)(i_pts_delay/1000) );
2323                 }
2324
2325                 /* Force a rebufferization when we are too late */
2326
2327                 /* It is not really good, as we throw away already buffered data
2328                  * TODO have a mean to correctly reenter bufferization */
2329                 es_out_Control( out, ES_OUT_RESET_PCR );
2330
2331                 es_out_SetJitter( out, i_pts_delay_base, i_pts_delay - i_pts_delay_base, p_sys->i_cr_average );
2332             }
2333         }
2334         return VLC_SUCCESS;
2335     }
2336
2337     case ES_OUT_RESET_PCR:
2338         msg_Err( p_sys->p_input, "ES_OUT_RESET_PCR called" );
2339         EsOutChangePosition( out );
2340         return VLC_SUCCESS;
2341
2342     case ES_OUT_SET_GROUP:
2343     {
2344         int i = va_arg( args, int );
2345         for( int j = 0; j < p_sys->i_pgrm; j++ )
2346         {
2347             es_out_pgrm_t *p_pgrm = p_sys->pgrm[j];
2348             if( p_pgrm->i_id == i )
2349             {
2350                 EsOutProgramSelect( out, p_pgrm );
2351                 return VLC_SUCCESS;
2352             }
2353         }
2354         return VLC_EGENERIC;
2355     }
2356
2357     case ES_OUT_SET_ES_FMT:
2358     {
2359         /* This ain't pretty but is need by some demuxers (eg. Ogg )
2360          * to update the p_extra data */
2361         es_out_id_t *es = va_arg( args, es_out_id_t * );
2362         es_format_t *p_fmt = va_arg( args, es_format_t * );
2363         if( es == NULL )
2364             return VLC_EGENERIC;
2365
2366         if( p_fmt->i_extra )
2367         {
2368             es->fmt.i_extra = p_fmt->i_extra;
2369             es->fmt.p_extra = xrealloc( es->fmt.p_extra, p_fmt->i_extra );
2370             memcpy( es->fmt.p_extra, p_fmt->p_extra, p_fmt->i_extra );
2371
2372             if( !es->p_dec )
2373                 return VLC_SUCCESS;
2374 #if 1
2375             EsDestroyDecoder( out, es );
2376
2377             EsCreateDecoder( out, es );
2378 #else
2379             es->p_dec->fmt_in.i_extra = p_fmt->i_extra;
2380             es->p_dec->fmt_in.p_extra =
2381               xrealloc( es->p_dec->fmt_in.p_extra, p_fmt->i_extra );
2382             memcpy( es->p_dec->fmt_in.p_extra,
2383                     p_fmt->p_extra, p_fmt->i_extra );
2384 #endif
2385         }
2386
2387         return VLC_SUCCESS;
2388     }
2389
2390     case ES_OUT_SET_ES_SCRAMBLED_STATE:
2391     {
2392         es_out_id_t *es = va_arg( args, es_out_id_t * );
2393         bool b_scrambled = (bool)va_arg( args, int );
2394
2395         if( !es->b_scrambled != !b_scrambled )
2396         {
2397             es->b_scrambled = b_scrambled;
2398             EsOutProgramUpdateScrambled( out, es->p_pgrm );
2399         }
2400         return VLC_SUCCESS;
2401     }
2402
2403     case ES_OUT_SET_NEXT_DISPLAY_TIME:
2404     {
2405         const int64_t i_date = (int64_t)va_arg( args, int64_t );
2406
2407         if( i_date < 0 )
2408             return VLC_EGENERIC;
2409
2410         p_sys->i_preroll_end = i_date;
2411
2412         return VLC_SUCCESS;
2413     }
2414     case ES_OUT_SET_GROUP_META:
2415     {
2416         int i_group = (int)va_arg( args, int );
2417         const vlc_meta_t *p_meta = va_arg( args, const vlc_meta_t * );
2418
2419         EsOutProgramMeta( out, i_group, p_meta );
2420         return VLC_SUCCESS;
2421     }
2422     case ES_OUT_SET_GROUP_EPG:
2423     {
2424         int i_group = (int)va_arg( args, int );
2425         const vlc_epg_t *p_epg = va_arg( args, const vlc_epg_t * );
2426
2427         EsOutProgramEpg( out, i_group, p_epg );
2428         return VLC_SUCCESS;
2429     }
2430
2431     case ES_OUT_DEL_GROUP:
2432     {
2433         int i_group = (int)va_arg( args, int );
2434
2435         return EsOutProgramDel( out, i_group );
2436     }
2437
2438     case ES_OUT_SET_META:
2439     {
2440         const vlc_meta_t *p_meta = va_arg( args, const vlc_meta_t * );
2441
2442         EsOutMeta( out, p_meta );
2443         return VLC_SUCCESS;
2444     }
2445
2446     case ES_OUT_GET_WAKE_UP:
2447     {
2448         mtime_t *pi_wakeup = (mtime_t*)va_arg( args, mtime_t* );
2449         *pi_wakeup = EsOutGetWakeup( out );
2450         return VLC_SUCCESS;
2451     }
2452
2453     case ES_OUT_SET_ES_BY_ID:
2454     case ES_OUT_RESTART_ES_BY_ID:
2455     case ES_OUT_SET_ES_DEFAULT_BY_ID:
2456     {
2457         const int i_id = (int)va_arg( args, int );
2458         es_out_id_t *p_es = EsOutGetFromID( out, i_id );
2459         int i_new_query;
2460
2461         switch( i_query )
2462         {
2463         case ES_OUT_SET_ES_BY_ID:         i_new_query = ES_OUT_SET_ES; break;
2464         case ES_OUT_RESTART_ES_BY_ID:     i_new_query = ES_OUT_RESTART_ES; break;
2465         case ES_OUT_SET_ES_DEFAULT_BY_ID: i_new_query = ES_OUT_SET_ES_DEFAULT; break;
2466         default:
2467           assert(0);
2468         }
2469         /* TODO if the lock is made non recursive it should be changed */
2470         int i_ret = es_out_Control( out, i_new_query, p_es );
2471
2472         /* Clean up vout after user action (in active mode only).
2473          * FIXME it does not work well with multiple video windows */
2474         if( p_sys->b_active )
2475             input_resource_TerminateVout( p_sys->p_input->p->p_resource );
2476         return i_ret;
2477     }
2478
2479     case ES_OUT_GET_ES_OBJECTS_BY_ID:
2480     {
2481         const int i_id = va_arg( args, int );
2482         es_out_id_t *p_es = EsOutGetFromID( out, i_id );
2483         if( !p_es )
2484             return VLC_EGENERIC;
2485
2486         vlc_object_t    **pp_decoder = va_arg( args, vlc_object_t ** );
2487         vout_thread_t   **pp_vout    = va_arg( args, vout_thread_t ** );
2488         audio_output_t **pp_aout    = va_arg( args, audio_output_t ** );
2489         if( p_es->p_dec )
2490         {
2491             if( pp_decoder )
2492                 *pp_decoder = vlc_object_hold( p_es->p_dec );
2493             input_DecoderGetObjects( p_es->p_dec, pp_vout, pp_aout );
2494         }
2495         else
2496         {
2497             if( pp_decoder )
2498                 *pp_decoder = NULL;
2499             if( pp_vout )
2500                 *pp_vout = NULL;
2501             if( pp_aout )
2502                 *pp_aout = NULL;
2503         }
2504         return VLC_SUCCESS;
2505     }
2506
2507     case ES_OUT_GET_BUFFERING:
2508     {
2509         bool *pb = va_arg( args, bool* );
2510         *pb = p_sys->b_buffering;
2511         return VLC_SUCCESS;
2512     }
2513
2514     case ES_OUT_GET_EMPTY:
2515     {
2516         bool *pb = va_arg( args, bool* );
2517         *pb = EsOutDecodersIsEmpty( out );
2518         return VLC_SUCCESS;
2519     }
2520
2521     case ES_OUT_SET_DELAY:
2522     {
2523         const int i_cat = (int)va_arg( args, int );
2524         const mtime_t i_delay = (mtime_t)va_arg( args, mtime_t );
2525         EsOutSetDelay( out, i_cat, i_delay );
2526         return VLC_SUCCESS;
2527     }
2528
2529     case ES_OUT_SET_RECORD_STATE:
2530     {
2531         bool b = va_arg( args, int );
2532         return EsOutSetRecord( out, b );
2533     }
2534
2535     case ES_OUT_SET_PAUSE_STATE:
2536     {
2537         const bool b_source_paused = (bool)va_arg( args, int );
2538         const bool b_paused = (bool)va_arg( args, int );
2539         const mtime_t i_date = (mtime_t) va_arg( args, mtime_t );
2540
2541         assert( !b_source_paused == !b_paused );
2542         EsOutChangePause( out, b_paused, i_date );
2543
2544         return VLC_SUCCESS;
2545     }
2546
2547     case ES_OUT_SET_RATE:
2548     {
2549         const int i_src_rate = (int)va_arg( args, int );
2550         const int i_rate = (int)va_arg( args, int );
2551
2552         assert( i_src_rate == i_rate );
2553         EsOutChangeRate( out, i_rate );
2554
2555         return VLC_SUCCESS;
2556     }
2557
2558     case ES_OUT_SET_TIME:
2559     {
2560         const mtime_t i_date = (mtime_t)va_arg( args, mtime_t );
2561
2562         assert( i_date == -1 );
2563         EsOutChangePosition( out );
2564
2565         return VLC_SUCCESS;
2566     }
2567
2568     case ES_OUT_SET_FRAME_NEXT:
2569         EsOutFrameNext( out );
2570         return VLC_SUCCESS;
2571
2572     case ES_OUT_SET_TIMES:
2573     {
2574         double f_position = (double)va_arg( args, double );
2575         mtime_t i_time = (mtime_t)va_arg( args, mtime_t );
2576         mtime_t i_length = (mtime_t)va_arg( args, mtime_t );
2577
2578         input_SendEventLength( p_sys->p_input, i_length );
2579
2580         if( !p_sys->b_buffering )
2581         {
2582             mtime_t i_delay;
2583
2584             /* Fix for buffering delay */
2585             if( !p_sys->p_input->p->p_sout ||
2586                 !p_sys->p_input->p->b_out_pace_control )
2587                 i_delay = EsOutGetBuffering( out );
2588             else
2589                 i_delay = 0;
2590
2591             i_time -= i_delay;
2592             if( i_time < 0 )
2593                 i_time = 0;
2594
2595             if( i_length > 0 )
2596                 f_position -= (double)i_delay / i_length;
2597             if( f_position < 0 )
2598                 f_position = 0;
2599
2600             input_SendEventPosition( p_sys->p_input, f_position, i_time );
2601         }
2602         return VLC_SUCCESS;
2603     }
2604     case ES_OUT_SET_JITTER:
2605     {
2606         mtime_t i_pts_delay  = (mtime_t)va_arg( args, mtime_t );
2607         mtime_t i_pts_jitter = (mtime_t)va_arg( args, mtime_t );
2608         int     i_cr_average = (int)va_arg( args, int );
2609
2610         bool b_change_clock =
2611             i_pts_delay + i_pts_jitter != p_sys->i_pts_delay ||
2612             i_cr_average != p_sys->i_cr_average;
2613
2614         assert( i_pts_jitter >= 0 );
2615         p_sys->i_pts_delay  = i_pts_delay + i_pts_jitter;
2616         p_sys->i_pts_jitter = i_pts_jitter;
2617         p_sys->i_cr_average = i_cr_average;
2618
2619         for( int i = 0; i < p_sys->i_pgrm && b_change_clock; i++ )
2620             input_clock_SetJitter( p_sys->pgrm[i]->p_clock,
2621                                    i_pts_delay + i_pts_jitter, i_cr_average );
2622         return VLC_SUCCESS;
2623     }
2624
2625     case ES_OUT_GET_PCR_SYSTEM:
2626     {
2627         if( p_sys->b_buffering )
2628             return VLC_EGENERIC;
2629
2630         es_out_pgrm_t *p_pgrm = p_sys->p_pgrm;
2631         if( !p_pgrm )
2632             return VLC_EGENERIC;
2633
2634         mtime_t *pi_system = va_arg( args, mtime_t *);
2635         mtime_t *pi_delay  = va_arg( args, mtime_t *);
2636         input_clock_GetSystemOrigin( p_pgrm->p_clock, pi_system, pi_delay );
2637         return VLC_SUCCESS;
2638     }
2639
2640     case ES_OUT_MODIFY_PCR_SYSTEM:
2641     {
2642         if( p_sys->b_buffering )
2643             return VLC_EGENERIC;
2644
2645         es_out_pgrm_t *p_pgrm = p_sys->p_pgrm;
2646         if( !p_pgrm )
2647             return VLC_EGENERIC;
2648
2649         const bool    b_absolute = va_arg( args, int );
2650         const mtime_t i_system   = va_arg( args, mtime_t );
2651         input_clock_ChangeSystemOrigin( p_pgrm->p_clock, b_absolute, i_system );
2652         return VLC_SUCCESS;
2653     }
2654     case ES_OUT_SET_EOS:
2655     {
2656         for (int i = 0; i < p_sys->i_es; i++) {
2657             es_out_id_t *id = p_sys->es[i];
2658             decoder_t *p_dec = id->p_dec;
2659             if (!p_dec)
2660                 continue;
2661             block_t *p_block = block_Alloc(0);
2662             if( !p_block )
2663                 break;
2664
2665             p_block->i_flags |= BLOCK_FLAG_CORE_EOS;
2666             input_DecoderDecode(p_dec, p_block, false);
2667         }
2668         return VLC_SUCCESS;
2669     }
2670
2671     default:
2672         msg_Err( p_sys->p_input, "unknown query in es_out_Control" );
2673         return VLC_EGENERIC;
2674     }
2675 }
2676 static int EsOutControl( es_out_t *out, int i_query, va_list args )
2677 {
2678     es_out_sys_t *p_sys = out->p_sys;
2679     int i_ret;
2680
2681     vlc_mutex_lock( &p_sys->lock );
2682     i_ret = EsOutControlLocked( out, i_query, args );
2683     vlc_mutex_unlock( &p_sys->lock );
2684
2685     return i_ret;
2686 }
2687
2688 /****************************************************************************
2689  * LanguageGetName: try to expend iso639 into plain name
2690  ****************************************************************************/
2691 static char *LanguageGetName( const char *psz_code )
2692 {
2693     const iso639_lang_t *pl;
2694
2695     if( psz_code == NULL || !strcmp( psz_code, "und" ) )
2696     {
2697         return strdup( "" );
2698     }
2699
2700     if( strlen( psz_code ) == 2 )
2701     {
2702         pl = GetLang_1( psz_code );
2703     }
2704     else if( strlen( psz_code ) == 3 )
2705     {
2706         pl = GetLang_2B( psz_code );
2707         if( !strcmp( pl->psz_iso639_1, "??" ) )
2708         {
2709             pl = GetLang_2T( psz_code );
2710         }
2711     }
2712     else
2713     {
2714         return strdup( psz_code );
2715     }
2716
2717     if( !strcmp( pl->psz_iso639_1, "??" ) )
2718     {
2719        return strdup( psz_code );
2720     }
2721     else
2722     {
2723         return strdup( vlc_gettext(pl->psz_eng_name) );
2724     }
2725 }
2726
2727 /* Get a 2 char code */
2728 static char *LanguageGetCode( const char *psz_lang )
2729 {
2730     const iso639_lang_t *pl;
2731
2732     if( psz_lang == NULL || *psz_lang == '\0' )
2733         return strdup("??");
2734
2735     for( pl = p_languages; pl->psz_eng_name != NULL; pl++ )
2736     {
2737         if( !strcasecmp( pl->psz_eng_name, psz_lang ) ||
2738             !strcasecmp( pl->psz_iso639_1, psz_lang ) ||
2739             !strcasecmp( pl->psz_iso639_2T, psz_lang ) ||
2740             !strcasecmp( pl->psz_iso639_2B, psz_lang ) )
2741             return strdup( pl->psz_iso639_1 );
2742     }
2743
2744     return strdup("??");
2745 }
2746
2747 static char **LanguageSplit( const char *psz_langs, bool b_default_any )
2748 {
2749     char *psz_dup;
2750     char *psz_parser;
2751     char **ppsz = NULL;
2752     int i_psz = 0;
2753
2754     if( psz_langs == NULL ) return NULL;
2755
2756     psz_parser = psz_dup = strdup(psz_langs);
2757
2758     while( psz_parser && *psz_parser )
2759     {
2760         char *psz;
2761         char *psz_code;
2762
2763         psz = strchr(psz_parser, ',' );
2764         if( psz ) *psz++ = '\0';
2765
2766         if( !strcmp( psz_parser, "any" ) )
2767         {
2768             TAB_APPEND( i_psz, ppsz, strdup("any") );
2769         }
2770         else if( !strcmp( psz_parser, "none" ) )
2771         {
2772             TAB_APPEND( i_psz, ppsz, strdup("none") );
2773         }
2774         else
2775         {
2776             psz_code = LanguageGetCode( psz_parser );
2777             if( strcmp( psz_code, "??" ) )
2778             {
2779                 TAB_APPEND( i_psz, ppsz, psz_code );
2780             }
2781             else
2782             {
2783                 free( psz_code );
2784             }
2785         }
2786
2787         psz_parser = psz;
2788     }
2789
2790     if( i_psz )
2791     {
2792         if( b_default_any && strcmp( ppsz[i_psz - 1], "none" ) )
2793             TAB_APPEND( i_psz, ppsz, strdup("any") );
2794         TAB_APPEND( i_psz, ppsz, NULL );
2795     }
2796
2797     free( psz_dup );
2798     return ppsz;
2799 }
2800
2801 static int LanguageArrayIndex( char **ppsz_langs, char *psz_lang )
2802 {
2803     if( !ppsz_langs || !psz_lang )
2804         return -1;
2805
2806     for( int i = 0; ppsz_langs[i]; i++ )
2807     {
2808         if( !strcasecmp( ppsz_langs[i], psz_lang ) ||
2809             !strcasecmp( ppsz_langs[i], "any" ) )
2810             return i;
2811         if( !strcasecmp( ppsz_langs[i], "none" ) )
2812             break;
2813     }
2814
2815     return -1;
2816 }
2817
2818 /****************************************************************************
2819  * EsOutUpdateInfo:
2820  * - add meta info to the playlist item
2821  ****************************************************************************/
2822 static void EsOutUpdateInfo( es_out_t *out, es_out_id_t *es, const es_format_t *fmt, const vlc_meta_t *p_meta )
2823 {
2824     es_out_sys_t   *p_sys = out->p_sys;
2825     input_thread_t *p_input = p_sys->p_input;
2826     const es_format_t *p_fmt_es = &es->fmt;
2827     lldiv_t         div;
2828
2829     if( es->fmt.i_cat == fmt->i_cat )
2830     {
2831         es_format_t update = *fmt;
2832         update.i_id = es->i_meta_id;
2833         update.i_codec = es->fmt.i_codec;
2834         update.i_original_fourcc = es->fmt.i_original_fourcc;
2835         input_item_UpdateTracksInfo(input_GetItem(p_input), &update);
2836     }
2837
2838     /* Create category */
2839     char psz_cat[128];
2840     snprintf( psz_cat, sizeof(psz_cat),_("Stream %d"), es->i_meta_id );
2841     info_category_t *p_cat = info_category_New( psz_cat );
2842     if( !p_cat )
2843         return;
2844
2845     /* Add information */
2846     const char *psz_type;
2847     switch( fmt->i_cat )
2848     {
2849     case AUDIO_ES:
2850         psz_type = _("Audio");
2851         break;
2852     case VIDEO_ES:
2853         psz_type = _("Video");
2854         break;
2855     case SPU_ES:
2856         psz_type = _("Subtitle");
2857         break;
2858     default:
2859         psz_type = NULL;
2860         break;
2861     }
2862
2863     if( psz_type )
2864         info_category_AddInfo( p_cat, _("Type"), "%s", psz_type );
2865
2866     if( es->i_meta_id != es->i_id )
2867         info_category_AddInfo( p_cat, _("Original ID"),
2868                        "%d", es->i_id );
2869
2870     const char *psz_codec_description =
2871         vlc_fourcc_GetDescription( p_fmt_es->i_cat, p_fmt_es->i_codec );
2872     const vlc_fourcc_t i_codec_fourcc = ( p_fmt_es->i_original_fourcc )?
2873                                p_fmt_es->i_original_fourcc : p_fmt_es->i_codec;
2874     if( psz_codec_description )
2875         info_category_AddInfo( p_cat, _("Codec"), "%s (%.4s)",
2876                                psz_codec_description, (char*)&i_codec_fourcc );
2877     else
2878         info_category_AddInfo( p_cat, _("Codec"), "%.4s",
2879                                (char*)&i_codec_fourcc );
2880
2881     if( es->psz_language && *es->psz_language )
2882         info_category_AddInfo( p_cat, _("Language"), "%s",
2883                                es->psz_language );
2884     if( fmt->psz_description && *fmt->psz_description )
2885         info_category_AddInfo( p_cat, _("Description"), "%s",
2886                                fmt->psz_description );
2887
2888     switch( fmt->i_cat )
2889     {
2890     case AUDIO_ES:
2891         info_category_AddInfo( p_cat, _("Type"), _("Audio") );
2892
2893         if( fmt->audio.i_physical_channels )
2894             info_category_AddInfo( p_cat, _("Channels"), "%s",
2895                                    _( aout_FormatPrintChannels( &fmt->audio ) ) );
2896
2897         if( fmt->audio.i_rate > 0 )
2898         {
2899             info_category_AddInfo( p_cat, _("Sample rate"), _("%u Hz"),
2900                                    fmt->audio.i_rate );
2901             /* FIXME that should be removed or improved ! (used by text/strings.c) */
2902             var_SetInteger( p_input, "sample-rate", fmt->audio.i_rate );
2903         }
2904
2905         unsigned int i_bitspersample = fmt->audio.i_bitspersample;
2906         if( i_bitspersample <= 0 )
2907             i_bitspersample = aout_BitsPerSample( p_fmt_es->i_codec );
2908         if( i_bitspersample > 0 )
2909             info_category_AddInfo( p_cat, _("Bits per sample"), "%u",
2910                                    i_bitspersample );
2911
2912         if( fmt->i_bitrate > 0 )
2913         {
2914             info_category_AddInfo( p_cat, _("Bitrate"), _("%u kb/s"),
2915                                    fmt->i_bitrate / 1000 );
2916             /* FIXME that should be removed or improved ! (used by text/strings.c) */
2917             var_SetInteger( p_input, "bit-rate", fmt->i_bitrate );
2918         }
2919         for( int i = 0; i < AUDIO_REPLAY_GAIN_MAX; i++ )
2920         {
2921             const audio_replay_gain_t *p_rg = &fmt->audio_replay_gain;
2922             if( !p_rg->pb_gain[i] )
2923                 continue;
2924             const char *psz_name;
2925             if( i == AUDIO_REPLAY_GAIN_TRACK )
2926                 psz_name = _("Track replay gain");
2927             else
2928                 psz_name = _("Album replay gain");
2929             info_category_AddInfo( p_cat, psz_name, _("%.2f dB"),
2930                                    p_rg->pf_gain[i] );
2931         }
2932         break;
2933
2934     case VIDEO_ES:
2935         info_category_AddInfo( p_cat, _("Type"), _("Video") );
2936
2937         if( fmt->video.i_width > 0 && fmt->video.i_height > 0 )
2938             info_category_AddInfo( p_cat, _("Resolution"), "%ux%u",
2939                                    fmt->video.i_width, fmt->video.i_height );
2940
2941         if( fmt->video.i_visible_width > 0 &&
2942             fmt->video.i_visible_height > 0 )
2943             info_category_AddInfo( p_cat, _("Display resolution"), "%ux%u",
2944                                    fmt->video.i_visible_width,
2945                                    fmt->video.i_visible_height);
2946        if( fmt->video.i_frame_rate > 0 &&
2947            fmt->video.i_frame_rate_base > 0 )
2948        {
2949            div = lldiv( (float)fmt->video.i_frame_rate /
2950                                fmt->video.i_frame_rate_base * 1000000,
2951                                1000000 );
2952            if( div.rem > 0 )
2953                info_category_AddInfo( p_cat, _("Frame rate"), "%"PRId64".%06u",
2954                                       div.quot, (unsigned int )div.rem );
2955            else
2956                info_category_AddInfo( p_cat, _("Frame rate"), "%"PRId64,
2957                                       div.quot );
2958        }
2959        if( fmt->i_codec != p_fmt_es->i_codec )
2960        {
2961            const char *psz_chroma_description =
2962                 vlc_fourcc_GetDescription( VIDEO_ES, fmt->i_codec );
2963            if( psz_chroma_description )
2964                info_category_AddInfo( p_cat, _("Decoded format"), "%s",
2965                                       psz_chroma_description );
2966        }
2967
2968        break;
2969
2970     case SPU_ES:
2971         info_category_AddInfo( p_cat, _("Type"), _("Subtitle") );
2972         break;
2973
2974     default:
2975         break;
2976     }
2977
2978     /* Append generic meta */
2979     if( p_meta )
2980     {
2981         char **ppsz_all_keys = vlc_meta_CopyExtraNames( p_meta );
2982         for( int i = 0; ppsz_all_keys && ppsz_all_keys[i]; i++ )
2983         {
2984             char *psz_key = ppsz_all_keys[i];
2985             const char *psz_value = vlc_meta_GetExtra( p_meta, psz_key );
2986
2987             if( psz_value )
2988                 info_category_AddInfo( p_cat, vlc_gettext(psz_key), "%s",
2989                                        vlc_gettext(psz_value) );
2990             free( psz_key );
2991         }
2992         free( ppsz_all_keys );
2993     }
2994     /* */
2995     input_Control( p_input, INPUT_REPLACE_INFOS, p_cat );
2996 }