]> git.sesse.net Git - vlc/blob - src/audio_output/input.c
Remove aout_filter_t.b_discontinuity
[vlc] / src / audio_output / input.c
1 /*****************************************************************************
2  * input.c : internal management of input streams for the audio output
3  *****************************************************************************
4  * Copyright (C) 2002-2007 the VideoLAN team
5  * $Id$
6  *
7  * Authors: Christophe Massiot <massiot@via.ecp.fr>
8  *
9  * This program is free software; you can redistribute it and/or modify
10  * it under the terms of the GNU General Public License as published by
11  * the Free Software Foundation; either version 2 of the License, or
12  * (at your option) any later version.
13  *
14  * This program is distributed in the hope that it will be useful,
15  * but WITHOUT ANY WARRANTY; without even the implied warranty of
16  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
17  * GNU General Public License for more details.
18  *
19  * You should have received a copy of the GNU General Public License
20  * along with this program; if not, write to the Free Software
21  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston MA 02110-1301, USA.
22  *****************************************************************************/
23
24 /*****************************************************************************
25  * Preamble
26  *****************************************************************************/
27
28 #ifdef HAVE_CONFIG_H
29 # include "config.h"
30 #endif
31
32 #include <assert.h>
33
34 #include <vlc_common.h>
35
36 #include <stdio.h>
37 #include <string.h>
38 #include <math.h>
39 #include <assert.h>
40
41 #include <vlc_input.h>
42 #include <vlc_vout.h>                  /* for vout_Request */
43
44 #include <vlc_aout.h>
45 #include <libvlc.h>
46
47 #include "aout_internal.h"
48
49 #define AOUT_ASSERT_MIXER_LOCKED vlc_assert_locked( &p_aout->mixer_lock )
50 #define AOUT_ASSERT_INPUT_LOCKED vlc_assert_locked( &p_input->lock )
51
52 static void inputFailure( aout_instance_t *, aout_input_t *, const char * );
53 static void inputDrop( aout_input_t *, aout_buffer_t * );
54 static void inputResamplingStop( aout_input_t *p_input );
55
56 static int VisualizationCallback( vlc_object_t *, char const *,
57                                   vlc_value_t, vlc_value_t, void * );
58 static int EqualizerCallback( vlc_object_t *, char const *,
59                               vlc_value_t, vlc_value_t, void * );
60 static int ReplayGainCallback( vlc_object_t *, char const *,
61                                vlc_value_t, vlc_value_t, void * );
62 static void ReplayGainSelect( aout_instance_t *, aout_input_t * );
63
64 static vout_thread_t *RequestVout( void *,
65                                    vout_thread_t *, video_format_t *, bool );
66
67 /*****************************************************************************
68  * aout_InputNew : allocate a new input and rework the filter pipeline
69  *****************************************************************************/
70 int aout_InputNew( aout_instance_t * p_aout, aout_input_t * p_input, const aout_request_vout_t *p_request_vout )
71 {
72     audio_sample_format_t chain_input_format;
73     audio_sample_format_t chain_output_format;
74     vlc_value_t val, text;
75     char *psz_filters, *psz_visual, *psz_scaletempo;
76     int i_visual;
77
78     aout_FormatPrint( p_aout, "input", &p_input->input );
79
80     p_input->i_nb_resamplers = p_input->i_nb_filters = 0;
81
82     /* Prepare FIFO. */
83     aout_FifoInit( p_aout, &p_input->mixer.fifo, p_aout->mixer_format.i_rate );
84     p_input->mixer.begin = NULL;
85
86     /* */
87     if( p_request_vout )
88     {
89         p_input->request_vout = *p_request_vout;
90     }
91     else
92     {
93         p_input->request_vout.pf_request_vout = RequestVout;
94         p_input->request_vout.p_private = p_aout;
95     }
96
97     /* Prepare format structure */
98     chain_input_format  = p_input->input;
99     chain_output_format = p_aout->mixer_format;
100     chain_output_format.i_rate = p_input->input.i_rate;
101     aout_FormatPrepare( &chain_output_format );
102
103     /* Now add user filters */
104     if( var_Type( p_aout, "visual" ) == 0 )
105     {
106         var_Create( p_aout, "visual", VLC_VAR_STRING | VLC_VAR_HASCHOICE );
107         text.psz_string = _("Visualizations");
108         var_Change( p_aout, "visual", VLC_VAR_SETTEXT, &text, NULL );
109         val.psz_string = (char*)""; text.psz_string = _("Disable");
110         var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
111         val.psz_string = (char*)"spectrometer"; text.psz_string = _("Spectrometer");
112         var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
113         val.psz_string = (char*)"scope"; text.psz_string = _("Scope");
114         var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
115         val.psz_string = (char*)"spectrum"; text.psz_string = _("Spectrum");
116         var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
117         val.psz_string = (char*)"vuMeter"; text.psz_string = _("Vu meter");
118         var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
119
120         /* Look for goom plugin */
121         if( module_exists( "goom" ) )
122         {
123             val.psz_string = (char*)"goom"; text.psz_string = (char*)"Goom";
124             var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
125         }
126
127         /* Look for libprojectM plugin */
128         if( module_exists( "projectm" ) )
129         {
130             val.psz_string = (char*)"projectm"; text.psz_string = (char*)"projectM";
131             var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
132         }
133
134         if( var_Get( p_aout, "effect-list", &val ) == VLC_SUCCESS )
135         {
136             var_SetString( p_aout, "visual", val.psz_string );
137             free( val.psz_string );
138         }
139         var_AddCallback( p_aout, "visual", VisualizationCallback, NULL );
140     }
141
142     if( var_Type( p_aout, "equalizer" ) == 0 )
143     {
144         module_config_t *p_config;
145         int i;
146
147         p_config = config_FindConfig( VLC_OBJECT(p_aout), "equalizer-preset" );
148         if( p_config && p_config->i_list )
149         {
150                var_Create( p_aout, "equalizer",
151                            VLC_VAR_STRING | VLC_VAR_HASCHOICE );
152             text.psz_string = _("Equalizer");
153             var_Change( p_aout, "equalizer", VLC_VAR_SETTEXT, &text, NULL );
154
155             val.psz_string = (char*)""; text.psz_string = _("Disable");
156             var_Change( p_aout, "equalizer", VLC_VAR_ADDCHOICE, &val, &text );
157
158             for( i = 0; i < p_config->i_list; i++ )
159             {
160                 val.psz_string = (char *)p_config->ppsz_list[i];
161                 text.psz_string = (char *)p_config->ppsz_list_text[i];
162                 var_Change( p_aout, "equalizer", VLC_VAR_ADDCHOICE,
163                             &val, &text );
164             }
165
166             var_AddCallback( p_aout, "equalizer", EqualizerCallback, NULL );
167         }
168     }
169
170     if( var_Type( p_aout, "audio-filter" ) == 0 )
171     {
172         var_Create( p_aout, "audio-filter",
173                     VLC_VAR_STRING | VLC_VAR_DOINHERIT );
174         text.psz_string = _("Audio filters");
175         var_Change( p_aout, "audio-filter", VLC_VAR_SETTEXT, &text, NULL );
176     }
177     if( var_Type( p_aout, "audio-visual" ) == 0 )
178     {
179         var_Create( p_aout, "audio-visual",
180                     VLC_VAR_STRING | VLC_VAR_DOINHERIT );
181         text.psz_string = _("Audio visualizations");
182         var_Change( p_aout, "audio-visual", VLC_VAR_SETTEXT, &text, NULL );
183     }
184
185     if( var_Type( p_aout, "audio-replay-gain-mode" ) == 0 )
186     {
187         module_config_t *p_config;
188         int i;
189
190         p_config = config_FindConfig( VLC_OBJECT(p_aout), "audio-replay-gain-mode" );
191         if( p_config && p_config->i_list )
192         {
193             var_Create( p_aout, "audio-replay-gain-mode",
194                         VLC_VAR_STRING | VLC_VAR_DOINHERIT );
195
196             text.psz_string = _("Replay gain");
197             var_Change( p_aout, "audio-replay-gain-mode", VLC_VAR_SETTEXT, &text, NULL );
198
199             for( i = 0; i < p_config->i_list; i++ )
200             {
201                 val.psz_string = (char *)p_config->ppsz_list[i];
202                 text.psz_string = (char *)p_config->ppsz_list_text[i];
203                 var_Change( p_aout, "audio-replay-gain-mode", VLC_VAR_ADDCHOICE,
204                             &val, &text );
205             }
206
207             var_AddCallback( p_aout, "audio-replay-gain-mode", ReplayGainCallback, NULL );
208         }
209     }
210     if( var_Type( p_aout, "audio-replay-gain-preamp" ) == 0 )
211     {
212         var_Create( p_aout, "audio-replay-gain-preamp",
213                     VLC_VAR_FLOAT | VLC_VAR_DOINHERIT );
214     }
215     if( var_Type( p_aout, "audio-replay-gain-default" ) == 0 )
216     {
217         var_Create( p_aout, "audio-replay-gain-default",
218                     VLC_VAR_FLOAT | VLC_VAR_DOINHERIT );
219     }
220     if( var_Type( p_aout, "audio-replay-gain-peak-protection" ) == 0 )
221     {
222         var_Create( p_aout, "audio-replay-gain-peak-protection",
223                     VLC_VAR_BOOL | VLC_VAR_DOINHERIT );
224     }
225     if( var_Type( p_aout, "audio-time-stretch" ) == 0 )
226     {
227         var_Create( p_aout, "audio-time-stretch",
228                     VLC_VAR_BOOL | VLC_VAR_DOINHERIT );
229     }
230
231     psz_filters = var_GetString( p_aout, "audio-filter" );
232     psz_visual = var_GetString( p_aout, "audio-visual");
233     psz_scaletempo = var_GetBool( p_aout, "audio-time-stretch" ) ? strdup( "scaletempo" ) : NULL;
234
235     p_input->b_recycle_vout = psz_visual && *psz_visual;
236
237     /* parse user filter lists */
238     char *const ppsz_array[] = { psz_scaletempo, psz_filters, psz_visual };
239     p_input->p_playback_rate_filter = NULL;
240
241     for( i_visual = 0; i_visual < 3 && !AOUT_FMT_NON_LINEAR(&chain_output_format); i_visual++ )
242     {
243         char *psz_next = NULL;
244         char *psz_parser = ppsz_array[i_visual];
245
246         if( psz_parser == NULL || !*psz_parser )
247             continue;
248
249         while( psz_parser && *psz_parser )
250         {
251             aout_filter_t * p_filter = NULL;
252
253             if( p_input->i_nb_filters >= AOUT_MAX_FILTERS )
254             {
255                 msg_Dbg( p_aout, "max filters reached (%d)", AOUT_MAX_FILTERS );
256                 break;
257             }
258
259             while( *psz_parser == ' ' && *psz_parser == ':' )
260             {
261                 psz_parser++;
262             }
263             if( ( psz_next = strchr( psz_parser , ':'  ) ) )
264             {
265                 *psz_next++ = '\0';
266             }
267             if( *psz_parser =='\0' )
268             {
269                 break;
270             }
271
272             /* Create a VLC object */
273             static const char typename[] = "audio filter";
274             p_filter = vlc_custom_create( p_aout, sizeof(*p_filter),
275                                           VLC_OBJECT_GENERIC, typename );
276             if( p_filter == NULL )
277             {
278                 msg_Err( p_aout, "cannot add user filter %s (skipped)",
279                          psz_parser );
280                 psz_parser = psz_next;
281                 continue;
282             }
283
284             vlc_object_attach( p_filter , p_aout );
285
286             p_filter->p_owner = malloc( sizeof(*p_filter->p_owner) );
287             p_filter->p_owner->p_aout  = p_aout;
288             p_filter->p_owner->p_input = p_input;
289
290             /* request format */
291             memcpy( &p_filter->fmt_in.audio, &chain_output_format,
292                     sizeof(audio_sample_format_t) );
293             memcpy( &p_filter->fmt_out.audio, &chain_output_format,
294                     sizeof(audio_sample_format_t) );
295
296
297             /* try to find the requested filter */
298             if( i_visual == 2 ) /* this can only be a visualization module */
299             {
300                 p_filter->p_module = module_need( p_filter, "visualization",
301                                                   psz_parser, true );
302             }
303             else /* this can be a audio filter module as well as a visualization module */
304             {
305                 p_filter->p_module = module_need( p_filter, "audio filter",
306                                               psz_parser, true );
307
308                 if ( p_filter->p_module == NULL )
309                 {
310                     /* if the filter requested a special format, retry */
311                     if ( !( AOUT_FMTS_IDENTICAL( &p_filter->fmt_in.audio,
312                                                  &chain_input_format )
313                             && AOUT_FMTS_IDENTICAL( &p_filter->fmt_out.audio,
314                                                     &chain_output_format ) ) )
315                     {
316                         aout_FormatPrepare( &p_filter->fmt_in.audio );
317                         aout_FormatPrepare( &p_filter->fmt_out.audio );
318                         p_filter->p_module = module_need( p_filter,
319                                                           "audio filter",
320                                                           psz_parser, true );
321                     }
322                     /* try visual filters */
323                     else
324                     {
325                         memcpy( &p_filter->fmt_in.audio, &chain_output_format,
326                                 sizeof(audio_sample_format_t) );
327                         memcpy( &p_filter->fmt_out.audio, &chain_output_format,
328                                 sizeof(audio_sample_format_t) );
329                         p_filter->p_module = module_need( p_filter,
330                                                           "visualization",
331                                                           psz_parser, true );
332                     }
333                 }
334             }
335
336             /* failure */
337             if ( p_filter->p_module == NULL )
338             {
339                 msg_Err( p_aout, "cannot add user filter %s (skipped)",
340                          psz_parser );
341
342                 free( p_filter->p_owner );
343                 vlc_object_detach( p_filter );
344                 vlc_object_release( p_filter );
345
346                 psz_parser = psz_next;
347                 continue;
348             }
349
350             /* complete the filter chain if necessary */
351             if ( !AOUT_FMTS_IDENTICAL( &chain_input_format,
352                                        &p_filter->fmt_in.audio ) )
353             {
354                 if ( aout_FiltersCreatePipeline( p_aout, p_input->pp_filters,
355                                                  &p_input->i_nb_filters,
356                                                  &chain_input_format,
357                                                  &p_filter->fmt_in.audio ) < 0 )
358                 {
359                     msg_Err( p_aout, "cannot add user filter %s (skipped)",
360                              psz_parser );
361
362                     module_unneed( p_filter, p_filter->p_module );
363                     free( p_filter->p_owner );
364                     vlc_object_detach( p_filter );
365                     vlc_object_release( p_filter );
366
367                     psz_parser = psz_next;
368                     continue;
369                 }
370             }
371
372             /* success */
373             p_input->pp_filters[p_input->i_nb_filters++] = p_filter;
374             memcpy( &chain_input_format, &p_filter->fmt_out.audio,
375                     sizeof( audio_sample_format_t ) );
376
377             if( i_visual == 0 ) /* scaletempo */
378                 p_input->p_playback_rate_filter = p_filter;
379
380             /* next filter if any */
381             psz_parser = psz_next;
382         }
383     }
384     free( psz_visual );
385     free( psz_filters );
386     free( psz_scaletempo );
387
388     /* complete the filter chain if necessary */
389     if ( !AOUT_FMTS_IDENTICAL( &chain_input_format, &chain_output_format ) )
390     {
391         if ( aout_FiltersCreatePipeline( p_aout, p_input->pp_filters,
392                                          &p_input->i_nb_filters,
393                                          &chain_input_format,
394                                          &chain_output_format ) < 0 )
395         {
396             inputFailure( p_aout, p_input, "couldn't set an input pipeline" );
397             return -1;
398         }
399     }
400
401     /* Prepare hints for the buffer allocator. */
402     p_input->input_alloc.b_alloc = true;
403     p_input->input_alloc.i_bytes_per_sec = -1;
404
405     /* Create resamplers. */
406     if ( !AOUT_FMT_NON_LINEAR( &p_aout->mixer_format ) )
407     {
408         chain_output_format.i_rate = (__MAX(p_input->input.i_rate,
409                                             p_aout->mixer_format.i_rate)
410                                  * (100 + AOUT_MAX_RESAMPLING)) / 100;
411         if ( chain_output_format.i_rate == p_aout->mixer_format.i_rate )
412         {
413             /* Just in case... */
414             chain_output_format.i_rate++;
415         }
416         if ( aout_FiltersCreatePipeline( p_aout, p_input->pp_resamplers,
417                                          &p_input->i_nb_resamplers,
418                                          &chain_output_format,
419                                          &p_aout->mixer_format ) < 0 )
420         {
421             inputFailure( p_aout, p_input, "couldn't set a resampler pipeline");
422             return -1;
423         }
424
425         aout_FiltersHintBuffers( p_aout, p_input->pp_resamplers,
426                                  p_input->i_nb_resamplers,
427                                  &p_input->input_alloc );
428         p_input->input_alloc.b_alloc = true;
429
430         /* Setup the initial rate of the resampler */
431         p_input->pp_resamplers[0]->fmt_in.audio.i_rate = p_input->input.i_rate;
432     }
433     p_input->i_resampling_type = AOUT_RESAMPLING_NONE;
434
435     if( ! p_input->p_playback_rate_filter && p_input->i_nb_resamplers > 0 )
436     {
437         p_input->p_playback_rate_filter = p_input->pp_resamplers[0];
438     }
439
440     aout_FiltersHintBuffers( p_aout, p_input->pp_filters,
441                              p_input->i_nb_filters,
442                              &p_input->input_alloc );
443     p_input->input_alloc.b_alloc = true;
444
445     /* i_bytes_per_sec is still == -1 if no filters */
446     p_input->input_alloc.i_bytes_per_sec = __MAX(
447                                     p_input->input_alloc.i_bytes_per_sec,
448                                     (int)(p_input->input.i_bytes_per_frame
449                                      * p_input->input.i_rate
450                                      / p_input->input.i_frame_length) );
451
452     ReplayGainSelect( p_aout, p_input );
453
454     /* Success */
455     p_input->b_error = false;
456     p_input->b_restart = false;
457     p_input->i_last_input_rate = INPUT_RATE_DEFAULT;
458
459     return 0;
460 }
461
462 /*****************************************************************************
463  * aout_InputDelete : delete an input
464  *****************************************************************************
465  * This function must be entered with the mixer lock.
466  *****************************************************************************/
467 int aout_InputDelete( aout_instance_t * p_aout, aout_input_t * p_input )
468 {
469     AOUT_ASSERT_MIXER_LOCKED;
470     if ( p_input->b_error )
471         return 0;
472
473     /* XXX We need to update b_recycle_vout before calling aout_FiltersDestroyPipeline.
474      * FIXME They can be a race condition if audio-visual is updated between
475      * aout_InputDelete and aout_InputNew.
476      */
477     char *psz_visual = var_GetString( p_aout, "audio-visual");
478     p_input->b_recycle_vout = psz_visual && *psz_visual;
479     free( psz_visual );
480
481     aout_FiltersDestroyPipeline( p_aout, p_input->pp_filters,
482                                  p_input->i_nb_filters );
483     p_input->i_nb_filters = 0;
484     aout_FiltersDestroyPipeline( p_aout, p_input->pp_resamplers,
485                                  p_input->i_nb_resamplers );
486     p_input->i_nb_resamplers = 0;
487     aout_FifoDestroy( p_aout, &p_input->mixer.fifo );
488
489     return 0;
490 }
491
492 /*****************************************************************************
493  * aout_InputPlay : play a buffer
494  *****************************************************************************
495  * This function must be entered with the input lock.
496  *****************************************************************************/
497 /* XXX Do not activate it !! */
498 //#define AOUT_PROCESS_BEFORE_CHEKS
499 int aout_InputPlay( aout_instance_t * p_aout, aout_input_t * p_input,
500                     aout_buffer_t * p_buffer, int i_input_rate )
501 {
502     mtime_t start_date;
503     AOUT_ASSERT_INPUT_LOCKED;
504
505     if( p_input->b_restart )
506     {
507         aout_fifo_t fifo;
508         uint8_t     *p_first_byte_to_mix;
509         bool        b_paused;
510         mtime_t     i_pause_date;
511
512         aout_lock_mixer( p_aout );
513         aout_lock_input_fifos( p_aout );
514
515         /* A little trick to avoid loosing our input fifo and properties */
516
517         p_first_byte_to_mix = p_input->mixer.begin;
518         fifo = p_input->mixer.fifo;
519         b_paused = p_input->b_paused;
520         i_pause_date = p_input->i_pause_date;
521
522         aout_FifoInit( p_aout, &p_input->mixer.fifo, p_aout->mixer_format.i_rate );
523
524         aout_InputDelete( p_aout, p_input );
525
526         aout_InputNew( p_aout, p_input, &p_input->request_vout );
527         p_input->mixer.begin = p_first_byte_to_mix;
528         p_input->mixer.fifo = fifo;
529         p_input->b_paused = b_paused;
530         p_input->i_pause_date = i_pause_date;
531
532         aout_unlock_input_fifos( p_aout );
533         aout_unlock_mixer( p_aout );
534     }
535
536     if( i_input_rate != INPUT_RATE_DEFAULT && p_input->p_playback_rate_filter == NULL )
537     {
538         inputDrop( p_input, p_buffer );
539         return 0;
540     }
541
542 #ifdef AOUT_PROCESS_BEFORE_CHEKS
543     /* Run pre-filters. */
544     aout_FiltersPlay( p_aout, p_input->pp_filters, p_input->i_nb_filters,
545                       &p_buffer );
546
547     /* Actually run the resampler now. */
548     if ( p_input->i_nb_resamplers > 0 )
549     {
550         const mtime_t i_date = p_buffer->i_pts;
551         aout_FiltersPlay( p_aout, p_input->pp_resamplers,
552                           p_input->i_nb_resamplers,
553                           &p_buffer );
554     }
555
556     if( p_buffer->i_nb_samples <= 0 )
557     {
558         aout_BufferFree( p_buffer );
559         return 0;
560     }
561 #endif
562
563     /* Handle input rate change, but keep drift correction */
564     if( i_input_rate != p_input->i_last_input_rate )
565     {
566         unsigned int * const pi_rate = &p_input->p_playback_rate_filter->fmt_in.audio.i_rate;
567 #define F(r,ir) ( INPUT_RATE_DEFAULT * (r) / (ir) )
568         const int i_delta = *pi_rate - F(p_input->input.i_rate,p_input->i_last_input_rate);
569         *pi_rate = F(p_input->input.i_rate + i_delta, i_input_rate);
570 #undef F
571         p_input->i_last_input_rate = i_input_rate;
572     }
573
574     /* We don't care if someone changes the start date behind our back after
575      * this. We'll deal with that when pushing the buffer, and compensate
576      * with the next incoming buffer. */
577     aout_lock_input_fifos( p_aout );
578     start_date = aout_FifoNextStart( p_aout, &p_input->mixer.fifo );
579     aout_unlock_input_fifos( p_aout );
580
581     if ( start_date != 0 && start_date < mdate() )
582     {
583         /* The decoder is _very_ late. This can only happen if the user
584          * pauses the stream (or if the decoder is buggy, which cannot
585          * happen :). */
586         msg_Warn( p_aout, "computed PTS is out of range (%"PRId64"), "
587                   "clearing out", mdate() - start_date );
588         aout_lock_input_fifos( p_aout );
589         aout_FifoSet( p_aout, &p_input->mixer.fifo, 0 );
590         p_input->mixer.begin = NULL;
591         aout_unlock_input_fifos( p_aout );
592         if ( p_input->i_resampling_type != AOUT_RESAMPLING_NONE )
593             msg_Warn( p_aout, "timing screwed, stopping resampling" );
594         inputResamplingStop( p_input );
595         p_buffer->i_flags |= BLOCK_FLAG_DISCONTINUITY;
596         start_date = 0;
597     }
598
599     if ( p_buffer->i_pts < mdate() + AOUT_MIN_PREPARE_TIME )
600     {
601         /* The decoder gives us f*cked up PTS. It's its business, but we
602          * can't present it anyway, so drop the buffer. */
603         msg_Warn( p_aout, "PTS is out of range (%"PRId64"), dropping buffer",
604                   mdate() - p_buffer->i_pts );
605
606         inputDrop( p_input, p_buffer );
607         inputResamplingStop( p_input );
608         return 0;
609     }
610
611     /* If the audio drift is too big then it's not worth trying to resample
612      * the audio. */
613     mtime_t i_pts_tolerance = 3 * AOUT_PTS_TOLERANCE * i_input_rate / INPUT_RATE_DEFAULT;
614     if ( start_date != 0 &&
615          ( start_date < p_buffer->i_pts - i_pts_tolerance ) )
616     {
617         msg_Warn( p_aout, "audio drift is too big (%"PRId64"), clearing out",
618                   start_date - p_buffer->i_pts );
619         aout_lock_input_fifos( p_aout );
620         aout_FifoSet( p_aout, &p_input->mixer.fifo, 0 );
621         p_input->mixer.begin = NULL;
622         aout_unlock_input_fifos( p_aout );
623         if ( p_input->i_resampling_type != AOUT_RESAMPLING_NONE )
624             msg_Warn( p_aout, "timing screwed, stopping resampling" );
625         inputResamplingStop( p_input );
626         p_buffer->i_flags |= BLOCK_FLAG_DISCONTINUITY;
627         start_date = 0;
628     }
629     else if ( start_date != 0 &&
630               ( start_date > p_buffer->i_pts + i_pts_tolerance) )
631     {
632         msg_Warn( p_aout, "audio drift is too big (%"PRId64"), dropping buffer",
633                   start_date - p_buffer->i_pts );
634         inputDrop( p_input, p_buffer );
635         return 0;
636     }
637
638     if ( start_date == 0 ) start_date = p_buffer->i_pts;
639
640 #ifndef AOUT_PROCESS_BEFORE_CHEKS
641     /* Run pre-filters. */
642     aout_FiltersPlay( p_aout, p_input->pp_filters, p_input->i_nb_filters,
643                       &p_buffer );
644 #endif
645
646     /* Run the resampler if needed.
647      * We first need to calculate the output rate of this resampler. */
648     if ( ( p_input->i_resampling_type == AOUT_RESAMPLING_NONE ) &&
649          ( start_date < p_buffer->i_pts - AOUT_PTS_TOLERANCE
650            || start_date > p_buffer->i_pts + AOUT_PTS_TOLERANCE ) &&
651          p_input->i_nb_resamplers > 0 )
652     {
653         /* Can happen in several circumstances :
654          * 1. A problem at the input (clock drift)
655          * 2. A small pause triggered by the user
656          * 3. Some delay in the output stage, causing a loss of lip
657          *    synchronization
658          * Solution : resample the buffer to avoid a scratch.
659          */
660         mtime_t drift = p_buffer->i_pts - start_date;
661
662         p_input->i_resamp_start_date = mdate();
663         p_input->i_resamp_start_drift = (int)drift;
664
665         if ( drift > 0 )
666             p_input->i_resampling_type = AOUT_RESAMPLING_DOWN;
667         else
668             p_input->i_resampling_type = AOUT_RESAMPLING_UP;
669
670         msg_Warn( p_aout, "buffer is %"PRId64" %s, triggering %ssampling",
671                           drift > 0 ? drift : -drift,
672                           drift > 0 ? "in advance" : "late",
673                           drift > 0 ? "down" : "up");
674     }
675
676     if ( p_input->i_resampling_type != AOUT_RESAMPLING_NONE )
677     {
678         /* Resampling has been triggered previously (because of dates
679          * mismatch). We want the resampling to happen progressively so
680          * it isn't too audible to the listener. */
681
682         if( p_input->i_resampling_type == AOUT_RESAMPLING_UP )
683         {
684             p_input->pp_resamplers[0]->fmt_in.audio.i_rate += 2; /* Hz */
685         }
686         else
687         {
688             p_input->pp_resamplers[0]->fmt_in.audio.i_rate -= 2; /* Hz */
689         }
690
691         /* Check if everything is back to normal, in which case we can stop the
692          * resampling */
693         unsigned int i_nominal_rate =
694           (p_input->pp_resamplers[0] == p_input->p_playback_rate_filter)
695           ? INPUT_RATE_DEFAULT * p_input->input.i_rate / i_input_rate
696           : p_input->input.i_rate;
697         if( p_input->pp_resamplers[0]->fmt_in.audio.i_rate == i_nominal_rate )
698         {
699             p_input->i_resampling_type = AOUT_RESAMPLING_NONE;
700             msg_Warn( p_aout, "resampling stopped after %"PRIi64" usec "
701                       "(drift: %"PRIi64")",
702                       mdate() - p_input->i_resamp_start_date,
703                       p_buffer->i_pts - start_date);
704         }
705         else if( abs( (int)(p_buffer->i_pts - start_date) ) <
706                  abs( p_input->i_resamp_start_drift ) / 2 )
707         {
708             /* if we reduced the drift from half, then it is time to switch
709              * back the resampling direction. */
710             if( p_input->i_resampling_type == AOUT_RESAMPLING_UP )
711                 p_input->i_resampling_type = AOUT_RESAMPLING_DOWN;
712             else
713                 p_input->i_resampling_type = AOUT_RESAMPLING_UP;
714             p_input->i_resamp_start_drift = 0;
715         }
716         else if( p_input->i_resamp_start_drift &&
717                  ( abs( (int)(p_buffer->i_pts - start_date) ) >
718                    abs( p_input->i_resamp_start_drift ) * 3 / 2 ) )
719         {
720             /* If the drift is increasing and not decreasing, than something
721              * is bad. We'd better stop the resampling right now. */
722             msg_Warn( p_aout, "timing screwed, stopping resampling" );
723             inputResamplingStop( p_input );
724             p_buffer->i_flags |= BLOCK_FLAG_DISCONTINUITY;
725         }
726     }
727
728 #ifndef AOUT_PROCESS_BEFORE_CHEKS
729     /* Actually run the resampler now. */
730     if ( p_input->i_nb_resamplers > 0 )
731     {
732         aout_FiltersPlay( p_aout, p_input->pp_resamplers,
733                           p_input->i_nb_resamplers,
734                           &p_buffer );
735     }
736
737     if( p_buffer->i_nb_samples <= 0 )
738     {
739         aout_BufferFree( p_buffer );
740         return 0;
741     }
742 #endif
743
744     /* Adding the start date will be managed by aout_FifoPush(). */
745     p_buffer->i_pts = start_date;
746
747     aout_lock_input_fifos( p_aout );
748     aout_FifoPush( p_aout, &p_input->mixer.fifo, p_buffer );
749     aout_unlock_input_fifos( p_aout );
750     return 0;
751 }
752
753 /*****************************************************************************
754  * static functions
755  *****************************************************************************/
756
757 static void inputFailure( aout_instance_t * p_aout, aout_input_t * p_input,
758                           const char * psz_error_message )
759 {
760     /* error message */
761     msg_Err( p_aout, "%s", psz_error_message );
762
763     /* clean up */
764     aout_FiltersDestroyPipeline( p_aout, p_input->pp_filters,
765                                  p_input->i_nb_filters );
766     aout_FiltersDestroyPipeline( p_aout, p_input->pp_resamplers,
767                                  p_input->i_nb_resamplers );
768     aout_FifoDestroy( p_aout, &p_input->mixer.fifo );
769     var_Destroy( p_aout, "visual" );
770     var_Destroy( p_aout, "equalizer" );
771     var_Destroy( p_aout, "audio-filter" );
772     var_Destroy( p_aout, "audio-visual" );
773
774     var_Destroy( p_aout, "audio-replay-gain-mode" );
775     var_Destroy( p_aout, "audio-replay-gain-default" );
776     var_Destroy( p_aout, "audio-replay-gain-preamp" );
777     var_Destroy( p_aout, "audio-replay-gain-peak-protection" );
778
779     /* error flag */
780     p_input->b_error = 1;
781 }
782
783 static void inputDrop( aout_input_t *p_input, aout_buffer_t *p_buffer )
784 {
785     aout_BufferFree( p_buffer );
786
787     p_input->i_buffer_lost++;
788 }
789
790 static void inputResamplingStop( aout_input_t *p_input )
791 {
792     p_input->i_resampling_type = AOUT_RESAMPLING_NONE;
793     if( p_input->i_nb_resamplers != 0 )
794     {
795         p_input->pp_resamplers[0]->fmt_in.audio.i_rate =
796             ( p_input->pp_resamplers[0] == p_input->p_playback_rate_filter )
797             ? INPUT_RATE_DEFAULT * p_input->input.i_rate / p_input->i_last_input_rate
798             : p_input->input.i_rate;
799     }
800 }
801
802 static vout_thread_t *RequestVout( void *p_private,
803                                    vout_thread_t *p_vout, video_format_t *p_fmt, bool b_recycle )
804 {
805     aout_instance_t *p_aout = p_private;
806     VLC_UNUSED(b_recycle);
807     return vout_Request( p_aout, p_vout, p_fmt );
808 }
809
810 vout_thread_t *aout_filter_RequestVout( aout_filter_t *p_filter,
811                                         vout_thread_t *p_vout, video_format_t *p_fmt )
812 {
813     aout_input_t *p_input = p_filter->p_owner->p_input;
814     aout_request_vout_t *p_request = &p_input->request_vout;
815
816     /* XXX: this only works from audio input */
817     /* If you want to use visualization filters from another place, you will
818      * need to add a new pf_aout_request_vout callback or store a pointer
819      * to aout_request_vout_t inside filter_t (i.e. a level of indirection). */
820
821     return p_request->pf_request_vout( p_request->p_private,
822                                        p_vout, p_fmt, p_input->b_recycle_vout );
823 }
824
825 static int ChangeFiltersString( aout_instance_t * p_aout, const char* psz_variable,
826                                  const char *psz_name, bool b_add )
827 {
828     return AoutChangeFilterString( VLC_OBJECT(p_aout), p_aout,
829                                    psz_variable, psz_name, b_add ) ? 1 : 0;
830 }
831
832 static int VisualizationCallback( vlc_object_t *p_this, char const *psz_cmd,
833                        vlc_value_t oldval, vlc_value_t newval, void *p_data )
834 {
835     aout_instance_t *p_aout = (aout_instance_t *)p_this;
836     char *psz_mode = newval.psz_string;
837     (void)psz_cmd; (void)oldval; (void)p_data;
838
839     if( !psz_mode || !*psz_mode )
840     {
841         ChangeFiltersString( p_aout, "audio-visual", "goom", false );
842         ChangeFiltersString( p_aout, "audio-visual", "visual", false );
843         ChangeFiltersString( p_aout, "audio-visual", "projectm", false );
844     }
845     else
846     {
847         if( !strcmp( "goom", psz_mode ) )
848         {
849             ChangeFiltersString( p_aout, "audio-visual", "visual", false );
850             ChangeFiltersString( p_aout, "audio-visual", "goom", true );
851             ChangeFiltersString( p_aout, "audio-visual", "projectm", false );
852         }
853         else if( !strcmp( "projectm", psz_mode ) )
854         {
855             ChangeFiltersString( p_aout, "audio-visual", "visual", false );
856             ChangeFiltersString( p_aout, "audio-visual", "goom", false );
857             ChangeFiltersString( p_aout, "audio-visual", "projectm", true );
858         }
859         else
860         {
861             var_Create( p_aout, "effect-list", VLC_VAR_STRING );
862             var_SetString( p_aout, "effect-list", psz_mode );
863
864             ChangeFiltersString( p_aout, "audio-visual", "goom", false );
865             ChangeFiltersString( p_aout, "audio-visual", "visual", true );
866             ChangeFiltersString( p_aout, "audio-visual", "projectm", false );
867         }
868     }
869
870     /* That sucks */
871     AoutInputsMarkToRestart( p_aout );
872
873     return VLC_SUCCESS;
874 }
875
876 static int EqualizerCallback( vlc_object_t *p_this, char const *psz_cmd,
877                        vlc_value_t oldval, vlc_value_t newval, void *p_data )
878 {
879     aout_instance_t *p_aout = (aout_instance_t *)p_this;
880     char *psz_mode = newval.psz_string;
881     int i_ret;
882     (void)psz_cmd; (void)oldval; (void)p_data;
883
884     if( !psz_mode || !*psz_mode )
885     {
886         i_ret = ChangeFiltersString( p_aout, "audio-filter", "equalizer",
887                                      false );
888     }
889     else
890     {
891         var_Create( p_aout, "equalizer-preset", VLC_VAR_STRING );
892         var_SetString( p_aout, "equalizer-preset", psz_mode );
893         i_ret = ChangeFiltersString( p_aout, "audio-filter", "equalizer",
894                                      true );
895     }
896
897     /* That sucks */
898     if( i_ret == 1 )
899         AoutInputsMarkToRestart( p_aout );
900     return VLC_SUCCESS;
901 }
902
903 static int ReplayGainCallback( vlc_object_t *p_this, char const *psz_cmd,
904                                vlc_value_t oldval, vlc_value_t newval, void *p_data )
905 {
906     VLC_UNUSED(psz_cmd); VLC_UNUSED(oldval);
907     VLC_UNUSED(newval); VLC_UNUSED(p_data);
908     aout_instance_t *p_aout = (aout_instance_t *)p_this;
909     int i;
910
911     aout_lock_mixer( p_aout );
912     for( i = 0; i < p_aout->i_nb_inputs; i++ )
913         ReplayGainSelect( p_aout, p_aout->pp_inputs[i] );
914
915     /* Restart the mixer (a trivial mixer may be in use) */
916     if( p_aout->p_mixer )
917         aout_MixerMultiplierSet( p_aout, p_aout->mixer_multiplier );
918     aout_unlock_mixer( p_aout );
919
920     return VLC_SUCCESS;
921 }
922
923 static void ReplayGainSelect( aout_instance_t *p_aout, aout_input_t *p_input )
924 {
925     char *psz_replay_gain = var_GetNonEmptyString( p_aout,
926                                                    "audio-replay-gain-mode" );
927     int i_mode;
928     int i_use;
929     float f_gain;
930
931     p_input->mixer.multiplier = 1.0;
932
933     if( !psz_replay_gain )
934         return;
935
936     /* Find select mode */
937     if( !strcmp( psz_replay_gain, "track" ) )
938         i_mode = AUDIO_REPLAY_GAIN_TRACK;
939     else if( !strcmp( psz_replay_gain, "album" ) )
940         i_mode = AUDIO_REPLAY_GAIN_ALBUM;
941     else
942         i_mode = AUDIO_REPLAY_GAIN_MAX;
943
944     /* If the select mode is not available, prefer the other one */
945     i_use = i_mode;
946     if( i_use != AUDIO_REPLAY_GAIN_MAX && !p_input->replay_gain.pb_gain[i_use] )
947     {
948         for( i_use = 0; i_use < AUDIO_REPLAY_GAIN_MAX; i_use++ )
949         {
950             if( p_input->replay_gain.pb_gain[i_use] )
951                 break;
952         }
953     }
954
955     /* */
956     if( i_use != AUDIO_REPLAY_GAIN_MAX )
957         f_gain = p_input->replay_gain.pf_gain[i_use] + var_GetFloat( p_aout, "audio-replay-gain-preamp" );
958     else if( i_mode != AUDIO_REPLAY_GAIN_MAX )
959         f_gain = var_GetFloat( p_aout, "audio-replay-gain-default" );
960     else
961         f_gain = 0.0;
962     p_input->mixer.multiplier = pow( 10.0, f_gain / 20.0 );
963
964     /* */
965     if( p_input->replay_gain.pb_peak[i_use] &&
966         var_GetBool( p_aout, "audio-replay-gain-peak-protection" ) &&
967         p_input->replay_gain.pf_peak[i_use] * p_input->mixer.multiplier > 1.0 )
968     {
969         p_input->mixer.multiplier = 1.0f / p_input->replay_gain.pf_peak[i_use];
970     }
971
972     free( psz_replay_gain );
973 }
974