git.sesse.net Git - vlc/blob - src/audio_output/input.c

   1 /*****************************************************************************
   2  * input.c : internal management of input streams for the audio output
   3  *****************************************************************************
   4  * Copyright (C) 2002-2007 the VideoLAN team
   5  * $Id$
   6  *
   7  * Authors: Christophe Massiot <massiot@via.ecp.fr>
   8  *
   9  * This program is free software; you can redistribute it and/or modify
  10  * it under the terms of the GNU General Public License as published by
  11  * the Free Software Foundation; either version 2 of the License, or
  12  * (at your option) any later version.
  13  *
  14  * This program is distributed in the hope that it will be useful,
  15  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  16  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  17  * GNU General Public License for more details.
  18  *
  19  * You should have received a copy of the GNU General Public License
  20  * along with this program; if not, write to the Free Software
  21  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston MA 02110-1301, USA.
  22  *****************************************************************************/
  23
  24 /*****************************************************************************
  25  * Preamble
  26  *****************************************************************************/
  27
  28 #ifdef HAVE_CONFIG_H
  29 # include "config.h"
  30 #endif
  31
  32 #include <assert.h>
  33
  34 #include <vlc_common.h>
  35
  36 #include <stdio.h>
  37 #include <string.h>
  38 #include <math.h>
  39 #include <assert.h>
  40
  41 #include <vlc_input.h>
  42 #include <vlc_vout.h>                  /* for vout_Request */
  43
  44 #include <vlc_aout.h>
  45 #include <vlc_filter.h>
  46 #include <libvlc.h>
  47
  48 #include "aout_internal.h"
  49
  50 #define AOUT_ASSERT_MIXER_LOCKED vlc_assert_locked( &p_aout->mixer_lock )
  51 #define AOUT_ASSERT_INPUT_LOCKED vlc_assert_locked( &p_input->lock )
  52
  53 static void inputFailure( aout_instance_t *, aout_input_t *, const char * );
  54 static void inputDrop( aout_input_t *, aout_buffer_t * );
  55 static void inputResamplingStop( aout_input_t *p_input );
  56
  57 static int VisualizationCallback( vlc_object_t *, char const *,
  58                                   vlc_value_t, vlc_value_t, void * );
  59 static int EqualizerCallback( vlc_object_t *, char const *,
  60                               vlc_value_t, vlc_value_t, void * );
  61 static int ReplayGainCallback( vlc_object_t *, char const *,
  62                                vlc_value_t, vlc_value_t, void * );
  63 static void ReplayGainSelect( aout_instance_t *, aout_input_t * );
  64
  65 static vout_thread_t *RequestVout( void *,
  66                                    vout_thread_t *, video_format_t *, bool );
  67
  68 /*****************************************************************************
  69  * aout_InputNew : allocate a new input and rework the filter pipeline
  70  *****************************************************************************/
  71 int aout_InputNew( aout_instance_t * p_aout, aout_input_t * p_input, const aout_request_vout_t *p_request_vout )
  72 {
  73     audio_sample_format_t chain_input_format;
  74     audio_sample_format_t chain_output_format;
  75     vlc_value_t val, text;
  76     char *psz_filters, *psz_visual, *psz_scaletempo;
  77     int i_visual;
  78
  79     aout_FormatPrint( p_aout, "input", &p_input->input );
  80
  81     p_input->i_nb_resamplers = p_input->i_nb_filters = 0;
  82
  83     /* Prepare FIFO. */
  84     aout_FifoInit( p_aout, &p_input->mixer.fifo, p_aout->mixer_format.i_rate );
  85     p_input->mixer.begin = NULL;
  86
  87     /* */
  88     if( p_request_vout )
  89     {
  90         p_input->request_vout = *p_request_vout;
  91     }
  92     else
  93     {
  94         p_input->request_vout.pf_request_vout = RequestVout;
  95         p_input->request_vout.p_private = p_aout;
  96     }
  97
  98     /* Prepare format structure */
  99     chain_input_format  = p_input->input;
 100     chain_output_format = p_aout->mixer_format;
 101     chain_output_format.i_rate = p_input->input.i_rate;
 102     aout_FormatPrepare( &chain_output_format );
 103
 104     /* Now add user filters */
 105     if( var_Type( p_aout, "visual" ) == 0 )
 106     {
 107         var_Create( p_aout, "visual", VLC_VAR_STRING | VLC_VAR_HASCHOICE );
 108         text.psz_string = _("Visualizations");
 109         var_Change( p_aout, "visual", VLC_VAR_SETTEXT, &text, NULL );
 110         val.psz_string = (char*)""; text.psz_string = _("Disable");
 111         var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
 112         val.psz_string = (char*)"spectrometer"; text.psz_string = _("Spectrometer");
 113         var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
 114         val.psz_string = (char*)"scope"; text.psz_string = _("Scope");
 115         var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
 116         val.psz_string = (char*)"spectrum"; text.psz_string = _("Spectrum");
 117         var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
 118         val.psz_string = (char*)"vuMeter"; text.psz_string = _("Vu meter");
 119         var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
 120
 121         /* Look for goom plugin */
 122         if( module_exists( "goom" ) )
 123         {
 124             val.psz_string = (char*)"goom"; text.psz_string = (char*)"Goom";
 125             var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
 126         }
 127
 128         /* Look for libprojectM plugin */
 129         if( module_exists( "projectm" ) )
 130         {
 131             val.psz_string = (char*)"projectm"; text.psz_string = (char*)"projectM";
 132             var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
 133         }
 134
 135         if( var_Get( p_aout, "effect-list", &val ) == VLC_SUCCESS )
 136         {
 137             var_SetString( p_aout, "visual", val.psz_string );
 138             free( val.psz_string );
 139         }
 140         var_AddCallback( p_aout, "visual", VisualizationCallback, NULL );
 141     }
 142
 143     if( var_Type( p_aout, "equalizer" ) == 0 )
 144     {
 145         module_config_t *p_config;
 146         int i;
 147
 148         p_config = config_FindConfig( VLC_OBJECT(p_aout), "equalizer-preset" );
 149         if( p_config && p_config->i_list )
 150         {
 151                var_Create( p_aout, "equalizer",
 152                            VLC_VAR_STRING | VLC_VAR_HASCHOICE );
 153             text.psz_string = _("Equalizer");
 154             var_Change( p_aout, "equalizer", VLC_VAR_SETTEXT, &text, NULL );
 155
 156             val.psz_string = (char*)""; text.psz_string = _("Disable");
 157             var_Change( p_aout, "equalizer", VLC_VAR_ADDCHOICE, &val, &text );
 158
 159             for( i = 0; i < p_config->i_list; i++ )
 160             {
 161                 val.psz_string = (char *)p_config->ppsz_list[i];
 162                 text.psz_string = (char *)p_config->ppsz_list_text[i];
 163                 var_Change( p_aout, "equalizer", VLC_VAR_ADDCHOICE,
 164                             &val, &text );
 165             }
 166
 167             var_AddCallback( p_aout, "equalizer", EqualizerCallback, NULL );
 168         }
 169     }
 170
 171     if( var_Type( p_aout, "audio-filter" ) == 0 )
 172     {
 173         var_Create( p_aout, "audio-filter",
 174                     VLC_VAR_STRING | VLC_VAR_DOINHERIT );
 175         text.psz_string = _("Audio filters");
 176         var_Change( p_aout, "audio-filter", VLC_VAR_SETTEXT, &text, NULL );
 177     }
 178     if( var_Type( p_aout, "audio-visual" ) == 0 )
 179     {
 180         var_Create( p_aout, "audio-visual",
 181                     VLC_VAR_STRING | VLC_VAR_DOINHERIT );
 182         text.psz_string = _("Audio visualizations");
 183         var_Change( p_aout, "audio-visual", VLC_VAR_SETTEXT, &text, NULL );
 184     }
 185
 186     if( var_Type( p_aout, "audio-replay-gain-mode" ) == 0 )
 187     {
 188         module_config_t *p_config;
 189         int i;
 190
 191         p_config = config_FindConfig( VLC_OBJECT(p_aout), "audio-replay-gain-mode" );
 192         if( p_config && p_config->i_list )
 193         {
 194             var_Create( p_aout, "audio-replay-gain-mode",
 195                         VLC_VAR_STRING | VLC_VAR_DOINHERIT );
 196
 197             text.psz_string = _("Replay gain");
 198             var_Change( p_aout, "audio-replay-gain-mode", VLC_VAR_SETTEXT, &text, NULL );
 199
 200             for( i = 0; i < p_config->i_list; i++ )
 201             {
 202                 val.psz_string = (char *)p_config->ppsz_list[i];
 203                 text.psz_string = (char *)p_config->ppsz_list_text[i];
 204                 var_Change( p_aout, "audio-replay-gain-mode", VLC_VAR_ADDCHOICE,
 205                             &val, &text );
 206             }
 207
 208             var_AddCallback( p_aout, "audio-replay-gain-mode", ReplayGainCallback, NULL );
 209         }
 210     }
 211     if( var_Type( p_aout, "audio-replay-gain-preamp" ) == 0 )
 212     {
 213         var_Create( p_aout, "audio-replay-gain-preamp",
 214                     VLC_VAR_FLOAT | VLC_VAR_DOINHERIT );
 215     }
 216     if( var_Type( p_aout, "audio-replay-gain-default" ) == 0 )
 217     {
 218         var_Create( p_aout, "audio-replay-gain-default",
 219                     VLC_VAR_FLOAT | VLC_VAR_DOINHERIT );
 220     }
 221     if( var_Type( p_aout, "audio-replay-gain-peak-protection" ) == 0 )
 222     {
 223         var_Create( p_aout, "audio-replay-gain-peak-protection",
 224                     VLC_VAR_BOOL | VLC_VAR_DOINHERIT );
 225     }
 226     if( var_Type( p_aout, "audio-time-stretch" ) == 0 )
 227     {
 228         var_Create( p_aout, "audio-time-stretch",
 229                     VLC_VAR_BOOL | VLC_VAR_DOINHERIT );
 230     }
 231
 232     psz_filters = var_GetString( p_aout, "audio-filter" );
 233     psz_visual = var_GetString( p_aout, "audio-visual");
 234     psz_scaletempo = var_GetBool( p_aout, "audio-time-stretch" ) ? strdup( "scaletempo" ) : NULL;
 235
 236     p_input->b_recycle_vout = psz_visual && *psz_visual;
 237
 238     /* parse user filter lists */
 239     char *const ppsz_array[] = { psz_scaletempo, psz_filters, psz_visual };
 240     p_input->p_playback_rate_filter = NULL;
 241
 242     for( i_visual = 0; i_visual < 3 && !AOUT_FMT_NON_LINEAR(&chain_output_format); i_visual++ )
 243     {
 244         char *psz_next = NULL;
 245         char *psz_parser = ppsz_array[i_visual];
 246
 247         if( psz_parser == NULL || !*psz_parser )
 248             continue;
 249
 250         while( psz_parser && *psz_parser )
 251         {
 252             filter_t * p_filter = NULL;
 253
 254             if( p_input->i_nb_filters >= AOUT_MAX_FILTERS )
 255             {
 256                 msg_Dbg( p_aout, "max filters reached (%d)", AOUT_MAX_FILTERS );
 257                 break;
 258             }
 259
 260             while( *psz_parser == ' ' && *psz_parser == ':' )
 261             {
 262                 psz_parser++;
 263             }
 264             if( ( psz_next = strchr( psz_parser , ':'  ) ) )
 265             {
 266                 *psz_next++ = '\0';
 267             }
 268             if( *psz_parser =='\0' )
 269             {
 270                 break;
 271             }
 272
 273             /* Create a VLC object */
 274             static const char typename[] = "audio filter";
 275             p_filter = vlc_custom_create( p_aout, sizeof(*p_filter),
 276                                           VLC_OBJECT_GENERIC, typename );
 277             if( p_filter == NULL )
 278             {
 279                 msg_Err( p_aout, "cannot add user filter %s (skipped)",
 280                          psz_parser );
 281                 psz_parser = psz_next;
 282                 continue;
 283             }
 284
 285             vlc_object_attach( p_filter , p_aout );
 286
 287             p_filter->p_owner = malloc( sizeof(*p_filter->p_owner) );
 288             p_filter->p_owner->p_aout  = p_aout;
 289             p_filter->p_owner->p_input = p_input;
 290
 291             /* request format */
 292             memcpy( &p_filter->fmt_in.audio, &chain_output_format,
 293                     sizeof(audio_sample_format_t) );
 294             p_filter->fmt_in.i_codec = chain_output_format.i_format;
 295             memcpy( &p_filter->fmt_out.audio, &chain_output_format,
 296                     sizeof(audio_sample_format_t) );
 297             p_filter->fmt_out.i_codec = chain_output_format.i_format;
 298             p_filter->pf_audio_buffer_new = aout_FilterBufferNew;
 299
 300             /* try to find the requested filter */
 301             if( i_visual == 2 ) /* this can only be a visualization module */
 302             {
 303                 p_filter->p_module = module_need( p_filter, "visualization2",
 304                                                   psz_parser, true );
 305             }
 306             else /* this can be a audio filter module as well as a visualization module */
 307             {
 308                 p_filter->p_module = module_need( p_filter, "audio filter",
 309                                               psz_parser, true );
 310
 311                 if ( p_filter->p_module == NULL )
 312                 {
 313                     /* if the filter requested a special format, retry */
 314                     if ( !( AOUT_FMTS_IDENTICAL( &p_filter->fmt_in.audio,
 315                                                  &chain_input_format )
 316                             && AOUT_FMTS_IDENTICAL( &p_filter->fmt_out.audio,
 317                                                     &chain_output_format ) ) )
 318                     {
 319                         aout_FormatPrepare( &p_filter->fmt_in.audio );
 320                         aout_FormatPrepare( &p_filter->fmt_out.audio );
 321                         p_filter->p_module = module_need( p_filter,
 322                                                           "audio filter",
 323                                                           psz_parser, true );
 324                     }
 325                     /* try visual filters */
 326                     else
 327                     {
 328                         memcpy( &p_filter->fmt_in.audio, &chain_output_format,
 329                                 sizeof(audio_sample_format_t) );
 330                         memcpy( &p_filter->fmt_out.audio, &chain_output_format,
 331                                 sizeof(audio_sample_format_t) );
 332                         p_filter->p_module = module_need( p_filter,
 333                                                           "visualization2",
 334                                                           psz_parser, true );
 335                     }
 336                 }
 337             }
 338
 339             /* failure */
 340             if ( p_filter->p_module == NULL )
 341             {
 342                 msg_Err( p_aout, "cannot add user filter %s (skipped)",
 343                          psz_parser );
 344
 345                 free( p_filter->p_owner );
 346                 vlc_object_release( p_filter );
 347
 348                 psz_parser = psz_next;
 349                 continue;
 350             }
 351
 352             /* complete the filter chain if necessary */
 353             if ( !AOUT_FMTS_IDENTICAL( &chain_input_format,
 354                                        &p_filter->fmt_in.audio ) )
 355             {
 356                 if ( aout_FiltersCreatePipeline( p_aout, p_input->pp_filters,
 357                                                  &p_input->i_nb_filters,
 358                                                  &chain_input_format,
 359                                                  &p_filter->fmt_in.audio ) < 0 )
 360                 {
 361                     msg_Err( p_aout, "cannot add user filter %s (skipped)",
 362                              psz_parser );
 363
 364                     module_unneed( p_filter, p_filter->p_module );
 365                     free( p_filter->p_owner );
 366                     vlc_object_release( p_filter );
 367
 368                     psz_parser = psz_next;
 369                     continue;
 370                 }
 371             }
 372
 373             /* success */
 374             p_input->pp_filters[p_input->i_nb_filters++] = p_filter;
 375             memcpy( &chain_input_format, &p_filter->fmt_out.audio,
 376                     sizeof( audio_sample_format_t ) );
 377
 378             if( i_visual == 0 ) /* scaletempo */
 379                 p_input->p_playback_rate_filter = p_filter;
 380
 381             /* next filter if any */
 382             psz_parser = psz_next;
 383         }
 384     }
 385     free( psz_visual );
 386     free( psz_filters );
 387     free( psz_scaletempo );
 388
 389     /* complete the filter chain if necessary */
 390     if ( !AOUT_FMTS_IDENTICAL( &chain_input_format, &chain_output_format ) )
 391     {
 392         if ( aout_FiltersCreatePipeline( p_aout, p_input->pp_filters,
 393                                          &p_input->i_nb_filters,
 394                                          &chain_input_format,
 395                                          &chain_output_format ) < 0 )
 396         {
 397             inputFailure( p_aout, p_input, "couldn't set an input pipeline" );
 398             return -1;
 399         }
 400     }
 401
 402     /* Prepare hints for the buffer allocator. */
 403     p_input->input_alloc.b_alloc = true;
 404     p_input->input_alloc.i_bytes_per_sec = -1;
 405
 406     /* Create resamplers. */
 407     if ( !AOUT_FMT_NON_LINEAR( &p_aout->mixer_format ) )
 408     {
 409         chain_output_format.i_rate = (__MAX(p_input->input.i_rate,
 410                                             p_aout->mixer_format.i_rate)
 411                                  * (100 + AOUT_MAX_RESAMPLING)) / 100;
 412         if ( chain_output_format.i_rate == p_aout->mixer_format.i_rate )
 413         {
 414             /* Just in case... */
 415             chain_output_format.i_rate++;
 416         }
 417         if ( aout_FiltersCreatePipeline( p_aout, p_input->pp_resamplers,
 418                                          &p_input->i_nb_resamplers,
 419                                          &chain_output_format,
 420                                          &p_aout->mixer_format ) < 0 )
 421         {
 422             inputFailure( p_aout, p_input, "couldn't set a resampler pipeline");
 423             return -1;
 424         }
 425
 426         aout_FiltersHintBuffers( p_aout, p_input->pp_resamplers,
 427                                  p_input->i_nb_resamplers,
 428                                  &p_input->input_alloc );
 429         p_input->input_alloc.b_alloc = true;
 430
 431         /* Setup the initial rate of the resampler */
 432         p_input->pp_resamplers[0]->fmt_in.audio.i_rate = p_input->input.i_rate;
 433     }
 434     p_input->i_resampling_type = AOUT_RESAMPLING_NONE;
 435
 436     if( ! p_input->p_playback_rate_filter && p_input->i_nb_resamplers > 0 )
 437     {
 438         p_input->p_playback_rate_filter = p_input->pp_resamplers[0];
 439     }
 440
 441     aout_FiltersHintBuffers( p_aout, p_input->pp_filters,
 442                              p_input->i_nb_filters,
 443                              &p_input->input_alloc );
 444     p_input->input_alloc.b_alloc = true;
 445
 446     /* i_bytes_per_sec is still == -1 if no filters */
 447     p_input->input_alloc.i_bytes_per_sec = __MAX(
 448                                     p_input->input_alloc.i_bytes_per_sec,
 449                                     (int)(p_input->input.i_bytes_per_frame
 450                                      * p_input->input.i_rate
 451                                      / p_input->input.i_frame_length) );
 452
 453     ReplayGainSelect( p_aout, p_input );
 454
 455     /* Success */
 456     p_input->b_error = false;
 457     p_input->i_last_input_rate = INPUT_RATE_DEFAULT;
 458
 459     return 0;
 460 }
 461
 462 /*****************************************************************************
 463  * aout_InputDelete : delete an input
 464  *****************************************************************************
 465  * This function must be entered with the mixer lock.
 466  *****************************************************************************/
 467 int aout_InputDelete( aout_instance_t * p_aout, aout_input_t * p_input )
 468 {
 469     AOUT_ASSERT_MIXER_LOCKED;
 470     if ( p_input->b_error )
 471         return 0;
 472
 473     /* XXX We need to update b_recycle_vout before calling aout_FiltersDestroyPipeline.
 474      * FIXME They can be a race condition if audio-visual is updated between
 475      * aout_InputDelete and aout_InputNew.
 476      */
 477     char *psz_visual = var_GetString( p_aout, "audio-visual");
 478     p_input->b_recycle_vout = psz_visual && *psz_visual;
 479     free( psz_visual );
 480
 481     aout_FiltersDestroyPipeline( p_aout, p_input->pp_filters,
 482                                  p_input->i_nb_filters );
 483     p_input->i_nb_filters = 0;
 484     aout_FiltersDestroyPipeline( p_aout, p_input->pp_resamplers,
 485                                  p_input->i_nb_resamplers );
 486     p_input->i_nb_resamplers = 0;
 487     aout_FifoDestroy( p_aout, &p_input->mixer.fifo );
 488
 489     return 0;
 490 }
 491
 492 /*****************************************************************************
 493  * aout_InputCheckAndRestart : restart an input
 494  *****************************************************************************
 495  * This function must be entered with the input and mixer lock.
 496  *****************************************************************************/
 497 void aout_InputCheckAndRestart( aout_instance_t * p_aout, aout_input_t * p_input )
 498 {
 499     AOUT_ASSERT_MIXER_LOCKED;
 500     AOUT_ASSERT_INPUT_LOCKED;
 501
 502     if( !p_input->b_restart )
 503         return;
 504
 505     aout_lock_input_fifos( p_aout );
 506
 507     /* A little trick to avoid loosing our input fifo and properties */
 508
 509     uint8_t *p_first_byte_to_mix = p_input->mixer.begin;
 510     aout_fifo_t fifo = p_input->mixer.fifo;
 511     bool b_paused = p_input->b_paused;
 512     mtime_t i_pause_date = p_input->i_pause_date;
 513
 514     aout_FifoInit( p_aout, &p_input->mixer.fifo, p_aout->mixer_format.i_rate );
 515
 516     aout_InputDelete( p_aout, p_input );
 517
 518     aout_InputNew( p_aout, p_input, &p_input->request_vout );
 519     p_input->mixer.begin = p_first_byte_to_mix;
 520     p_input->mixer.fifo = fifo;
 521     p_input->b_paused = b_paused;
 522     p_input->i_pause_date = i_pause_date;
 523
 524     p_input->b_restart = false;
 525
 526     aout_unlock_input_fifos( p_aout );
 527 }
 528 /*****************************************************************************
 529  * aout_InputPlay : play a buffer
 530  *****************************************************************************
 531  * This function must be entered with the input lock.
 532  *****************************************************************************/
 533 /* XXX Do not activate it !! */
 534 //#define AOUT_PROCESS_BEFORE_CHEKS
 535 int aout_InputPlay( aout_instance_t * p_aout, aout_input_t * p_input,
 536                     aout_buffer_t * p_buffer, int i_input_rate )
 537 {
 538     mtime_t start_date;
 539     AOUT_ASSERT_INPUT_LOCKED;
 540
 541     if( i_input_rate != INPUT_RATE_DEFAULT && p_input->p_playback_rate_filter == NULL )
 542     {
 543         inputDrop( p_input, p_buffer );
 544         return 0;
 545     }
 546
 547 #ifdef AOUT_PROCESS_BEFORE_CHEKS
 548     /* Run pre-filters. */
 549     aout_FiltersPlay( p_aout, p_input->pp_filters, p_input->i_nb_filters,
 550                       &p_buffer );
 551     if( !p_buffer )
 552         return 0;
 553
 554     /* Actually run the resampler now. */
 555     if ( p_input->i_nb_resamplers > 0 )
 556     {
 557         const mtime_t i_date = p_buffer->i_pts;
 558         aout_FiltersPlay( p_aout, p_input->pp_resamplers,
 559                           p_input->i_nb_resamplers,
 560                           &p_buffer );
 561     }
 562
 563     if( !p_buffer )
 564         return 0;
 565     if( p_buffer->i_nb_samples <= 0 )
 566     {
 567         block_Release( p_buffer );
 568         return 0;
 569     }
 570 #endif
 571
 572     /* Handle input rate change, but keep drift correction */
 573     if( i_input_rate != p_input->i_last_input_rate )
 574     {
 575         unsigned int * const pi_rate = &p_input->p_playback_rate_filter->fmt_in.audio.i_rate;
 576 #define F(r,ir) ( INPUT_RATE_DEFAULT * (r) / (ir) )
 577         const int i_delta = *pi_rate - F(p_input->input.i_rate,p_input->i_last_input_rate);
 578         *pi_rate = F(p_input->input.i_rate + i_delta, i_input_rate);
 579 #undef F
 580         p_input->i_last_input_rate = i_input_rate;
 581     }
 582
 583     /* We don't care if someone changes the start date behind our back after
 584      * this. We'll deal with that when pushing the buffer, and compensate
 585      * with the next incoming buffer. */
 586     aout_lock_input_fifos( p_aout );
 587     start_date = aout_FifoNextStart( p_aout, &p_input->mixer.fifo );
 588     aout_unlock_input_fifos( p_aout );
 589
 590     if ( start_date != 0 && start_date < mdate() )
 591     {
 592         /* The decoder is _very_ late. This can only happen if the user
 593          * pauses the stream (or if the decoder is buggy, which cannot
 594          * happen :). */
 595         msg_Warn( p_aout, "computed PTS is out of range (%"PRId64"), "
 596                   "clearing out", mdate() - start_date );
 597         aout_lock_input_fifos( p_aout );
 598         aout_FifoSet( p_aout, &p_input->mixer.fifo, 0 );
 599         p_input->mixer.begin = NULL;
 600         aout_unlock_input_fifos( p_aout );
 601         if ( p_input->i_resampling_type != AOUT_RESAMPLING_NONE )
 602             msg_Warn( p_aout, "timing screwed, stopping resampling" );
 603         inputResamplingStop( p_input );
 604         p_buffer->i_flags |= BLOCK_FLAG_DISCONTINUITY;
 605         start_date = 0;
 606     }
 607
 608     if ( p_buffer->i_pts < mdate() + AOUT_MIN_PREPARE_TIME )
 609     {
 610         /* The decoder gives us f*cked up PTS. It's its business, but we
 611          * can't present it anyway, so drop the buffer. */
 612         msg_Warn( p_aout, "PTS is out of range (%"PRId64"), dropping buffer",
 613                   mdate() - p_buffer->i_pts );
 614
 615         inputDrop( p_input, p_buffer );
 616         inputResamplingStop( p_input );
 617         return 0;
 618     }
 619
 620     /* If the audio drift is too big then it's not worth trying to resample
 621      * the audio. */
 622     mtime_t i_pts_tolerance = 3 * AOUT_PTS_TOLERANCE * i_input_rate / INPUT_RATE_DEFAULT;
 623     if ( start_date != 0 &&
 624          ( start_date < p_buffer->i_pts - i_pts_tolerance ) )
 625     {
 626         msg_Warn( p_aout, "audio drift is too big (%"PRId64"), clearing out",
 627                   start_date - p_buffer->i_pts );
 628         aout_lock_input_fifos( p_aout );
 629         aout_FifoSet( p_aout, &p_input->mixer.fifo, 0 );
 630         p_input->mixer.begin = NULL;
 631         aout_unlock_input_fifos( p_aout );
 632         if ( p_input->i_resampling_type != AOUT_RESAMPLING_NONE )
 633             msg_Warn( p_aout, "timing screwed, stopping resampling" );
 634         inputResamplingStop( p_input );
 635         p_buffer->i_flags |= BLOCK_FLAG_DISCONTINUITY;
 636         start_date = 0;
 637     }
 638     else if ( start_date != 0 &&
 639               ( start_date > p_buffer->i_pts + i_pts_tolerance) )
 640     {
 641         msg_Warn( p_aout, "audio drift is too big (%"PRId64"), dropping buffer",
 642                   start_date - p_buffer->i_pts );
 643         inputDrop( p_input, p_buffer );
 644         return 0;
 645     }
 646
 647     if ( start_date == 0 ) start_date = p_buffer->i_pts;
 648
 649 #ifndef AOUT_PROCESS_BEFORE_CHEKS
 650     /* Run pre-filters. */
 651     aout_FiltersPlay( p_input->pp_filters, p_input->i_nb_filters, &p_buffer );
 652     if( !p_buffer )
 653         return 0;
 654 #endif
 655
 656     /* Run the resampler if needed.
 657      * We first need to calculate the output rate of this resampler. */
 658     if ( ( p_input->i_resampling_type == AOUT_RESAMPLING_NONE ) &&
 659          ( start_date < p_buffer->i_pts - AOUT_PTS_TOLERANCE
 660            || start_date > p_buffer->i_pts + AOUT_PTS_TOLERANCE ) &&
 661          p_input->i_nb_resamplers > 0 )
 662     {
 663         /* Can happen in several circumstances :
 664          * 1. A problem at the input (clock drift)
 665          * 2. A small pause triggered by the user
 666          * 3. Some delay in the output stage, causing a loss of lip
 667          *    synchronization
 668          * Solution : resample the buffer to avoid a scratch.
 669          */
 670         mtime_t drift = p_buffer->i_pts - start_date;
 671
 672         p_input->i_resamp_start_date = mdate();
 673         p_input->i_resamp_start_drift = (int)drift;
 674
 675         if ( drift > 0 )
 676             p_input->i_resampling_type = AOUT_RESAMPLING_DOWN;
 677         else
 678             p_input->i_resampling_type = AOUT_RESAMPLING_UP;
 679
 680         msg_Warn( p_aout, "buffer is %"PRId64" %s, triggering %ssampling",
 681                           drift > 0 ? drift : -drift,
 682                           drift > 0 ? "in advance" : "late",
 683                           drift > 0 ? "down" : "up");
 684     }
 685
 686     if ( p_input->i_resampling_type != AOUT_RESAMPLING_NONE )
 687     {
 688         /* Resampling has been triggered previously (because of dates
 689          * mismatch). We want the resampling to happen progressively so
 690          * it isn't too audible to the listener. */
 691
 692         if( p_input->i_resampling_type == AOUT_RESAMPLING_UP )
 693         {
 694             p_input->pp_resamplers[0]->fmt_in.audio.i_rate += 2; /* Hz */
 695         }
 696         else
 697         {
 698             p_input->pp_resamplers[0]->fmt_in.audio.i_rate -= 2; /* Hz */
 699         }
 700
 701         /* Check if everything is back to normal, in which case we can stop the
 702          * resampling */
 703         unsigned int i_nominal_rate =
 704           (p_input->pp_resamplers[0] == p_input->p_playback_rate_filter)
 705           ? INPUT_RATE_DEFAULT * p_input->input.i_rate / i_input_rate
 706           : p_input->input.i_rate;
 707         if( p_input->pp_resamplers[0]->fmt_in.audio.i_rate == i_nominal_rate )
 708         {
 709             p_input->i_resampling_type = AOUT_RESAMPLING_NONE;
 710             msg_Warn( p_aout, "resampling stopped after %"PRIi64" usec "
 711                       "(drift: %"PRIi64")",
 712                       mdate() - p_input->i_resamp_start_date,
 713                       p_buffer->i_pts - start_date);
 714         }
 715         else if( abs( (int)(p_buffer->i_pts - start_date) ) <
 716                  abs( p_input->i_resamp_start_drift ) / 2 )
 717         {
 718             /* if we reduced the drift from half, then it is time to switch
 719              * back the resampling direction. */
 720             if( p_input->i_resampling_type == AOUT_RESAMPLING_UP )
 721                 p_input->i_resampling_type = AOUT_RESAMPLING_DOWN;
 722             else
 723                 p_input->i_resampling_type = AOUT_RESAMPLING_UP;
 724             p_input->i_resamp_start_drift = 0;
 725         }
 726         else if( p_input->i_resamp_start_drift &&
 727                  ( abs( (int)(p_buffer->i_pts - start_date) ) >
 728                    abs( p_input->i_resamp_start_drift ) * 3 / 2 ) )
 729         {
 730             /* If the drift is increasing and not decreasing, than something
 731              * is bad. We'd better stop the resampling right now. */
 732             msg_Warn( p_aout, "timing screwed, stopping resampling" );
 733             inputResamplingStop( p_input );
 734             p_buffer->i_flags |= BLOCK_FLAG_DISCONTINUITY;
 735         }
 736     }
 737
 738 #ifndef AOUT_PROCESS_BEFORE_CHEKS
 739     /* Actually run the resampler now. */
 740     if ( p_input->i_nb_resamplers > 0 )
 741     {
 742         aout_FiltersPlay( p_input->pp_resamplers, p_input->i_nb_resamplers,
 743                           &p_buffer );
 744     }
 745
 746     if( !p_buffer )
 747         return 0;
 748     if( p_buffer->i_nb_samples <= 0 )
 749     {
 750         block_Release( p_buffer );
 751         return 0;
 752     }
 753 #endif
 754
 755     /* Adding the start date will be managed by aout_FifoPush(). */
 756     p_buffer->i_pts = start_date;
 757
 758     aout_lock_input_fifos( p_aout );
 759     aout_FifoPush( p_aout, &p_input->mixer.fifo, p_buffer );
 760     aout_unlock_input_fifos( p_aout );
 761     return 0;
 762 }
 763
 764 /*****************************************************************************
 765  * static functions
 766  *****************************************************************************/
 767
 768 static void inputFailure( aout_instance_t * p_aout, aout_input_t * p_input,
 769                           const char * psz_error_message )
 770 {
 771     /* error message */
 772     msg_Err( p_aout, "%s", psz_error_message );
 773
 774     /* clean up */
 775     aout_FiltersDestroyPipeline( p_aout, p_input->pp_filters,
 776                                  p_input->i_nb_filters );
 777     aout_FiltersDestroyPipeline( p_aout, p_input->pp_resamplers,
 778                                  p_input->i_nb_resamplers );
 779     aout_FifoDestroy( p_aout, &p_input->mixer.fifo );
 780     var_Destroy( p_aout, "visual" );
 781     var_Destroy( p_aout, "equalizer" );
 782     var_Destroy( p_aout, "audio-filter" );
 783     var_Destroy( p_aout, "audio-visual" );
 784
 785     var_Destroy( p_aout, "audio-replay-gain-mode" );
 786     var_Destroy( p_aout, "audio-replay-gain-default" );
 787     var_Destroy( p_aout, "audio-replay-gain-preamp" );
 788     var_Destroy( p_aout, "audio-replay-gain-peak-protection" );
 789
 790     /* error flag */
 791     p_input->b_error = 1;
 792 }
 793
 794 static void inputDrop( aout_input_t *p_input, aout_buffer_t *p_buffer )
 795 {
 796     aout_BufferFree( p_buffer );
 797
 798     p_input->i_buffer_lost++;
 799 }
 800
 801 static void inputResamplingStop( aout_input_t *p_input )
 802 {
 803     p_input->i_resampling_type = AOUT_RESAMPLING_NONE;
 804     if( p_input->i_nb_resamplers != 0 )
 805     {
 806         p_input->pp_resamplers[0]->fmt_in.audio.i_rate =
 807             ( p_input->pp_resamplers[0] == p_input->p_playback_rate_filter )
 808             ? INPUT_RATE_DEFAULT * p_input->input.i_rate / p_input->i_last_input_rate
 809             : p_input->input.i_rate;
 810     }
 811 }
 812
 813 static vout_thread_t *RequestVout( void *p_private,
 814                                    vout_thread_t *p_vout, video_format_t *p_fmt, bool b_recycle )
 815 {
 816     aout_instance_t *p_aout = p_private;
 817     VLC_UNUSED(b_recycle);
 818     vout_configuration_t cfg = {
 819         .vout = p_vout,
 820         .fmt  = p_fmt,
 821     };
 822     return vout_Request( p_aout, &cfg );
 823 }
 824
 825 vout_thread_t *aout_filter_RequestVout( filter_t *p_filter,
 826                                         vout_thread_t *p_vout, video_format_t *p_fmt )
 827 {
 828     aout_input_t *p_input = p_filter->p_owner->p_input;
 829     aout_request_vout_t *p_request = &p_input->request_vout;
 830
 831     /* XXX: this only works from audio input */
 832     /* If you want to use visualization filters from another place, you will
 833      * need to add a new pf_aout_request_vout callback or store a pointer
 834      * to aout_request_vout_t inside filter_t (i.e. a level of indirection). */
 835
 836     return p_request->pf_request_vout( p_request->p_private,
 837                                        p_vout, p_fmt, p_input->b_recycle_vout );
 838 }
 839
 840 static int ChangeFiltersString( aout_instance_t * p_aout, const char* psz_variable,
 841                                  const char *psz_name, bool b_add )
 842 {
 843     return AoutChangeFilterString( VLC_OBJECT(p_aout), p_aout,
 844                                    psz_variable, psz_name, b_add ) ? 1 : 0;
 845 }
 846
 847 static int VisualizationCallback( vlc_object_t *p_this, char const *psz_cmd,
 848                        vlc_value_t oldval, vlc_value_t newval, void *p_data )
 849 {
 850     aout_instance_t *p_aout = (aout_instance_t *)p_this;
 851     char *psz_mode = newval.psz_string;
 852     (void)psz_cmd; (void)oldval; (void)p_data;
 853
 854     if( !psz_mode || !*psz_mode )
 855     {
 856         ChangeFiltersString( p_aout, "audio-visual", "goom", false );
 857         ChangeFiltersString( p_aout, "audio-visual", "visual", false );
 858         ChangeFiltersString( p_aout, "audio-visual", "projectm", false );
 859     }
 860     else
 861     {
 862         if( !strcmp( "goom", psz_mode ) )
 863         {
 864             ChangeFiltersString( p_aout, "audio-visual", "visual", false );
 865             ChangeFiltersString( p_aout, "audio-visual", "goom", true );
 866             ChangeFiltersString( p_aout, "audio-visual", "projectm", false );
 867         }
 868         else if( !strcmp( "projectm", psz_mode ) )
 869         {
 870             ChangeFiltersString( p_aout, "audio-visual", "visual", false );
 871             ChangeFiltersString( p_aout, "audio-visual", "goom", false );
 872             ChangeFiltersString( p_aout, "audio-visual", "projectm", true );
 873         }
 874         else
 875         {
 876             var_Create( p_aout, "effect-list", VLC_VAR_STRING );
 877             var_SetString( p_aout, "effect-list", psz_mode );
 878
 879             ChangeFiltersString( p_aout, "audio-visual", "goom", false );
 880             ChangeFiltersString( p_aout, "audio-visual", "visual", true );
 881             ChangeFiltersString( p_aout, "audio-visual", "projectm", false );
 882         }
 883     }
 884
 885     /* That sucks */
 886     AoutInputsMarkToRestart( p_aout );
 887
 888     return VLC_SUCCESS;
 889 }
 890
 891 static int EqualizerCallback( vlc_object_t *p_this, char const *psz_cmd,
 892                        vlc_value_t oldval, vlc_value_t newval, void *p_data )
 893 {
 894     aout_instance_t *p_aout = (aout_instance_t *)p_this;
 895     char *psz_mode = newval.psz_string;
 896     int i_ret;
 897     (void)psz_cmd; (void)oldval; (void)p_data;
 898
 899     if( !psz_mode || !*psz_mode )
 900     {
 901         i_ret = ChangeFiltersString( p_aout, "audio-filter", "equalizer",
 902                                      false );
 903     }
 904     else
 905     {
 906         var_Create( p_aout, "equalizer-preset", VLC_VAR_STRING );
 907         var_SetString( p_aout, "equalizer-preset", psz_mode );
 908         i_ret = ChangeFiltersString( p_aout, "audio-filter", "equalizer",
 909                                      true );
 910     }
 911
 912     /* That sucks */
 913     if( i_ret == 1 )
 914         AoutInputsMarkToRestart( p_aout );
 915     return VLC_SUCCESS;
 916 }
 917
 918 static int ReplayGainCallback( vlc_object_t *p_this, char const *psz_cmd,
 919                                vlc_value_t oldval, vlc_value_t newval, void *p_data )
 920 {
 921     VLC_UNUSED(psz_cmd); VLC_UNUSED(oldval);
 922     VLC_UNUSED(newval); VLC_UNUSED(p_data);
 923     aout_instance_t *p_aout = (aout_instance_t *)p_this;
 924     int i;
 925
 926     aout_lock_mixer( p_aout );
 927     for( i = 0; i < p_aout->i_nb_inputs; i++ )
 928         ReplayGainSelect( p_aout, p_aout->pp_inputs[i] );
 929
 930     /* Restart the mixer (a trivial mixer may be in use) */
 931     if( p_aout->p_mixer )
 932         aout_MixerMultiplierSet( p_aout, p_aout->mixer_multiplier );
 933     aout_unlock_mixer( p_aout );
 934
 935     return VLC_SUCCESS;
 936 }
 937
 938 static void ReplayGainSelect( aout_instance_t *p_aout, aout_input_t *p_input )
 939 {
 940     char *psz_replay_gain = var_GetNonEmptyString( p_aout,
 941                                                    "audio-replay-gain-mode" );
 942     int i_mode;
 943     int i_use;
 944     float f_gain;
 945
 946     p_input->mixer.multiplier = 1.0;
 947
 948     if( !psz_replay_gain )
 949         return;
 950
 951     /* Find select mode */
 952     if( !strcmp( psz_replay_gain, "track" ) )
 953         i_mode = AUDIO_REPLAY_GAIN_TRACK;
 954     else if( !strcmp( psz_replay_gain, "album" ) )
 955         i_mode = AUDIO_REPLAY_GAIN_ALBUM;
 956     else
 957         i_mode = AUDIO_REPLAY_GAIN_MAX;
 958
 959     /* If the select mode is not available, prefer the other one */
 960     i_use = i_mode;
 961     if( i_use != AUDIO_REPLAY_GAIN_MAX && !p_input->replay_gain.pb_gain[i_use] )
 962     {
 963         for( i_use = 0; i_use < AUDIO_REPLAY_GAIN_MAX; i_use++ )
 964         {
 965             if( p_input->replay_gain.pb_gain[i_use] )
 966                 break;
 967         }
 968     }
 969
 970     /* */
 971     if( i_use != AUDIO_REPLAY_GAIN_MAX )
 972         f_gain = p_input->replay_gain.pf_gain[i_use] + var_GetFloat( p_aout, "audio-replay-gain-preamp" );
 973     else if( i_mode != AUDIO_REPLAY_GAIN_MAX )
 974         f_gain = var_GetFloat( p_aout, "audio-replay-gain-default" );
 975     else
 976         f_gain = 0.0;
 977     p_input->mixer.multiplier = pow( 10.0, f_gain / 20.0 );
 978
 979     /* */
 980     if( p_input->replay_gain.pb_peak[i_use] &&
 981         var_GetBool( p_aout, "audio-replay-gain-peak-protection" ) &&
 982         p_input->replay_gain.pf_peak[i_use] * p_input->mixer.multiplier > 1.0 )
 983     {
 984         p_input->mixer.multiplier = 1.0f / p_input->replay_gain.pf_peak[i_use];
 985     }
 986
 987     free( psz_replay_gain );
 988 }
 989