git.sesse.net Git - vlc/blob - src/playlist/fetcher.c

   1 /*****************************************************************************
   2  * fetcher.c: Art fetcher thread.
   3  *****************************************************************************
   4  * Copyright © 1999-2009 the VideoLAN team
   5  * $Id$
   6  *
   7  * Authors: Samuel Hocevar <sam@zoy.org>
   8  *          Clément Stenac <zorglub@videolan.org>
   9  *
  10  * This program is free software; you can redistribute it and/or modify
  11  * it under the terms of the GNU General Public License as published by
  12  * the Free Software Foundation; either version 2 of the License, or
  13  * (at your option) any later version.
  14  *
  15  * This program is distributed in the hope that it will be useful,
  16  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  17  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  18  * GNU General Public License for more details.
  19  *
  20  * You should have received a copy of the GNU General Public License
  21  * along with this program; if not, write to the Free Software
  22  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston MA 02110-1301, USA.
  23  *****************************************************************************/
  24 #ifdef HAVE_CONFIG_H
  25 # include "config.h"
  26 #endif
  27
  28 #include <assert.h>
  29
  30 #include <vlc_common.h>
  31 #include <vlc_playlist.h>
  32 #include <vlc_stream.h>
  33 #include <limits.h>
  34 #include <vlc_art_finder.h>
  35 #include <vlc_memory.h>
  36 #include <vlc_demux.h>
  37 #include <vlc_modules.h>
  38
  39 #include "art.h"
  40 #include "fetcher.h"
  41 #include "playlist_internal.h"
  42
  43 /*****************************************************************************
  44  * Structures/definitions
  45  *****************************************************************************/
  46 struct playlist_fetcher_t
  47 {
  48     playlist_t      *p_playlist;
  49
  50     vlc_mutex_t     lock;
  51     vlc_cond_t      wait;
  52     bool            b_live;
  53     int             i_art_policy;
  54     int             i_waiting;
  55     input_item_t    **pp_waiting;
  56
  57     DECL_ARRAY(playlist_album_t) albums;
  58 };
  59
  60 static void *Thread( void * );
  61
  62
  63 /*****************************************************************************
  64  * Public functions
  65  *****************************************************************************/
  66 playlist_fetcher_t *playlist_fetcher_New( playlist_t *p_playlist )
  67 {
  68     playlist_fetcher_t *p_fetcher = malloc( sizeof(*p_fetcher) );
  69     if( !p_fetcher )
  70         return NULL;
  71
  72     p_fetcher->p_playlist = p_playlist;
  73     vlc_mutex_init( &p_fetcher->lock );
  74     vlc_cond_init( &p_fetcher->wait );
  75     p_fetcher->b_live = false;
  76     p_fetcher->i_waiting = 0;
  77     p_fetcher->pp_waiting = NULL;
  78     p_fetcher->i_art_policy = var_GetInteger( p_playlist, "album-art" );
  79     ARRAY_INIT( p_fetcher->albums );
  80
  81     return p_fetcher;
  82 }
  83
  84 void playlist_fetcher_Push( playlist_fetcher_t *p_fetcher,
  85                             input_item_t *p_item )
  86 {
  87     vlc_gc_incref( p_item );
  88
  89     vlc_mutex_lock( &p_fetcher->lock );
  90     INSERT_ELEM( p_fetcher->pp_waiting, p_fetcher->i_waiting,
  91                  p_fetcher->i_waiting, p_item );
  92     if( !p_fetcher->b_live )
  93     {
  94         if( vlc_clone_detach( NULL, Thread, p_fetcher,
  95                               VLC_THREAD_PRIORITY_LOW ) )
  96             msg_Err( p_fetcher->p_playlist,
  97                      "cannot spawn secondary preparse thread" );
  98         else
  99             p_fetcher->b_live = true;
 100     }
 101     vlc_mutex_unlock( &p_fetcher->lock );
 102 }
 103
 104 void playlist_fetcher_Delete( playlist_fetcher_t *p_fetcher )
 105 {
 106     vlc_mutex_lock( &p_fetcher->lock );
 107     /* Remove any left-over item, the fetcher will exit */
 108     while( p_fetcher->i_waiting > 0 )
 109     {
 110         vlc_gc_decref( p_fetcher->pp_waiting[0] );
 111         REMOVE_ELEM( p_fetcher->pp_waiting, p_fetcher->i_waiting, 0 );
 112     }
 113
 114     while( p_fetcher->b_live )
 115         vlc_cond_wait( &p_fetcher->wait, &p_fetcher->lock );
 116     vlc_mutex_unlock( &p_fetcher->lock );
 117
 118     vlc_cond_destroy( &p_fetcher->wait );
 119     vlc_mutex_destroy( &p_fetcher->lock );
 120     free( p_fetcher );
 121 }
 122
 123
 124 /*****************************************************************************
 125  * Privates functions
 126  *****************************************************************************/
 127 /**
 128  * This function locates the art associated to an input item.
 129  * Return codes:
 130  *   0 : Art is in cache or is a local file
 131  *   1 : Art found, need to download
 132  *  -X : Error/not found
 133  */
 134 static int FindArt( playlist_fetcher_t *p_fetcher, input_item_t *p_item )
 135 {
 136     int i_ret;
 137
 138     char *psz_artist = input_item_GetArtist( p_item );
 139     char *psz_album = input_item_GetAlbum( p_item );
 140     char *psz_title = input_item_GetTitle( p_item );
 141     if( !psz_title )
 142         psz_title = input_item_GetName( p_item );
 143
 144     if( !psz_title && !psz_artist && !psz_album )
 145         return VLC_EGENERIC;
 146
 147     free( psz_title );
 148
 149     /* If we already checked this album in this session, skip */
 150     if( psz_artist && psz_album )
 151     {
 152         FOREACH_ARRAY( playlist_album_t album, p_fetcher->albums )
 153             if( !strcmp( album.psz_artist, psz_artist ) &&
 154                 !strcmp( album.psz_album, psz_album ) )
 155             {
 156                 msg_Dbg( p_fetcher->p_playlist,
 157                          " %s - %s has already been searched",
 158                          psz_artist, psz_album );
 159                 /* TODO-fenrir if we cache art filename too, we can go faster */
 160                 free( psz_artist );
 161                 free( psz_album );
 162                 if( album.b_found )
 163                 {
 164                     if( !strncmp( album.psz_arturl, "file://", 7 ) )
 165                         input_item_SetArtURL( p_item, album.psz_arturl );
 166                     else /* Actually get URL from cache */
 167                         playlist_FindArtInCache( p_item );
 168                     return 0;
 169                 }
 170                 else
 171                 {
 172                     return VLC_EGENERIC;
 173                 }
 174             }
 175         FOREACH_END();
 176     }
 177     free( psz_artist );
 178     free( psz_album );
 179
 180     playlist_FindArtInCache( p_item );
 181
 182     char *psz_arturl = input_item_GetArtURL( p_item );
 183     if( psz_arturl )
 184     {
 185         /* We already have an URL */
 186         if( !strncmp( psz_arturl, "file://", strlen( "file://" ) ) )
 187         {
 188             free( psz_arturl );
 189             return 0; /* Art is in cache, no need to go further */
 190         }
 191
 192         free( psz_arturl );
 193
 194         /* Art need to be put in cache */
 195         return 1;
 196     }
 197
 198     /* */
 199     psz_album = input_item_GetAlbum( p_item );
 200     psz_artist = input_item_GetArtist( p_item );
 201     if( psz_album && psz_artist )
 202     {
 203         msg_Dbg( p_fetcher->p_playlist, "searching art for %s - %s",
 204              psz_artist, psz_album );
 205     }
 206     else
 207     {
 208         psz_title = input_item_GetTitle( p_item );
 209         if( !psz_title )
 210             psz_title = input_item_GetName( p_item );
 211
 212         msg_Dbg( p_fetcher->p_playlist, "searching art for %s", psz_title );
 213         free( psz_title );
 214     }
 215
 216     /* Fetch the art url */
 217     i_ret = VLC_EGENERIC;
 218
 219     vlc_object_t *p_parent = VLC_OBJECT(p_fetcher->p_playlist);
 220     art_finder_t *p_finder =
 221         vlc_custom_create( p_parent, sizeof( *p_finder ), VLC_OBJECT_GENERIC,
 222                            "art finder" );
 223     if( p_finder != NULL)
 224     {
 225         module_t *p_module;
 226
 227         vlc_object_attach( p_finder, p_parent );
 228         p_finder->p_item = p_item;
 229
 230         p_module = module_need( p_finder, "art finder", NULL, false );
 231         if( p_module )
 232         {
 233             module_unneed( p_finder, p_module );
 234             /* Try immediately if found in cache by download URL */
 235             if( !playlist_FindArtInCache( p_item ) )
 236                 i_ret = 0;
 237             else
 238                 i_ret = 1;
 239         }
 240         vlc_object_release( p_finder );
 241     }
 242
 243     /* Record this album */
 244     if( psz_artist && psz_album )
 245     {
 246         playlist_album_t a;
 247         a.psz_artist = psz_artist;
 248         a.psz_album = psz_album;
 249         a.psz_arturl = input_item_GetArtURL( p_item );
 250         a.b_found = (i_ret == VLC_EGENERIC ? false : true );
 251         ARRAY_APPEND( p_fetcher->albums, a );
 252     }
 253     else
 254     {
 255         free( psz_artist );
 256         free( psz_album );
 257     }
 258
 259     return i_ret;
 260 }
 261
 262 /**
 263  * Download the art using the URL or an art downloaded
 264  * This function should be called only if data is not already in cache
 265  */
 266 static int DownloadArt( playlist_fetcher_t *p_fetcher, input_item_t *p_item )
 267 {
 268     char *psz_arturl = input_item_GetArtURL( p_item );
 269     assert( *psz_arturl );
 270
 271     if( !strncmp( psz_arturl , "file://", 7 ) )
 272     {
 273         msg_Dbg( p_fetcher->p_playlist,
 274                  "Album art is local file, no need to cache" );
 275         free( psz_arturl );
 276         return VLC_SUCCESS;
 277     }
 278
 279     if( !strncmp( psz_arturl , "APIC", 4 ) )
 280     {
 281         msg_Warn( p_fetcher->p_playlist, "APIC fetch not supported yet" );
 282         goto error;
 283     }
 284
 285     stream_t *p_stream = stream_UrlNew( p_fetcher->p_playlist, psz_arturl );
 286     if( !p_stream )
 287         goto error;
 288
 289     uint8_t *p_data = NULL;
 290     int i_data = 0;
 291     for( ;; )
 292     {
 293         int i_read = 65536;
 294
 295         if( i_data >= INT_MAX - i_read )
 296             break;
 297
 298         p_data = realloc_or_free( p_data, i_data + i_read );
 299         if( !p_data )
 300             break;
 301
 302         i_read = stream_Read( p_stream, &p_data[i_data], i_read );
 303         if( i_read <= 0 )
 304             break;
 305
 306         i_data += i_read;
 307     }
 308     stream_Delete( p_stream );
 309
 310     if( p_data && i_data > 0 )
 311     {
 312         char *psz_type = strrchr( psz_arturl, '.' );
 313         if( psz_type && strlen( psz_type ) > 5 )
 314             psz_type = NULL; /* remove extension if it's > to 4 characters */
 315
 316         playlist_SaveArt( p_fetcher->p_playlist, p_item, p_data, i_data, psz_type );
 317     }
 318
 319     free( p_data );
 320
 321     free( psz_arturl );
 322     return VLC_SUCCESS;
 323
 324 error:
 325     free( psz_arturl );
 326     return VLC_EGENERIC;
 327 }
 328
 329 /**
 330  * FetchMeta, run the "meta fetcher". They are going to do network
 331  * connections, and gather information upon the playing media.
 332  * (even artwork).
 333  */
 334 static void FetchMeta( playlist_fetcher_t *p_fetcher, input_item_t *p_item )
 335 {
 336     demux_meta_t *p_demux_meta = vlc_custom_create(p_fetcher->p_playlist,
 337                                        sizeof(*p_demux_meta),
 338                                        VLC_OBJECT_GENERIC, "demux meta" );
 339     if( !p_demux_meta )
 340         return;
 341
 342     vlc_object_attach( p_demux_meta, p_fetcher->p_playlist );
 343     p_demux_meta->p_demux = NULL;
 344     p_demux_meta->p_item = p_item;
 345
 346     module_t *p_meta_fetcher = module_need( p_demux_meta, "meta fetcher", NULL, false );
 347     if( p_meta_fetcher )
 348         module_unneed( p_demux_meta, p_meta_fetcher );
 349     vlc_object_release( p_demux_meta );
 350 }
 351
 352 static int InputEvent( vlc_object_t *p_this, char const *psz_cmd,
 353                        vlc_value_t oldval, vlc_value_t newval, void *p_data )
 354 {
 355     VLC_UNUSED(p_this); VLC_UNUSED(psz_cmd); VLC_UNUSED(oldval);
 356     vlc_cond_t *p_cond = p_data;
 357
 358     if( newval.i_int == INPUT_EVENT_ITEM_META ||
 359         newval.i_int == INPUT_EVENT_DEAD )
 360         vlc_cond_signal( p_cond );
 361
 362     return VLC_SUCCESS;
 363 }
 364
 365
 366 /* Check if it is not yet preparsed and if so wait for it
 367  * (at most 0.5s)
 368  * (This can happen if we fetch art on play)
 369  * FIXME this doesn't work if we need to fetch meta before art...
 370  */
 371 static void WaitPreparsed( playlist_fetcher_t *p_fetcher, input_item_t *p_item )
 372 {
 373     if( input_item_IsPreparsed( p_item ) )
 374         return;
 375
 376     input_thread_t *p_input = playlist_CurrentInput( p_fetcher->p_playlist );
 377     if( !p_input )
 378         return;
 379
 380     if( input_GetItem( p_input ) != p_item )
 381         goto exit;
 382
 383     vlc_cond_t cond;
 384     vlc_cond_init( &cond );
 385     var_AddCallback( p_input, "intf-event", InputEvent, &cond );
 386
 387     const mtime_t i_deadline = mdate() + 500*1000;
 388     bool b_timeout = false;
 389
 390     while( !p_input->b_eof && !p_input->b_error
 391         && !input_item_IsPreparsed( p_item ) && !b_timeout )
 392     {
 393         /* A bit weird, but input_item_IsPreparsed holds the protected value */
 394         /* FIXME: locking looks wrong here */
 395         vlc_mutex_lock( &p_fetcher->lock );
 396         if( vlc_cond_timedwait( &cond, &p_fetcher->lock, i_deadline ) )
 397             b_timeout = true;
 398         vlc_mutex_unlock( &p_fetcher->lock );
 399     }
 400
 401     var_DelCallback( p_input, "intf-event", InputEvent, &cond );
 402     vlc_cond_destroy( &cond );
 403
 404 exit:
 405     vlc_object_release( p_input );
 406 }
 407
 408 static void *Thread( void *p_data )
 409 {
 410     playlist_fetcher_t *p_fetcher = p_data;
 411     playlist_t *p_playlist = p_fetcher->p_playlist;
 412
 413     for( ;; )
 414     {
 415         input_item_t *p_item = NULL;
 416
 417         vlc_mutex_lock( &p_fetcher->lock );
 418         if( p_fetcher->i_waiting != 0 )
 419         {
 420             p_item = p_fetcher->pp_waiting[0];
 421             REMOVE_ELEM( p_fetcher->pp_waiting, p_fetcher->i_waiting, 0 );
 422         }
 423         else
 424         {
 425             p_fetcher->b_live = false;
 426             vlc_cond_signal( &p_fetcher->wait );
 427         }
 428         vlc_mutex_unlock( &p_fetcher->lock );
 429
 430         if( !p_item )
 431             break;
 432
 433         /* */
 434
 435         /* Wait that the input item is preparsed if it is being played */
 436         WaitPreparsed( p_fetcher, p_item );
 437
 438         /* Triggers "meta fetcher", eventually fetch meta on the network.
 439          * They are identical to "meta reader" expect that may actually
 440          * takes time. That's why they are running here.
 441          * The result of this fetch is not cached. */
 442         FetchMeta( p_fetcher, p_item );
 443
 444         /* Find art, and download it if needed */
 445         int i_ret = FindArt( p_fetcher, p_item );
 446         if( i_ret == 1 )
 447             i_ret = DownloadArt( p_fetcher, p_item );
 448
 449         /* */
 450         char *psz_name = input_item_GetName( p_item );
 451         if( !i_ret ) /* Art is now in cache */
 452         {
 453             PL_DEBUG( "found art for %s in cache", psz_name );
 454             input_item_SetArtFetched( p_item, true );
 455             var_SetAddress( p_playlist, "item-change", p_item );
 456         }
 457         else
 458         {
 459             PL_DEBUG( "art not found for %s", psz_name );
 460             input_item_SetArtNotFound( p_item, true );
 461         }
 462         free( psz_name );
 463         vlc_gc_decref( p_item );
 464     }
 465     return NULL;
 466 }