git.sesse.net Git - vlc/blob - modules/access/http.c

   1 /*****************************************************************************
   2  * http.c: HTTP input module
   3  *****************************************************************************
   4  * Copyright (C) 2001-2008 the VideoLAN team
   5  * $Id$
   6  *
   7  * Authors: Laurent Aimar <fenrir@via.ecp.fr>
   8  *          Christophe Massiot <massiot@via.ecp.fr>
   9  *          Rémi Denis-Courmont <rem # videolan.org>
  10  *          Antoine Cellerier <dionoea at videolan dot org>
  11  *
  12  * This program is free software; you can redistribute it and/or modify
  13  * it under the terms of the GNU General Public License as published by
  14  * the Free Software Foundation; either version 2 of the License, or
  15  * (at your option) any later version.
  16  *
  17  * This program is distributed in the hope that it will be useful,
  18  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  19  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  20  * GNU General Public License for more details.
  21  *
  22  * You should have received a copy of the GNU General Public License
  23  * along with this program; if not, write to the Free Software
  24  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston MA 02110-1301, USA.
  25  *****************************************************************************/
  26
  27 /*****************************************************************************
  28  * Preamble
  29  *****************************************************************************/
  30 #ifdef HAVE_CONFIG_H
  31 # include "config.h"
  32 #endif
  33
  34 #include <vlc_common.h>
  35 #include <vlc_plugin.h>
  36
  37
  38 #include <vlc_access.h>
  39
  40 #include <vlc_dialog.h>
  41 #include <vlc_meta.h>
  42 #include <vlc_network.h>
  43 #include <vlc_url.h>
  44 #include <vlc_tls.h>
  45 #include <vlc_strings.h>
  46 #include <vlc_charset.h>
  47 #include <vlc_input.h>
  48 #include <vlc_md5.h>
  49 #include <vlc_http.h>
  50
  51 #ifdef HAVE_ZLIB_H
  52 #   include <zlib.h>
  53 #endif
  54
  55 #include <assert.h>
  56
  57 #ifdef HAVE_LIBPROXY
  58 #    include <proxy.h>
  59 #endif
  60
  61 #ifdef WIN32
  62 #   include <windows.h>
  63 #endif
  64
  65 /*****************************************************************************
  66  * Module descriptor
  67  *****************************************************************************/
  68 static int  Open ( vlc_object_t * );
  69 static void Close( vlc_object_t * );
  70
  71 #define PROXY_TEXT N_("HTTP proxy")
  72 #define PROXY_LONGTEXT N_( \
  73     "HTTP proxy to be used It must be of the form " \
  74     "http://[user@]myproxy.mydomain:myport/ ; " \
  75     "if empty, the http_proxy environment variable will be tried." )
  76
  77 #define PROXY_PASS_TEXT N_("HTTP proxy password")
  78 #define PROXY_PASS_LONGTEXT N_( \
  79     "If your HTTP proxy requires a password, set it here." )
  80
  81 #define CACHING_TEXT N_("Caching value in ms")
  82 #define CACHING_LONGTEXT N_( \
  83     "Caching value for HTTP streams. This " \
  84     "value should be set in milliseconds." )
  85
  86 #define AGENT_TEXT N_("HTTP user agent")
  87 #define AGENT_LONGTEXT N_("User agent that will be " \
  88     "used for the connection.")
  89
  90 #define RECONNECT_TEXT N_("Auto re-connect")
  91 #define RECONNECT_LONGTEXT N_( \
  92     "Automatically try to reconnect to the stream in case of a sudden " \
  93     "disconnect." )
  94
  95 #define CONTINUOUS_TEXT N_("Continuous stream")
  96 #define CONTINUOUS_LONGTEXT N_("Read a file that is " \
  97     "being constantly updated (for example, a JPG file on a server). " \
  98     "You should not globally enable this option as it will break all other " \
  99     "types of HTTP streams." )
 100
 101 #define FORWARD_COOKIES_TEXT N_("Forward Cookies")
 102 #define FORWARD_COOKIES_LONGTEXT N_("Forward Cookies across http redirections.")
 103
 104 #define MAX_REDIRECT_TEXT N_("Max number of redirection")
 105 #define MAX_REDIRECT_LONGTEXT N_("Limit the number of redirection to follow.")
 106
 107 #define USE_IE_PROXY_TEXT N_("Use Internet Explorer entered HTTP proxy server")
 108 #define USE_IE_PROXY_LONGTEXT N_("Use Internet Explorer entered HTTP proxy " \
 109     "server for all URL. Don't take into account bypasses settings and auto " \
 110     "configuration scripts.")
 111
 112 vlc_module_begin ()
 113     set_description( N_("HTTP input") )
 114     set_capability( "access", 0 )
 115     set_shortname( N_( "HTTP(S)" ) )
 116     set_category( CAT_INPUT )
 117     set_subcategory( SUBCAT_INPUT_ACCESS )
 118
 119     add_string( "http-proxy", NULL, NULL, PROXY_TEXT, PROXY_LONGTEXT,
 120                 false )
 121     add_password( "http-proxy-pwd", NULL, NULL,
 122                   PROXY_PASS_TEXT, PROXY_PASS_LONGTEXT, false )
 123     add_integer( "http-caching", 4 * DEFAULT_PTS_DELAY / 1000, NULL,
 124                  CACHING_TEXT, CACHING_LONGTEXT, true )
 125         change_safe()
 126     add_string( "http-user-agent", COPYRIGHT_MESSAGE , NULL, AGENT_TEXT,
 127                 AGENT_LONGTEXT, true )
 128         change_safe()
 129     add_bool( "http-reconnect", false, NULL, RECONNECT_TEXT,
 130               RECONNECT_LONGTEXT, true )
 131     add_bool( "http-continuous", false, NULL, CONTINUOUS_TEXT,
 132               CONTINUOUS_LONGTEXT, true )
 133         change_safe()
 134     add_bool( "http-forward-cookies", true, NULL, FORWARD_COOKIES_TEXT,
 135               FORWARD_COOKIES_LONGTEXT, true )
 136     add_integer( "http-max-redirect", 5, NULL, MAX_REDIRECT_TEXT,
 137                  MAX_REDIRECT_LONGTEXT, true )
 138 #ifdef WIN32
 139     add_bool( "http-use-IE-proxy", false, NULL, USE_IE_PROXY_TEXT,
 140               USE_IE_PROXY_LONGTEXT, true )
 141 #endif
 142     add_obsolete_string("http-user")
 143     add_obsolete_string("http-pwd")
 144     add_shortcut( "http" )
 145     add_shortcut( "https" )
 146     add_shortcut( "unsv" )
 147     add_shortcut( "itpc" ) /* iTunes Podcast */
 148     add_shortcut( "icyx" )
 149     set_callbacks( Open, Close )
 150 vlc_module_end ()
 151
 152 /*****************************************************************************
 153  * Local prototypes
 154  *****************************************************************************/
 155
 156 struct access_sys_t
 157 {
 158     int fd;
 159     bool b_error;
 160     tls_session_t *p_tls;
 161     v_socket_t    *p_vs;
 162
 163     /* From uri */
 164     vlc_url_t url;
 165     char    *psz_user_agent;
 166     http_auth_t auth;
 167
 168     /* Proxy */
 169     bool b_proxy;
 170     vlc_url_t  proxy;
 171     http_auth_t proxy_auth;
 172     char       *psz_proxy_passbuf;
 173
 174     /* */
 175     int        i_code;
 176     const char *psz_protocol;
 177     int        i_version;
 178
 179     char       *psz_mime;
 180     char       *psz_pragma;
 181     char       *psz_location;
 182     bool b_mms;
 183     bool b_icecast;
 184     bool b_ssl;
 185 #ifdef HAVE_ZLIB_H
 186     bool b_compressed;
 187     struct
 188     {
 189         z_stream   stream;
 190         uint8_t   *p_buffer;
 191     } inflate;
 192 #endif
 193
 194     bool b_chunked;
 195     int64_t    i_chunk;
 196
 197     int        i_icy_meta;
 198     uint64_t   i_icy_offset;
 199     char       *psz_icy_name;
 200     char       *psz_icy_genre;
 201     char       *psz_icy_title;
 202
 203     uint64_t i_remaining;
 204
 205     bool b_seekable;
 206     bool b_reconnect;
 207     bool b_continuous;
 208     bool b_pace_control;
 209     bool b_persist;
 210     bool b_has_size;
 211
 212     vlc_array_t * cookies;
 213 };
 214
 215 /* */
 216 static int OpenWithCookies( vlc_object_t *p_this, const char *psz_access,
 217                             int i_nb_redirect, int i_max_redirect,
 218                             vlc_array_t *cookies );
 219
 220 /* */
 221 static ssize_t Read( access_t *, uint8_t *, size_t );
 222 static ssize_t ReadCompressed( access_t *, uint8_t *, size_t );
 223 static int Seek( access_t *, uint64_t );
 224 static int Control( access_t *, int, va_list );
 225
 226 /* */
 227 static int Connect( access_t *, uint64_t );
 228 static int Request( access_t *p_access, uint64_t i_tell );
 229 static void Disconnect( access_t * );
 230
 231 /* Small Cookie utilities. Cookies support is partial. */
 232 static char * cookie_get_content( const char * cookie );
 233 static char * cookie_get_domain( const char * cookie );
 234 static char * cookie_get_name( const char * cookie );
 235 static void cookie_append( vlc_array_t * cookies, char * cookie );
 236
 237
 238 static void AuthReply( access_t *p_acces, const char *psz_prefix,
 239                        vlc_url_t *p_url, http_auth_t *p_auth );
 240 static int AuthCheckReply( access_t *p_access, const char *psz_header,
 241                            vlc_url_t *p_url, http_auth_t *p_auth );
 242
 243 /*****************************************************************************
 244  * Open:
 245  *****************************************************************************/
 246 static int Open( vlc_object_t *p_this )
 247 {
 248     access_t *p_access = (access_t*)p_this;
 249     return OpenWithCookies( p_this, p_access->psz_access, 0,
 250                 var_CreateGetInteger( p_access, "http-max-redirect" ), NULL );
 251 }
 252
 253 /**
 254  * Open the given url using the given cookies
 255  * @param p_this: the vlc object
 256  * @psz_access: the acces to use (http, https, ...) (this value must be used
 257  *              instead of p_access->psz_access)
 258  * @i_nb_redirect: the number of redirection already done
 259  * @i_max_redirect: limit to the number of redirection to follow
 260  * @cookies: the available cookies
 261  * @return vlc error codes
 262  */
 263 static int OpenWithCookies( vlc_object_t *p_this, const char *psz_access,
 264                             int i_nb_redirect, int i_max_redirect,
 265                             vlc_array_t *cookies )
 266 {
 267     access_t     *p_access = (access_t*)p_this;
 268     access_sys_t *p_sys;
 269     char         *psz, *p;
 270
 271     /* Only forward an store cookies if the corresponding option is activated */
 272     bool   b_forward_cookies = var_CreateGetBool( p_access, "http-forward-cookies" );
 273     vlc_array_t * saved_cookies = b_forward_cookies ? (cookies ? cookies : vlc_array_new()) : NULL;
 274
 275     /* Set up p_access */
 276     STANDARD_READ_ACCESS_INIT;
 277 #ifdef HAVE_ZLIB_H
 278     p_access->pf_read = ReadCompressed;
 279 #endif
 280     p_sys->fd = -1;
 281     p_sys->b_proxy = false;
 282     p_sys->psz_proxy_passbuf = NULL;
 283     p_sys->i_version = 1;
 284     p_sys->b_seekable = true;
 285     p_sys->psz_mime = NULL;
 286     p_sys->psz_pragma = NULL;
 287     p_sys->b_mms = false;
 288     p_sys->b_icecast = false;
 289     p_sys->psz_location = NULL;
 290     p_sys->psz_user_agent = NULL;
 291     p_sys->b_pace_control = true;
 292     p_sys->b_ssl = false;
 293 #ifdef HAVE_ZLIB_H
 294     p_sys->b_compressed = false;
 295     /* 15 is the max windowBits, +32 to enable optional gzip decoding */
 296     if( inflateInit2( &p_sys->inflate.stream, 32+15 ) != Z_OK )
 297         msg_Warn( p_access, "Error during zlib initialisation: %s",
 298                   p_sys->inflate.stream.msg );
 299     if( zlibCompileFlags() & (1<<17) )
 300         msg_Warn( p_access, "Your zlib was compiled without gzip support." );
 301     p_sys->inflate.p_buffer = NULL;
 302 #endif
 303     p_sys->p_tls = NULL;
 304     p_sys->p_vs = NULL;
 305     p_sys->i_icy_meta = 0;
 306     p_sys->i_icy_offset = 0;
 307     p_sys->psz_icy_name = NULL;
 308     p_sys->psz_icy_genre = NULL;
 309     p_sys->psz_icy_title = NULL;
 310     p_sys->i_remaining = 0;
 311     p_sys->b_persist = false;
 312     p_sys->b_has_size = false;
 313     p_access->info.i_size = 0;
 314     p_access->info.i_pos  = 0;
 315     p_access->info.b_eof  = false;
 316
 317     p_sys->cookies = saved_cookies;
 318
 319     http_auth_Init( &p_sys->auth );
 320     http_auth_Init( &p_sys->proxy_auth );
 321
 322     /* Parse URI - remove spaces */
 323     p = psz = strdup( p_access->psz_path );
 324     while( (p = strchr( p, ' ' )) != NULL )
 325         *p = '+';
 326     vlc_UrlParse( &p_sys->url, psz, 0 );
 327     free( psz );
 328
 329     if( p_sys->url.psz_host == NULL || *p_sys->url.psz_host == '\0' )
 330     {
 331         msg_Warn( p_access, "invalid host" );
 332         goto error;
 333     }
 334     if( !strncmp( psz_access, "https", 5 ) )
 335     {
 336         /* HTTP over SSL */
 337         p_sys->b_ssl = true;
 338         if( p_sys->url.i_port <= 0 )
 339             p_sys->url.i_port = 443;
 340     }
 341     else
 342     {
 343         if( p_sys->url.i_port <= 0 )
 344             p_sys->url.i_port = 80;
 345     }
 346
 347     /* Do user agent */
 348     p_sys->psz_user_agent = var_CreateGetString( p_access, "http-user-agent" );
 349
 350     /* Check proxy */
 351     psz = var_CreateGetNonEmptyString( p_access, "http-proxy" );
 352     if( psz )
 353     {
 354         p_sys->b_proxy = true;
 355         vlc_UrlParse( &p_sys->proxy, psz, 0 );
 356         free( psz );
 357     }
 358 #ifdef HAVE_LIBPROXY
 359     else
 360     {
 361         pxProxyFactory *pf = px_proxy_factory_new();
 362         if (pf)
 363         {
 364             char *buf;
 365             int i;
 366             i=asprintf(&buf, "%s://%s", psz_access, p_access->psz_path);
 367             if (i >= 0)
 368             {
 369                 msg_Dbg(p_access, "asking libproxy about url '%s'", buf);
 370                 char **proxies = px_proxy_factory_get_proxies(pf, buf);
 371                 if (proxies[0])
 372                 {
 373                     msg_Dbg(p_access, "libproxy suggest to use '%s'", proxies[0]);
 374                     if(strcmp(proxies[0],"direct://") != 0)
 375                     {
 376                         p_sys->b_proxy = true;
 377                         vlc_UrlParse( &p_sys->proxy, proxies[0], 0);
 378                     }
 379                 }
 380                 for(i=0;proxies[i];i++) free(proxies[i]);
 381                 free(proxies);
 382                 free(buf);
 383             }
 384             px_proxy_factory_free(pf);
 385         }
 386         else
 387         {
 388             msg_Err(p_access, "Allocating memory for libproxy failed");
 389         }
 390     }
 391 #elif defined( WIN32 )
 392     else
 393     {
 394         if( var_CreateGetBool( p_access, "http-use-IE-proxy" ) )
 395         {
 396             /* Try to get the proxy server address from Windows internet settings using registry. */
 397             HKEY h_key;
 398             /* Open the key */
 399             if( RegOpenKeyEx( HKEY_CURRENT_USER, "Software\\Microsoft" \
 400                               "\\Windows\\CurrentVersion\\Internet Settings",
 401                               0, KEY_READ, &h_key ) == ERROR_SUCCESS )
 402             {
 403                 DWORD i_dataReadSize = 4; /* sizeof( DWORD ); */
 404                 DWORD proxyEnable = 0;
 405                 /* Get the proxy enable value */
 406                 if( RegQueryValueEx( h_key, "ProxyEnable", NULL, NULL,
 407                                      (char *)&proxyEnable, &i_dataReadSize )
 408                                      == ERROR_SUCCESS )
 409                 {
 410                     if( proxyEnable )
 411                     {
 412                         /* Proxy is enable */
 413                         char psz_key[256];
 414                         i_dataReadSize = 256;
 415                         if( RegQueryValueEx( h_key, "ProxyServer",
 416                                              NULL, NULL, psz_key,
 417                                              &i_dataReadSize )
 418                                              == ERROR_SUCCESS )
 419                         {
 420                             /* Get the proxy URL :
 421                             Proxy server value in the registry can be something like "address:port"
 422                             or "ftp=adress1:port1;http=adress2:port2 ..." depending of the
 423                             confirguration. */
 424                             char *psz_proxy;
 425                             psz_proxy = strstr( psz_key, "http=" );
 426                             if( psz_proxy != NULL )
 427                             {
 428                                 psz_proxy += strlen( "http=" );
 429                                 char *psz_endUrl = strchr( psz_proxy, ';' );
 430                                 if( psz_endUrl != NULL )
 431                                     *psz_endUrl = '\0';
 432                             }
 433                             else
 434                                 psz_proxy = psz_key;
 435                             /* Set proxy enable for this connection. */
 436                             p_sys->b_proxy = true;
 437                             vlc_UrlParse( &p_sys->proxy, psz_proxy, 0 );
 438                         }
 439                         msg_Warn( p_access, "Couldn't read in registry " \
 440                                   "the proxy server address." );
 441                     }
 442                 }
 443                 else
 444                     msg_Warn( p_access, "Couldn't read in registry if the " \
 445                               "proxy is enable or not." );
 446             }
 447             else
 448                 msg_Warn( p_access, "Couldn't open internet settings key " \
 449                           "in registry." );
 450         }
 451     }
 452 #elif HAVE_GETENV
 453     else
 454     {
 455         psz = getenv( "http_proxy" );
 456         if( psz )
 457         {
 458             p_sys->b_proxy = true;
 459             vlc_UrlParse( &p_sys->proxy, psz, 0 );
 460         }
 461     }
 462 #endif
 463
 464     if( psz ) /* No, this is NOT a use-after-free error */
 465     {
 466         psz = var_CreateGetNonEmptyString( p_access, "http-proxy-pwd" );
 467         if( psz )
 468             p_sys->proxy.psz_password = p_sys->psz_proxy_passbuf = psz;
 469     }
 470
 471     if( p_sys->b_proxy )
 472     {
 473         if( p_sys->proxy.psz_host == NULL || *p_sys->proxy.psz_host == '\0' )
 474         {
 475             msg_Warn( p_access, "invalid proxy host" );
 476             goto error;
 477         }
 478         if( p_sys->proxy.i_port <= 0 )
 479         {
 480             p_sys->proxy.i_port = 80;
 481         }
 482     }
 483
 484     msg_Dbg( p_access, "http: server='%s' port=%d file='%s",
 485              p_sys->url.psz_host, p_sys->url.i_port, p_sys->url.psz_path );
 486     if( p_sys->b_proxy )
 487     {
 488         msg_Dbg( p_access, "      proxy %s:%d", p_sys->proxy.psz_host,
 489                  p_sys->proxy.i_port );
 490     }
 491     if( p_sys->url.psz_username && *p_sys->url.psz_username )
 492     {
 493         msg_Dbg( p_access, "      user='%s'", p_sys->url.psz_username );
 494     }
 495
 496     p_sys->b_reconnect = var_CreateGetBool( p_access, "http-reconnect" );
 497     p_sys->b_continuous = var_CreateGetBool( p_access, "http-continuous" );
 498
 499 connect:
 500     /* Connect */
 501     switch( Connect( p_access, 0 ) )
 502     {
 503         case -1:
 504             goto error;
 505
 506         case -2:
 507             /* Retry with http 1.0 */
 508             msg_Dbg( p_access, "switching to HTTP version 1.0" );
 509             p_sys->i_version = 0;
 510             p_sys->b_seekable = false;
 511
 512             if( !vlc_object_alive (p_access) || Connect( p_access, 0 ) )
 513                 goto error;
 514
 515 #ifndef NDEBUG
 516         case 0:
 517             break;
 518
 519         default:
 520             msg_Err( p_access, "You should not be here" );
 521             abort();
 522 #endif
 523     }
 524
 525     if( p_sys->i_code == 401 )
 526     {
 527         char *psz_login, *psz_password;
 528         /* FIXME ? */
 529         if( p_sys->url.psz_username && p_sys->url.psz_password &&
 530             p_sys->auth.psz_nonce && p_sys->auth.i_nonce == 0 )
 531         {
 532             Disconnect( p_access );
 533             goto connect;
 534         }
 535         msg_Dbg( p_access, "authentication failed for realm %s",
 536                  p_sys->auth.psz_realm );
 537         dialog_Login( p_access, &psz_login, &psz_password,
 538                       _("HTTP authentication"),
 539              _("Please enter a valid login name and a password for realm %s."),
 540                       p_sys->auth.psz_realm );
 541         if( psz_login != NULL && psz_password != NULL )
 542         {
 543             msg_Dbg( p_access, "retrying with user=%s", psz_login );
 544             p_sys->url.psz_username = psz_login;
 545             p_sys->url.psz_password = psz_password;
 546             Disconnect( p_access );
 547             goto connect;
 548         }
 549         else
 550         {
 551             free( psz_login );
 552             free( psz_password );
 553             goto error;
 554         }
 555     }
 556
 557     if( ( p_sys->i_code == 301 || p_sys->i_code == 302 ||
 558           p_sys->i_code == 303 || p_sys->i_code == 307 ) &&
 559         p_sys->psz_location && *p_sys->psz_location )
 560     {
 561         msg_Dbg( p_access, "redirection to %s", p_sys->psz_location );
 562
 563         /* Check the number of redirection already done */
 564         if( i_nb_redirect >= i_max_redirect )
 565         {
 566             msg_Err( p_access, "Too many redirection: break potential infinite"
 567                      "loop" );
 568             goto error;
 569         }
 570
 571
 572         /* Do not accept redirection outside of HTTP works */
 573         const char *psz_protocol;
 574         if( !strncmp( p_sys->psz_location, "http:", 5 ) )
 575             psz_protocol = "http";
 576         else if( !strncmp( p_sys->psz_location, "https:", 6 ) )
 577             psz_protocol = "https";
 578         else
 579         {
 580             msg_Err( p_access, "insecure redirection ignored" );
 581             goto error;
 582         }
 583         free( p_access->psz_path );
 584         p_access->psz_path = strdup( p_sys->psz_location );
 585         /* Clean up current Open() run */
 586         vlc_UrlClean( &p_sys->url );
 587         http_auth_Reset( &p_sys->auth );
 588         vlc_UrlClean( &p_sys->proxy );
 589         free( p_sys->psz_proxy_passbuf );
 590         http_auth_Reset( &p_sys->proxy_auth );
 591         free( p_sys->psz_mime );
 592         free( p_sys->psz_pragma );
 593         free( p_sys->psz_location );
 594         free( p_sys->psz_user_agent );
 595
 596         Disconnect( p_access );
 597         cookies = p_sys->cookies;
 598 #ifdef HAVE_ZLIB_H
 599         inflateEnd( &p_sys->inflate.stream );
 600 #endif
 601         free( p_sys );
 602
 603         /* Do new Open() run with new data */
 604         return OpenWithCookies( p_this, psz_protocol, i_nb_redirect + 1,
 605                                 i_max_redirect, cookies );
 606     }
 607
 608     if( p_sys->b_mms )
 609     {
 610         msg_Dbg( p_access, "this is actually a live mms server, BAIL" );
 611         goto error;
 612     }
 613
 614     if( !strcmp( p_sys->psz_protocol, "ICY" ) || p_sys->b_icecast )
 615     {
 616         if( p_sys->psz_mime && strcasecmp( p_sys->psz_mime, "application/ogg" ) )
 617         {
 618             if( !strcasecmp( p_sys->psz_mime, "video/nsv" ) ||
 619                 !strcasecmp( p_sys->psz_mime, "video/nsa" ) )
 620             {
 621                 free( p_access->psz_demux );
 622                 p_access->psz_demux = strdup( "nsv" );
 623             }
 624             else if( !strcasecmp( p_sys->psz_mime, "audio/aac" ) ||
 625                      !strcasecmp( p_sys->psz_mime, "audio/aacp" ) )
 626             {
 627                 free( p_access->psz_demux );
 628                 p_access->psz_demux = strdup( "m4a" );
 629             }
 630             else if( !strcasecmp( p_sys->psz_mime, "audio/mpeg" ) )
 631             {
 632                 free( p_access->psz_demux );
 633                 p_access->psz_demux = strdup( "mp3" );
 634             }
 635
 636             msg_Info( p_access, "Raw-audio server found, %s demuxer selected",
 637                       p_access->psz_demux );
 638
 639 #if 0       /* Doesn't work really well because of the pre-buffering in
 640              * shoutcast servers (the buffer content will be sent as fast as
 641              * possible). */
 642             p_sys->b_pace_control = false;
 643 #endif
 644         }
 645         else if( !p_sys->psz_mime )
 646         {
 647             free( p_access->psz_demux );
 648             /* Shoutcast */
 649             p_access->psz_demux = strdup( "mp3" );
 650         }
 651         /* else probably Ogg Vorbis */
 652     }
 653     else if( !strcasecmp( psz_access, "unsv" ) &&
 654              p_sys->psz_mime &&
 655              !strcasecmp( p_sys->psz_mime, "misc/ultravox" ) )
 656     {
 657         free( p_access->psz_demux );
 658         /* Grrrr! detect ultravox server and force NSV demuxer */
 659         p_access->psz_demux = strdup( "nsv" );
 660     }
 661     else if( !strcmp( psz_access, "itpc" ) )
 662     {
 663         free( p_access->psz_demux );
 664         p_access->psz_demux = strdup( "podcast" );
 665     }
 666     else if( p_sys->psz_mime &&
 667              !strncasecmp( p_sys->psz_mime, "application/xspf+xml", 20 ) &&
 668              ( memchr( " ;\t", p_sys->psz_mime[20], 4 ) != NULL ) )
 669     {
 670         free( p_access->psz_demux );
 671         p_access->psz_demux = strdup( "xspf-open" );
 672     }
 673
 674     if( p_sys->b_reconnect ) msg_Dbg( p_access, "auto re-connect enabled" );
 675
 676     /* PTS delay */
 677     var_Create( p_access, "http-caching", VLC_VAR_INTEGER |VLC_VAR_DOINHERIT );
 678
 679     return VLC_SUCCESS;
 680
 681 error:
 682     vlc_UrlClean( &p_sys->url );
 683     vlc_UrlClean( &p_sys->proxy );
 684     free( p_sys->psz_proxy_passbuf );
 685     free( p_sys->psz_mime );
 686     free( p_sys->psz_pragma );
 687     free( p_sys->psz_location );
 688     free( p_sys->psz_user_agent );
 689
 690     Disconnect( p_access );
 691
 692     if( p_sys->cookies )
 693     {
 694         int i;
 695         for( i = 0; i < vlc_array_count( p_sys->cookies ); i++ )
 696             free(vlc_array_item_at_index( p_sys->cookies, i ));
 697         vlc_array_destroy( p_sys->cookies );
 698     }
 699
 700 #ifdef HAVE_ZLIB_H
 701     inflateEnd( &p_sys->inflate.stream );
 702 #endif
 703     free( p_sys );
 704     return VLC_EGENERIC;
 705 }
 706
 707 /*****************************************************************************
 708  * Close:
 709  *****************************************************************************/
 710 static void Close( vlc_object_t *p_this )
 711 {
 712     access_t     *p_access = (access_t*)p_this;
 713     access_sys_t *p_sys = p_access->p_sys;
 714
 715     vlc_UrlClean( &p_sys->url );
 716     http_auth_Reset( &p_sys->auth );
 717     vlc_UrlClean( &p_sys->proxy );
 718     http_auth_Reset( &p_sys->proxy_auth );
 719
 720     free( p_sys->psz_mime );
 721     free( p_sys->psz_pragma );
 722     free( p_sys->psz_location );
 723
 724     free( p_sys->psz_icy_name );
 725     free( p_sys->psz_icy_genre );
 726     free( p_sys->psz_icy_title );
 727
 728     free( p_sys->psz_user_agent );
 729
 730     Disconnect( p_access );
 731
 732     if( p_sys->cookies )
 733     {
 734         int i;
 735         for( i = 0; i < vlc_array_count( p_sys->cookies ); i++ )
 736             free(vlc_array_item_at_index( p_sys->cookies, i ));
 737         vlc_array_destroy( p_sys->cookies );
 738     }
 739
 740 #ifdef HAVE_ZLIB_H
 741     inflateEnd( &p_sys->inflate.stream );
 742     free( p_sys->inflate.p_buffer );
 743 #endif
 744
 745     free( p_sys );
 746 }
 747
 748 /*****************************************************************************
 749  * Read: Read up to i_len bytes from the http connection and place in
 750  * p_buffer. Return the actual number of bytes read
 751  *****************************************************************************/
 752 static int ReadICYMeta( access_t *p_access );
 753 static ssize_t Read( access_t *p_access, uint8_t *p_buffer, size_t i_len )
 754 {
 755     access_sys_t *p_sys = p_access->p_sys;
 756     int i_read;
 757
 758     if( p_sys->fd == -1 )
 759     {
 760         p_access->info.b_eof = true;
 761         return 0;
 762     }
 763
 764     if( p_sys->b_has_size &&
 765         i_len + p_access->info.i_pos > p_access->info.i_size )
 766     {
 767         if( ( i_len = p_access->info.i_size - p_access->info.i_pos ) == 0 )
 768         {
 769             p_access->info.b_eof = true;
 770             return 0;
 771         }
 772     }
 773
 774     if( p_sys->b_chunked )
 775     {
 776         if( p_sys->i_chunk < 0 )
 777         {
 778             p_access->info.b_eof = true;
 779             return 0;
 780         }
 781
 782         if( p_sys->i_chunk <= 0 )
 783         {
 784             char *psz = net_Gets( p_access, p_sys->fd, p_sys->p_vs );
 785             /* read the chunk header */
 786             if( psz == NULL )
 787             {
 788                 /* fatal error - end of file */
 789                 msg_Dbg( p_access, "failed reading chunk-header line" );
 790                 return 0;
 791             }
 792             p_sys->i_chunk = strtoll( psz, NULL, 16 );
 793             free( psz );
 794
 795             if( p_sys->i_chunk <= 0 )   /* eof */
 796             {
 797                 p_sys->i_chunk = -1;
 798                 p_access->info.b_eof = true;
 799                 return 0;
 800             }
 801         }
 802
 803         if( i_len > p_sys->i_chunk )
 804         {
 805             i_len = p_sys->i_chunk;
 806         }
 807     }
 808     else if( p_sys->b_has_size && i_len > p_sys->i_remaining) {
 809         /* Only ask for the remaining length */
 810         i_len = p_sys->i_remaining;
 811         if(i_len == 0) {
 812             p_access->info.b_eof = true;
 813             return 0;
 814         }
 815     }
 816
 817
 818     if( p_sys->i_icy_meta > 0 && p_access->info.i_pos-p_sys->i_icy_offset > 0 )
 819     {
 820         int64_t i_next = p_sys->i_icy_meta -
 821                                     (p_access->info.i_pos - p_sys->i_icy_offset ) % p_sys->i_icy_meta;
 822
 823         if( i_next == p_sys->i_icy_meta )
 824         {
 825             if( ReadICYMeta( p_access ) )
 826             {
 827                 p_access->info.b_eof = true;
 828                 return -1;
 829             }
 830         }
 831         if( i_len > i_next )
 832             i_len = i_next;
 833     }
 834
 835     i_read = net_Read( p_access, p_sys->fd, p_sys->p_vs, p_buffer, i_len, false );
 836
 837     if( i_read > 0 )
 838     {
 839         p_access->info.i_pos += i_read;
 840
 841         if( p_sys->b_chunked )
 842         {
 843             p_sys->i_chunk -= i_read;
 844             if( p_sys->i_chunk <= 0 )
 845             {
 846                 /* read the empty line */
 847                 char *psz = net_Gets( p_access, p_sys->fd, p_sys->p_vs );
 848                 free( psz );
 849             }
 850         }
 851     }
 852     else if( i_read <= 0 )
 853     {
 854         /*
 855          * I very much doubt that this will work.
 856          * If i_read == 0, the connection *IS* dead, so the only
 857          * sensible thing to do is Disconnect() and then retry.
 858          * Otherwise, I got recv() completely wrong. -- Courmisch
 859          */
 860         if( p_sys->b_continuous )
 861         {
 862             Request( p_access, 0 );
 863             p_sys->b_continuous = false;
 864             i_read = Read( p_access, p_buffer, i_len );
 865             p_sys->b_continuous = true;
 866         }
 867         Disconnect( p_access );
 868         if( p_sys->b_reconnect && vlc_object_alive( p_access ) )
 869         {
 870             msg_Dbg( p_access, "got disconnected, trying to reconnect" );
 871             if( Connect( p_access, p_access->info.i_pos ) )
 872             {
 873                 msg_Dbg( p_access, "reconnection failed" );
 874             }
 875             else
 876             {
 877                 p_sys->b_reconnect = false;
 878                 i_read = Read( p_access, p_buffer, i_len );
 879                 p_sys->b_reconnect = true;
 880             }
 881         }
 882
 883         if( i_read == 0 )
 884             p_access->info.b_eof = true;
 885         if( i_read < 0 )
 886             p_sys->b_error = true;
 887     }
 888
 889     if( p_sys->b_has_size )
 890     {
 891         assert( i_read <= p_sys->i_remaining );
 892         p_sys->i_remaining -= i_read;
 893     }
 894
 895     return i_read;
 896 }
 897
 898 static int ReadICYMeta( access_t *p_access )
 899 {
 900     access_sys_t *p_sys = p_access->p_sys;
 901
 902     uint8_t buffer;
 903     char *p, *psz_meta;
 904     int i_read;
 905
 906     /* Read meta data length */
 907     i_read = net_Read( p_access, p_sys->fd, p_sys->p_vs, &buffer, 1,
 908                        true );
 909     if( i_read <= 0 )
 910         return VLC_EGENERIC;
 911     if( buffer == 0 )
 912         return VLC_SUCCESS;
 913
 914     i_read = buffer << 4;
 915     /* msg_Dbg( p_access, "ICY meta size=%u", i_read); */
 916
 917     psz_meta = malloc( i_read + 1 );
 918     if( net_Read( p_access, p_sys->fd, p_sys->p_vs,
 919                   (uint8_t *)psz_meta, i_read, true ) != i_read )
 920     {
 921         free( psz_meta );
 922         return VLC_EGENERIC;
 923     }
 924
 925     psz_meta[i_read] = '\0'; /* Just in case */
 926
 927     /* msg_Dbg( p_access, "icy-meta=%s", psz_meta ); */
 928
 929     /* Now parse the meta */
 930     /* Look for StreamTitle= */
 931     p = strcasestr( (char *)psz_meta, "StreamTitle=" );
 932     if( p )
 933     {
 934         p += strlen( "StreamTitle=" );
 935         if( *p == '\'' || *p == '"' )
 936         {
 937             char closing[] = { p[0], ';', '\0' };
 938             char *psz = strstr( &p[1], closing );
 939             if( !psz )
 940                 psz = strchr( &p[1], ';' );
 941
 942             if( psz ) *psz = '\0';
 943         }
 944         else
 945         {
 946             char *psz = strchr( &p[1], ';' );
 947             if( psz ) *psz = '\0';
 948         }
 949
 950         if( !p_sys->psz_icy_title ||
 951             strcmp( p_sys->psz_icy_title, &p[1] ) )
 952         {
 953             free( p_sys->psz_icy_title );
 954             char *psz_tmp = strdup( &p[1] );
 955             p_sys->psz_icy_title = EnsureUTF8( psz_tmp );
 956             if( !p_sys->psz_icy_title )
 957                 free( psz_tmp );
 958             p_access->info.i_update |= INPUT_UPDATE_META;
 959
 960             msg_Dbg( p_access, "New Title=%s", p_sys->psz_icy_title );
 961         }
 962     }
 963     free( psz_meta );
 964
 965     return VLC_SUCCESS;
 966 }
 967
 968 #ifdef HAVE_ZLIB_H
 969 static ssize_t ReadCompressed( access_t *p_access, uint8_t *p_buffer,
 970                                size_t i_len )
 971 {
 972     access_sys_t *p_sys = p_access->p_sys;
 973
 974     if( p_sys->b_compressed )
 975     {
 976         int i_ret;
 977
 978         if( !p_sys->inflate.p_buffer )
 979             p_sys->inflate.p_buffer = malloc( 256 * 1024 );
 980
 981         if( p_sys->inflate.stream.avail_in == 0 )
 982         {
 983             ssize_t i_read = Read( p_access, p_sys->inflate.p_buffer + p_sys->inflate.stream.avail_in, 256 * 1024 );
 984             if( i_read <= 0 ) return i_read;
 985             p_sys->inflate.stream.next_in = p_sys->inflate.p_buffer;
 986             p_sys->inflate.stream.avail_in = i_read;
 987         }
 988
 989         p_sys->inflate.stream.avail_out = i_len;
 990         p_sys->inflate.stream.next_out = p_buffer;
 991
 992         i_ret = inflate( &p_sys->inflate.stream, Z_SYNC_FLUSH );
 993         msg_Warn( p_access, "inflate return value: %d, %s", i_ret, p_sys->inflate.stream.msg );
 994
 995         return i_len - p_sys->inflate.stream.avail_out;
 996     }
 997     else
 998     {
 999         return Read( p_access, p_buffer, i_len );
1000     }
1001 }
1002 #endif
1003
1004 /*****************************************************************************
1005  * Seek: close and re-open a connection at the right place
1006  *****************************************************************************/
1007 static int Seek( access_t *p_access, uint64_t i_pos )
1008 {
1009     msg_Dbg( p_access, "trying to seek to %"PRId64, i_pos );
1010
1011     Disconnect( p_access );
1012
1013     if( p_access->info.i_size
1014      && i_pos >= p_access->info.i_size ) {
1015         msg_Err( p_access, "seek to far" );
1016         int retval = Seek( p_access, p_access->info.i_size - 1 );
1017         if( retval == VLC_SUCCESS ) {
1018             uint8_t p_buffer[2];
1019             Read( p_access, p_buffer, 1);
1020             p_access->info.b_eof  = false;
1021         }
1022         return retval;
1023     }
1024     if( Connect( p_access, i_pos ) )
1025     {
1026         msg_Err( p_access, "seek failed" );
1027         p_access->info.b_eof = true;
1028         return VLC_EGENERIC;
1029     }
1030     return VLC_SUCCESS;
1031 }
1032
1033 /*****************************************************************************
1034  * Control:
1035  *****************************************************************************/
1036 static int Control( access_t *p_access, int i_query, va_list args )
1037 {
1038     access_sys_t *p_sys = p_access->p_sys;
1039     bool       *pb_bool;
1040     int64_t    *pi_64;
1041     vlc_meta_t *p_meta;
1042
1043     switch( i_query )
1044     {
1045         /* */
1046         case ACCESS_CAN_SEEK:
1047             pb_bool = (bool*)va_arg( args, bool* );
1048             *pb_bool = p_sys->b_seekable;
1049             break;
1050         case ACCESS_CAN_FASTSEEK:
1051             pb_bool = (bool*)va_arg( args, bool* );
1052             *pb_bool = false;
1053             break;
1054         case ACCESS_CAN_PAUSE:
1055         case ACCESS_CAN_CONTROL_PACE:
1056             pb_bool = (bool*)va_arg( args, bool* );
1057
1058 #if 0       /* Disable for now until we have a clock synchro algo
1059              * which works with something else than MPEG over UDP */
1060             *pb_bool = p_sys->b_pace_control;
1061 #endif
1062             *pb_bool = true;
1063             break;
1064
1065         /* */
1066         case ACCESS_GET_PTS_DELAY:
1067             pi_64 = (int64_t*)va_arg( args, int64_t * );
1068             *pi_64 = (int64_t)var_GetInteger( p_access, "http-caching" ) * 1000;
1069             break;
1070
1071         /* */
1072         case ACCESS_SET_PAUSE_STATE:
1073             break;
1074
1075         case ACCESS_GET_META:
1076             p_meta = (vlc_meta_t*)va_arg( args, vlc_meta_t* );
1077
1078             if( p_sys->psz_icy_name )
1079                 vlc_meta_Set( p_meta, vlc_meta_Title, p_sys->psz_icy_name );
1080             if( p_sys->psz_icy_genre )
1081                 vlc_meta_Set( p_meta, vlc_meta_Genre, p_sys->psz_icy_genre );
1082             if( p_sys->psz_icy_title )
1083                 vlc_meta_Set( p_meta, vlc_meta_NowPlaying, p_sys->psz_icy_title );
1084             break;
1085
1086         case ACCESS_GET_CONTENT_TYPE:
1087             *va_arg( args, char ** ) =
1088                 p_sys->psz_mime ? strdup( p_sys->psz_mime ) : NULL;
1089             break;
1090
1091         case ACCESS_GET_TITLE_INFO:
1092         case ACCESS_SET_TITLE:
1093         case ACCESS_SET_SEEKPOINT:
1094         case ACCESS_SET_PRIVATE_ID_STATE:
1095             return VLC_EGENERIC;
1096
1097         default:
1098             msg_Warn( p_access, "unimplemented query in control" );
1099             return VLC_EGENERIC;
1100
1101     }
1102     return VLC_SUCCESS;
1103 }
1104
1105 /*****************************************************************************
1106  * Connect:
1107  *****************************************************************************/
1108 static int Connect( access_t *p_access, uint64_t i_tell )
1109 {
1110     access_sys_t   *p_sys = p_access->p_sys;
1111     vlc_url_t      srv = p_sys->b_proxy ? p_sys->proxy : p_sys->url;
1112
1113     /* Clean info */
1114     free( p_sys->psz_location );
1115     free( p_sys->psz_mime );
1116     free( p_sys->psz_pragma );
1117
1118     free( p_sys->psz_icy_genre );
1119     free( p_sys->psz_icy_name );
1120     free( p_sys->psz_icy_title );
1121
1122
1123     p_sys->psz_location = NULL;
1124     p_sys->psz_mime = NULL;
1125     p_sys->psz_pragma = NULL;
1126     p_sys->b_mms = false;
1127     p_sys->b_chunked = false;
1128     p_sys->i_chunk = 0;
1129     p_sys->i_icy_meta = 0;
1130     p_sys->i_icy_offset = i_tell;
1131     p_sys->psz_icy_name = NULL;
1132     p_sys->psz_icy_genre = NULL;
1133     p_sys->psz_icy_title = NULL;
1134     p_sys->i_remaining = 0;
1135     p_sys->b_persist = false;
1136     p_sys->b_has_size = false;
1137     p_access->info.i_size = 0;
1138     p_access->info.i_pos  = i_tell;
1139     p_access->info.b_eof  = false;
1140
1141     /* Open connection */
1142     assert( p_sys->fd == -1 ); /* No open sockets (leaking fds is BAD) */
1143     p_sys->fd = net_ConnectTCP( p_access, srv.psz_host, srv.i_port );
1144     if( p_sys->fd == -1 )
1145     {
1146         msg_Err( p_access, "cannot connect to %s:%d", srv.psz_host, srv.i_port );
1147         return -1;
1148     }
1149     setsockopt (p_sys->fd, SOL_SOCKET, SO_KEEPALIVE, &(int){ 1 }, sizeof (int));
1150
1151     /* Initialize TLS/SSL session */
1152     if( p_sys->b_ssl == true )
1153     {
1154         /* CONNECT to establish TLS tunnel through HTTP proxy */
1155         if( p_sys->b_proxy )
1156         {
1157             char *psz;
1158             unsigned i_status = 0;
1159
1160             if( p_sys->i_version == 0 )
1161             {
1162                 /* CONNECT is not in HTTP/1.0 */
1163                 Disconnect( p_access );
1164                 return -1;
1165             }
1166
1167             net_Printf( VLC_OBJECT(p_access), p_sys->fd, NULL,
1168                         "CONNECT %s:%d HTTP/1.%d\r\nHost: %s:%d\r\n\r\n",
1169                         p_sys->url.psz_host, p_sys->url.i_port,
1170                         p_sys->i_version,
1171                         p_sys->url.psz_host, p_sys->url.i_port);
1172
1173             psz = net_Gets( p_access, p_sys->fd, NULL );
1174             if( psz == NULL )
1175             {
1176                 msg_Err( p_access, "cannot establish HTTP/TLS tunnel" );
1177                 Disconnect( p_access );
1178                 return -1;
1179             }
1180
1181             sscanf( psz, "HTTP/%*u.%*u %3u", &i_status );
1182             free( psz );
1183
1184             if( ( i_status / 100 ) != 2 )
1185             {
1186                 msg_Err( p_access, "HTTP/TLS tunnel through proxy denied" );
1187                 Disconnect( p_access );
1188                 return -1;
1189             }
1190
1191             do
1192             {
1193                 psz = net_Gets( p_access, p_sys->fd, NULL );
1194                 if( psz == NULL )
1195                 {
1196                     msg_Err( p_access, "HTTP proxy connection failed" );
1197                     Disconnect( p_access );
1198                     return -1;
1199                 }
1200
1201                 if( *psz == '\0' )
1202                     i_status = 0;
1203
1204                 free( psz );
1205
1206                 if( !vlc_object_alive (p_access) || p_sys->b_error )
1207                 {
1208                     Disconnect( p_access );
1209                     return -1;
1210                 }
1211             }
1212             while( i_status );
1213         }
1214
1215         /* TLS/SSL handshake */
1216         p_sys->p_tls = tls_ClientCreate( VLC_OBJECT(p_access), p_sys->fd,
1217                                          p_sys->url.psz_host );
1218         if( p_sys->p_tls == NULL )
1219         {
1220             msg_Err( p_access, "cannot establish HTTP/TLS session" );
1221             Disconnect( p_access );
1222             return -1;
1223         }
1224         p_sys->p_vs = &p_sys->p_tls->sock;
1225     }
1226
1227     return Request( p_access, i_tell ) ? -2 : 0;
1228 }
1229
1230
1231 static int Request( access_t *p_access, uint64_t i_tell )
1232 {
1233     access_sys_t   *p_sys = p_access->p_sys;
1234     char           *psz ;
1235     v_socket_t     *pvs = p_sys->p_vs;
1236     p_sys->b_persist = false;
1237
1238     p_sys->i_remaining = 0;
1239     if( p_sys->b_proxy )
1240     {
1241         if( p_sys->url.psz_path )
1242         {
1243             net_Printf( VLC_OBJECT(p_access), p_sys->fd, NULL,
1244                         "GET http://%s:%d%s HTTP/1.%d\r\n",
1245                         p_sys->url.psz_host, p_sys->url.i_port,
1246                         p_sys->url.psz_path, p_sys->i_version );
1247         }
1248         else
1249         {
1250             net_Printf( VLC_OBJECT(p_access), p_sys->fd, NULL,
1251                         "GET http://%s:%d/ HTTP/1.%d\r\n",
1252                         p_sys->url.psz_host, p_sys->url.i_port,
1253                         p_sys->i_version );
1254         }
1255     }
1256     else
1257     {
1258         const char *psz_path = p_sys->url.psz_path;
1259         if( !psz_path || !*psz_path )
1260         {
1261             psz_path = "/";
1262         }
1263         if( p_sys->url.i_port != (pvs ? 443 : 80) )
1264         {
1265             net_Printf( VLC_OBJECT(p_access), p_sys->fd, pvs,
1266                         "GET %s HTTP/1.%d\r\nHost: %s:%d\r\n",
1267                         psz_path, p_sys->i_version, p_sys->url.psz_host,
1268                         p_sys->url.i_port );
1269         }
1270         else
1271         {
1272             net_Printf( VLC_OBJECT(p_access), p_sys->fd, pvs,
1273                         "GET %s HTTP/1.%d\r\nHost: %s\r\n",
1274                         psz_path, p_sys->i_version, p_sys->url.psz_host );
1275         }
1276     }
1277     /* User Agent */
1278     net_Printf( VLC_OBJECT(p_access), p_sys->fd, pvs, "User-Agent: %s\r\n",
1279                 p_sys->psz_user_agent );
1280     /* Offset */
1281     if( p_sys->i_version == 1 && ! p_sys->b_continuous )
1282     {
1283         p_sys->b_persist = true;
1284         net_Printf( VLC_OBJECT(p_access), p_sys->fd, pvs,
1285                     "Range: bytes=%"PRIu64"-\r\n", i_tell );
1286     }
1287
1288     /* Cookies */
1289     if( p_sys->cookies )
1290     {
1291         int i;
1292         for( i = 0; i < vlc_array_count( p_sys->cookies ); i++ )
1293         {
1294             const char * cookie = vlc_array_item_at_index( p_sys->cookies, i );
1295             char * psz_cookie_content = cookie_get_content( cookie );
1296             char * psz_cookie_domain = cookie_get_domain( cookie );
1297
1298             assert( psz_cookie_content );
1299
1300             /* FIXME: This is clearly not conforming to the rfc */
1301             bool is_in_right_domain = (!psz_cookie_domain || strstr( p_sys->url.psz_host, psz_cookie_domain ));
1302
1303             if( is_in_right_domain )
1304             {
1305                 msg_Dbg( p_access, "Sending Cookie %s", psz_cookie_content );
1306                 if( net_Printf( VLC_OBJECT(p_access), p_sys->fd, pvs, "Cookie: %s\r\n", psz_cookie_content ) < 0 )
1307                     msg_Err( p_access, "failed to send Cookie" );
1308             }
1309             free( psz_cookie_content );
1310             free( psz_cookie_domain );
1311         }
1312     }
1313
1314     /* Authentication */
1315     if( p_sys->url.psz_username || p_sys->url.psz_password )
1316         AuthReply( p_access, "", &p_sys->url, &p_sys->auth );
1317
1318     /* Proxy Authentication */
1319     if( p_sys->proxy.psz_username || p_sys->proxy.psz_password )
1320         AuthReply( p_access, "Proxy-", &p_sys->proxy, &p_sys->proxy_auth );
1321
1322     /* ICY meta data request */
1323     net_Printf( VLC_OBJECT(p_access), p_sys->fd, pvs, "Icy-MetaData: 1\r\n" );
1324
1325
1326     if( net_Printf( VLC_OBJECT(p_access), p_sys->fd, pvs, "\r\n" ) < 0 )
1327     {
1328         msg_Err( p_access, "failed to send request" );
1329         Disconnect( p_access );
1330         return VLC_EGENERIC;
1331     }
1332
1333     /* Read Answer */
1334     if( ( psz = net_Gets( p_access, p_sys->fd, pvs ) ) == NULL )
1335     {
1336         msg_Err( p_access, "failed to read answer" );
1337         goto error;
1338     }
1339     if( !strncmp( psz, "HTTP/1.", 7 ) )
1340     {
1341         p_sys->psz_protocol = "HTTP";
1342         p_sys->i_code = atoi( &psz[9] );
1343     }
1344     else if( !strncmp( psz, "ICY", 3 ) )
1345     {
1346         p_sys->psz_protocol = "ICY";
1347         p_sys->i_code = atoi( &psz[4] );
1348         p_sys->b_reconnect = true;
1349     }
1350     else
1351     {
1352         msg_Err( p_access, "invalid HTTP reply '%s'", psz );
1353         free( psz );
1354         goto error;
1355     }
1356     msg_Dbg( p_access, "protocol '%s' answer code %d",
1357              p_sys->psz_protocol, p_sys->i_code );
1358     if( !strcmp( p_sys->psz_protocol, "ICY" ) )
1359     {
1360         p_sys->b_seekable = false;
1361     }
1362     if( p_sys->i_code != 206 && p_sys->i_code != 401 )
1363     {
1364         p_sys->b_seekable = false;
1365     }
1366     /* Authentication error - We'll have to display the dialog */
1367     if( p_sys->i_code == 401 )
1368     {
1369
1370     }
1371     /* Other fatal error */
1372     else if( p_sys->i_code >= 400 )
1373     {
1374         msg_Err( p_access, "error: %s", psz );
1375         free( psz );
1376         goto error;
1377     }
1378     free( psz );
1379
1380     for( ;; )
1381     {
1382         char *psz = net_Gets( p_access, p_sys->fd, pvs );
1383         char *p;
1384
1385         if( psz == NULL )
1386         {
1387             msg_Err( p_access, "failed to read answer" );
1388             goto error;
1389         }
1390
1391         if( !vlc_object_alive (p_access) || p_sys->b_error )
1392         {
1393             free( psz );
1394             goto error;
1395         }
1396
1397         /* msg_Dbg( p_input, "Line=%s", psz ); */
1398         if( *psz == '\0' )
1399         {
1400             free( psz );
1401             break;
1402         }
1403
1404         if( ( p = strchr( psz, ':' ) ) == NULL )
1405         {
1406             msg_Err( p_access, "malformed header line: %s", psz );
1407             free( psz );
1408             goto error;
1409         }
1410         *p++ = '\0';
1411         while( *p == ' ' ) p++;
1412
1413         if( !strcasecmp( psz, "Content-Length" ) )
1414         {
1415             uint64_t i_size = i_tell + (p_sys->i_remaining = (uint64_t)atoll( p ));
1416             if(i_size > p_access->info.i_size) {
1417                 p_sys->b_has_size = true;
1418                 p_access->info.i_size = i_size;
1419             }
1420             msg_Dbg( p_access, "this frame size=%"PRIu64, p_sys->i_remaining );
1421         }
1422         else if( !strcasecmp( psz, "Content-Range" ) ) {
1423             uint64_t i_ntell = i_tell;
1424             uint64_t i_nend = (p_access->info.i_size > 0)?(p_access->info.i_size - 1):i_tell;
1425             uint64_t i_nsize = p_access->info.i_size;
1426             sscanf(p,"bytes %"SCNu64"-%"SCNu64"/%"SCNu64,&i_ntell,&i_nend,&i_nsize);
1427             if(i_nend > i_ntell ) {
1428                 p_access->info.i_pos = i_ntell;
1429                 p_sys->i_remaining = i_nend+1-i_ntell;
1430                 int64_t i_size = (i_nsize > i_nend) ? i_nsize : (i_nend + 1);
1431                 if(i_size > p_access->info.i_size) {
1432                     p_sys->b_has_size = true;
1433                     p_access->info.i_size = i_size;
1434                 }
1435                 msg_Dbg( p_access, "stream size=%"PRIu64",pos=%"PRIu64",remaining=%"PRIu64,
1436                          i_nsize, i_ntell, p_sys->i_remaining);
1437             }
1438         }
1439         else if( !strcasecmp( psz, "Connection" ) ) {
1440             msg_Dbg( p_access, "Connection: %s",p );
1441             int i = -1;
1442             sscanf(p, "close%n",&i);
1443             if( i >= 0 ) {
1444                 p_sys->b_persist = false;
1445             }
1446         }
1447         else if( !strcasecmp( psz, "Location" ) )
1448         {
1449             char * psz_new_loc;
1450
1451             /* This does not follow RFC 2068, but yet if the url is not absolute,
1452              * handle it as everyone does. */
1453             if( p[0] == '/' )
1454             {
1455                 const char *psz_http_ext = p_sys->b_ssl ? "s" : "" ;
1456
1457                 if( p_sys->url.i_port == ( p_sys->b_ssl ? 443 : 80 ) )
1458                 {
1459                     if( asprintf(&psz_new_loc, "http%s://%s%s", psz_http_ext,
1460                                  p_sys->url.psz_host, p) < 0 )
1461                         goto error;
1462                 }
1463                 else
1464                 {
1465                     if( asprintf(&psz_new_loc, "http%s://%s:%d%s", psz_http_ext,
1466                                  p_sys->url.psz_host, p_sys->url.i_port, p) < 0 )
1467                         goto error;
1468                 }
1469             }
1470             else
1471             {
1472                 psz_new_loc = strdup( p );
1473             }
1474
1475             free( p_sys->psz_location );
1476             p_sys->psz_location = psz_new_loc;
1477         }
1478         else if( !strcasecmp( psz, "Content-Type" ) )
1479         {
1480             free( p_sys->psz_mime );
1481             p_sys->psz_mime = strdup( p );
1482             msg_Dbg( p_access, "Content-Type: %s", p_sys->psz_mime );
1483         }
1484         else if( !strcasecmp( psz, "Content-Encoding" ) )
1485         {
1486             msg_Dbg( p_access, "Content-Encoding: %s", p );
1487             if( !strcasecmp( p, "identity" ) )
1488                 ;
1489 #ifdef HAVE_ZLIB_H
1490             else if( !strcasecmp( p, "gzip" ) || !strcasecmp( p, "deflate" ) )
1491                 p_sys->b_compressed = true;
1492 #endif
1493             else
1494                 msg_Warn( p_access, "Unknown content coding: %s", p );
1495         }
1496         else if( !strcasecmp( psz, "Pragma" ) )
1497         {
1498             if( !strcasecmp( psz, "Pragma: features" ) )
1499                 p_sys->b_mms = true;
1500             free( p_sys->psz_pragma );
1501             p_sys->psz_pragma = strdup( p );
1502             msg_Dbg( p_access, "Pragma: %s", p_sys->psz_pragma );
1503         }
1504         else if( !strcasecmp( psz, "Server" ) )
1505         {
1506             msg_Dbg( p_access, "Server: %s", p );
1507             if( !strncasecmp( p, "Icecast", 7 ) ||
1508                 !strncasecmp( p, "Nanocaster", 10 ) )
1509             {
1510                 /* Remember if this is Icecast
1511                  * we need to force demux in this case without breaking
1512                  *  autodetection */
1513
1514                 /* Let live 365 streams (nanocaster) piggyback on the icecast
1515                  * routine. They look very similar */
1516
1517                 p_sys->b_reconnect = true;
1518                 p_sys->b_pace_control = false;
1519                 p_sys->b_icecast = true;
1520             }
1521         }
1522         else if( !strcasecmp( psz, "Transfer-Encoding" ) )
1523         {
1524             msg_Dbg( p_access, "Transfer-Encoding: %s", p );
1525             if( !strncasecmp( p, "chunked", 7 ) )
1526             {
1527                 p_sys->b_chunked = true;
1528             }
1529         }
1530         else if( !strcasecmp( psz, "Icy-MetaInt" ) )
1531         {
1532             msg_Dbg( p_access, "Icy-MetaInt: %s", p );
1533             p_sys->i_icy_meta = atoi( p );
1534             if( p_sys->i_icy_meta < 0 )
1535                 p_sys->i_icy_meta = 0;
1536             if( p_sys->i_icy_meta > 0 )
1537                 p_sys->b_icecast = true;
1538
1539             msg_Warn( p_access, "ICY metaint=%d", p_sys->i_icy_meta );
1540         }
1541         else if( !strcasecmp( psz, "Icy-Name" ) )
1542         {
1543             free( p_sys->psz_icy_name );
1544             char *psz_tmp = strdup( p );
1545             p_sys->psz_icy_name = EnsureUTF8( psz_tmp );
1546             if( !p_sys->psz_icy_name )
1547                 free( psz_tmp );
1548             msg_Dbg( p_access, "Icy-Name: %s", p_sys->psz_icy_name );
1549
1550             p_sys->b_icecast = true; /* be on the safeside. set it here as well. */
1551             p_sys->b_reconnect = true;
1552             p_sys->b_pace_control = false;
1553         }
1554         else if( !strcasecmp( psz, "Icy-Genre" ) )
1555         {
1556             free( p_sys->psz_icy_genre );
1557             char *psz_tmp = strdup( p );
1558             p_sys->psz_icy_genre = EnsureUTF8( psz_tmp );
1559             if( !p_sys->psz_icy_genre )
1560                 free( psz_tmp );
1561             msg_Dbg( p_access, "Icy-Genre: %s", p_sys->psz_icy_genre );
1562         }
1563         else if( !strncasecmp( psz, "Icy-Notice", 10 ) )
1564         {
1565             msg_Dbg( p_access, "Icy-Notice: %s", p );
1566         }
1567         else if( !strncasecmp( psz, "icy-", 4 ) ||
1568                  !strncasecmp( psz, "ice-", 4 ) ||
1569                  !strncasecmp( psz, "x-audiocast", 11 ) )
1570         {
1571             msg_Dbg( p_access, "Meta-Info: %s: %s", psz, p );
1572         }
1573         else if( !strcasecmp( psz, "Set-Cookie" ) )
1574         {
1575             if( p_sys->cookies )
1576             {
1577                 msg_Dbg( p_access, "Accepting Cookie: %s", p );
1578                 cookie_append( p_sys->cookies, strdup(p) );
1579             }
1580             else
1581                 msg_Dbg( p_access, "We have a Cookie we won't remember: %s", p );
1582         }
1583         else if( !strcasecmp( psz, "www-authenticate" ) )
1584         {
1585             msg_Dbg( p_access, "Authentication header: %s", p );
1586             http_auth_ParseWwwAuthenticateHeader( VLC_OBJECT(p_access),
1587                                                   &p_sys->auth, p );
1588         }
1589         else if( !strcasecmp( psz, "proxy-authenticate" ) )
1590         {
1591             msg_Dbg( p_access, "Proxy authentication header: %s", p );
1592             http_auth_ParseWwwAuthenticateHeader( VLC_OBJECT(p_access),
1593                                                   &p_sys->proxy_auth, p );
1594         }
1595         else if( !strcasecmp( psz, "authentication-info" ) )
1596         {
1597             msg_Dbg( p_access, "Authentication Info header: %s", p );
1598             if( AuthCheckReply( p_access, p, &p_sys->url, &p_sys->auth ) )
1599                 goto error;
1600         }
1601         else if( !strcasecmp( psz, "proxy-authentication-info" ) )
1602         {
1603             msg_Dbg( p_access, "Proxy Authentication Info header: %s", p );
1604             if( AuthCheckReply( p_access, p, &p_sys->proxy, &p_sys->proxy_auth ) )
1605                 goto error;
1606         }
1607
1608         free( psz );
1609     }
1610     /* We close the stream for zero length data, unless of course the
1611      * server has already promised to do this for us.
1612      */
1613     if( p_sys->b_has_size && p_sys->i_remaining == 0 && p_sys->b_persist ) {
1614         Disconnect( p_access );
1615     }
1616     return VLC_SUCCESS;
1617
1618 error:
1619     Disconnect( p_access );
1620     return VLC_EGENERIC;
1621 }
1622
1623 /*****************************************************************************
1624  * Disconnect:
1625  *****************************************************************************/
1626 static void Disconnect( access_t *p_access )
1627 {
1628     access_sys_t *p_sys = p_access->p_sys;
1629
1630     if( p_sys->p_tls != NULL)
1631     {
1632         tls_ClientDelete( p_sys->p_tls );
1633         p_sys->p_tls = NULL;
1634         p_sys->p_vs = NULL;
1635     }
1636     if( p_sys->fd != -1)
1637     {
1638         net_Close(p_sys->fd);
1639         p_sys->fd = -1;
1640     }
1641
1642 }
1643
1644 /*****************************************************************************
1645  * Cookies (FIXME: we may want to rewrite that using a nice structure to hold
1646  * them) (FIXME: only support the "domain=" param)
1647  *****************************************************************************/
1648
1649 /* Get the NAME=VALUE part of the Cookie */
1650 static char * cookie_get_content( const char * cookie )
1651 {
1652     char * ret = strdup( cookie );
1653     if( !ret ) return NULL;
1654     char * str = ret;
1655     /* Look for a ';' */
1656     while( *str && *str != ';' ) str++;
1657     /* Replace it by a end-char */
1658     if( *str == ';' ) *str = 0;
1659     return ret;
1660 }
1661
1662 /* Get the domain where the cookie is stored */
1663 static char * cookie_get_domain( const char * cookie )
1664 {
1665     const char * str = cookie;
1666     static const char domain[] = "domain=";
1667     if( !str )
1668         return NULL;
1669     /* Look for a ';' */
1670     while( *str )
1671     {
1672         if( !strncmp( str, domain, sizeof(domain) - 1 /* minus \0 */ ) )
1673         {
1674             str += sizeof(domain) - 1 /* minus \0 */;
1675             char * ret = strdup( str );
1676             /* Now remove the next ';' if present */
1677             char * ret_iter = ret;
1678             while( *ret_iter && *ret_iter != ';' ) ret_iter++;
1679             if( *ret_iter == ';' )
1680                 *ret_iter = 0;
1681             return ret;
1682         }
1683         /* Go to next ';' field */
1684         while( *str && *str != ';' ) str++;
1685         if( *str == ';' ) str++;
1686         /* skip blank */
1687         while( *str && *str == ' ' ) str++;
1688     }
1689     return NULL;
1690 }
1691
1692 /* Get NAME in the NAME=VALUE field */
1693 static char * cookie_get_name( const char * cookie )
1694 {
1695     char * ret = cookie_get_content( cookie ); /* NAME=VALUE */
1696     if( !ret ) return NULL;
1697     char * str = ret;
1698     while( *str && *str != '=' ) str++;
1699     *str = 0;
1700     return ret;
1701 }
1702
1703 /* Add a cookie in cookies, checking to see how it should be added */
1704 static void cookie_append( vlc_array_t * cookies, char * cookie )
1705 {
1706     int i;
1707
1708     if( !cookie )
1709         return;
1710
1711     char * cookie_name = cookie_get_name( cookie );
1712
1713     /* Don't send invalid cookies */
1714     if( !cookie_name )
1715         return;
1716
1717     char * cookie_domain = cookie_get_domain( cookie );
1718     for( i = 0; i < vlc_array_count( cookies ); i++ )
1719     {
1720         char * current_cookie = vlc_array_item_at_index( cookies, i );
1721         char * current_cookie_name = cookie_get_name( current_cookie );
1722         char * current_cookie_domain = cookie_get_domain( current_cookie );
1723
1724         assert( current_cookie_name );
1725
1726         bool is_domain_matching = ( cookie_domain && current_cookie_domain &&
1727                                          !strcmp( cookie_domain, current_cookie_domain ) );
1728
1729         if( is_domain_matching && !strcmp( cookie_name, current_cookie_name )  )
1730         {
1731             /* Remove previous value for this cookie */
1732             free( current_cookie );
1733             vlc_array_remove( cookies, i );
1734
1735             /* Clean */
1736             free( current_cookie_name );
1737             free( current_cookie_domain );
1738             break;
1739         }
1740         free( current_cookie_name );
1741         free( current_cookie_domain );
1742     }
1743     free( cookie_name );
1744     free( cookie_domain );
1745     vlc_array_append( cookies, cookie );
1746 }
1747
1748
1749 /*****************************************************************************
1750  * HTTP authentication
1751  *****************************************************************************/
1752
1753 static void AuthReply( access_t *p_access, const char *psz_prefix,
1754                        vlc_url_t *p_url, http_auth_t *p_auth )
1755 {
1756     access_sys_t *p_sys = p_access->p_sys;
1757     char *psz_value;
1758
1759     psz_value =
1760         http_auth_FormatAuthorizationHeader( VLC_OBJECT(p_access), p_auth,
1761                                              "GET", p_url->psz_path,
1762                                              p_url->psz_username,
1763                                              p_url->psz_password );
1764     if ( psz_value == NULL )
1765         return;
1766
1767     net_Printf( VLC_OBJECT(p_access), p_sys->fd, p_sys->p_vs,
1768                 "%sAuthorization: %s\r\n", psz_prefix, psz_value );
1769     free( psz_value );
1770 }
1771
1772 static int AuthCheckReply( access_t *p_access, const char *psz_header,
1773                            vlc_url_t *p_url, http_auth_t *p_auth )
1774 {
1775     return
1776         http_auth_ParseAuthenticationInfoHeader( VLC_OBJECT(p_access), p_auth,
1777                                                  psz_header, "",
1778                                                  p_url->psz_path,
1779                                                  p_url->psz_username,
1780                                                  p_url->psz_password );
1781 }