]> git.sesse.net Git - vlc/blob - modules/access/http.c
HTTP: fix read sizes and signedness (fixes #3302)
[vlc] / modules / access / http.c
1 /*****************************************************************************
2  * http.c: HTTP input module
3  *****************************************************************************
4  * Copyright (C) 2001-2008 the VideoLAN team
5  * $Id$
6  *
7  * Authors: Laurent Aimar <fenrir@via.ecp.fr>
8  *          Christophe Massiot <massiot@via.ecp.fr>
9  *          RĂ©mi Denis-Courmont <rem # videolan.org>
10  *          Antoine Cellerier <dionoea at videolan dot org>
11  *
12  * This program is free software; you can redistribute it and/or modify
13  * it under the terms of the GNU General Public License as published by
14  * the Free Software Foundation; either version 2 of the License, or
15  * (at your option) any later version.
16  *
17  * This program is distributed in the hope that it will be useful,
18  * but WITHOUT ANY WARRANTY; without even the implied warranty of
19  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
20  * GNU General Public License for more details.
21  *
22  * You should have received a copy of the GNU General Public License
23  * along with this program; if not, write to the Free Software
24  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston MA 02110-1301, USA.
25  *****************************************************************************/
26
27 /*****************************************************************************
28  * Preamble
29  *****************************************************************************/
30 #ifdef HAVE_CONFIG_H
31 # include "config.h"
32 #endif
33
34 #include <vlc_common.h>
35 #include <vlc_plugin.h>
36
37
38 #include <vlc_access.h>
39
40 #include <vlc_dialog.h>
41 #include <vlc_meta.h>
42 #include <vlc_network.h>
43 #include <vlc_url.h>
44 #include <vlc_tls.h>
45 #include <vlc_strings.h>
46 #include <vlc_charset.h>
47 #include <vlc_input.h>
48 #include <vlc_md5.h>
49 #include <vlc_http.h>
50
51 #ifdef HAVE_ZLIB_H
52 #   include <zlib.h>
53 #endif
54
55 #include <assert.h>
56
57 #ifdef HAVE_LIBPROXY
58 #    include <proxy.h>
59 #endif
60
61 #ifdef WIN32
62 #   include <windows.h>
63 #endif
64
65 /*****************************************************************************
66  * Module descriptor
67  *****************************************************************************/
68 static int  Open ( vlc_object_t * );
69 static void Close( vlc_object_t * );
70
71 #define PROXY_TEXT N_("HTTP proxy")
72 #define PROXY_LONGTEXT N_( \
73     "HTTP proxy to be used It must be of the form " \
74     "http://[user@]myproxy.mydomain:myport/ ; " \
75     "if empty, the http_proxy environment variable will be tried." )
76
77 #define PROXY_PASS_TEXT N_("HTTP proxy password")
78 #define PROXY_PASS_LONGTEXT N_( \
79     "If your HTTP proxy requires a password, set it here." )
80
81 #define CACHING_TEXT N_("Caching value in ms")
82 #define CACHING_LONGTEXT N_( \
83     "Caching value for HTTP streams. This " \
84     "value should be set in milliseconds." )
85
86 #define AGENT_TEXT N_("HTTP user agent")
87 #define AGENT_LONGTEXT N_("User agent that will be " \
88     "used for the connection.")
89
90 #define RECONNECT_TEXT N_("Auto re-connect")
91 #define RECONNECT_LONGTEXT N_( \
92     "Automatically try to reconnect to the stream in case of a sudden " \
93     "disconnect." )
94
95 #define CONTINUOUS_TEXT N_("Continuous stream")
96 #define CONTINUOUS_LONGTEXT N_("Read a file that is " \
97     "being constantly updated (for example, a JPG file on a server). " \
98     "You should not globally enable this option as it will break all other " \
99     "types of HTTP streams." )
100
101 #define FORWARD_COOKIES_TEXT N_("Forward Cookies")
102 #define FORWARD_COOKIES_LONGTEXT N_("Forward Cookies across http redirections.")
103
104 #define MAX_REDIRECT_TEXT N_("Max number of redirection")
105 #define MAX_REDIRECT_LONGTEXT N_("Limit the number of redirection to follow.")
106
107 #define USE_IE_PROXY_TEXT N_("Use Internet Explorer entered HTTP proxy server")
108 #define USE_IE_PROXY_LONGTEXT N_("Use Internet Explorer entered HTTP proxy " \
109     "server for all URL. Don't take into account bypasses settings and auto " \
110     "configuration scripts.")
111
112 vlc_module_begin ()
113     set_description( N_("HTTP input") )
114     set_capability( "access", 0 )
115     set_shortname( N_( "HTTP(S)" ) )
116     set_category( CAT_INPUT )
117     set_subcategory( SUBCAT_INPUT_ACCESS )
118
119     add_string( "http-proxy", NULL, NULL, PROXY_TEXT, PROXY_LONGTEXT,
120                 false )
121     add_password( "http-proxy-pwd", NULL, NULL,
122                   PROXY_PASS_TEXT, PROXY_PASS_LONGTEXT, false )
123     add_integer( "http-caching", 4 * DEFAULT_PTS_DELAY / 1000, NULL,
124                  CACHING_TEXT, CACHING_LONGTEXT, true )
125         change_safe()
126     add_string( "http-user-agent", COPYRIGHT_MESSAGE , NULL, AGENT_TEXT,
127                 AGENT_LONGTEXT, true )
128         change_safe()
129     add_bool( "http-reconnect", false, NULL, RECONNECT_TEXT,
130               RECONNECT_LONGTEXT, true )
131     add_bool( "http-continuous", false, NULL, CONTINUOUS_TEXT,
132               CONTINUOUS_LONGTEXT, true )
133         change_safe()
134     add_bool( "http-forward-cookies", true, NULL, FORWARD_COOKIES_TEXT,
135               FORWARD_COOKIES_LONGTEXT, true )
136     add_integer( "http-max-redirect", 5, NULL, MAX_REDIRECT_TEXT,
137                  MAX_REDIRECT_LONGTEXT, true )
138 #ifdef WIN32
139     add_bool( "http-use-IE-proxy", false, NULL, USE_IE_PROXY_TEXT,
140               USE_IE_PROXY_LONGTEXT, true )
141 #endif
142     add_obsolete_string("http-user")
143     add_obsolete_string("http-pwd")
144     add_shortcut( "http" )
145     add_shortcut( "https" )
146     add_shortcut( "unsv" )
147     add_shortcut( "itpc" ) /* iTunes Podcast */
148     add_shortcut( "icyx" )
149     set_callbacks( Open, Close )
150 vlc_module_end ()
151
152 /*****************************************************************************
153  * Local prototypes
154  *****************************************************************************/
155
156 struct access_sys_t
157 {
158     int fd;
159     bool b_error;
160     tls_session_t *p_tls;
161     v_socket_t    *p_vs;
162
163     /* From uri */
164     vlc_url_t url;
165     char    *psz_user_agent;
166     http_auth_t auth;
167
168     /* Proxy */
169     bool b_proxy;
170     vlc_url_t  proxy;
171     http_auth_t proxy_auth;
172     char       *psz_proxy_passbuf;
173
174     /* */
175     int        i_code;
176     const char *psz_protocol;
177     int        i_version;
178
179     char       *psz_mime;
180     char       *psz_pragma;
181     char       *psz_location;
182     bool b_mms;
183     bool b_icecast;
184     bool b_ssl;
185 #ifdef HAVE_ZLIB_H
186     bool b_compressed;
187     struct
188     {
189         z_stream   stream;
190         uint8_t   *p_buffer;
191     } inflate;
192 #endif
193
194     bool b_chunked;
195     int64_t    i_chunk;
196
197     int        i_icy_meta;
198     uint64_t   i_icy_offset;
199     char       *psz_icy_name;
200     char       *psz_icy_genre;
201     char       *psz_icy_title;
202
203     uint64_t i_remaining;
204
205     bool b_seekable;
206     bool b_reconnect;
207     bool b_continuous;
208     bool b_pace_control;
209     bool b_persist;
210     bool b_has_size;
211
212     vlc_array_t * cookies;
213 };
214
215 /* */
216 static int OpenWithCookies( vlc_object_t *p_this, const char *psz_access,
217                             int i_nb_redirect, int i_max_redirect,
218                             vlc_array_t *cookies );
219
220 /* */
221 static ssize_t Read( access_t *, uint8_t *, size_t );
222 static ssize_t ReadCompressed( access_t *, uint8_t *, size_t );
223 static int Seek( access_t *, uint64_t );
224 static int Control( access_t *, int, va_list );
225
226 /* */
227 static int Connect( access_t *, uint64_t );
228 static int Request( access_t *p_access, uint64_t i_tell );
229 static void Disconnect( access_t * );
230
231 /* Small Cookie utilities. Cookies support is partial. */
232 static char * cookie_get_content( const char * cookie );
233 static char * cookie_get_domain( const char * cookie );
234 static char * cookie_get_name( const char * cookie );
235 static void cookie_append( vlc_array_t * cookies, char * cookie );
236
237
238 static void AuthReply( access_t *p_acces, const char *psz_prefix,
239                        vlc_url_t *p_url, http_auth_t *p_auth );
240 static int AuthCheckReply( access_t *p_access, const char *psz_header,
241                            vlc_url_t *p_url, http_auth_t *p_auth );
242
243 /*****************************************************************************
244  * Open:
245  *****************************************************************************/
246 static int Open( vlc_object_t *p_this )
247 {
248     access_t *p_access = (access_t*)p_this;
249     return OpenWithCookies( p_this, p_access->psz_access, 0,
250                 var_CreateGetInteger( p_access, "http-max-redirect" ), NULL );
251 }
252
253 /**
254  * Open the given url using the given cookies
255  * @param p_this: the vlc object
256  * @psz_access: the acces to use (http, https, ...) (this value must be used
257  *              instead of p_access->psz_access)
258  * @i_nb_redirect: the number of redirection already done
259  * @i_max_redirect: limit to the number of redirection to follow
260  * @cookies: the available cookies
261  * @return vlc error codes
262  */
263 static int OpenWithCookies( vlc_object_t *p_this, const char *psz_access,
264                             int i_nb_redirect, int i_max_redirect,
265                             vlc_array_t *cookies )
266 {
267     access_t     *p_access = (access_t*)p_this;
268     access_sys_t *p_sys;
269     char         *psz, *p;
270
271     /* Only forward an store cookies if the corresponding option is activated */
272     bool   b_forward_cookies = var_CreateGetBool( p_access, "http-forward-cookies" );
273     vlc_array_t * saved_cookies = b_forward_cookies ? (cookies ? cookies : vlc_array_new()) : NULL;
274
275     /* Set up p_access */
276     STANDARD_READ_ACCESS_INIT;
277 #ifdef HAVE_ZLIB_H
278     p_access->pf_read = ReadCompressed;
279 #endif
280     p_sys->fd = -1;
281     p_sys->b_proxy = false;
282     p_sys->psz_proxy_passbuf = NULL;
283     p_sys->i_version = 1;
284     p_sys->b_seekable = true;
285     p_sys->psz_mime = NULL;
286     p_sys->psz_pragma = NULL;
287     p_sys->b_mms = false;
288     p_sys->b_icecast = false;
289     p_sys->psz_location = NULL;
290     p_sys->psz_user_agent = NULL;
291     p_sys->b_pace_control = true;
292     p_sys->b_ssl = false;
293 #ifdef HAVE_ZLIB_H
294     p_sys->b_compressed = false;
295     /* 15 is the max windowBits, +32 to enable optional gzip decoding */
296     if( inflateInit2( &p_sys->inflate.stream, 32+15 ) != Z_OK )
297         msg_Warn( p_access, "Error during zlib initialisation: %s",
298                   p_sys->inflate.stream.msg );
299     if( zlibCompileFlags() & (1<<17) )
300         msg_Warn( p_access, "Your zlib was compiled without gzip support." );
301     p_sys->inflate.p_buffer = NULL;
302 #endif
303     p_sys->p_tls = NULL;
304     p_sys->p_vs = NULL;
305     p_sys->i_icy_meta = 0;
306     p_sys->i_icy_offset = 0;
307     p_sys->psz_icy_name = NULL;
308     p_sys->psz_icy_genre = NULL;
309     p_sys->psz_icy_title = NULL;
310     p_sys->i_remaining = 0;
311     p_sys->b_persist = false;
312     p_sys->b_has_size = false;
313     p_access->info.i_size = 0;
314     p_access->info.i_pos  = 0;
315     p_access->info.b_eof  = false;
316
317     p_sys->cookies = saved_cookies;
318
319     http_auth_Init( &p_sys->auth );
320     http_auth_Init( &p_sys->proxy_auth );
321
322     /* Parse URI - remove spaces */
323     p = psz = strdup( p_access->psz_path );
324     while( (p = strchr( p, ' ' )) != NULL )
325         *p = '+';
326     vlc_UrlParse( &p_sys->url, psz, 0 );
327     free( psz );
328
329     if( p_sys->url.psz_host == NULL || *p_sys->url.psz_host == '\0' )
330     {
331         msg_Warn( p_access, "invalid host" );
332         goto error;
333     }
334     if( !strncmp( psz_access, "https", 5 ) )
335     {
336         /* HTTP over SSL */
337         p_sys->b_ssl = true;
338         if( p_sys->url.i_port <= 0 )
339             p_sys->url.i_port = 443;
340     }
341     else
342     {
343         if( p_sys->url.i_port <= 0 )
344             p_sys->url.i_port = 80;
345     }
346
347     /* Do user agent */
348     p_sys->psz_user_agent = var_CreateGetString( p_access, "http-user-agent" );
349
350     /* Check proxy */
351     psz = var_CreateGetNonEmptyString( p_access, "http-proxy" );
352     if( psz )
353     {
354         p_sys->b_proxy = true;
355         vlc_UrlParse( &p_sys->proxy, psz, 0 );
356         free( psz );
357     }
358 #ifdef HAVE_LIBPROXY
359     else
360     {
361         pxProxyFactory *pf = px_proxy_factory_new();
362         if (pf)
363         {
364             char *buf;
365             int i;
366             i=asprintf(&buf, "%s://%s", psz_access, p_access->psz_path);
367             if (i >= 0)
368             {
369                 msg_Dbg(p_access, "asking libproxy about url '%s'", buf);
370                 char **proxies = px_proxy_factory_get_proxies(pf, buf);
371                 if (proxies[0])
372                 {
373                     msg_Dbg(p_access, "libproxy suggest to use '%s'", proxies[0]);
374                     if(strcmp(proxies[0],"direct://") != 0)
375                     {
376                         p_sys->b_proxy = true;
377                         vlc_UrlParse( &p_sys->proxy, proxies[0], 0);
378                     }
379                 }
380                 for(i=0;proxies[i];i++) free(proxies[i]);
381                 free(proxies);
382                 free(buf);
383             }
384             px_proxy_factory_free(pf);
385         }
386         else
387         {
388             msg_Err(p_access, "Allocating memory for libproxy failed");
389         }
390     }
391 #elif defined( WIN32 )
392     else
393     {
394         if( var_CreateGetBool( p_access, "http-use-IE-proxy" ) )
395         {
396             /* Try to get the proxy server address from Windows internet settings using registry. */
397             HKEY h_key;
398             /* Open the key */
399             if( RegOpenKeyEx( HKEY_CURRENT_USER, "Software\\Microsoft" \
400                               "\\Windows\\CurrentVersion\\Internet Settings",
401                               0, KEY_READ, &h_key ) == ERROR_SUCCESS )
402             {
403                 DWORD i_dataReadSize = 4; /* sizeof( DWORD ); */
404                 DWORD proxyEnable = 0;
405                 /* Get the proxy enable value */
406                 if( RegQueryValueEx( h_key, "ProxyEnable", NULL, NULL,
407                                      (char *)&proxyEnable, &i_dataReadSize )
408                                      == ERROR_SUCCESS )
409                 {
410                     if( proxyEnable )
411                     {
412                         /* Proxy is enable */
413                         char psz_key[256];
414                         i_dataReadSize = 256;
415                         if( RegQueryValueEx( h_key, "ProxyServer",
416                                              NULL, NULL, psz_key,
417                                              &i_dataReadSize )
418                                              == ERROR_SUCCESS )
419                         {
420                             /* Get the proxy URL :
421                             Proxy server value in the registry can be something like "address:port"
422                             or "ftp=adress1:port1;http=adress2:port2 ..." depending of the
423                             confirguration. */
424                             char *psz_proxy;
425                             psz_proxy = strstr( psz_key, "http=" );
426                             if( psz_proxy != NULL )
427                             {
428                                 psz_proxy += strlen( "http=" );
429                                 char *psz_endUrl = strchr( psz_proxy, ';' );
430                                 if( psz_endUrl != NULL )
431                                     *psz_endUrl = '\0';
432                             }
433                             else
434                                 psz_proxy = psz_key;
435                             /* Set proxy enable for this connection. */
436                             p_sys->b_proxy = true;
437                             vlc_UrlParse( &p_sys->proxy, psz_proxy, 0 );
438                         }
439                         msg_Warn( p_access, "Couldn't read in registry " \
440                                   "the proxy server address." );
441                     }
442                 }
443                 else
444                     msg_Warn( p_access, "Couldn't read in registry if the " \
445                               "proxy is enable or not." );
446             }
447             else
448                 msg_Warn( p_access, "Couldn't open internet settings key " \
449                           "in registry." );
450         }
451     }
452 #elif HAVE_GETENV
453     else
454     {
455         psz = getenv( "http_proxy" );
456         if( psz )
457         {
458             p_sys->b_proxy = true;
459             vlc_UrlParse( &p_sys->proxy, psz, 0 );
460         }
461     }
462 #endif
463
464     if( psz ) /* No, this is NOT a use-after-free error */
465     {
466         psz = var_CreateGetNonEmptyString( p_access, "http-proxy-pwd" );
467         if( psz )
468             p_sys->proxy.psz_password = p_sys->psz_proxy_passbuf = psz;
469     }
470
471     if( p_sys->b_proxy )
472     {
473         if( p_sys->proxy.psz_host == NULL || *p_sys->proxy.psz_host == '\0' )
474         {
475             msg_Warn( p_access, "invalid proxy host" );
476             goto error;
477         }
478         if( p_sys->proxy.i_port <= 0 )
479         {
480             p_sys->proxy.i_port = 80;
481         }
482     }
483
484     msg_Dbg( p_access, "http: server='%s' port=%d file='%s",
485              p_sys->url.psz_host, p_sys->url.i_port, p_sys->url.psz_path );
486     if( p_sys->b_proxy )
487     {
488         msg_Dbg( p_access, "      proxy %s:%d", p_sys->proxy.psz_host,
489                  p_sys->proxy.i_port );
490     }
491     if( p_sys->url.psz_username && *p_sys->url.psz_username )
492     {
493         msg_Dbg( p_access, "      user='%s'", p_sys->url.psz_username );
494     }
495
496     p_sys->b_reconnect = var_CreateGetBool( p_access, "http-reconnect" );
497     p_sys->b_continuous = var_CreateGetBool( p_access, "http-continuous" );
498
499 connect:
500     /* Connect */
501     switch( Connect( p_access, 0 ) )
502     {
503         case -1:
504             goto error;
505
506         case -2:
507             /* Retry with http 1.0 */
508             msg_Dbg( p_access, "switching to HTTP version 1.0" );
509             p_sys->i_version = 0;
510             p_sys->b_seekable = false;
511
512             if( !vlc_object_alive (p_access) || Connect( p_access, 0 ) )
513                 goto error;
514
515 #ifndef NDEBUG
516         case 0:
517             break;
518
519         default:
520             msg_Err( p_access, "You should not be here" );
521             abort();
522 #endif
523     }
524
525     if( p_sys->i_code == 401 )
526     {
527         char *psz_login, *psz_password;
528         /* FIXME ? */
529         if( p_sys->url.psz_username && p_sys->url.psz_password &&
530             p_sys->auth.psz_nonce && p_sys->auth.i_nonce == 0 )
531         {
532             Disconnect( p_access );
533             goto connect;
534         }
535         msg_Dbg( p_access, "authentication failed for realm %s",
536                  p_sys->auth.psz_realm );
537         dialog_Login( p_access, &psz_login, &psz_password,
538                       _("HTTP authentication"),
539              _("Please enter a valid login name and a password for realm %s."),
540                       p_sys->auth.psz_realm );
541         if( psz_login != NULL && psz_password != NULL )
542         {
543             msg_Dbg( p_access, "retrying with user=%s", psz_login );
544             p_sys->url.psz_username = psz_login;
545             p_sys->url.psz_password = psz_password;
546             Disconnect( p_access );
547             goto connect;
548         }
549         else
550         {
551             free( psz_login );
552             free( psz_password );
553             goto error;
554         }
555     }
556
557     if( ( p_sys->i_code == 301 || p_sys->i_code == 302 ||
558           p_sys->i_code == 303 || p_sys->i_code == 307 ) &&
559         p_sys->psz_location && *p_sys->psz_location )
560     {
561         msg_Dbg( p_access, "redirection to %s", p_sys->psz_location );
562
563         /* Check the number of redirection already done */
564         if( i_nb_redirect >= i_max_redirect )
565         {
566             msg_Err( p_access, "Too many redirection: break potential infinite"
567                      "loop" );
568             goto error;
569         }
570
571
572         /* Do not accept redirection outside of HTTP works */
573         const char *psz_protocol;
574         if( !strncmp( p_sys->psz_location, "http:", 5 ) )
575             psz_protocol = "http";
576         else if( !strncmp( p_sys->psz_location, "https:", 6 ) )
577             psz_protocol = "https";
578         else
579         {
580             msg_Err( p_access, "insecure redirection ignored" );
581             goto error;
582         }
583         free( p_access->psz_path );
584         p_access->psz_path = strdup( p_sys->psz_location );
585         /* Clean up current Open() run */
586         vlc_UrlClean( &p_sys->url );
587         http_auth_Reset( &p_sys->auth );
588         vlc_UrlClean( &p_sys->proxy );
589         free( p_sys->psz_proxy_passbuf );
590         http_auth_Reset( &p_sys->proxy_auth );
591         free( p_sys->psz_mime );
592         free( p_sys->psz_pragma );
593         free( p_sys->psz_location );
594         free( p_sys->psz_user_agent );
595
596         Disconnect( p_access );
597         cookies = p_sys->cookies;
598 #ifdef HAVE_ZLIB_H
599         inflateEnd( &p_sys->inflate.stream );
600 #endif
601         free( p_sys );
602
603         /* Do new Open() run with new data */
604         return OpenWithCookies( p_this, psz_protocol, i_nb_redirect + 1,
605                                 i_max_redirect, cookies );
606     }
607
608     if( p_sys->b_mms )
609     {
610         msg_Dbg( p_access, "this is actually a live mms server, BAIL" );
611         goto error;
612     }
613
614     if( !strcmp( p_sys->psz_protocol, "ICY" ) || p_sys->b_icecast )
615     {
616         if( p_sys->psz_mime && strcasecmp( p_sys->psz_mime, "application/ogg" ) )
617         {
618             if( !strcasecmp( p_sys->psz_mime, "video/nsv" ) ||
619                 !strcasecmp( p_sys->psz_mime, "video/nsa" ) )
620             {
621                 free( p_access->psz_demux );
622                 p_access->psz_demux = strdup( "nsv" );
623             }
624             else if( !strcasecmp( p_sys->psz_mime, "audio/aac" ) ||
625                      !strcasecmp( p_sys->psz_mime, "audio/aacp" ) )
626             {
627                 free( p_access->psz_demux );
628                 p_access->psz_demux = strdup( "m4a" );
629             }
630             else if( !strcasecmp( p_sys->psz_mime, "audio/mpeg" ) )
631             {
632                 free( p_access->psz_demux );
633                 p_access->psz_demux = strdup( "mp3" );
634             }
635
636             msg_Info( p_access, "Raw-audio server found, %s demuxer selected",
637                       p_access->psz_demux );
638
639 #if 0       /* Doesn't work really well because of the pre-buffering in
640              * shoutcast servers (the buffer content will be sent as fast as
641              * possible). */
642             p_sys->b_pace_control = false;
643 #endif
644         }
645         else if( !p_sys->psz_mime )
646         {
647             free( p_access->psz_demux );
648             /* Shoutcast */
649             p_access->psz_demux = strdup( "mp3" );
650         }
651         /* else probably Ogg Vorbis */
652     }
653     else if( !strcasecmp( psz_access, "unsv" ) &&
654              p_sys->psz_mime &&
655              !strcasecmp( p_sys->psz_mime, "misc/ultravox" ) )
656     {
657         free( p_access->psz_demux );
658         /* Grrrr! detect ultravox server and force NSV demuxer */
659         p_access->psz_demux = strdup( "nsv" );
660     }
661     else if( !strcmp( psz_access, "itpc" ) )
662     {
663         free( p_access->psz_demux );
664         p_access->psz_demux = strdup( "podcast" );
665     }
666     else if( p_sys->psz_mime &&
667              !strncasecmp( p_sys->psz_mime, "application/xspf+xml", 20 ) &&
668              ( memchr( " ;\t", p_sys->psz_mime[20], 4 ) != NULL ) )
669     {
670         free( p_access->psz_demux );
671         p_access->psz_demux = strdup( "xspf-open" );
672     }
673
674     if( p_sys->b_reconnect ) msg_Dbg( p_access, "auto re-connect enabled" );
675
676     /* PTS delay */
677     var_Create( p_access, "http-caching", VLC_VAR_INTEGER |VLC_VAR_DOINHERIT );
678
679     return VLC_SUCCESS;
680
681 error:
682     vlc_UrlClean( &p_sys->url );
683     vlc_UrlClean( &p_sys->proxy );
684     free( p_sys->psz_proxy_passbuf );
685     free( p_sys->psz_mime );
686     free( p_sys->psz_pragma );
687     free( p_sys->psz_location );
688     free( p_sys->psz_user_agent );
689
690     Disconnect( p_access );
691
692     if( p_sys->cookies )
693     {
694         int i;
695         for( i = 0; i < vlc_array_count( p_sys->cookies ); i++ )
696             free(vlc_array_item_at_index( p_sys->cookies, i ));
697         vlc_array_destroy( p_sys->cookies );
698     }
699
700 #ifdef HAVE_ZLIB_H
701     inflateEnd( &p_sys->inflate.stream );
702 #endif
703     free( p_sys );
704     return VLC_EGENERIC;
705 }
706
707 /*****************************************************************************
708  * Close:
709  *****************************************************************************/
710 static void Close( vlc_object_t *p_this )
711 {
712     access_t     *p_access = (access_t*)p_this;
713     access_sys_t *p_sys = p_access->p_sys;
714
715     vlc_UrlClean( &p_sys->url );
716     http_auth_Reset( &p_sys->auth );
717     vlc_UrlClean( &p_sys->proxy );
718     http_auth_Reset( &p_sys->proxy_auth );
719
720     free( p_sys->psz_mime );
721     free( p_sys->psz_pragma );
722     free( p_sys->psz_location );
723
724     free( p_sys->psz_icy_name );
725     free( p_sys->psz_icy_genre );
726     free( p_sys->psz_icy_title );
727
728     free( p_sys->psz_user_agent );
729
730     Disconnect( p_access );
731
732     if( p_sys->cookies )
733     {
734         int i;
735         for( i = 0; i < vlc_array_count( p_sys->cookies ); i++ )
736             free(vlc_array_item_at_index( p_sys->cookies, i ));
737         vlc_array_destroy( p_sys->cookies );
738     }
739
740 #ifdef HAVE_ZLIB_H
741     inflateEnd( &p_sys->inflate.stream );
742     free( p_sys->inflate.p_buffer );
743 #endif
744
745     free( p_sys );
746 }
747
748 /*****************************************************************************
749  * Read: Read up to i_len bytes from the http connection and place in
750  * p_buffer. Return the actual number of bytes read
751  *****************************************************************************/
752 static int ReadICYMeta( access_t *p_access );
753 static ssize_t Read( access_t *p_access, uint8_t *p_buffer, size_t i_len )
754 {
755     access_sys_t *p_sys = p_access->p_sys;
756     int i_read;
757
758     if( p_sys->fd == -1 )
759     {
760         p_access->info.b_eof = true;
761         return 0;
762     }
763
764     if( p_sys->b_has_size )
765     {
766         /* Remaining bytes in the file */
767         uint64_t remainder = p_access->info.i_size - p_access->info.i_pos;
768         if( remainder < i_len )
769             i_len = remainder;
770
771         /* Remaining bytes in the response */
772         if( p_sys->i_remaining < i_len )
773             i_len = p_sys->i_remaining;
774     }
775
776     if( p_sys->b_chunked )
777     {
778         if( p_sys->i_chunk < 0 )
779         {
780             p_access->info.b_eof = true;
781             return 0;
782         }
783
784         if( p_sys->i_chunk <= 0 )
785         {
786             char *psz = net_Gets( p_access, p_sys->fd, p_sys->p_vs );
787             /* read the chunk header */
788             if( psz == NULL )
789             {
790                 /* fatal error - end of file */
791                 msg_Dbg( p_access, "failed reading chunk-header line" );
792                 return 0;
793             }
794             p_sys->i_chunk = strtoll( psz, NULL, 16 );
795             free( psz );
796
797             if( p_sys->i_chunk <= 0 )   /* eof */
798             {
799                 p_sys->i_chunk = -1;
800                 p_access->info.b_eof = true;
801                 return 0;
802             }
803         }
804
805         if( i_len > p_sys->i_chunk )
806             i_len = p_sys->i_chunk;
807     }
808
809     if( i_len == 0 )
810     {
811         p_access->info.b_eof = true;
812         return 0;
813     }
814
815     if( p_sys->i_icy_meta > 0 && p_access->info.i_pos-p_sys->i_icy_offset > 0 )
816     {
817         int64_t i_next = p_sys->i_icy_meta -
818                                     (p_access->info.i_pos - p_sys->i_icy_offset ) % p_sys->i_icy_meta;
819
820         if( i_next == p_sys->i_icy_meta )
821         {
822             if( ReadICYMeta( p_access ) )
823             {
824                 p_access->info.b_eof = true;
825                 return -1;
826             }
827         }
828         if( i_len > i_next )
829             i_len = i_next;
830     }
831
832     i_read = net_Read( p_access, p_sys->fd, p_sys->p_vs, p_buffer, i_len, false );
833
834     if( i_read > 0 )
835     {
836         if( p_sys->b_chunked )
837         {
838             p_sys->i_chunk -= i_read;
839             if( p_sys->i_chunk <= 0 )
840             {
841                 /* read the empty line */
842                 char *psz = net_Gets( p_access, p_sys->fd, p_sys->p_vs );
843                 free( psz );
844             }
845         }
846     }
847     else
848     {
849         /*
850          * I very much doubt that this will work.
851          * If i_read == 0, the connection *IS* dead, so the only
852          * sensible thing to do is Disconnect() and then retry.
853          * Otherwise, I got recv() completely wrong. -- Courmisch
854          */
855         if( p_sys->b_continuous )
856         {
857             Request( p_access, 0 );
858             p_sys->b_continuous = false;
859             i_read = Read( p_access, p_buffer, i_len );
860             p_sys->b_continuous = true;
861         }
862         Disconnect( p_access );
863         if( p_sys->b_reconnect && vlc_object_alive( p_access ) )
864         {
865             msg_Dbg( p_access, "got disconnected, trying to reconnect" );
866             if( Connect( p_access, p_access->info.i_pos ) )
867             {
868                 msg_Dbg( p_access, "reconnection failed" );
869             }
870             else
871             {
872                 p_sys->b_reconnect = false;
873                 i_read = Read( p_access, p_buffer, i_len );
874                 p_sys->b_reconnect = true;
875             }
876         }
877
878         if( i_read <= 0 )
879         {
880             p_access->info.b_eof = true;
881             if( i_read < 0 )
882                 p_sys->b_error = true;
883             return 0;
884         }
885     }
886
887     assert( i_read >= 0 );
888     if( p_sys->b_has_size )
889     {
890         p_access->info.i_pos += i_read;
891         assert( p_access->info.i_pos <= p_access->info.i_size );
892         assert( (unsigned)i_read <= p_sys->i_remaining );
893         p_sys->i_remaining -= i_read;
894     }
895
896     return i_read;
897 }
898
899 static int ReadICYMeta( access_t *p_access )
900 {
901     access_sys_t *p_sys = p_access->p_sys;
902
903     uint8_t buffer;
904     char *p, *psz_meta;
905     int i_read;
906
907     /* Read meta data length */
908     i_read = net_Read( p_access, p_sys->fd, p_sys->p_vs, &buffer, 1,
909                        true );
910     if( i_read <= 0 )
911         return VLC_EGENERIC;
912     if( buffer == 0 )
913         return VLC_SUCCESS;
914
915     i_read = buffer << 4;
916     /* msg_Dbg( p_access, "ICY meta size=%u", i_read); */
917
918     psz_meta = malloc( i_read + 1 );
919     if( net_Read( p_access, p_sys->fd, p_sys->p_vs,
920                   (uint8_t *)psz_meta, i_read, true ) != i_read )
921     {
922         free( psz_meta );
923         return VLC_EGENERIC;
924     }
925
926     psz_meta[i_read] = '\0'; /* Just in case */
927
928     /* msg_Dbg( p_access, "icy-meta=%s", psz_meta ); */
929
930     /* Now parse the meta */
931     /* Look for StreamTitle= */
932     p = strcasestr( (char *)psz_meta, "StreamTitle=" );
933     if( p )
934     {
935         p += strlen( "StreamTitle=" );
936         if( *p == '\'' || *p == '"' )
937         {
938             char closing[] = { p[0], ';', '\0' };
939             char *psz = strstr( &p[1], closing );
940             if( !psz )
941                 psz = strchr( &p[1], ';' );
942
943             if( psz ) *psz = '\0';
944         }
945         else
946         {
947             char *psz = strchr( &p[1], ';' );
948             if( psz ) *psz = '\0';
949         }
950
951         if( !p_sys->psz_icy_title ||
952             strcmp( p_sys->psz_icy_title, &p[1] ) )
953         {
954             free( p_sys->psz_icy_title );
955             char *psz_tmp = strdup( &p[1] );
956             p_sys->psz_icy_title = EnsureUTF8( psz_tmp );
957             if( !p_sys->psz_icy_title )
958                 free( psz_tmp );
959             p_access->info.i_update |= INPUT_UPDATE_META;
960
961             msg_Dbg( p_access, "New Title=%s", p_sys->psz_icy_title );
962         }
963     }
964     free( psz_meta );
965
966     return VLC_SUCCESS;
967 }
968
969 #ifdef HAVE_ZLIB_H
970 static ssize_t ReadCompressed( access_t *p_access, uint8_t *p_buffer,
971                                size_t i_len )
972 {
973     access_sys_t *p_sys = p_access->p_sys;
974
975     if( p_sys->b_compressed )
976     {
977         int i_ret;
978
979         if( !p_sys->inflate.p_buffer )
980             p_sys->inflate.p_buffer = malloc( 256 * 1024 );
981
982         if( p_sys->inflate.stream.avail_in == 0 )
983         {
984             ssize_t i_read = Read( p_access, p_sys->inflate.p_buffer + p_sys->inflate.stream.avail_in, 256 * 1024 );
985             if( i_read <= 0 ) return i_read;
986             p_sys->inflate.stream.next_in = p_sys->inflate.p_buffer;
987             p_sys->inflate.stream.avail_in = i_read;
988         }
989
990         p_sys->inflate.stream.avail_out = i_len;
991         p_sys->inflate.stream.next_out = p_buffer;
992
993         i_ret = inflate( &p_sys->inflate.stream, Z_SYNC_FLUSH );
994         msg_Warn( p_access, "inflate return value: %d, %s", i_ret, p_sys->inflate.stream.msg );
995
996         return i_len - p_sys->inflate.stream.avail_out;
997     }
998     else
999     {
1000         return Read( p_access, p_buffer, i_len );
1001     }
1002 }
1003 #endif
1004
1005 /*****************************************************************************
1006  * Seek: close and re-open a connection at the right place
1007  *****************************************************************************/
1008 static int Seek( access_t *p_access, uint64_t i_pos )
1009 {
1010     msg_Dbg( p_access, "trying to seek to %"PRId64, i_pos );
1011
1012     Disconnect( p_access );
1013
1014     if( p_access->info.i_size
1015      && i_pos >= p_access->info.i_size ) {
1016         msg_Err( p_access, "seek to far" );
1017         int retval = Seek( p_access, p_access->info.i_size - 1 );
1018         if( retval == VLC_SUCCESS ) {
1019             uint8_t p_buffer[2];
1020             Read( p_access, p_buffer, 1);
1021             p_access->info.b_eof  = false;
1022         }
1023         return retval;
1024     }
1025     if( Connect( p_access, i_pos ) )
1026     {
1027         msg_Err( p_access, "seek failed" );
1028         p_access->info.b_eof = true;
1029         return VLC_EGENERIC;
1030     }
1031     return VLC_SUCCESS;
1032 }
1033
1034 /*****************************************************************************
1035  * Control:
1036  *****************************************************************************/
1037 static int Control( access_t *p_access, int i_query, va_list args )
1038 {
1039     access_sys_t *p_sys = p_access->p_sys;
1040     bool       *pb_bool;
1041     int64_t    *pi_64;
1042     vlc_meta_t *p_meta;
1043
1044     switch( i_query )
1045     {
1046         /* */
1047         case ACCESS_CAN_SEEK:
1048             pb_bool = (bool*)va_arg( args, bool* );
1049             *pb_bool = p_sys->b_seekable;
1050             break;
1051         case ACCESS_CAN_FASTSEEK:
1052             pb_bool = (bool*)va_arg( args, bool* );
1053             *pb_bool = false;
1054             break;
1055         case ACCESS_CAN_PAUSE:
1056         case ACCESS_CAN_CONTROL_PACE:
1057             pb_bool = (bool*)va_arg( args, bool* );
1058
1059 #if 0       /* Disable for now until we have a clock synchro algo
1060              * which works with something else than MPEG over UDP */
1061             *pb_bool = p_sys->b_pace_control;
1062 #endif
1063             *pb_bool = true;
1064             break;
1065
1066         /* */
1067         case ACCESS_GET_PTS_DELAY:
1068             pi_64 = (int64_t*)va_arg( args, int64_t * );
1069             *pi_64 = (int64_t)var_GetInteger( p_access, "http-caching" ) * 1000;
1070             break;
1071
1072         /* */
1073         case ACCESS_SET_PAUSE_STATE:
1074             break;
1075
1076         case ACCESS_GET_META:
1077             p_meta = (vlc_meta_t*)va_arg( args, vlc_meta_t* );
1078
1079             if( p_sys->psz_icy_name )
1080                 vlc_meta_Set( p_meta, vlc_meta_Title, p_sys->psz_icy_name );
1081             if( p_sys->psz_icy_genre )
1082                 vlc_meta_Set( p_meta, vlc_meta_Genre, p_sys->psz_icy_genre );
1083             if( p_sys->psz_icy_title )
1084                 vlc_meta_Set( p_meta, vlc_meta_NowPlaying, p_sys->psz_icy_title );
1085             break;
1086
1087         case ACCESS_GET_CONTENT_TYPE:
1088             *va_arg( args, char ** ) =
1089                 p_sys->psz_mime ? strdup( p_sys->psz_mime ) : NULL;
1090             break;
1091
1092         case ACCESS_GET_TITLE_INFO:
1093         case ACCESS_SET_TITLE:
1094         case ACCESS_SET_SEEKPOINT:
1095         case ACCESS_SET_PRIVATE_ID_STATE:
1096             return VLC_EGENERIC;
1097
1098         default:
1099             msg_Warn( p_access, "unimplemented query in control" );
1100             return VLC_EGENERIC;
1101
1102     }
1103     return VLC_SUCCESS;
1104 }
1105
1106 /*****************************************************************************
1107  * Connect:
1108  *****************************************************************************/
1109 static int Connect( access_t *p_access, uint64_t i_tell )
1110 {
1111     access_sys_t   *p_sys = p_access->p_sys;
1112     vlc_url_t      srv = p_sys->b_proxy ? p_sys->proxy : p_sys->url;
1113
1114     /* Clean info */
1115     free( p_sys->psz_location );
1116     free( p_sys->psz_mime );
1117     free( p_sys->psz_pragma );
1118
1119     free( p_sys->psz_icy_genre );
1120     free( p_sys->psz_icy_name );
1121     free( p_sys->psz_icy_title );
1122
1123
1124     p_sys->psz_location = NULL;
1125     p_sys->psz_mime = NULL;
1126     p_sys->psz_pragma = NULL;
1127     p_sys->b_mms = false;
1128     p_sys->b_chunked = false;
1129     p_sys->i_chunk = 0;
1130     p_sys->i_icy_meta = 0;
1131     p_sys->i_icy_offset = i_tell;
1132     p_sys->psz_icy_name = NULL;
1133     p_sys->psz_icy_genre = NULL;
1134     p_sys->psz_icy_title = NULL;
1135     p_sys->i_remaining = 0;
1136     p_sys->b_persist = false;
1137     p_sys->b_has_size = false;
1138     p_access->info.i_size = 0;
1139     p_access->info.i_pos  = i_tell;
1140     p_access->info.b_eof  = false;
1141
1142     /* Open connection */
1143     assert( p_sys->fd == -1 ); /* No open sockets (leaking fds is BAD) */
1144     p_sys->fd = net_ConnectTCP( p_access, srv.psz_host, srv.i_port );
1145     if( p_sys->fd == -1 )
1146     {
1147         msg_Err( p_access, "cannot connect to %s:%d", srv.psz_host, srv.i_port );
1148         return -1;
1149     }
1150     setsockopt (p_sys->fd, SOL_SOCKET, SO_KEEPALIVE, &(int){ 1 }, sizeof (int));
1151
1152     /* Initialize TLS/SSL session */
1153     if( p_sys->b_ssl == true )
1154     {
1155         /* CONNECT to establish TLS tunnel through HTTP proxy */
1156         if( p_sys->b_proxy )
1157         {
1158             char *psz;
1159             unsigned i_status = 0;
1160
1161             if( p_sys->i_version == 0 )
1162             {
1163                 /* CONNECT is not in HTTP/1.0 */
1164                 Disconnect( p_access );
1165                 return -1;
1166             }
1167
1168             net_Printf( p_access, p_sys->fd, NULL,
1169                         "CONNECT %s:%d HTTP/1.%d\r\nHost: %s:%d\r\n\r\n",
1170                         p_sys->url.psz_host, p_sys->url.i_port,
1171                         p_sys->i_version,
1172                         p_sys->url.psz_host, p_sys->url.i_port);
1173
1174             psz = net_Gets( p_access, p_sys->fd, NULL );
1175             if( psz == NULL )
1176             {
1177                 msg_Err( p_access, "cannot establish HTTP/TLS tunnel" );
1178                 Disconnect( p_access );
1179                 return -1;
1180             }
1181
1182             sscanf( psz, "HTTP/%*u.%*u %3u", &i_status );
1183             free( psz );
1184
1185             if( ( i_status / 100 ) != 2 )
1186             {
1187                 msg_Err( p_access, "HTTP/TLS tunnel through proxy denied" );
1188                 Disconnect( p_access );
1189                 return -1;
1190             }
1191
1192             do
1193             {
1194                 psz = net_Gets( p_access, p_sys->fd, NULL );
1195                 if( psz == NULL )
1196                 {
1197                     msg_Err( p_access, "HTTP proxy connection failed" );
1198                     Disconnect( p_access );
1199                     return -1;
1200                 }
1201
1202                 if( *psz == '\0' )
1203                     i_status = 0;
1204
1205                 free( psz );
1206
1207                 if( !vlc_object_alive (p_access) || p_sys->b_error )
1208                 {
1209                     Disconnect( p_access );
1210                     return -1;
1211                 }
1212             }
1213             while( i_status );
1214         }
1215
1216         /* TLS/SSL handshake */
1217         p_sys->p_tls = tls_ClientCreate( VLC_OBJECT(p_access), p_sys->fd,
1218                                          p_sys->url.psz_host );
1219         if( p_sys->p_tls == NULL )
1220         {
1221             msg_Err( p_access, "cannot establish HTTP/TLS session" );
1222             Disconnect( p_access );
1223             return -1;
1224         }
1225         p_sys->p_vs = &p_sys->p_tls->sock;
1226     }
1227
1228     return Request( p_access, i_tell ) ? -2 : 0;
1229 }
1230
1231
1232 static int Request( access_t *p_access, uint64_t i_tell )
1233 {
1234     access_sys_t   *p_sys = p_access->p_sys;
1235     char           *psz ;
1236     v_socket_t     *pvs = p_sys->p_vs;
1237     p_sys->b_persist = false;
1238
1239     p_sys->i_remaining = 0;
1240     if( p_sys->b_proxy )
1241     {
1242         if( p_sys->url.psz_path )
1243         {
1244             net_Printf( p_access, p_sys->fd, NULL,
1245                         "GET http://%s:%d%s HTTP/1.%d\r\n",
1246                         p_sys->url.psz_host, p_sys->url.i_port,
1247                         p_sys->url.psz_path, p_sys->i_version );
1248         }
1249         else
1250         {
1251             net_Printf( p_access, p_sys->fd, NULL,
1252                         "GET http://%s:%d/ HTTP/1.%d\r\n",
1253                         p_sys->url.psz_host, p_sys->url.i_port,
1254                         p_sys->i_version );
1255         }
1256     }
1257     else
1258     {
1259         const char *psz_path = p_sys->url.psz_path;
1260         if( !psz_path || !*psz_path )
1261         {
1262             psz_path = "/";
1263         }
1264         if( p_sys->url.i_port != (pvs ? 443 : 80) )
1265         {
1266             net_Printf( p_access, p_sys->fd, pvs,
1267                         "GET %s HTTP/1.%d\r\nHost: %s:%d\r\n",
1268                         psz_path, p_sys->i_version, p_sys->url.psz_host,
1269                         p_sys->url.i_port );
1270         }
1271         else
1272         {
1273             net_Printf( p_access, p_sys->fd, pvs,
1274                         "GET %s HTTP/1.%d\r\nHost: %s\r\n",
1275                         psz_path, p_sys->i_version, p_sys->url.psz_host );
1276         }
1277     }
1278     /* User Agent */
1279     net_Printf( p_access, p_sys->fd, pvs, "User-Agent: %s\r\n",
1280                 p_sys->psz_user_agent );
1281     /* Offset */
1282     if( p_sys->i_version == 1 && ! p_sys->b_continuous )
1283     {
1284         p_sys->b_persist = true;
1285         net_Printf( p_access, p_sys->fd, pvs,
1286                     "Range: bytes=%"PRIu64"-\r\n", i_tell );
1287     }
1288
1289     /* Cookies */
1290     if( p_sys->cookies )
1291     {
1292         int i;
1293         for( i = 0; i < vlc_array_count( p_sys->cookies ); i++ )
1294         {
1295             const char * cookie = vlc_array_item_at_index( p_sys->cookies, i );
1296             char * psz_cookie_content = cookie_get_content( cookie );
1297             char * psz_cookie_domain = cookie_get_domain( cookie );
1298
1299             assert( psz_cookie_content );
1300
1301             /* FIXME: This is clearly not conforming to the rfc */
1302             bool is_in_right_domain = (!psz_cookie_domain || strstr( p_sys->url.psz_host, psz_cookie_domain ));
1303
1304             if( is_in_right_domain )
1305             {
1306                 msg_Dbg( p_access, "Sending Cookie %s", psz_cookie_content );
1307                 if( net_Printf( p_access, p_sys->fd, pvs, "Cookie: %s\r\n", psz_cookie_content ) < 0 )
1308                     msg_Err( p_access, "failed to send Cookie" );
1309             }
1310             free( psz_cookie_content );
1311             free( psz_cookie_domain );
1312         }
1313     }
1314
1315     /* Authentication */
1316     if( p_sys->url.psz_username || p_sys->url.psz_password )
1317         AuthReply( p_access, "", &p_sys->url, &p_sys->auth );
1318
1319     /* Proxy Authentication */
1320     if( p_sys->proxy.psz_username || p_sys->proxy.psz_password )
1321         AuthReply( p_access, "Proxy-", &p_sys->proxy, &p_sys->proxy_auth );
1322
1323     /* ICY meta data request */
1324     net_Printf( p_access, p_sys->fd, pvs, "Icy-MetaData: 1\r\n" );
1325
1326
1327     if( net_Printf( p_access, p_sys->fd, pvs, "\r\n" ) < 0 )
1328     {
1329         msg_Err( p_access, "failed to send request" );
1330         Disconnect( p_access );
1331         return VLC_EGENERIC;
1332     }
1333
1334     /* Read Answer */
1335     if( ( psz = net_Gets( p_access, p_sys->fd, pvs ) ) == NULL )
1336     {
1337         msg_Err( p_access, "failed to read answer" );
1338         goto error;
1339     }
1340     if( !strncmp( psz, "HTTP/1.", 7 ) )
1341     {
1342         p_sys->psz_protocol = "HTTP";
1343         p_sys->i_code = atoi( &psz[9] );
1344     }
1345     else if( !strncmp( psz, "ICY", 3 ) )
1346     {
1347         p_sys->psz_protocol = "ICY";
1348         p_sys->i_code = atoi( &psz[4] );
1349         p_sys->b_reconnect = true;
1350     }
1351     else
1352     {
1353         msg_Err( p_access, "invalid HTTP reply '%s'", psz );
1354         free( psz );
1355         goto error;
1356     }
1357     msg_Dbg( p_access, "protocol '%s' answer code %d",
1358              p_sys->psz_protocol, p_sys->i_code );
1359     if( !strcmp( p_sys->psz_protocol, "ICY" ) )
1360     {
1361         p_sys->b_seekable = false;
1362     }
1363     if( p_sys->i_code != 206 && p_sys->i_code != 401 )
1364     {
1365         p_sys->b_seekable = false;
1366     }
1367     /* Authentication error - We'll have to display the dialog */
1368     if( p_sys->i_code == 401 )
1369     {
1370
1371     }
1372     /* Other fatal error */
1373     else if( p_sys->i_code >= 400 )
1374     {
1375         msg_Err( p_access, "error: %s", psz );
1376         free( psz );
1377         goto error;
1378     }
1379     free( psz );
1380
1381     for( ;; )
1382     {
1383         char *psz = net_Gets( p_access, p_sys->fd, pvs );
1384         char *p;
1385
1386         if( psz == NULL )
1387         {
1388             msg_Err( p_access, "failed to read answer" );
1389             goto error;
1390         }
1391
1392         if( !vlc_object_alive (p_access) || p_sys->b_error )
1393         {
1394             free( psz );
1395             goto error;
1396         }
1397
1398         /* msg_Dbg( p_input, "Line=%s", psz ); */
1399         if( *psz == '\0' )
1400         {
1401             free( psz );
1402             break;
1403         }
1404
1405         if( ( p = strchr( psz, ':' ) ) == NULL )
1406         {
1407             msg_Err( p_access, "malformed header line: %s", psz );
1408             free( psz );
1409             goto error;
1410         }
1411         *p++ = '\0';
1412         while( *p == ' ' ) p++;
1413
1414         if( !strcasecmp( psz, "Content-Length" ) )
1415         {
1416             uint64_t i_size = i_tell + (p_sys->i_remaining = (uint64_t)atoll( p ));
1417             if(i_size > p_access->info.i_size) {
1418                 p_sys->b_has_size = true;
1419                 p_access->info.i_size = i_size;
1420             }
1421             msg_Dbg( p_access, "this frame size=%"PRIu64, p_sys->i_remaining );
1422         }
1423         else if( !strcasecmp( psz, "Content-Range" ) ) {
1424             uint64_t i_ntell = i_tell;
1425             uint64_t i_nend = (p_access->info.i_size > 0)?(p_access->info.i_size - 1):i_tell;
1426             uint64_t i_nsize = p_access->info.i_size;
1427             sscanf(p,"bytes %"SCNu64"-%"SCNu64"/%"SCNu64,&i_ntell,&i_nend,&i_nsize);
1428             if(i_nend > i_ntell ) {
1429                 p_access->info.i_pos = i_ntell;
1430                 p_sys->i_remaining = i_nend+1-i_ntell;
1431                 int64_t i_size = (i_nsize > i_nend) ? i_nsize : (i_nend + 1);
1432                 if(i_size > p_access->info.i_size) {
1433                     p_sys->b_has_size = true;
1434                     p_access->info.i_size = i_size;
1435                 }
1436                 msg_Dbg( p_access, "stream size=%"PRIu64",pos=%"PRIu64",remaining=%"PRIu64,
1437                          i_nsize, i_ntell, p_sys->i_remaining);
1438             }
1439         }
1440         else if( !strcasecmp( psz, "Connection" ) ) {
1441             msg_Dbg( p_access, "Connection: %s",p );
1442             int i = -1;
1443             sscanf(p, "close%n",&i);
1444             if( i >= 0 ) {
1445                 p_sys->b_persist = false;
1446             }
1447         }
1448         else if( !strcasecmp( psz, "Location" ) )
1449         {
1450             char * psz_new_loc;
1451
1452             /* This does not follow RFC 2068, but yet if the url is not absolute,
1453              * handle it as everyone does. */
1454             if( p[0] == '/' )
1455             {
1456                 const char *psz_http_ext = p_sys->b_ssl ? "s" : "" ;
1457
1458                 if( p_sys->url.i_port == ( p_sys->b_ssl ? 443 : 80 ) )
1459                 {
1460                     if( asprintf(&psz_new_loc, "http%s://%s%s", psz_http_ext,
1461                                  p_sys->url.psz_host, p) < 0 )
1462                         goto error;
1463                 }
1464                 else
1465                 {
1466                     if( asprintf(&psz_new_loc, "http%s://%s:%d%s", psz_http_ext,
1467                                  p_sys->url.psz_host, p_sys->url.i_port, p) < 0 )
1468                         goto error;
1469                 }
1470             }
1471             else
1472             {
1473                 psz_new_loc = strdup( p );
1474             }
1475
1476             free( p_sys->psz_location );
1477             p_sys->psz_location = psz_new_loc;
1478         }
1479         else if( !strcasecmp( psz, "Content-Type" ) )
1480         {
1481             free( p_sys->psz_mime );
1482             p_sys->psz_mime = strdup( p );
1483             msg_Dbg( p_access, "Content-Type: %s", p_sys->psz_mime );
1484         }
1485         else if( !strcasecmp( psz, "Content-Encoding" ) )
1486         {
1487             msg_Dbg( p_access, "Content-Encoding: %s", p );
1488             if( !strcasecmp( p, "identity" ) )
1489                 ;
1490 #ifdef HAVE_ZLIB_H
1491             else if( !strcasecmp( p, "gzip" ) || !strcasecmp( p, "deflate" ) )
1492                 p_sys->b_compressed = true;
1493 #endif
1494             else
1495                 msg_Warn( p_access, "Unknown content coding: %s", p );
1496         }
1497         else if( !strcasecmp( psz, "Pragma" ) )
1498         {
1499             if( !strcasecmp( psz, "Pragma: features" ) )
1500                 p_sys->b_mms = true;
1501             free( p_sys->psz_pragma );
1502             p_sys->psz_pragma = strdup( p );
1503             msg_Dbg( p_access, "Pragma: %s", p_sys->psz_pragma );
1504         }
1505         else if( !strcasecmp( psz, "Server" ) )
1506         {
1507             msg_Dbg( p_access, "Server: %s", p );
1508             if( !strncasecmp( p, "Icecast", 7 ) ||
1509                 !strncasecmp( p, "Nanocaster", 10 ) )
1510             {
1511                 /* Remember if this is Icecast
1512                  * we need to force demux in this case without breaking
1513                  *  autodetection */
1514
1515                 /* Let live 365 streams (nanocaster) piggyback on the icecast
1516                  * routine. They look very similar */
1517
1518                 p_sys->b_reconnect = true;
1519                 p_sys->b_pace_control = false;
1520                 p_sys->b_icecast = true;
1521             }
1522         }
1523         else if( !strcasecmp( psz, "Transfer-Encoding" ) )
1524         {
1525             msg_Dbg( p_access, "Transfer-Encoding: %s", p );
1526             if( !strncasecmp( p, "chunked", 7 ) )
1527             {
1528                 p_sys->b_chunked = true;
1529             }
1530         }
1531         else if( !strcasecmp( psz, "Icy-MetaInt" ) )
1532         {
1533             msg_Dbg( p_access, "Icy-MetaInt: %s", p );
1534             p_sys->i_icy_meta = atoi( p );
1535             if( p_sys->i_icy_meta < 0 )
1536                 p_sys->i_icy_meta = 0;
1537             if( p_sys->i_icy_meta > 0 )
1538                 p_sys->b_icecast = true;
1539
1540             msg_Warn( p_access, "ICY metaint=%d", p_sys->i_icy_meta );
1541         }
1542         else if( !strcasecmp( psz, "Icy-Name" ) )
1543         {
1544             free( p_sys->psz_icy_name );
1545             char *psz_tmp = strdup( p );
1546             p_sys->psz_icy_name = EnsureUTF8( psz_tmp );
1547             if( !p_sys->psz_icy_name )
1548                 free( psz_tmp );
1549             msg_Dbg( p_access, "Icy-Name: %s", p_sys->psz_icy_name );
1550
1551             p_sys->b_icecast = true; /* be on the safeside. set it here as well. */
1552             p_sys->b_reconnect = true;
1553             p_sys->b_pace_control = false;
1554         }
1555         else if( !strcasecmp( psz, "Icy-Genre" ) )
1556         {
1557             free( p_sys->psz_icy_genre );
1558             char *psz_tmp = strdup( p );
1559             p_sys->psz_icy_genre = EnsureUTF8( psz_tmp );
1560             if( !p_sys->psz_icy_genre )
1561                 free( psz_tmp );
1562             msg_Dbg( p_access, "Icy-Genre: %s", p_sys->psz_icy_genre );
1563         }
1564         else if( !strncasecmp( psz, "Icy-Notice", 10 ) )
1565         {
1566             msg_Dbg( p_access, "Icy-Notice: %s", p );
1567         }
1568         else if( !strncasecmp( psz, "icy-", 4 ) ||
1569                  !strncasecmp( psz, "ice-", 4 ) ||
1570                  !strncasecmp( psz, "x-audiocast", 11 ) )
1571         {
1572             msg_Dbg( p_access, "Meta-Info: %s: %s", psz, p );
1573         }
1574         else if( !strcasecmp( psz, "Set-Cookie" ) )
1575         {
1576             if( p_sys->cookies )
1577             {
1578                 msg_Dbg( p_access, "Accepting Cookie: %s", p );
1579                 cookie_append( p_sys->cookies, strdup(p) );
1580             }
1581             else
1582                 msg_Dbg( p_access, "We have a Cookie we won't remember: %s", p );
1583         }
1584         else if( !strcasecmp( psz, "www-authenticate" ) )
1585         {
1586             msg_Dbg( p_access, "Authentication header: %s", p );
1587             http_auth_ParseWwwAuthenticateHeader( VLC_OBJECT(p_access),
1588                                                   &p_sys->auth, p );
1589         }
1590         else if( !strcasecmp( psz, "proxy-authenticate" ) )
1591         {
1592             msg_Dbg( p_access, "Proxy authentication header: %s", p );
1593             http_auth_ParseWwwAuthenticateHeader( VLC_OBJECT(p_access),
1594                                                   &p_sys->proxy_auth, p );
1595         }
1596         else if( !strcasecmp( psz, "authentication-info" ) )
1597         {
1598             msg_Dbg( p_access, "Authentication Info header: %s", p );
1599             if( AuthCheckReply( p_access, p, &p_sys->url, &p_sys->auth ) )
1600                 goto error;
1601         }
1602         else if( !strcasecmp( psz, "proxy-authentication-info" ) )
1603         {
1604             msg_Dbg( p_access, "Proxy Authentication Info header: %s", p );
1605             if( AuthCheckReply( p_access, p, &p_sys->proxy, &p_sys->proxy_auth ) )
1606                 goto error;
1607         }
1608
1609         free( psz );
1610     }
1611     /* We close the stream for zero length data, unless of course the
1612      * server has already promised to do this for us.
1613      */
1614     if( p_sys->b_has_size && p_sys->i_remaining == 0 && p_sys->b_persist ) {
1615         Disconnect( p_access );
1616     }
1617     return VLC_SUCCESS;
1618
1619 error:
1620     Disconnect( p_access );
1621     return VLC_EGENERIC;
1622 }
1623
1624 /*****************************************************************************
1625  * Disconnect:
1626  *****************************************************************************/
1627 static void Disconnect( access_t *p_access )
1628 {
1629     access_sys_t *p_sys = p_access->p_sys;
1630
1631     if( p_sys->p_tls != NULL)
1632     {
1633         tls_ClientDelete( p_sys->p_tls );
1634         p_sys->p_tls = NULL;
1635         p_sys->p_vs = NULL;
1636     }
1637     if( p_sys->fd != -1)
1638     {
1639         net_Close(p_sys->fd);
1640         p_sys->fd = -1;
1641     }
1642
1643 }
1644
1645 /*****************************************************************************
1646  * Cookies (FIXME: we may want to rewrite that using a nice structure to hold
1647  * them) (FIXME: only support the "domain=" param)
1648  *****************************************************************************/
1649
1650 /* Get the NAME=VALUE part of the Cookie */
1651 static char * cookie_get_content( const char * cookie )
1652 {
1653     char * ret = strdup( cookie );
1654     if( !ret ) return NULL;
1655     char * str = ret;
1656     /* Look for a ';' */
1657     while( *str && *str != ';' ) str++;
1658     /* Replace it by a end-char */
1659     if( *str == ';' ) *str = 0;
1660     return ret;
1661 }
1662
1663 /* Get the domain where the cookie is stored */
1664 static char * cookie_get_domain( const char * cookie )
1665 {
1666     const char * str = cookie;
1667     static const char domain[] = "domain=";
1668     if( !str )
1669         return NULL;
1670     /* Look for a ';' */
1671     while( *str )
1672     {
1673         if( !strncmp( str, domain, sizeof(domain) - 1 /* minus \0 */ ) )
1674         {
1675             str += sizeof(domain) - 1 /* minus \0 */;
1676             char * ret = strdup( str );
1677             /* Now remove the next ';' if present */
1678             char * ret_iter = ret;
1679             while( *ret_iter && *ret_iter != ';' ) ret_iter++;
1680             if( *ret_iter == ';' )
1681                 *ret_iter = 0;
1682             return ret;
1683         }
1684         /* Go to next ';' field */
1685         while( *str && *str != ';' ) str++;
1686         if( *str == ';' ) str++;
1687         /* skip blank */
1688         while( *str && *str == ' ' ) str++;
1689     }
1690     return NULL;
1691 }
1692
1693 /* Get NAME in the NAME=VALUE field */
1694 static char * cookie_get_name( const char * cookie )
1695 {
1696     char * ret = cookie_get_content( cookie ); /* NAME=VALUE */
1697     if( !ret ) return NULL;
1698     char * str = ret;
1699     while( *str && *str != '=' ) str++;
1700     *str = 0;
1701     return ret;
1702 }
1703
1704 /* Add a cookie in cookies, checking to see how it should be added */
1705 static void cookie_append( vlc_array_t * cookies, char * cookie )
1706 {
1707     int i;
1708
1709     if( !cookie )
1710         return;
1711
1712     char * cookie_name = cookie_get_name( cookie );
1713
1714     /* Don't send invalid cookies */
1715     if( !cookie_name )
1716         return;
1717
1718     char * cookie_domain = cookie_get_domain( cookie );
1719     for( i = 0; i < vlc_array_count( cookies ); i++ )
1720     {
1721         char * current_cookie = vlc_array_item_at_index( cookies, i );
1722         char * current_cookie_name = cookie_get_name( current_cookie );
1723         char * current_cookie_domain = cookie_get_domain( current_cookie );
1724
1725         assert( current_cookie_name );
1726
1727         bool is_domain_matching = ( cookie_domain && current_cookie_domain &&
1728                                          !strcmp( cookie_domain, current_cookie_domain ) );
1729
1730         if( is_domain_matching && !strcmp( cookie_name, current_cookie_name )  )
1731         {
1732             /* Remove previous value for this cookie */
1733             free( current_cookie );
1734             vlc_array_remove( cookies, i );
1735
1736             /* Clean */
1737             free( current_cookie_name );
1738             free( current_cookie_domain );
1739             break;
1740         }
1741         free( current_cookie_name );
1742         free( current_cookie_domain );
1743     }
1744     free( cookie_name );
1745     free( cookie_domain );
1746     vlc_array_append( cookies, cookie );
1747 }
1748
1749
1750 /*****************************************************************************
1751  * HTTP authentication
1752  *****************************************************************************/
1753
1754 static void AuthReply( access_t *p_access, const char *psz_prefix,
1755                        vlc_url_t *p_url, http_auth_t *p_auth )
1756 {
1757     access_sys_t *p_sys = p_access->p_sys;
1758     char *psz_value;
1759
1760     psz_value =
1761         http_auth_FormatAuthorizationHeader( VLC_OBJECT(p_access), p_auth,
1762                                              "GET", p_url->psz_path,
1763                                              p_url->psz_username,
1764                                              p_url->psz_password );
1765     if ( psz_value == NULL )
1766         return;
1767
1768     net_Printf( p_access, p_sys->fd, p_sys->p_vs,
1769                 "%sAuthorization: %s\r\n", psz_prefix, psz_value );
1770     free( psz_value );
1771 }
1772
1773 static int AuthCheckReply( access_t *p_access, const char *psz_header,
1774                            vlc_url_t *p_url, http_auth_t *p_auth )
1775 {
1776     return
1777         http_auth_ParseAuthenticationInfoHeader( VLC_OBJECT(p_access), p_auth,
1778                                                  psz_header, "",
1779                                                  p_url->psz_path,
1780                                                  p_url->psz_username,
1781                                                  p_url->psz_password );
1782 }