git.oblomov.eu Git - wine/blob - dlls/winhttp/request.c

   1 /*
   2  * Copyright 2004 Mike McCormack for CodeWeavers
   3  * Copyright 2006 Rob Shearman for CodeWeavers
   4  * Copyright 2008, 2011 Hans Leidekker for CodeWeavers
   5  * Copyright 2009 Juan Lang
   6  *
   7  * This library is free software; you can redistribute it and/or
   8  * modify it under the terms of the GNU Lesser General Public
   9  * License as published by the Free Software Foundation; either
  10  * version 2.1 of the License, or (at your option) any later version.
  11  *
  12  * This library is distributed in the hope that it will be useful,
  13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  15  * Lesser General Public License for more details.
  16  *
  17  * You should have received a copy of the GNU Lesser General Public
  18  * License along with this library; if not, write to the Free Software
  19  * Foundation, Inc., 51 Franklin St, Fifth Floor, Boston, MA 02110-1301, USA
  20  */
  21
  22 #define COBJMACROS
  23 #include "config.h"
  24 #include "wine/port.h"
  25 #include "wine/debug.h"
  26
  27 #include <stdarg.h>
  28 #ifdef HAVE_ARPA_INET_H
  29 # include <arpa/inet.h>
  30 #endif
  31
  32 #include "windef.h"
  33 #include "winbase.h"
  34 #include "ole2.h"
  35 #include "initguid.h"
  36 #include "httprequest.h"
  37 #include "winhttp.h"
  38
  39 #include "winhttp_private.h"
  40
  41 WINE_DEFAULT_DEBUG_CHANNEL(winhttp);
  42
  43 static const WCHAR attr_accept[] = {'A','c','c','e','p','t',0};
  44 static const WCHAR attr_accept_charset[] = {'A','c','c','e','p','t','-','C','h','a','r','s','e','t', 0};
  45 static const WCHAR attr_accept_encoding[] = {'A','c','c','e','p','t','-','E','n','c','o','d','i','n','g',0};
  46 static const WCHAR attr_accept_language[] = {'A','c','c','e','p','t','-','L','a','n','g','u','a','g','e',0};
  47 static const WCHAR attr_accept_ranges[] = {'A','c','c','e','p','t','-','R','a','n','g','e','s',0};
  48 static const WCHAR attr_age[] = {'A','g','e',0};
  49 static const WCHAR attr_allow[] = {'A','l','l','o','w',0};
  50 static const WCHAR attr_authorization[] = {'A','u','t','h','o','r','i','z','a','t','i','o','n',0};
  51 static const WCHAR attr_cache_control[] = {'C','a','c','h','e','-','C','o','n','t','r','o','l',0};
  52 static const WCHAR attr_connection[] = {'C','o','n','n','e','c','t','i','o','n',0};
  53 static const WCHAR attr_content_base[] = {'C','o','n','t','e','n','t','-','B','a','s','e',0};
  54 static const WCHAR attr_content_encoding[] = {'C','o','n','t','e','n','t','-','E','n','c','o','d','i','n','g',0};
  55 static const WCHAR attr_content_id[] = {'C','o','n','t','e','n','t','-','I','D',0};
  56 static const WCHAR attr_content_language[] = {'C','o','n','t','e','n','t','-','L','a','n','g','u','a','g','e',0};
  57 static const WCHAR attr_content_length[] = {'C','o','n','t','e','n','t','-','L','e','n','g','t','h',0};
  58 static const WCHAR attr_content_location[] = {'C','o','n','t','e','n','t','-','L','o','c','a','t','i','o','n',0};
  59 static const WCHAR attr_content_md5[] = {'C','o','n','t','e','n','t','-','M','D','5',0};
  60 static const WCHAR attr_content_range[] = {'C','o','n','t','e','n','t','-','R','a','n','g','e',0};
  61 static const WCHAR attr_content_transfer_encoding[] = {'C','o','n','t','e','n','t','-','T','r','a','n','s','f','e','r','-','E','n','c','o','d','i','n','g',0};
  62 static const WCHAR attr_content_type[] = {'C','o','n','t','e','n','t','-','T','y','p','e',0};
  63 static const WCHAR attr_cookie[] = {'C','o','o','k','i','e',0};
  64 static const WCHAR attr_date[] = {'D','a','t','e',0};
  65 static const WCHAR attr_from[] = {'F','r','o','m',0};
  66 static const WCHAR attr_etag[] = {'E','T','a','g',0};
  67 static const WCHAR attr_expect[] = {'E','x','p','e','c','t',0};
  68 static const WCHAR attr_expires[] = {'E','x','p','i','r','e','s',0};
  69 static const WCHAR attr_host[] = {'H','o','s','t',0};
  70 static const WCHAR attr_if_match[] = {'I','f','-','M','a','t','c','h',0};
  71 static const WCHAR attr_if_modified_since[] = {'I','f','-','M','o','d','i','f','i','e','d','-','S','i','n','c','e',0};
  72 static const WCHAR attr_if_none_match[] = {'I','f','-','N','o','n','e','-','M','a','t','c','h',0};
  73 static const WCHAR attr_if_range[] = {'I','f','-','R','a','n','g','e',0};
  74 static const WCHAR attr_if_unmodified_since[] = {'I','f','-','U','n','m','o','d','i','f','i','e','d','-','S','i','n','c','e',0};
  75 static const WCHAR attr_last_modified[] = {'L','a','s','t','-','M','o','d','i','f','i','e','d',0};
  76 static const WCHAR attr_location[] = {'L','o','c','a','t','i','o','n',0};
  77 static const WCHAR attr_max_forwards[] = {'M','a','x','-','F','o','r','w','a','r','d','s',0};
  78 static const WCHAR attr_mime_version[] = {'M','i','m','e','-','V','e','r','s','i','o','n',0};
  79 static const WCHAR attr_pragma[] = {'P','r','a','g','m','a',0};
  80 static const WCHAR attr_proxy_authenticate[] = {'P','r','o','x','y','-','A','u','t','h','e','n','t','i','c','a','t','e',0};
  81 static const WCHAR attr_proxy_authorization[] = {'P','r','o','x','y','-','A','u','t','h','o','r','i','z','a','t','i','o','n',0};
  82 static const WCHAR attr_proxy_connection[] = {'P','r','o','x','y','-','C','o','n','n','e','c','t','i','o','n',0};
  83 static const WCHAR attr_public[] = {'P','u','b','l','i','c',0};
  84 static const WCHAR attr_range[] = {'R','a','n','g','e',0};
  85 static const WCHAR attr_referer[] = {'R','e','f','e','r','e','r',0};
  86 static const WCHAR attr_retry_after[] = {'R','e','t','r','y','-','A','f','t','e','r',0};
  87 static const WCHAR attr_server[] = {'S','e','r','v','e','r',0};
  88 static const WCHAR attr_set_cookie[] = {'S','e','t','-','C','o','o','k','i','e',0};
  89 static const WCHAR attr_status[] = {'S','t','a','t','u','s',0};
  90 static const WCHAR attr_transfer_encoding[] = {'T','r','a','n','s','f','e','r','-','E','n','c','o','d','i','n','g',0};
  91 static const WCHAR attr_unless_modified_since[] = {'U','n','l','e','s','s','-','M','o','d','i','f','i','e','d','-','S','i','n','c','e',0};
  92 static const WCHAR attr_upgrade[] = {'U','p','g','r','a','d','e',0};
  93 static const WCHAR attr_uri[] = {'U','R','I',0};
  94 static const WCHAR attr_user_agent[] = {'U','s','e','r','-','A','g','e','n','t',0};
  95 static const WCHAR attr_vary[] = {'V','a','r','y',0};
  96 static const WCHAR attr_via[] = {'V','i','a',0};
  97 static const WCHAR attr_warning[] = {'W','a','r','n','i','n','g',0};
  98 static const WCHAR attr_www_authenticate[] = {'W','W','W','-','A','u','t','h','e','n','t','i','c','a','t','e',0};
  99
 100 static const WCHAR *attribute_table[] =
 101 {
 102     attr_mime_version,              /* WINHTTP_QUERY_MIME_VERSION               = 0  */
 103     attr_content_type,              /* WINHTTP_QUERY_CONTENT_TYPE               = 1  */
 104     attr_content_transfer_encoding, /* WINHTTP_QUERY_CONTENT_TRANSFER_ENCODING  = 2  */
 105     attr_content_id,                /* WINHTTP_QUERY_CONTENT_ID                 = 3  */
 106     NULL,                           /* WINHTTP_QUERY_CONTENT_DESCRIPTION        = 4  */
 107     attr_content_length,            /* WINHTTP_QUERY_CONTENT_LENGTH             = 5  */
 108     attr_content_language,          /* WINHTTP_QUERY_CONTENT_LANGUAGE           = 6  */
 109     attr_allow,                     /* WINHTTP_QUERY_ALLOW                      = 7  */
 110     attr_public,                    /* WINHTTP_QUERY_PUBLIC                     = 8  */
 111     attr_date,                      /* WINHTTP_QUERY_DATE                       = 9  */
 112     attr_expires,                   /* WINHTTP_QUERY_EXPIRES                    = 10 */
 113     attr_last_modified,             /* WINHTTP_QUERY_LAST_MODIFIEDcw            = 11 */
 114     NULL,                           /* WINHTTP_QUERY_MESSAGE_ID                 = 12 */
 115     attr_uri,                       /* WINHTTP_QUERY_URI                        = 13 */
 116     attr_from,                      /* WINHTTP_QUERY_DERIVED_FROM               = 14 */
 117     NULL,                           /* WINHTTP_QUERY_COST                       = 15 */
 118     NULL,                           /* WINHTTP_QUERY_LINK                       = 16 */
 119     attr_pragma,                    /* WINHTTP_QUERY_PRAGMA                     = 17 */
 120     NULL,                           /* WINHTTP_QUERY_VERSION                    = 18 */
 121     attr_status,                    /* WINHTTP_QUERY_STATUS_CODE                = 19 */
 122     NULL,                           /* WINHTTP_QUERY_STATUS_TEXT                = 20 */
 123     NULL,                           /* WINHTTP_QUERY_RAW_HEADERS                = 21 */
 124     NULL,                           /* WINHTTP_QUERY_RAW_HEADERS_CRLF           = 22 */
 125     attr_connection,                /* WINHTTP_QUERY_CONNECTION                 = 23 */
 126     attr_accept,                    /* WINHTTP_QUERY_ACCEPT                     = 24 */
 127     attr_accept_charset,            /* WINHTTP_QUERY_ACCEPT_CHARSET             = 25 */
 128     attr_accept_encoding,           /* WINHTTP_QUERY_ACCEPT_ENCODING            = 26 */
 129     attr_accept_language,           /* WINHTTP_QUERY_ACCEPT_LANGUAGE            = 27 */
 130     attr_authorization,             /* WINHTTP_QUERY_AUTHORIZATION              = 28 */
 131     attr_content_encoding,          /* WINHTTP_QUERY_CONTENT_ENCODING           = 29 */
 132     NULL,                           /* WINHTTP_QUERY_FORWARDED                  = 30 */
 133     NULL,                           /* WINHTTP_QUERY_FROM                       = 31 */
 134     attr_if_modified_since,         /* WINHTTP_QUERY_IF_MODIFIED_SINCE          = 32 */
 135     attr_location,                  /* WINHTTP_QUERY_LOCATION                   = 33 */
 136     NULL,                           /* WINHTTP_QUERY_ORIG_URI                   = 34 */
 137     attr_referer,                   /* WINHTTP_QUERY_REFERER                    = 35 */
 138     attr_retry_after,               /* WINHTTP_QUERY_RETRY_AFTER                = 36 */
 139     attr_server,                    /* WINHTTP_QUERY_SERVER                     = 37 */
 140     NULL,                           /* WINHTTP_TITLE                            = 38 */
 141     attr_user_agent,                /* WINHTTP_QUERY_USER_AGENT                 = 39 */
 142     attr_www_authenticate,          /* WINHTTP_QUERY_WWW_AUTHENTICATE           = 40 */
 143     attr_proxy_authenticate,        /* WINHTTP_QUERY_PROXY_AUTHENTICATE         = 41 */
 144     attr_accept_ranges,             /* WINHTTP_QUERY_ACCEPT_RANGES              = 42 */
 145     attr_set_cookie,                /* WINHTTP_QUERY_SET_COOKIE                 = 43 */
 146     attr_cookie,                    /* WINHTTP_QUERY_COOKIE                     = 44 */
 147     NULL,                           /* WINHTTP_QUERY_REQUEST_METHOD             = 45 */
 148     NULL,                           /* WINHTTP_QUERY_REFRESH                    = 46 */
 149     NULL,                           /* WINHTTP_QUERY_CONTENT_DISPOSITION        = 47 */
 150     attr_age,                       /* WINHTTP_QUERY_AGE                        = 48 */
 151     attr_cache_control,             /* WINHTTP_QUERY_CACHE_CONTROL              = 49 */
 152     attr_content_base,              /* WINHTTP_QUERY_CONTENT_BASE               = 50 */
 153     attr_content_location,          /* WINHTTP_QUERY_CONTENT_LOCATION           = 51 */
 154     attr_content_md5,               /* WINHTTP_QUERY_CONTENT_MD5                = 52 */
 155     attr_content_range,             /* WINHTTP_QUERY_CONTENT_RANGE              = 53 */
 156     attr_etag,                      /* WINHTTP_QUERY_ETAG                       = 54 */
 157     attr_host,                      /* WINHTTP_QUERY_HOST                       = 55 */
 158     attr_if_match,                  /* WINHTTP_QUERY_IF_MATCH                   = 56 */
 159     attr_if_none_match,             /* WINHTTP_QUERY_IF_NONE_MATCH              = 57 */
 160     attr_if_range,                  /* WINHTTP_QUERY_IF_RANGE                   = 58 */
 161     attr_if_unmodified_since,       /* WINHTTP_QUERY_IF_UNMODIFIED_SINCE        = 59 */
 162     attr_max_forwards,              /* WINHTTP_QUERY_MAX_FORWARDS               = 60 */
 163     attr_proxy_authorization,       /* WINHTTP_QUERY_PROXY_AUTHORIZATION        = 61 */
 164     attr_range,                     /* WINHTTP_QUERY_RANGE                      = 62 */
 165     attr_transfer_encoding,         /* WINHTTP_QUERY_TRANSFER_ENCODING          = 63 */
 166     attr_upgrade,                   /* WINHTTP_QUERY_UPGRADE                    = 64 */
 167     attr_vary,                      /* WINHTTP_QUERY_VARY                       = 65 */
 168     attr_via,                       /* WINHTTP_QUERY_VIA                        = 66 */
 169     attr_warning,                   /* WINHTTP_QUERY_WARNING                    = 67 */
 170     attr_expect,                    /* WINHTTP_QUERY_EXPECT                     = 68 */
 171     attr_proxy_connection,          /* WINHTTP_QUERY_PROXY_CONNECTION           = 69 */
 172     attr_unless_modified_since,     /* WINHTTP_QUERY_UNLESS_MODIFIED_SINCE      = 70 */
 173     NULL,                           /* WINHTTP_QUERY_PROXY_SUPPORT              = 75 */
 174     NULL,                           /* WINHTTP_QUERY_AUTHENTICATION_INFO        = 76 */
 175     NULL,                           /* WINHTTP_QUERY_PASSPORT_URLS              = 77 */
 176     NULL                            /* WINHTTP_QUERY_PASSPORT_CONFIG            = 78 */
 177 };
 178
 179 static DWORD CALLBACK task_thread( LPVOID param )
 180 {
 181     task_header_t *task = param;
 182
 183     task->proc( task );
 184
 185     release_object( &task->request->hdr );
 186     heap_free( task );
 187     return ERROR_SUCCESS;
 188 }
 189
 190 static BOOL queue_task( task_header_t *task )
 191 {
 192     return QueueUserWorkItem( task_thread, task, WT_EXECUTELONGFUNCTION );
 193 }
 194
 195 static void free_header( header_t *header )
 196 {
 197     heap_free( header->field );
 198     heap_free( header->value );
 199     heap_free( header );
 200 }
 201
 202 static BOOL valid_token_char( WCHAR c )
 203 {
 204     if (c < 32 || c == 127) return FALSE;
 205     switch (c)
 206     {
 207     case '(': case ')':
 208     case '<': case '>':
 209     case '@': case ',':
 210     case ';': case ':':
 211     case '\\': case '\"':
 212     case '/': case '[':
 213     case ']': case '?':
 214     case '=': case '{':
 215     case '}': case ' ':
 216     case '\t':
 217         return FALSE;
 218     default:
 219         return TRUE;
 220     }
 221 }
 222
 223 static header_t *parse_header( LPCWSTR string )
 224 {
 225     const WCHAR *p, *q;
 226     header_t *header;
 227     int len;
 228
 229     p = string;
 230     if (!(q = strchrW( p, ':' )))
 231     {
 232         WARN("no ':' in line %s\n", debugstr_w(string));
 233         return NULL;
 234     }
 235     if (q == string)
 236     {
 237         WARN("empty field name in line %s\n", debugstr_w(string));
 238         return NULL;
 239     }
 240     while (*p != ':')
 241     {
 242         if (!valid_token_char( *p ))
 243         {
 244             WARN("invalid character in field name %s\n", debugstr_w(string));
 245             return NULL;
 246         }
 247         p++;
 248     }
 249     len = q - string;
 250     if (!(header = heap_alloc_zero( sizeof(header_t) ))) return NULL;
 251     if (!(header->field = heap_alloc( (len + 1) * sizeof(WCHAR) )))
 252     {
 253         heap_free( header );
 254         return NULL;
 255     }
 256     memcpy( header->field, string, len * sizeof(WCHAR) );
 257     header->field[len] = 0;
 258
 259     q++; /* skip past colon */
 260     while (*q == ' ') q++;
 261     if (!*q)
 262     {
 263         WARN("no value in line %s\n", debugstr_w(string));
 264         return header;
 265     }
 266     len = strlenW( q );
 267     if (!(header->value = heap_alloc( (len + 1) * sizeof(WCHAR) )))
 268     {
 269         free_header( header );
 270         return NULL;
 271     }
 272     memcpy( header->value, q, len * sizeof(WCHAR) );
 273     header->value[len] = 0;
 274
 275     return header;
 276 }
 277
 278 static int get_header_index( request_t *request, LPCWSTR field, int requested_index, BOOL request_only )
 279 {
 280     int index;
 281
 282     TRACE("%s\n", debugstr_w(field));
 283
 284     for (index = 0; index < request->num_headers; index++)
 285     {
 286         if (strcmpiW( request->headers[index].field, field )) continue;
 287         if (request_only && !request->headers[index].is_request) continue;
 288         if (!request_only && request->headers[index].is_request) continue;
 289
 290         if (!requested_index) break;
 291         requested_index--;
 292     }
 293     if (index >= request->num_headers) index = -1;
 294     TRACE("returning %d\n", index);
 295     return index;
 296 }
 297
 298 static BOOL insert_header( request_t *request, header_t *header )
 299 {
 300     DWORD count;
 301     header_t *hdrs;
 302
 303     count = request->num_headers + 1;
 304     if (count > 1)
 305         hdrs = heap_realloc_zero( request->headers, sizeof(header_t) * count );
 306     else
 307         hdrs = heap_alloc_zero( sizeof(header_t) * count );
 308
 309     if (hdrs)
 310     {
 311         request->headers = hdrs;
 312         request->headers[count - 1].field = strdupW( header->field );
 313         request->headers[count - 1].value = strdupW( header->value );
 314         request->headers[count - 1].is_request = header->is_request;
 315         request->num_headers++;
 316         return TRUE;
 317     }
 318     return FALSE;
 319 }
 320
 321 static BOOL delete_header( request_t *request, DWORD index )
 322 {
 323     if (!request->num_headers) return FALSE;
 324     if (index >= request->num_headers) return FALSE;
 325     request->num_headers--;
 326
 327     heap_free( request->headers[index].field );
 328     heap_free( request->headers[index].value );
 329
 330     memmove( &request->headers[index], &request->headers[index + 1], (request->num_headers - index) * sizeof(header_t) );
 331     memset( &request->headers[request->num_headers], 0, sizeof(header_t) );
 332     return TRUE;
 333 }
 334
 335 static BOOL process_header( request_t *request, LPCWSTR field, LPCWSTR value, DWORD flags, BOOL request_only )
 336 {
 337     int index;
 338     header_t *header;
 339
 340     TRACE("%s: %s 0x%08x\n", debugstr_w(field), debugstr_w(value), flags);
 341
 342     /* replace wins out over add */
 343     if (flags & WINHTTP_ADDREQ_FLAG_REPLACE) flags &= ~WINHTTP_ADDREQ_FLAG_ADD;
 344
 345     if (flags & WINHTTP_ADDREQ_FLAG_ADD) index = -1;
 346     else
 347         index = get_header_index( request, field, 0, request_only );
 348
 349     if (index >= 0)
 350     {
 351         if (flags & WINHTTP_ADDREQ_FLAG_ADD_IF_NEW) return FALSE;
 352         header = &request->headers[index];
 353     }
 354     else if (value)
 355     {
 356         header_t hdr;
 357
 358         hdr.field = (LPWSTR)field;
 359         hdr.value = (LPWSTR)value;
 360         hdr.is_request = request_only;
 361
 362         return insert_header( request, &hdr );
 363     }
 364     /* no value to delete */
 365     else return TRUE;
 366
 367     if (flags & WINHTTP_ADDREQ_FLAG_REPLACE)
 368     {
 369         delete_header( request, index );
 370         if (value)
 371         {
 372             header_t hdr;
 373
 374             hdr.field = (LPWSTR)field;
 375             hdr.value = (LPWSTR)value;
 376             hdr.is_request = request_only;
 377
 378             return insert_header( request, &hdr );
 379         }
 380         return TRUE;
 381     }
 382     else if (flags & (WINHTTP_ADDREQ_FLAG_COALESCE_WITH_COMMA | WINHTTP_ADDREQ_FLAG_COALESCE_WITH_SEMICOLON))
 383     {
 384         WCHAR sep, *tmp;
 385         int len, orig_len, value_len;
 386
 387         orig_len = strlenW( header->value );
 388         value_len = strlenW( value );
 389
 390         if (flags & WINHTTP_ADDREQ_FLAG_COALESCE_WITH_COMMA) sep = ',';
 391         else sep = ';';
 392
 393         len = orig_len + value_len + 2;
 394         if ((tmp = heap_realloc( header->value, (len + 1) * sizeof(WCHAR) )))
 395         {
 396             header->value = tmp;
 397
 398             header->value[orig_len] = sep;
 399             orig_len++;
 400             header->value[orig_len] = ' ';
 401             orig_len++;
 402
 403             memcpy( &header->value[orig_len], value, value_len * sizeof(WCHAR) );
 404             header->value[len] = 0;
 405             return TRUE;
 406         }
 407     }
 408     return TRUE;
 409 }
 410
 411 BOOL add_request_headers( request_t *request, LPCWSTR headers, DWORD len, DWORD flags )
 412 {
 413     BOOL ret = FALSE;
 414     WCHAR *buffer, *p, *q;
 415     header_t *header;
 416
 417     if (len == ~0u) len = strlenW( headers );
 418     if (!len) return TRUE;
 419     if (!(buffer = heap_alloc( (len + 1) * sizeof(WCHAR) ))) return FALSE;
 420     strcpyW( buffer, headers );
 421
 422     p = buffer;
 423     do
 424     {
 425         q = p;
 426         while (*q)
 427         {
 428             if (q[0] == '\n' && q[1] == '\r')
 429             {
 430                 q[0] = '\r';
 431                 q[1] = '\n';
 432             }
 433             if (q[0] == '\r' && q[1] == '\n') break;
 434             q++;
 435         }
 436         if (!*p) break;
 437         if (*q == '\r')
 438         {
 439             *q = 0;
 440             q += 2; /* jump over \r\n */
 441         }
 442         if ((header = parse_header( p )))
 443         {
 444             ret = process_header( request, header->field, header->value, flags, TRUE );
 445             free_header( header );
 446         }
 447         p = q;
 448     } while (ret);
 449
 450     heap_free( buffer );
 451     return ret;
 452 }
 453
 454 /***********************************************************************
 455  *          WinHttpAddRequestHeaders (winhttp.@)
 456  */
 457 BOOL WINAPI WinHttpAddRequestHeaders( HINTERNET hrequest, LPCWSTR headers, DWORD len, DWORD flags )
 458 {
 459     BOOL ret;
 460     request_t *request;
 461
 462     TRACE("%p, %s, 0x%x, 0x%08x\n", hrequest, debugstr_w(headers), len, flags);
 463
 464     if (!headers)
 465     {
 466         set_last_error( ERROR_INVALID_PARAMETER );
 467         return FALSE;
 468     }
 469     if (!(request = (request_t *)grab_object( hrequest )))
 470     {
 471         set_last_error( ERROR_INVALID_HANDLE );
 472         return FALSE;
 473     }
 474     if (request->hdr.type != WINHTTP_HANDLE_TYPE_REQUEST)
 475     {
 476         release_object( &request->hdr );
 477         set_last_error( ERROR_WINHTTP_INCORRECT_HANDLE_TYPE );
 478         return FALSE;
 479     }
 480
 481     ret = add_request_headers( request, headers, len, flags );
 482
 483     release_object( &request->hdr );
 484     return ret;
 485 }
 486
 487 static WCHAR *build_request_path( request_t *request )
 488 {
 489     WCHAR *ret;
 490
 491     if (strcmpiW( request->connect->hostname, request->connect->servername ))
 492     {
 493         static const WCHAR http[] = { 'h','t','t','p',0 };
 494         static const WCHAR https[] = { 'h','t','t','p','s',0 };
 495         static const WCHAR fmt[] = { '%','s',':','/','/','%','s',0 };
 496         LPCWSTR scheme = request->netconn.secure ? https : http;
 497         int len;
 498
 499         len = strlenW( scheme ) + strlenW( request->connect->hostname );
 500         /* 3 characters for '://', 1 for NUL. */
 501         len += 4;
 502         if (request->connect->hostport)
 503         {
 504             /* 1 for ':' between host and port, up to 5 for port */
 505             len += 6;
 506         }
 507         if (request->path)
 508             len += strlenW( request->path );
 509         if ((ret = heap_alloc( len * sizeof(WCHAR) )))
 510         {
 511             sprintfW( ret, fmt, scheme, request->connect->hostname );
 512             if (request->connect->hostport)
 513             {
 514                 static const WCHAR colonFmt[] = { ':','%','u',0 };
 515
 516                 sprintfW( ret + strlenW( ret ), colonFmt,
 517                     request->connect->hostport );
 518             }
 519             if (request->path)
 520                 strcatW( ret, request->path );
 521         }
 522     }
 523     else
 524         ret = request->path;
 525     return ret;
 526 }
 527
 528 static WCHAR *build_request_string( request_t *request )
 529 {
 530     static const WCHAR space[]   = {' ',0};
 531     static const WCHAR crlf[]    = {'\r','\n',0};
 532     static const WCHAR colon[]   = {':',' ',0};
 533     static const WCHAR twocrlf[] = {'\r','\n','\r','\n',0};
 534
 535     WCHAR *path, *ret;
 536     const WCHAR **headers, **p;
 537     unsigned int len, i = 0, j;
 538
 539     /* allocate space for an array of all the string pointers to be added */
 540     len = request->num_headers * 4 + 7;
 541     if (!(headers = heap_alloc( len * sizeof(LPCWSTR) ))) return NULL;
 542
 543     path = build_request_path( request );
 544     headers[i++] = request->verb;
 545     headers[i++] = space;
 546     headers[i++] = path;
 547     headers[i++] = space;
 548     headers[i++] = request->version;
 549
 550     for (j = 0; j < request->num_headers; j++)
 551     {
 552         if (request->headers[j].is_request)
 553         {
 554             headers[i++] = crlf;
 555             headers[i++] = request->headers[j].field;
 556             headers[i++] = colon;
 557             headers[i++] = request->headers[j].value;
 558
 559             TRACE("adding header %s (%s)\n", debugstr_w(request->headers[j].field),
 560                   debugstr_w(request->headers[j].value));
 561         }
 562     }
 563     headers[i++] = twocrlf;
 564     headers[i] = NULL;
 565
 566     len = 0;
 567     for (p = headers; *p; p++) len += strlenW( *p );
 568     len++;
 569
 570     if (!(ret = heap_alloc( len * sizeof(WCHAR) )))
 571         goto out;
 572     *ret = 0;
 573     for (p = headers; *p; p++) strcatW( ret, *p );
 574
 575 out:
 576     if (path != request->path)
 577         heap_free( path );
 578     heap_free( headers );
 579     return ret;
 580 }
 581
 582 #define QUERY_MODIFIER_MASK (WINHTTP_QUERY_FLAG_REQUEST_HEADERS | WINHTTP_QUERY_FLAG_SYSTEMTIME | WINHTTP_QUERY_FLAG_NUMBER)
 583
 584 static BOOL query_headers( request_t *request, DWORD level, LPCWSTR name, LPVOID buffer, LPDWORD buflen, LPDWORD index )
 585 {
 586     header_t *header = NULL;
 587     BOOL request_only, ret = FALSE;
 588     int requested_index, header_index = -1;
 589     DWORD attr, len;
 590
 591     request_only = level & WINHTTP_QUERY_FLAG_REQUEST_HEADERS;
 592     requested_index = index ? *index : 0;
 593
 594     attr = level & ~QUERY_MODIFIER_MASK;
 595     switch (attr)
 596     {
 597     case WINHTTP_QUERY_CUSTOM:
 598     {
 599         header_index = get_header_index( request, name, requested_index, request_only );
 600         break;
 601     }
 602     case WINHTTP_QUERY_RAW_HEADERS:
 603     {
 604         WCHAR *headers, *p, *q;
 605
 606         if (request_only)
 607             headers = build_request_string( request );
 608         else
 609             headers = request->raw_headers;
 610
 611         if (!(p = headers)) return FALSE;
 612         for (len = 0; *p; p++) if (*p != '\r') len++;
 613
 614         if (!buffer || (len + 1) * sizeof(WCHAR) > *buflen)
 615         {
 616             len++;
 617             set_last_error( ERROR_INSUFFICIENT_BUFFER );
 618         }
 619         else
 620         {
 621             for (p = headers, q = buffer; *p; p++, q++)
 622             {
 623                 if (*p != '\r') *q = *p;
 624                 else
 625                 {
 626                     *q = 0;
 627                     p++; /* skip '\n' */
 628                 }
 629             }
 630             *q = 0;
 631             TRACE("returning data: %s\n", debugstr_wn(buffer, len));
 632             ret = TRUE;
 633         }
 634         *buflen = len * sizeof(WCHAR);
 635         if (request_only) heap_free( headers );
 636         return ret;
 637     }
 638     case WINHTTP_QUERY_RAW_HEADERS_CRLF:
 639     {
 640         WCHAR *headers;
 641
 642         if (request_only)
 643             headers = build_request_string( request );
 644         else
 645             headers = request->raw_headers;
 646
 647         if (!headers) return FALSE;
 648         len = strlenW( headers ) * sizeof(WCHAR);
 649         if (!buffer || len + sizeof(WCHAR) > *buflen)
 650         {
 651             len += sizeof(WCHAR);
 652             set_last_error( ERROR_INSUFFICIENT_BUFFER );
 653         }
 654         else
 655         {
 656             memcpy( buffer, headers, len + sizeof(WCHAR) );
 657             TRACE("returning data: %s\n", debugstr_wn(buffer, len / sizeof(WCHAR)));
 658             ret = TRUE;
 659         }
 660         *buflen = len;
 661         if (request_only) heap_free( headers );
 662         return ret;
 663     }
 664     case WINHTTP_QUERY_VERSION:
 665         len = strlenW( request->version ) * sizeof(WCHAR);
 666         if (!buffer || len + sizeof(WCHAR) > *buflen)
 667         {
 668             len += sizeof(WCHAR);
 669             set_last_error( ERROR_INSUFFICIENT_BUFFER );
 670         }
 671         else
 672         {
 673             strcpyW( buffer, request->version );
 674             TRACE("returning string: %s\n", debugstr_w(buffer));
 675             ret = TRUE;
 676         }
 677         *buflen = len;
 678         return ret;
 679
 680     case WINHTTP_QUERY_STATUS_TEXT:
 681         len = strlenW( request->status_text ) * sizeof(WCHAR);
 682         if (!buffer || len + sizeof(WCHAR) > *buflen)
 683         {
 684             len += sizeof(WCHAR);
 685             set_last_error( ERROR_INSUFFICIENT_BUFFER );
 686         }
 687         else
 688         {
 689             strcpyW( buffer, request->status_text );
 690             TRACE("returning string: %s\n", debugstr_w(buffer));
 691             ret = TRUE;
 692         }
 693         *buflen = len;
 694         return ret;
 695
 696     default:
 697         if (attr >= sizeof(attribute_table)/sizeof(attribute_table[0]) || !attribute_table[attr])
 698         {
 699             FIXME("attribute %u not implemented\n", attr);
 700             return FALSE;
 701         }
 702         TRACE("attribute %s\n", debugstr_w(attribute_table[attr]));
 703         header_index = get_header_index( request, attribute_table[attr], requested_index, request_only );
 704         break;
 705     }
 706
 707     if (header_index >= 0)
 708     {
 709         header = &request->headers[header_index];
 710     }
 711     if (!header || (request_only && !header->is_request))
 712     {
 713         set_last_error( ERROR_WINHTTP_HEADER_NOT_FOUND );
 714         return FALSE;
 715     }
 716     if (index) *index += 1;
 717     if (level & WINHTTP_QUERY_FLAG_NUMBER)
 718     {
 719         if (!buffer || sizeof(int) > *buflen)
 720         {
 721             set_last_error( ERROR_INSUFFICIENT_BUFFER );
 722         }
 723         else
 724         {
 725             int *number = buffer;
 726             *number = atoiW( header->value );
 727             TRACE("returning number: %d\n", *number);
 728             ret = TRUE;
 729         }
 730         *buflen = sizeof(int);
 731     }
 732     else if (level & WINHTTP_QUERY_FLAG_SYSTEMTIME)
 733     {
 734         SYSTEMTIME *st = buffer;
 735         if (!buffer || sizeof(SYSTEMTIME) > *buflen)
 736         {
 737             set_last_error( ERROR_INSUFFICIENT_BUFFER );
 738         }
 739         else if ((ret = WinHttpTimeToSystemTime( header->value, st )))
 740         {
 741             TRACE("returning time: %04d/%02d/%02d - %d - %02d:%02d:%02d.%02d\n",
 742                   st->wYear, st->wMonth, st->wDay, st->wDayOfWeek,
 743                   st->wHour, st->wMinute, st->wSecond, st->wMilliseconds);
 744         }
 745         *buflen = sizeof(SYSTEMTIME);
 746     }
 747     else if (header->value)
 748     {
 749         len = strlenW( header->value ) * sizeof(WCHAR);
 750         if (!buffer || len + sizeof(WCHAR) > *buflen)
 751         {
 752             len += sizeof(WCHAR);
 753             set_last_error( ERROR_INSUFFICIENT_BUFFER );
 754         }
 755         else
 756         {
 757             strcpyW( buffer, header->value );
 758             TRACE("returning string: %s\n", debugstr_w(buffer));
 759             ret = TRUE;
 760         }
 761         *buflen = len;
 762     }
 763     return ret;
 764 }
 765
 766 /***********************************************************************
 767  *          WinHttpQueryHeaders (winhttp.@)
 768  */
 769 BOOL WINAPI WinHttpQueryHeaders( HINTERNET hrequest, DWORD level, LPCWSTR name, LPVOID buffer, LPDWORD buflen, LPDWORD index )
 770 {
 771     BOOL ret;
 772     request_t *request;
 773
 774     TRACE("%p, 0x%08x, %s, %p, %p, %p\n", hrequest, level, debugstr_w(name), buffer, buflen, index);
 775
 776     if (!(request = (request_t *)grab_object( hrequest )))
 777     {
 778         set_last_error( ERROR_INVALID_HANDLE );
 779         return FALSE;
 780     }
 781     if (request->hdr.type != WINHTTP_HANDLE_TYPE_REQUEST)
 782     {
 783         release_object( &request->hdr );
 784         set_last_error( ERROR_WINHTTP_INCORRECT_HANDLE_TYPE );
 785         return FALSE;
 786     }
 787
 788     ret = query_headers( request, level, name, buffer, buflen, index );
 789
 790     release_object( &request->hdr );
 791     return ret;
 792 }
 793
 794 static LPWSTR concatenate_string_list( LPCWSTR *list, int len )
 795 {
 796     LPCWSTR *t;
 797     LPWSTR str;
 798
 799     for( t = list; *t ; t++  )
 800         len += strlenW( *t );
 801     len++;
 802
 803     str = heap_alloc( len * sizeof(WCHAR) );
 804     if (!str) return NULL;
 805     *str = 0;
 806
 807     for( t = list; *t ; t++ )
 808         strcatW( str, *t );
 809
 810     return str;
 811 }
 812
 813 static LPWSTR build_header_request_string( request_t *request, LPCWSTR verb,
 814     LPCWSTR path, LPCWSTR version )
 815 {
 816     static const WCHAR crlf[] = {'\r','\n',0};
 817     static const WCHAR space[] = { ' ',0 };
 818     static const WCHAR colon[] = { ':',' ',0 };
 819     static const WCHAR twocrlf[] = {'\r','\n','\r','\n', 0};
 820     LPWSTR requestString;
 821     DWORD len, n;
 822     LPCWSTR *req;
 823     UINT i;
 824     LPWSTR p;
 825
 826     /* allocate space for an array of all the string pointers to be added */
 827     len = (request->num_headers) * 4 + 10;
 828     req = heap_alloc( len * sizeof(LPCWSTR) );
 829     if (!req) return NULL;
 830
 831     /* add the verb, path and HTTP version string */
 832     n = 0;
 833     req[n++] = verb;
 834     req[n++] = space;
 835     req[n++] = path;
 836     req[n++] = space;
 837     req[n++] = version;
 838
 839     /* Append custom request headers */
 840     for (i = 0; i < request->num_headers; i++)
 841     {
 842         if (request->headers[i].is_request)
 843         {
 844             req[n++] = crlf;
 845             req[n++] = request->headers[i].field;
 846             req[n++] = colon;
 847             req[n++] = request->headers[i].value;
 848
 849             TRACE("Adding custom header %s (%s)\n",
 850                    debugstr_w(request->headers[i].field),
 851                    debugstr_w(request->headers[i].value));
 852         }
 853     }
 854
 855     if( n >= len )
 856         ERR("oops. buffer overrun\n");
 857
 858     req[n] = NULL;
 859     requestString = concatenate_string_list( req, 4 );
 860     heap_free( req );
 861     if (!requestString) return NULL;
 862
 863     /*
 864      * Set (header) termination string for request
 865      * Make sure there's exactly two new lines at the end of the request
 866      */
 867     p = &requestString[strlenW(requestString)-1];
 868     while ( (*p == '\n') || (*p == '\r') )
 869        p--;
 870     strcpyW( p+1, twocrlf );
 871
 872     return requestString;
 873 }
 874
 875 static BOOL read_reply( request_t *request );
 876
 877 static BOOL secure_proxy_connect( request_t *request )
 878 {
 879     static const WCHAR verbConnect[] = {'C','O','N','N','E','C','T',0};
 880     static const WCHAR fmt[] = {'%','s',':','%','u',0};
 881     BOOL ret = FALSE;
 882     LPWSTR path;
 883     connect_t *connect = request->connect;
 884
 885     path = heap_alloc( (strlenW( connect->hostname ) + 13) * sizeof(WCHAR) );
 886     if (path)
 887     {
 888         LPWSTR requestString;
 889
 890         sprintfW( path, fmt, connect->hostname, connect->hostport );
 891         requestString = build_header_request_string( request, verbConnect,
 892             path, http1_1 );
 893         heap_free( path );
 894         if (requestString)
 895         {
 896             LPSTR req_ascii = strdupWA( requestString );
 897
 898             heap_free( requestString );
 899             if (req_ascii)
 900             {
 901                 int len = strlen( req_ascii ), bytes_sent;
 902
 903                 ret = netconn_send( &request->netconn, req_ascii, len, 0, &bytes_sent );
 904                 heap_free( req_ascii );
 905                 if (ret)
 906                     ret = read_reply( request );
 907             }
 908         }
 909     }
 910     return ret;
 911 }
 912
 913 #ifndef INET6_ADDRSTRLEN
 914 #define INET6_ADDRSTRLEN 46
 915 #endif
 916
 917 static WCHAR *addr_to_str( const struct sockaddr *addr )
 918 {
 919     char buf[INET6_ADDRSTRLEN];
 920     const void *src;
 921
 922     switch (addr->sa_family)
 923     {
 924     case AF_INET:
 925         src = &((struct sockaddr_in *)addr)->sin_addr;
 926         break;
 927     case AF_INET6:
 928         src = &((struct sockaddr_in6 *)addr)->sin6_addr;
 929         break;
 930     default:
 931         WARN("unsupported address family %d\n", addr->sa_family);
 932         return NULL;
 933     }
 934     if (!inet_ntop( addr->sa_family, src, buf, sizeof(buf) )) return NULL;
 935     return strdupAW( buf );
 936 }
 937
 938 static BOOL open_connection( request_t *request )
 939 {
 940     connect_t *connect;
 941     WCHAR *addressW = NULL;
 942     INTERNET_PORT port;
 943     socklen_t slen;
 944     struct sockaddr *saddr;
 945     DWORD len;
 946
 947     if (netconn_connected( &request->netconn )) goto done;
 948
 949     connect = request->connect;
 950     port = connect->serverport ? connect->serverport : (request->hdr.flags & WINHTTP_FLAG_SECURE ? 443 : 80);
 951     saddr = (struct sockaddr *)&connect->sockaddr;
 952     slen = sizeof(struct sockaddr);
 953
 954     if (!connect->resolved)
 955     {
 956         len = strlenW( connect->servername ) + 1;
 957         send_callback( &request->hdr, WINHTTP_CALLBACK_STATUS_RESOLVING_NAME, connect->servername, len );
 958
 959         if (!netconn_resolve( connect->servername, port, saddr, &slen, request->resolve_timeout )) return FALSE;
 960         connect->resolved = TRUE;
 961
 962         if (!(addressW = addr_to_str( saddr ))) return FALSE;
 963         len = strlenW( addressW ) + 1;
 964         send_callback( &request->hdr, WINHTTP_CALLBACK_STATUS_NAME_RESOLVED, addressW, len );
 965     }
 966     if (!addressW && !(addressW = addr_to_str( saddr ))) return FALSE;
 967     TRACE("connecting to %s:%u\n", debugstr_w(addressW), port);
 968
 969     send_callback( &request->hdr, WINHTTP_CALLBACK_STATUS_CONNECTING_TO_SERVER, addressW, 0 );
 970
 971     if (!netconn_create( &request->netconn, saddr->sa_family, SOCK_STREAM, 0 ))
 972     {
 973         heap_free( addressW );
 974         return FALSE;
 975     }
 976     netconn_set_timeout( &request->netconn, TRUE, request->send_timeout );
 977     netconn_set_timeout( &request->netconn, FALSE, request->recv_timeout );
 978     if (!netconn_connect( &request->netconn, saddr, slen, request->connect_timeout ))
 979     {
 980         netconn_close( &request->netconn );
 981         heap_free( addressW );
 982         return FALSE;
 983     }
 984     if (request->hdr.flags & WINHTTP_FLAG_SECURE)
 985     {
 986         if (connect->session->proxy_server &&
 987             strcmpiW( connect->hostname, connect->servername ))
 988         {
 989             if (!secure_proxy_connect( request ))
 990             {
 991                 heap_free( addressW );
 992                 return FALSE;
 993             }
 994         }
 995         if (!netconn_secure_connect( &request->netconn, connect->servername ))
 996         {
 997             netconn_close( &request->netconn );
 998             heap_free( addressW );
 999             return FALSE;
1000         }
1001     }
1002
1003     send_callback( &request->hdr, WINHTTP_CALLBACK_STATUS_CONNECTED_TO_SERVER, addressW, strlenW(addressW) + 1 );
1004
1005 done:
1006     request->read_pos = request->read_size = 0;
1007     request->read_chunked = FALSE;
1008     heap_free( addressW );
1009     return TRUE;
1010 }
1011
1012 void close_connection( request_t *request )
1013 {
1014     if (!netconn_connected( &request->netconn )) return;
1015
1016     send_callback( &request->hdr, WINHTTP_CALLBACK_STATUS_CLOSING_CONNECTION, 0, 0 );
1017     netconn_close( &request->netconn );
1018     send_callback( &request->hdr, WINHTTP_CALLBACK_STATUS_CONNECTION_CLOSED, 0, 0 );
1019 }
1020
1021 static BOOL add_host_header( request_t *request, DWORD modifier )
1022 {
1023     BOOL ret;
1024     DWORD len;
1025     WCHAR *host;
1026     static const WCHAR fmt[] = {'%','s',':','%','u',0};
1027     connect_t *connect = request->connect;
1028     INTERNET_PORT port;
1029
1030     port = connect->hostport ? connect->hostport : (request->hdr.flags & WINHTTP_FLAG_SECURE ? 443 : 80);
1031
1032     if (port == INTERNET_DEFAULT_HTTP_PORT || port == INTERNET_DEFAULT_HTTPS_PORT)
1033     {
1034         return process_header( request, attr_host, connect->hostname, modifier, TRUE );
1035     }
1036     len = strlenW( connect->hostname ) + 7; /* sizeof(":65335") */
1037     if (!(host = heap_alloc( len * sizeof(WCHAR) ))) return FALSE;
1038     sprintfW( host, fmt, connect->hostname, port );
1039     ret = process_header( request, attr_host, host, modifier, TRUE );
1040     heap_free( host );
1041     return ret;
1042 }
1043
1044 static void clear_response_headers( request_t *request )
1045 {
1046     unsigned int i;
1047
1048     for (i = 0; i < request->num_headers; i++)
1049     {
1050         if (!request->headers[i].field) continue;
1051         if (!request->headers[i].value) continue;
1052         if (request->headers[i].is_request) continue;
1053         delete_header( request, i );
1054         i--;
1055     }
1056 }
1057
1058 static BOOL send_request( request_t *request, LPCWSTR headers, DWORD headers_len, LPVOID optional,
1059                           DWORD optional_len, DWORD total_len, DWORD_PTR context, BOOL async )
1060 {
1061     static const WCHAR keep_alive[] = {'K','e','e','p','-','A','l','i','v','e',0};
1062     static const WCHAR no_cache[]   = {'n','o','-','c','a','c','h','e',0};
1063     static const WCHAR length_fmt[] = {'%','l','d',0};
1064
1065     BOOL ret = FALSE;
1066     connect_t *connect = request->connect;
1067     session_t *session = connect->session;
1068     WCHAR *req = NULL;
1069     char *req_ascii;
1070     int bytes_sent;
1071     DWORD len, i, flags;
1072
1073     clear_response_headers( request );
1074
1075     flags = WINHTTP_ADDREQ_FLAG_ADD|WINHTTP_ADDREQ_FLAG_COALESCE_WITH_COMMA;
1076     for (i = 0; i < request->num_accept_types; i++)
1077     {
1078         process_header( request, attr_accept, request->accept_types[i], flags, TRUE );
1079     }
1080     if (session->agent)
1081         process_header( request, attr_user_agent, session->agent, WINHTTP_ADDREQ_FLAG_ADD_IF_NEW, TRUE );
1082
1083     if (connect->hostname)
1084         add_host_header( request, WINHTTP_ADDREQ_FLAG_ADD_IF_NEW );
1085
1086     if (total_len || (request->verb && !strcmpW( request->verb, postW )))
1087     {
1088         WCHAR length[21]; /* decimal long int + null */
1089         sprintfW( length, length_fmt, total_len );
1090         process_header( request, attr_content_length, length, WINHTTP_ADDREQ_FLAG_ADD_IF_NEW, TRUE );
1091     }
1092     if (!(request->hdr.disable_flags & WINHTTP_DISABLE_KEEP_ALIVE))
1093     {
1094         process_header( request, attr_connection, keep_alive, WINHTTP_ADDREQ_FLAG_ADD_IF_NEW, TRUE );
1095     }
1096     if (request->hdr.flags & WINHTTP_FLAG_REFRESH)
1097     {
1098         process_header( request, attr_pragma, no_cache, WINHTTP_ADDREQ_FLAG_ADD_IF_NEW, TRUE );
1099         process_header( request, attr_cache_control, no_cache, WINHTTP_ADDREQ_FLAG_ADD_IF_NEW, TRUE );
1100     }
1101     if (headers && !add_request_headers( request, headers, headers_len, WINHTTP_ADDREQ_FLAG_ADD | WINHTTP_ADDREQ_FLAG_REPLACE ))
1102     {
1103         TRACE("failed to add request headers\n");
1104         return FALSE;
1105     }
1106     if (!(request->hdr.disable_flags & WINHTTP_DISABLE_COOKIES) && !add_cookie_headers( request ))
1107     {
1108         WARN("failed to add cookie headers\n");
1109         return FALSE;
1110     }
1111
1112     if (context) request->hdr.context = context;
1113
1114     if (!(ret = open_connection( request ))) goto end;
1115     if (!(req = build_request_string( request ))) goto end;
1116
1117     if (!(req_ascii = strdupWA( req ))) goto end;
1118     TRACE("full request: %s\n", debugstr_a(req_ascii));
1119     len = strlen(req_ascii);
1120
1121     send_callback( &request->hdr, WINHTTP_CALLBACK_STATUS_SENDING_REQUEST, NULL, 0 );
1122
1123     ret = netconn_send( &request->netconn, req_ascii, len, 0, &bytes_sent );
1124     heap_free( req_ascii );
1125     if (!ret) goto end;
1126
1127     if (optional_len && !netconn_send( &request->netconn, optional, optional_len, 0, &bytes_sent )) goto end;
1128     len += optional_len;
1129
1130     send_callback( &request->hdr, WINHTTP_CALLBACK_STATUS_REQUEST_SENT, &len, sizeof(DWORD) );
1131
1132 end:
1133     if (async)
1134     {
1135         if (ret) send_callback( &request->hdr, WINHTTP_CALLBACK_STATUS_SENDREQUEST_COMPLETE, NULL, 0 );
1136         else
1137         {
1138             WINHTTP_ASYNC_RESULT result;
1139             result.dwResult = API_SEND_REQUEST;
1140             result.dwError  = get_last_error();
1141             send_callback( &request->hdr, WINHTTP_CALLBACK_STATUS_REQUEST_ERROR, &result, sizeof(result) );
1142         }
1143     }
1144     heap_free( req );
1145     return ret;
1146 }
1147
1148 static void task_send_request( task_header_t *task )
1149 {
1150     send_request_t *s = (send_request_t *)task;
1151     send_request( s->hdr.request, s->headers, s->headers_len, s->optional, s->optional_len, s->total_len, s->context, TRUE );
1152     heap_free( s->headers );
1153 }
1154
1155 /***********************************************************************
1156  *          WinHttpSendRequest (winhttp.@)
1157  */
1158 BOOL WINAPI WinHttpSendRequest( HINTERNET hrequest, LPCWSTR headers, DWORD headers_len,
1159                                 LPVOID optional, DWORD optional_len, DWORD total_len, DWORD_PTR context )
1160 {
1161     BOOL ret;
1162     request_t *request;
1163
1164     TRACE("%p, %s, 0x%x, %u, %u, %lx\n",
1165           hrequest, debugstr_w(headers), headers_len, optional_len, total_len, context);
1166
1167     if (!(request = (request_t *)grab_object( hrequest )))
1168     {
1169         set_last_error( ERROR_INVALID_HANDLE );
1170         return FALSE;
1171     }
1172     if (request->hdr.type != WINHTTP_HANDLE_TYPE_REQUEST)
1173     {
1174         release_object( &request->hdr );
1175         set_last_error( ERROR_WINHTTP_INCORRECT_HANDLE_TYPE );
1176         return FALSE;
1177     }
1178
1179     if (request->connect->hdr.flags & WINHTTP_FLAG_ASYNC)
1180     {
1181         send_request_t *s;
1182
1183         if (!(s = heap_alloc( sizeof(send_request_t) ))) return FALSE;
1184         s->hdr.request  = request;
1185         s->hdr.proc     = task_send_request;
1186         s->headers      = strdupW( headers );
1187         s->headers_len  = headers_len;
1188         s->optional     = optional;
1189         s->optional_len = optional_len;
1190         s->total_len    = total_len;
1191         s->context      = context;
1192
1193         addref_object( &request->hdr );
1194         ret = queue_task( (task_header_t *)s );
1195     }
1196     else
1197         ret = send_request( request, headers, headers_len, optional, optional_len, total_len, context, FALSE );
1198
1199     release_object( &request->hdr );
1200     return ret;
1201 }
1202
1203 #define ARRAYSIZE(array) (sizeof(array) / sizeof((array)[0]))
1204
1205 static DWORD auth_scheme_from_header( WCHAR *header )
1206 {
1207     static const WCHAR basic[]     = {'B','a','s','i','c'};
1208     static const WCHAR ntlm[]      = {'N','T','L','M'};
1209     static const WCHAR passport[]  = {'P','a','s','s','p','o','r','t'};
1210     static const WCHAR digest[]    = {'D','i','g','e','s','t'};
1211     static const WCHAR negotiate[] = {'N','e','g','o','t','i','a','t','e'};
1212
1213     if (!strncmpiW( header, basic, ARRAYSIZE(basic) ) &&
1214         (header[ARRAYSIZE(basic)] == ' ' || !header[ARRAYSIZE(basic)])) return WINHTTP_AUTH_SCHEME_BASIC;
1215
1216     if (!strncmpiW( header, ntlm, ARRAYSIZE(ntlm) ) &&
1217         (header[ARRAYSIZE(ntlm)] == ' ' || !header[ARRAYSIZE(ntlm)])) return WINHTTP_AUTH_SCHEME_NTLM;
1218
1219     if (!strncmpiW( header, passport, ARRAYSIZE(passport) ) &&
1220         (header[ARRAYSIZE(passport)] == ' ' || !header[ARRAYSIZE(passport)])) return WINHTTP_AUTH_SCHEME_PASSPORT;
1221
1222     if (!strncmpiW( header, digest, ARRAYSIZE(digest) ) &&
1223         (header[ARRAYSIZE(digest)] == ' ' || !header[ARRAYSIZE(digest)])) return WINHTTP_AUTH_SCHEME_DIGEST;
1224
1225     if (!strncmpiW( header, negotiate, ARRAYSIZE(negotiate) ) &&
1226         (header[ARRAYSIZE(negotiate)] == ' ' || !header[ARRAYSIZE(negotiate)])) return WINHTTP_AUTH_SCHEME_NEGOTIATE;
1227
1228     return 0;
1229 }
1230
1231 static BOOL query_auth_schemes( request_t *request, DWORD level, LPDWORD supported, LPDWORD first )
1232 {
1233     DWORD index = 0;
1234     BOOL ret = FALSE;
1235
1236     for (;;)
1237     {
1238         WCHAR *buffer;
1239         DWORD size, scheme;
1240
1241         size = 0;
1242         query_headers( request, level, NULL, NULL, &size, &index );
1243         if (get_last_error() != ERROR_INSUFFICIENT_BUFFER) break;
1244
1245         index--;
1246         if (!(buffer = heap_alloc( size ))) return FALSE;
1247         if (!query_headers( request, level, NULL, buffer, &size, &index ))
1248         {
1249             heap_free( buffer );
1250             return FALSE;
1251         }
1252         scheme = auth_scheme_from_header( buffer );
1253         if (first && index == 1) *first = scheme;
1254         *supported |= scheme;
1255
1256         heap_free( buffer );
1257         ret = TRUE;
1258     }
1259     return ret;
1260 }
1261
1262 /***********************************************************************
1263  *          WinHttpQueryAuthSchemes (winhttp.@)
1264  */
1265 BOOL WINAPI WinHttpQueryAuthSchemes( HINTERNET hrequest, LPDWORD supported, LPDWORD first, LPDWORD target )
1266 {
1267     BOOL ret = FALSE;
1268     request_t *request;
1269
1270     TRACE("%p, %p, %p, %p\n", hrequest, supported, first, target);
1271
1272     if (!(request = (request_t *)grab_object( hrequest )))
1273     {
1274         set_last_error( ERROR_INVALID_HANDLE );
1275         return FALSE;
1276     }
1277     if (request->hdr.type != WINHTTP_HANDLE_TYPE_REQUEST)
1278     {
1279         release_object( &request->hdr );
1280         set_last_error( ERROR_WINHTTP_INCORRECT_HANDLE_TYPE );
1281         return FALSE;
1282     }
1283
1284     if (query_auth_schemes( request, WINHTTP_QUERY_WWW_AUTHENTICATE, supported, first ))
1285     {
1286         *target = WINHTTP_AUTH_TARGET_SERVER;
1287         ret = TRUE;
1288     }
1289     else if (query_auth_schemes( request, WINHTTP_QUERY_PROXY_AUTHENTICATE, supported, first ))
1290     {
1291         *target = WINHTTP_AUTH_TARGET_PROXY;
1292         ret = TRUE;
1293     }
1294
1295     release_object( &request->hdr );
1296     return ret;
1297 }
1298
1299 static UINT encode_base64( const char *bin, unsigned int len, WCHAR *base64 )
1300 {
1301     UINT n = 0, x;
1302     static const char base64enc[] =
1303         "ABCDEFGHIJKLMNOPQRSTUVWXYZabcdefghijklmnopqrstuvwxyz0123456789+/";
1304
1305     while (len > 0)
1306     {
1307         /* first 6 bits, all from bin[0] */
1308         base64[n++] = base64enc[(bin[0] & 0xfc) >> 2];
1309         x = (bin[0] & 3) << 4;
1310
1311         /* next 6 bits, 2 from bin[0] and 4 from bin[1] */
1312         if (len == 1)
1313         {
1314             base64[n++] = base64enc[x];
1315             base64[n++] = '=';
1316             base64[n++] = '=';
1317             break;
1318         }
1319         base64[n++] = base64enc[x | ((bin[1] & 0xf0) >> 4)];
1320         x = (bin[1] & 0x0f) << 2;
1321
1322         /* next 6 bits 4 from bin[1] and 2 from bin[2] */
1323         if (len == 2)
1324         {
1325             base64[n++] = base64enc[x];
1326             base64[n++] = '=';
1327             break;
1328         }
1329         base64[n++] = base64enc[x | ((bin[2] & 0xc0) >> 6)];
1330
1331         /* last 6 bits, all from bin [2] */
1332         base64[n++] = base64enc[bin[2] & 0x3f];
1333         bin += 3;
1334         len -= 3;
1335     }
1336     base64[n] = 0;
1337     return n;
1338 }
1339
1340 static BOOL set_credentials( request_t *request, DWORD target, DWORD scheme, LPCWSTR username, LPCWSTR password )
1341 {
1342     static const WCHAR basic[] = {'B','a','s','i','c',' ',0};
1343     const WCHAR *auth_scheme, *auth_target;
1344     WCHAR *auth_header;
1345     DWORD len, auth_data_len;
1346     char *auth_data;
1347     BOOL ret;
1348
1349     if (!username || !password)
1350     {
1351         set_last_error( ERROR_INVALID_PARAMETER );
1352         return FALSE;
1353     }
1354
1355     switch (target)
1356     {
1357     case WINHTTP_AUTH_TARGET_SERVER: auth_target = attr_authorization; break;
1358     case WINHTTP_AUTH_TARGET_PROXY:  auth_target = attr_proxy_authorization; break;
1359     default:
1360         WARN("unknown target %x\n", target);
1361         return FALSE;
1362     }
1363     switch (scheme)
1364     {
1365     case WINHTTP_AUTH_SCHEME_BASIC:
1366     {
1367         int userlen = WideCharToMultiByte( CP_UTF8, 0, username, strlenW( username ), NULL, 0, NULL, NULL );
1368         int passlen = WideCharToMultiByte( CP_UTF8, 0, password, strlenW( password ), NULL, 0, NULL, NULL );
1369
1370         TRACE("basic authentication\n");
1371
1372         auth_scheme = basic;
1373         auth_data_len = userlen + 1 + passlen;
1374         if (!(auth_data = heap_alloc( auth_data_len ))) return FALSE;
1375
1376         WideCharToMultiByte( CP_UTF8, 0, username, -1, auth_data, userlen, NULL, NULL );
1377         auth_data[userlen] = ':';
1378         WideCharToMultiByte( CP_UTF8, 0, password, -1, auth_data + userlen + 1, passlen, NULL, NULL );
1379         break;
1380     }
1381     case WINHTTP_AUTH_SCHEME_NTLM:
1382     case WINHTTP_AUTH_SCHEME_PASSPORT:
1383     case WINHTTP_AUTH_SCHEME_DIGEST:
1384     case WINHTTP_AUTH_SCHEME_NEGOTIATE:
1385         FIXME("unimplemented authentication scheme %x\n", scheme);
1386         return FALSE;
1387     default:
1388         WARN("unknown authentication scheme %x\n", scheme);
1389         return FALSE;
1390     }
1391
1392     len = strlenW( auth_scheme ) + ((auth_data_len + 2) * 4) / 3;
1393     if (!(auth_header = heap_alloc( (len + 1) * sizeof(WCHAR) )))
1394     {
1395         heap_free( auth_data );
1396         return FALSE;
1397     }
1398     strcpyW( auth_header, auth_scheme );
1399     encode_base64( auth_data, auth_data_len, auth_header + strlenW( auth_header ) );
1400
1401     ret = process_header( request, auth_target, auth_header, WINHTTP_ADDREQ_FLAG_ADD | WINHTTP_ADDREQ_FLAG_REPLACE, TRUE );
1402
1403     heap_free( auth_data );
1404     heap_free( auth_header );
1405     return ret;
1406 }
1407
1408 /***********************************************************************
1409  *          WinHttpSetCredentials (winhttp.@)
1410  */
1411 BOOL WINAPI WinHttpSetCredentials( HINTERNET hrequest, DWORD target, DWORD scheme, LPCWSTR username,
1412                                    LPCWSTR password, LPVOID params )
1413 {
1414     BOOL ret;
1415     request_t *request;
1416
1417     TRACE("%p, %x, 0x%08x, %s, %p, %p\n", hrequest, target, scheme, debugstr_w(username), password, params);
1418
1419     if (!(request = (request_t *)grab_object( hrequest )))
1420     {
1421         set_last_error( ERROR_INVALID_HANDLE );
1422         return FALSE;
1423     }
1424     if (request->hdr.type != WINHTTP_HANDLE_TYPE_REQUEST)
1425     {
1426         release_object( &request->hdr );
1427         set_last_error( ERROR_WINHTTP_INCORRECT_HANDLE_TYPE );
1428         return FALSE;
1429     }
1430
1431     ret = set_credentials( request, target, scheme, username, password );
1432
1433     release_object( &request->hdr );
1434     return ret;
1435 }
1436
1437 static BOOL handle_authorization( request_t *request, DWORD status )
1438 {
1439     DWORD schemes, level, target;
1440     const WCHAR *username, *password;
1441
1442     switch (status)
1443     {
1444     case HTTP_STATUS_DENIED:
1445         target = WINHTTP_AUTH_TARGET_SERVER;
1446         level  = WINHTTP_QUERY_WWW_AUTHENTICATE;
1447         break;
1448
1449     case HTTP_STATUS_PROXY_AUTH_REQ:
1450         target = WINHTTP_AUTH_TARGET_PROXY;
1451         level  = WINHTTP_QUERY_PROXY_AUTHENTICATE;
1452         break;
1453
1454     default:
1455         WARN("unhandled status %u\n", status);
1456         return FALSE;
1457     }
1458
1459     if (!query_auth_schemes( request, level, &schemes, NULL )) return FALSE;
1460
1461     if (target == WINHTTP_AUTH_TARGET_SERVER)
1462     {
1463         username = request->connect->username;
1464         password = request->connect->password;
1465     }
1466     else
1467     {
1468         username = request->connect->session->proxy_username;
1469         password = request->connect->session->proxy_password;
1470     }
1471
1472     if (schemes & WINHTTP_AUTH_SCHEME_BASIC)
1473         return set_credentials( request, target, WINHTTP_AUTH_SCHEME_BASIC, username, password );
1474
1475     FIXME("unsupported authentication scheme\n");
1476     return FALSE;
1477 }
1478
1479 /* set the request content length based on the headers */
1480 static DWORD set_content_length( request_t *request )
1481 {
1482     WCHAR encoding[20];
1483     DWORD buflen;
1484
1485     buflen = sizeof(request->content_length);
1486     if (!query_headers( request, WINHTTP_QUERY_CONTENT_LENGTH|WINHTTP_QUERY_FLAG_NUMBER,
1487                         NULL, &request->content_length, &buflen, NULL ))
1488         request->content_length = ~0u;
1489
1490     buflen = sizeof(encoding);
1491     if (query_headers( request, WINHTTP_QUERY_TRANSFER_ENCODING, NULL, encoding, &buflen, NULL ) &&
1492         !strcmpiW( encoding, chunkedW ))
1493     {
1494         request->content_length = ~0u;
1495         request->read_chunked = TRUE;
1496     }
1497     return request->content_length;
1498 }
1499
1500 /* read some more data into the read buffer */
1501 static BOOL read_more_data( request_t *request, int maxlen )
1502 {
1503     int len;
1504
1505     if (request->read_size && request->read_pos)
1506     {
1507         /* move existing data to the start of the buffer */
1508         memmove( request->read_buf, request->read_buf + request->read_pos, request->read_size );
1509         request->read_pos = 0;
1510     }
1511     if (maxlen == -1) maxlen = sizeof(request->read_buf);
1512     if (!netconn_recv( &request->netconn, request->read_buf + request->read_size,
1513                        maxlen - request->read_size, 0, &len )) return FALSE;
1514     request->read_size += len;
1515     return TRUE;
1516 }
1517
1518 /* remove some amount of data from the read buffer */
1519 static void remove_data( request_t *request, int count )
1520 {
1521     if (!(request->read_size -= count)) request->read_pos = 0;
1522     else request->read_pos += count;
1523 }
1524
1525 static BOOL read_line( request_t *request, char *buffer, DWORD *len )
1526 {
1527     int count, bytes_read, pos = 0;
1528
1529     for (;;)
1530     {
1531         char *eol = memchr( request->read_buf + request->read_pos, '\n', request->read_size );
1532         if (eol)
1533         {
1534             count = eol - (request->read_buf + request->read_pos);
1535             bytes_read = count + 1;
1536         }
1537         else count = bytes_read = request->read_size;
1538
1539         count = min( count, *len - pos );
1540         memcpy( buffer + pos, request->read_buf + request->read_pos, count );
1541         pos += count;
1542         remove_data( request, bytes_read );
1543         if (eol) break;
1544
1545         if (!read_more_data( request, -1 )) return FALSE;
1546         if (!request->read_size)
1547         {
1548             *len = 0;
1549             TRACE("returning empty string\n");
1550             return FALSE;
1551         }
1552     }
1553     if (pos < *len)
1554     {
1555         if (pos && buffer[pos - 1] == '\r') pos--;
1556         *len = pos + 1;
1557     }
1558     buffer[*len - 1] = 0;
1559     TRACE("returning %s\n", debugstr_a(buffer));
1560     return TRUE;
1561 }
1562
1563 /* discard data contents until we reach end of line */
1564 static BOOL discard_eol( request_t *request )
1565 {
1566     do
1567     {
1568         char *eol = memchr( request->read_buf + request->read_pos, '\n', request->read_size );
1569         if (eol)
1570         {
1571             remove_data( request, (eol + 1) - (request->read_buf + request->read_pos) );
1572             break;
1573         }
1574         request->read_pos = request->read_size = 0;  /* discard everything */
1575         if (!read_more_data( request, -1 )) return FALSE;
1576     } while (request->read_size);
1577     return TRUE;
1578 }
1579
1580 /* read the size of the next chunk */
1581 static BOOL start_next_chunk( request_t *request )
1582 {
1583     DWORD chunk_size = 0;
1584
1585     if (!request->content_length) return TRUE;
1586     if (request->content_length == request->content_read)
1587     {
1588         /* read terminator for the previous chunk */
1589         if (!discard_eol( request )) return FALSE;
1590         request->content_length = ~0u;
1591         request->content_read = 0;
1592     }
1593     for (;;)
1594     {
1595         while (request->read_size)
1596         {
1597             char ch = request->read_buf[request->read_pos];
1598             if (ch >= '0' && ch <= '9') chunk_size = chunk_size * 16 + ch - '0';
1599             else if (ch >= 'a' && ch <= 'f') chunk_size = chunk_size * 16 + ch - 'a' + 10;
1600             else if (ch >= 'A' && ch <= 'F') chunk_size = chunk_size * 16 + ch - 'A' + 10;
1601             else if (ch == ';' || ch == '\r' || ch == '\n')
1602             {
1603                 TRACE("reading %u byte chunk\n", chunk_size);
1604                 request->content_length = chunk_size;
1605                 request->content_read = 0;
1606                 if (!discard_eol( request )) return FALSE;
1607                 return TRUE;
1608             }
1609             remove_data( request, 1 );
1610         }
1611         if (!read_more_data( request, -1 )) return FALSE;
1612         if (!request->read_size)
1613         {
1614             request->content_length = request->content_read = 0;
1615             return TRUE;
1616         }
1617     }
1618 }
1619
1620 /* return the size of data available to be read immediately */
1621 static DWORD get_available_data( request_t *request )
1622 {
1623     if (request->read_chunked &&
1624         (request->content_length == ~0u || request->content_length == request->content_read))
1625         return 0;
1626     return min( request->read_size, request->content_length - request->content_read );
1627 }
1628
1629 /* check if we have reached the end of the data to read */
1630 static BOOL end_of_read_data( request_t *request )
1631 {
1632     if (request->read_chunked) return (request->content_length == 0);
1633     if (request->content_length == ~0u) return FALSE;
1634     return (request->content_length == request->content_read);
1635 }
1636
1637 static BOOL refill_buffer( request_t *request )
1638 {
1639     int len = sizeof(request->read_buf);
1640
1641     if (request->read_chunked &&
1642         (request->content_length == ~0u || request->content_length == request->content_read))
1643     {
1644         if (!start_next_chunk( request )) return FALSE;
1645     }
1646     if (request->content_length != ~0u) len = min( len, request->content_length - request->content_read );
1647     if (len <= request->read_size) return TRUE;
1648     if (!read_more_data( request, len )) return FALSE;
1649     if (!request->read_size) request->content_length = request->content_read = 0;
1650     return TRUE;
1651 }
1652
1653 #define MAX_REPLY_LEN   1460
1654 #define INITIAL_HEADER_BUFFER_LEN  512
1655
1656 static BOOL read_reply( request_t *request )
1657 {
1658     static const WCHAR crlf[] = {'\r','\n',0};
1659
1660     char buffer[MAX_REPLY_LEN];
1661     DWORD buflen, len, offset, received_len, crlf_len = 2; /* strlenW(crlf) */
1662     char *status_code, *status_text;
1663     WCHAR *versionW, *status_textW, *raw_headers;
1664     WCHAR status_codeW[4]; /* sizeof("nnn") */
1665
1666     if (!netconn_connected( &request->netconn )) return FALSE;
1667
1668     send_callback( &request->hdr, WINHTTP_CALLBACK_STATUS_RECEIVING_RESPONSE, NULL, 0 );
1669
1670     received_len = 0;
1671     do
1672     {
1673         buflen = MAX_REPLY_LEN;
1674         if (!read_line( request, buffer, &buflen )) return FALSE;
1675         received_len += buflen;
1676
1677         /* first line should look like 'HTTP/1.x nnn OK' where nnn is the status code */
1678         if (!(status_code = strchr( buffer, ' ' ))) return FALSE;
1679         status_code++;
1680         if (!(status_text = strchr( status_code, ' ' ))) return FALSE;
1681         if ((len = status_text - status_code) != sizeof("nnn") - 1) return FALSE;
1682         status_text++;
1683
1684         TRACE("version [%s] status code [%s] status text [%s]\n",
1685               debugstr_an(buffer, status_code - buffer - 1),
1686               debugstr_an(status_code, len),
1687               debugstr_a(status_text));
1688
1689     } while (!memcmp( status_code, "100", len )); /* ignore "100 Continue" responses */
1690
1691     /*  we rely on the fact that the protocol is ascii */
1692     MultiByteToWideChar( CP_ACP, 0, status_code, len, status_codeW, len );
1693     status_codeW[len] = 0;
1694     if (!(process_header( request, attr_status, status_codeW, WINHTTP_ADDREQ_FLAG_REPLACE, FALSE ))) return FALSE;
1695
1696     len = status_code - buffer;
1697     if (!(versionW = heap_alloc( len * sizeof(WCHAR) ))) return FALSE;
1698     MultiByteToWideChar( CP_ACP, 0, buffer, len - 1, versionW, len -1 );
1699     versionW[len - 1] = 0;
1700
1701     heap_free( request->version );
1702     request->version = versionW;
1703
1704     len = buflen - (status_text - buffer);
1705     if (!(status_textW = heap_alloc( len * sizeof(WCHAR) ))) return FALSE;
1706     MultiByteToWideChar( CP_ACP, 0, status_text, len, status_textW, len );
1707
1708     heap_free( request->status_text );
1709     request->status_text = status_textW;
1710
1711     len = max( buflen + crlf_len, INITIAL_HEADER_BUFFER_LEN );
1712     if (!(raw_headers = heap_alloc( len * sizeof(WCHAR) ))) return FALSE;
1713     MultiByteToWideChar( CP_ACP, 0, buffer, buflen, raw_headers, buflen );
1714     memcpy( raw_headers + buflen - 1, crlf, sizeof(crlf) );
1715
1716     heap_free( request->raw_headers );
1717     request->raw_headers = raw_headers;
1718
1719     offset = buflen + crlf_len - 1;
1720     for (;;)
1721     {
1722         header_t *header;
1723
1724         buflen = MAX_REPLY_LEN;
1725         if (!read_line( request, buffer, &buflen )) goto end;
1726         received_len += buflen;
1727         if (!*buffer) break;
1728
1729         while (len - offset < buflen + crlf_len)
1730         {
1731             WCHAR *tmp;
1732             len *= 2;
1733             if (!(tmp = heap_realloc( raw_headers, len * sizeof(WCHAR) ))) return FALSE;
1734             request->raw_headers = raw_headers = tmp;
1735         }
1736         MultiByteToWideChar( CP_ACP, 0, buffer, buflen, raw_headers + offset, buflen );
1737
1738         if (!(header = parse_header( raw_headers + offset ))) break;
1739         if (!(process_header( request, header->field, header->value, WINHTTP_ADDREQ_FLAG_ADD, FALSE )))
1740         {
1741             free_header( header );
1742             break;
1743         }
1744         free_header( header );
1745         memcpy( raw_headers + offset + buflen - 1, crlf, sizeof(crlf) );
1746         offset += buflen + crlf_len - 1;
1747     }
1748
1749     TRACE("raw headers: %s\n", debugstr_w(raw_headers));
1750
1751 end:
1752     send_callback( &request->hdr, WINHTTP_CALLBACK_STATUS_RESPONSE_RECEIVED, &received_len, sizeof(DWORD) );
1753     return TRUE;
1754 }
1755
1756 static void finished_reading( request_t *request )
1757 {
1758     static const WCHAR closeW[] = {'c','l','o','s','e',0};
1759
1760     BOOL close = FALSE;
1761     WCHAR connection[20];
1762     DWORD size = sizeof(connection);
1763
1764     if (request->hdr.disable_flags & WINHTTP_DISABLE_KEEP_ALIVE) close = TRUE;
1765     else if (query_headers( request, WINHTTP_QUERY_CONNECTION, NULL, connection, &size, NULL ) ||
1766              query_headers( request, WINHTTP_QUERY_PROXY_CONNECTION, NULL, connection, &size, NULL ))
1767     {
1768         if (!strcmpiW( connection, closeW )) close = TRUE;
1769     }
1770     else if (!strcmpW( request->version, http1_0 )) close = TRUE;
1771     if (close) close_connection( request );
1772 }
1773
1774 static BOOL read_data( request_t *request, void *buffer, DWORD size, DWORD *read, BOOL async )
1775 {
1776     BOOL ret = TRUE;
1777     int len, bytes_read = 0;
1778
1779     if (request->read_chunked &&
1780         (request->content_length == ~0u || request->content_length == request->content_read))
1781     {
1782         if (!start_next_chunk( request )) goto done;
1783     }
1784     if (request->content_length != ~0u) size = min( size, request->content_length - request->content_read );
1785
1786     if (request->read_size)
1787     {
1788         bytes_read = min( request->read_size, size );
1789         memcpy( buffer, request->read_buf + request->read_pos, bytes_read );
1790         remove_data( request, bytes_read );
1791     }
1792     if (size > bytes_read && (!bytes_read || !async))
1793     {
1794         if ((ret = netconn_recv( &request->netconn, (char *)buffer + bytes_read, size - bytes_read,
1795                                  async ? 0 : MSG_WAITALL, &len )))
1796             bytes_read += len;
1797     }
1798
1799 done:
1800     request->content_read += bytes_read;
1801     TRACE( "retrieved %u bytes (%u/%u)\n", bytes_read, request->content_read, request->content_length );
1802     if (async)
1803     {
1804         if (ret) send_callback( &request->hdr, WINHTTP_CALLBACK_STATUS_READ_COMPLETE, buffer, bytes_read );
1805         else
1806         {
1807             WINHTTP_ASYNC_RESULT result;
1808             result.dwResult = API_READ_DATA;
1809             result.dwError  = get_last_error();
1810             send_callback( &request->hdr, WINHTTP_CALLBACK_STATUS_REQUEST_ERROR, &result, sizeof(result) );
1811         }
1812     }
1813     if (read) *read = bytes_read;
1814     if (!bytes_read && request->content_read == request->content_length) finished_reading( request );
1815     return ret;
1816 }
1817
1818 /* read any content returned by the server so that the connection can be reused */
1819 static void drain_content( request_t *request )
1820 {
1821     DWORD bytes_read;
1822     char buffer[2048];
1823
1824     if (request->content_length == ~0u)
1825     {
1826         finished_reading( request );
1827         return;
1828     }
1829     for (;;)
1830     {
1831         if (!read_data( request, buffer, sizeof(buffer), &bytes_read, FALSE ) || !bytes_read) return;
1832     }
1833 }
1834
1835 static void record_cookies( request_t *request )
1836 {
1837     unsigned int i;
1838
1839     for (i = 0; i < request->num_headers; i++)
1840     {
1841         header_t *set_cookie = &request->headers[i];
1842         if (!strcmpiW( set_cookie->field, attr_set_cookie ) && !set_cookie->is_request)
1843         {
1844             set_cookies( request, set_cookie->value );
1845         }
1846     }
1847 }
1848
1849 static WCHAR *get_redirect_url( request_t *request, DWORD *len )
1850 {
1851     DWORD size;
1852     WCHAR *ret;
1853
1854     query_headers( request, WINHTTP_QUERY_LOCATION, NULL, NULL, &size, NULL );
1855     if (get_last_error() != ERROR_INSUFFICIENT_BUFFER) return FALSE;
1856     if (!(ret = heap_alloc( size ))) return NULL;
1857     *len = size / sizeof(WCHAR);
1858     if (query_headers( request, WINHTTP_QUERY_LOCATION, NULL, ret, &size, NULL )) return ret;
1859     heap_free( ret );
1860     return NULL;
1861 }
1862
1863 static BOOL handle_redirect( request_t *request, DWORD status )
1864 {
1865     BOOL ret = FALSE;
1866     DWORD len, len_url;
1867     URL_COMPONENTS uc;
1868     connect_t *connect = request->connect;
1869     INTERNET_PORT port;
1870     WCHAR *hostname = NULL, *location;
1871     int index;
1872
1873     if (!(location = get_redirect_url( request, &len_url ))) return FALSE;
1874
1875     memset( &uc, 0, sizeof(uc) );
1876     uc.dwStructSize = sizeof(uc);
1877     uc.dwSchemeLength = uc.dwHostNameLength = uc.dwUrlPathLength = uc.dwExtraInfoLength = ~0u;
1878
1879     if (!WinHttpCrackUrl( location, len_url, 0, &uc )) /* assume relative redirect */
1880     {
1881         WCHAR *path, *p;
1882
1883         len = strlenW( location ) + 1;
1884         if (location[0] != '/') len++;
1885         if (!(p = path = heap_alloc( len * sizeof(WCHAR) ))) goto end;
1886
1887         if (location[0] != '/') *p++ = '/';
1888         strcpyW( p, location );
1889
1890         heap_free( request->path );
1891         request->path = path;
1892
1893         drain_content( request );
1894         send_callback( &request->hdr, WINHTTP_CALLBACK_STATUS_REDIRECT, location, len_url + 1 );
1895     }
1896     else
1897     {
1898         if (uc.nScheme == INTERNET_SCHEME_HTTP && request->hdr.flags & WINHTTP_FLAG_SECURE)
1899         {
1900             if (request->hdr.redirect_policy == WINHTTP_OPTION_REDIRECT_POLICY_DISALLOW_HTTPS_TO_HTTP) goto end;
1901             TRACE("redirect from secure page to non-secure page\n");
1902             request->hdr.flags &= ~WINHTTP_FLAG_SECURE;
1903         }
1904         else if (uc.nScheme == INTERNET_SCHEME_HTTPS && !(request->hdr.flags & WINHTTP_FLAG_SECURE))
1905         {
1906             TRACE("redirect from non-secure page to secure page\n");
1907             request->hdr.flags |= WINHTTP_FLAG_SECURE;
1908         }
1909
1910         drain_content( request );
1911         send_callback( &request->hdr, WINHTTP_CALLBACK_STATUS_REDIRECT, location, len_url + 1 );
1912
1913         len = uc.dwHostNameLength;
1914         if (!(hostname = heap_alloc( (len + 1) * sizeof(WCHAR) ))) goto end;
1915         memcpy( hostname, uc.lpszHostName, len * sizeof(WCHAR) );
1916         hostname[len] = 0;
1917
1918         port = uc.nPort ? uc.nPort : (uc.nScheme == INTERNET_SCHEME_HTTPS ? 443 : 80);
1919         if (strcmpiW( connect->hostname, hostname ) || connect->serverport != port)
1920         {
1921             heap_free( connect->hostname );
1922             connect->hostname = hostname;
1923             connect->hostport = port;
1924             if (!(ret = set_server_for_hostname( connect, hostname, port ))) goto end;
1925
1926             netconn_close( &request->netconn );
1927             if (!(ret = netconn_init( &request->netconn ))) goto end;
1928             request->read_pos = request->read_size = 0;
1929             request->read_chunked = FALSE;
1930         }
1931         if (!(ret = add_host_header( request, WINHTTP_ADDREQ_FLAG_REPLACE ))) goto end;
1932         if (!(ret = open_connection( request ))) goto end;
1933
1934         heap_free( request->path );
1935         request->path = NULL;
1936         if (uc.dwUrlPathLength)
1937         {
1938             len = uc.dwUrlPathLength + uc.dwExtraInfoLength;
1939             if (!(request->path = heap_alloc( (len + 1) * sizeof(WCHAR) ))) goto end;
1940             strcpyW( request->path, uc.lpszUrlPath );
1941         }
1942         else request->path = strdupW( slashW );
1943     }
1944
1945     /* remove content-type/length headers */
1946     if ((index = get_header_index( request, attr_content_type, 0, TRUE )) >= 0) delete_header( request, index );
1947     if ((index = get_header_index( request, attr_content_length, 0, TRUE )) >= 0 ) delete_header( request, index );
1948
1949     if (status != HTTP_STATUS_REDIRECT_KEEP_VERB && !strcmpW( request->verb, postW ))
1950     {
1951         heap_free( request->verb );
1952         request->verb = strdupW( getW );
1953     }
1954     ret = TRUE;
1955
1956 end:
1957     if (!ret) heap_free( hostname );
1958     heap_free( location );
1959     return ret;
1960 }
1961
1962 static BOOL receive_response( request_t *request, BOOL async )
1963 {
1964     BOOL ret;
1965     DWORD size, query, status;
1966
1967     for (;;)
1968     {
1969         if (!(ret = read_reply( request )))
1970         {
1971             set_last_error( ERROR_WINHTTP_INVALID_SERVER_RESPONSE );
1972             break;
1973         }
1974         size = sizeof(DWORD);
1975         query = WINHTTP_QUERY_STATUS_CODE | WINHTTP_QUERY_FLAG_NUMBER;
1976         if (!(ret = query_headers( request, query, NULL, &status, &size, NULL ))) break;
1977
1978         set_content_length( request );
1979
1980         if (!(request->hdr.disable_flags & WINHTTP_DISABLE_COOKIES)) record_cookies( request );
1981
1982         if (status == HTTP_STATUS_MOVED || status == HTTP_STATUS_REDIRECT || status == HTTP_STATUS_REDIRECT_KEEP_VERB)
1983         {
1984             if (request->hdr.disable_flags & WINHTTP_DISABLE_REDIRECTS ||
1985                 request->hdr.redirect_policy == WINHTTP_OPTION_REDIRECT_POLICY_NEVER) break;
1986
1987             if (!(ret = handle_redirect( request, status ))) break;
1988
1989             send_request( request, NULL, 0, NULL, 0, 0, 0, FALSE ); /* recurse synchronously */
1990             continue;
1991         }
1992         else if (status == HTTP_STATUS_DENIED || status == HTTP_STATUS_PROXY_AUTH_REQ)
1993         {
1994             if (request->hdr.disable_flags & WINHTTP_DISABLE_AUTHENTICATION) break;
1995
1996             drain_content( request );
1997             if (!handle_authorization( request, status ))
1998             {
1999                 ret = TRUE;
2000                 break;
2001             }
2002             send_request( request, NULL, 0, NULL, 0, 0, 0, FALSE );
2003             continue;
2004         }
2005         break;
2006     }
2007
2008     if (async)
2009     {
2010         if (ret) send_callback( &request->hdr, WINHTTP_CALLBACK_STATUS_HEADERS_AVAILABLE, NULL, 0 );
2011         else
2012         {
2013             WINHTTP_ASYNC_RESULT result;
2014             result.dwResult = API_RECEIVE_RESPONSE;
2015             result.dwError  = get_last_error();
2016             send_callback( &request->hdr, WINHTTP_CALLBACK_STATUS_REQUEST_ERROR, &result, sizeof(result) );
2017         }
2018     }
2019     return ret;
2020 }
2021
2022 static void task_receive_response( task_header_t *task )
2023 {
2024     receive_response_t *r = (receive_response_t *)task;
2025     receive_response( r->hdr.request, TRUE );
2026 }
2027
2028 /***********************************************************************
2029  *          WinHttpReceiveResponse (winhttp.@)
2030  */
2031 BOOL WINAPI WinHttpReceiveResponse( HINTERNET hrequest, LPVOID reserved )
2032 {
2033     BOOL ret;
2034     request_t *request;
2035
2036     TRACE("%p, %p\n", hrequest, reserved);
2037
2038     if (!(request = (request_t *)grab_object( hrequest )))
2039     {
2040         set_last_error( ERROR_INVALID_HANDLE );
2041         return FALSE;
2042     }
2043     if (request->hdr.type != WINHTTP_HANDLE_TYPE_REQUEST)
2044     {
2045         release_object( &request->hdr );
2046         set_last_error( ERROR_WINHTTP_INCORRECT_HANDLE_TYPE );
2047         return FALSE;
2048     }
2049
2050     if (request->connect->hdr.flags & WINHTTP_FLAG_ASYNC)
2051     {
2052         receive_response_t *r;
2053
2054         if (!(r = heap_alloc( sizeof(receive_response_t) ))) return FALSE;
2055         r->hdr.request = request;
2056         r->hdr.proc    = task_receive_response;
2057
2058         addref_object( &request->hdr );
2059         ret = queue_task( (task_header_t *)r );
2060     }
2061     else
2062         ret = receive_response( request, FALSE );
2063
2064     release_object( &request->hdr );
2065     return ret;
2066 }
2067
2068 static BOOL query_data_available( request_t *request, DWORD *available, BOOL async )
2069 {
2070     BOOL ret = TRUE;
2071     DWORD count;
2072
2073     if (!(count = get_available_data( request )))
2074     {
2075         if (end_of_read_data( request ))
2076         {
2077             if (available) *available = 0;
2078             return TRUE;
2079         }
2080     }
2081     refill_buffer( request );
2082     count = get_available_data( request );
2083
2084     if (count == sizeof(request->read_buf)) /* check if we have even more pending in the socket */
2085     {
2086         DWORD extra;
2087         if ((ret = netconn_query_data_available( &request->netconn, &extra )))
2088         {
2089             count = min( count + extra, request->content_length - request->content_read );
2090         }
2091     }
2092     if (async)
2093     {
2094         if (ret) send_callback( &request->hdr, WINHTTP_CALLBACK_STATUS_DATA_AVAILABLE, &count, sizeof(count) );
2095         else
2096         {
2097             WINHTTP_ASYNC_RESULT result;
2098             result.dwResult = API_QUERY_DATA_AVAILABLE;
2099             result.dwError  = get_last_error();
2100             send_callback( &request->hdr, WINHTTP_CALLBACK_STATUS_REQUEST_ERROR, &result, sizeof(result) );
2101         }
2102     }
2103     if (ret)
2104     {
2105         TRACE("%u bytes available\n", count);
2106         if (available) *available = count;
2107     }
2108     return ret;
2109 }
2110
2111 static void task_query_data_available( task_header_t *task )
2112 {
2113     query_data_t *q = (query_data_t *)task;
2114     query_data_available( q->hdr.request, q->available, TRUE );
2115 }
2116
2117 /***********************************************************************
2118  *          WinHttpQueryDataAvailable (winhttp.@)
2119  */
2120 BOOL WINAPI WinHttpQueryDataAvailable( HINTERNET hrequest, LPDWORD available )
2121 {
2122     BOOL ret;
2123     request_t *request;
2124
2125     TRACE("%p, %p\n", hrequest, available);
2126
2127     if (!(request = (request_t *)grab_object( hrequest )))
2128     {
2129         set_last_error( ERROR_INVALID_HANDLE );
2130         return FALSE;
2131     }
2132     if (request->hdr.type != WINHTTP_HANDLE_TYPE_REQUEST)
2133     {
2134         release_object( &request->hdr );
2135         set_last_error( ERROR_WINHTTP_INCORRECT_HANDLE_TYPE );
2136         return FALSE;
2137     }
2138
2139     if (request->connect->hdr.flags & WINHTTP_FLAG_ASYNC)
2140     {
2141         query_data_t *q;
2142
2143         if (!(q = heap_alloc( sizeof(query_data_t) ))) return FALSE;
2144         q->hdr.request = request;
2145         q->hdr.proc    = task_query_data_available;
2146         q->available   = available;
2147
2148         addref_object( &request->hdr );
2149         ret = queue_task( (task_header_t *)q );
2150     }
2151     else
2152         ret = query_data_available( request, available, FALSE );
2153
2154     release_object( &request->hdr );
2155     return ret;
2156 }
2157
2158 static void task_read_data( task_header_t *task )
2159 {
2160     read_data_t *r = (read_data_t *)task;
2161     read_data( r->hdr.request, r->buffer, r->to_read, r->read, TRUE );
2162 }
2163
2164 /***********************************************************************
2165  *          WinHttpReadData (winhttp.@)
2166  */
2167 BOOL WINAPI WinHttpReadData( HINTERNET hrequest, LPVOID buffer, DWORD to_read, LPDWORD read )
2168 {
2169     BOOL ret;
2170     request_t *request;
2171
2172     TRACE("%p, %p, %d, %p\n", hrequest, buffer, to_read, read);
2173
2174     if (!(request = (request_t *)grab_object( hrequest )))
2175     {
2176         set_last_error( ERROR_INVALID_HANDLE );
2177         return FALSE;
2178     }
2179     if (request->hdr.type != WINHTTP_HANDLE_TYPE_REQUEST)
2180     {
2181         release_object( &request->hdr );
2182         set_last_error( ERROR_WINHTTP_INCORRECT_HANDLE_TYPE );
2183         return FALSE;
2184     }
2185
2186     if (request->connect->hdr.flags & WINHTTP_FLAG_ASYNC)
2187     {
2188         read_data_t *r;
2189
2190         if (!(r = heap_alloc( sizeof(read_data_t) ))) return FALSE;
2191         r->hdr.request = request;
2192         r->hdr.proc    = task_read_data;
2193         r->buffer      = buffer;
2194         r->to_read     = to_read;
2195         r->read        = read;
2196
2197         addref_object( &request->hdr );
2198         ret = queue_task( (task_header_t *)r );
2199     }
2200     else
2201         ret = read_data( request, buffer, to_read, read, FALSE );
2202
2203     release_object( &request->hdr );
2204     return ret;
2205 }
2206
2207 static BOOL write_data( request_t *request, LPCVOID buffer, DWORD to_write, LPDWORD written, BOOL async )
2208 {
2209     BOOL ret;
2210     int num_bytes;
2211
2212     ret = netconn_send( &request->netconn, buffer, to_write, 0, &num_bytes );
2213
2214     if (async)
2215     {
2216         if (ret) send_callback( &request->hdr, WINHTTP_CALLBACK_STATUS_WRITE_COMPLETE, &num_bytes, sizeof(DWORD) );
2217         else
2218         {
2219             WINHTTP_ASYNC_RESULT result;
2220             result.dwResult = API_WRITE_DATA;
2221             result.dwError  = get_last_error();
2222             send_callback( &request->hdr, WINHTTP_CALLBACK_STATUS_REQUEST_ERROR, &result, sizeof(result) );
2223         }
2224     }
2225     if (ret && written) *written = num_bytes;
2226     return ret;
2227 }
2228
2229 static void task_write_data( task_header_t *task )
2230 {
2231     write_data_t *w = (write_data_t *)task;
2232     write_data( w->hdr.request, w->buffer, w->to_write, w->written, TRUE );
2233 }
2234
2235 /***********************************************************************
2236  *          WinHttpWriteData (winhttp.@)
2237  */
2238 BOOL WINAPI WinHttpWriteData( HINTERNET hrequest, LPCVOID buffer, DWORD to_write, LPDWORD written )
2239 {
2240     BOOL ret;
2241     request_t *request;
2242
2243     TRACE("%p, %p, %d, %p\n", hrequest, buffer, to_write, written);
2244
2245     if (!(request = (request_t *)grab_object( hrequest )))
2246     {
2247         set_last_error( ERROR_INVALID_HANDLE );
2248         return FALSE;
2249     }
2250     if (request->hdr.type != WINHTTP_HANDLE_TYPE_REQUEST)
2251     {
2252         release_object( &request->hdr );
2253         set_last_error( ERROR_WINHTTP_INCORRECT_HANDLE_TYPE );
2254         return FALSE;
2255     }
2256
2257     if (request->connect->hdr.flags & WINHTTP_FLAG_ASYNC)
2258     {
2259         write_data_t *w;
2260
2261         if (!(w = heap_alloc( sizeof(write_data_t) ))) return FALSE;
2262         w->hdr.request = request;
2263         w->hdr.proc    = task_write_data;
2264         w->buffer      = buffer;
2265         w->to_write    = to_write;
2266         w->written     = written;
2267
2268         addref_object( &request->hdr );
2269         ret = queue_task( (task_header_t *)w );
2270     }
2271     else
2272         ret = write_data( request, buffer, to_write, written, FALSE );
2273
2274     release_object( &request->hdr );
2275     return ret;
2276 }
2277
2278 enum request_state
2279 {
2280     REQUEST_STATE_UNINITIALIZED,
2281     REQUEST_STATE_INITIALIZED,
2282     REQUEST_STATE_CANCELLED,
2283     REQUEST_STATE_OPEN,
2284     REQUEST_STATE_SENT,
2285     REQUEST_STATE_RESPONSE_RECEIVED
2286 };
2287
2288 struct winhttp_request
2289 {
2290     IWinHttpRequest IWinHttpRequest_iface;
2291     LONG refs;
2292     CRITICAL_SECTION cs;
2293     enum request_state state;
2294     HINTERNET hsession;
2295     HINTERNET hconnect;
2296     HINTERNET hrequest;
2297     VARIANT data;
2298     WCHAR *verb;
2299     HANDLE thread;
2300     HANDLE wait;
2301     HANDLE cancel;
2302     char *buffer;
2303     DWORD offset;
2304     DWORD bytes_available;
2305     DWORD bytes_read;
2306     DWORD error;
2307     DWORD logon_policy;
2308     DWORD disable_feature;
2309     LONG resolve_timeout;
2310     LONG connect_timeout;
2311     LONG send_timeout;
2312     LONG receive_timeout;
2313     WINHTTP_PROXY_INFO proxy;
2314 };
2315
2316 static inline struct winhttp_request *impl_from_IWinHttpRequest( IWinHttpRequest *iface )
2317 {
2318     return CONTAINING_RECORD( iface, struct winhttp_request, IWinHttpRequest_iface );
2319 }
2320
2321 static ULONG WINAPI winhttp_request_AddRef(
2322     IWinHttpRequest *iface )
2323 {
2324     struct winhttp_request *request = impl_from_IWinHttpRequest( iface );
2325     return InterlockedIncrement( &request->refs );
2326 }
2327
2328 /* critical section must be held */
2329 static void cancel_request( struct winhttp_request *request )
2330 {
2331     if (request->state <= REQUEST_STATE_CANCELLED) return;
2332     if (request->thread) SetEvent( request->cancel );
2333     request->state = REQUEST_STATE_CANCELLED;
2334 }
2335
2336 /* critical section must be held */
2337 static void free_request( struct winhttp_request *request )
2338 {
2339     if (request->state < REQUEST_STATE_INITIALIZED) return;
2340     WinHttpCloseHandle( request->hrequest );
2341     WinHttpCloseHandle( request->hconnect );
2342     WinHttpCloseHandle( request->hsession );
2343     CloseHandle( request->thread );
2344     CloseHandle( request->wait );
2345     CloseHandle( request->cancel );
2346     heap_free( request->proxy.lpszProxy );
2347     heap_free( request->proxy.lpszProxyBypass );
2348     heap_free( request->buffer );
2349     heap_free( request->verb );
2350     VariantClear( &request->data );
2351 }
2352
2353 static ULONG WINAPI winhttp_request_Release(
2354     IWinHttpRequest *iface )
2355 {
2356     struct winhttp_request *request = impl_from_IWinHttpRequest( iface );
2357     LONG refs = InterlockedDecrement( &request->refs );
2358     if (!refs)
2359     {
2360         TRACE("destroying %p\n", request);
2361
2362         EnterCriticalSection( &request->cs );
2363         cancel_request( request );
2364         free_request( request );
2365         LeaveCriticalSection( &request->cs );
2366         request->cs.DebugInfo->Spare[0] = 0;
2367         DeleteCriticalSection( &request->cs );
2368         heap_free( request );
2369     }
2370     return refs;
2371 }
2372
2373 static HRESULT WINAPI winhttp_request_QueryInterface(
2374     IWinHttpRequest *iface,
2375     REFIID riid,
2376     void **obj )
2377 {
2378     struct winhttp_request *request = impl_from_IWinHttpRequest( iface );
2379
2380     TRACE("%p, %s, %p\n", request, debugstr_guid(riid), obj );
2381
2382     if (IsEqualGUID( riid, &IID_IWinHttpRequest ) ||
2383         IsEqualGUID( riid, &IID_IDispatch ) ||
2384         IsEqualGUID( riid, &IID_IUnknown ))
2385     {
2386         *obj = iface;
2387     }
2388     else
2389     {
2390         FIXME("interface %s not implemented\n", debugstr_guid(riid));
2391         return E_NOINTERFACE;
2392     }
2393     IWinHttpRequest_AddRef( iface );
2394     return S_OK;
2395 }
2396
2397 static HRESULT WINAPI winhttp_request_GetTypeInfoCount(
2398     IWinHttpRequest *iface,
2399     UINT *count )
2400 {
2401     struct winhttp_request *request = impl_from_IWinHttpRequest( iface );
2402
2403     TRACE("%p, %p\n", request, count);
2404     *count = 1;
2405     return S_OK;
2406 }
2407
2408 enum type_id
2409 {
2410     IWinHttpRequest_tid,
2411     last_tid
2412 };
2413
2414 static ITypeLib *winhttp_typelib;
2415 static ITypeInfo *winhttp_typeinfo[last_tid];
2416
2417 static REFIID winhttp_tid_id[] =
2418 {
2419     &IID_IWinHttpRequest
2420 };
2421
2422 static HRESULT get_typeinfo( enum type_id tid, ITypeInfo **ret )
2423 {
2424     HRESULT hr;
2425
2426     if (!winhttp_typelib)
2427     {
2428         ITypeLib *typelib;
2429
2430         hr = LoadRegTypeLib( &LIBID_WinHttp, 5, 1, LOCALE_SYSTEM_DEFAULT, &typelib );
2431         if (FAILED(hr))
2432         {
2433             ERR("LoadRegTypeLib failed: %08x\n", hr);
2434             return hr;
2435         }
2436         if (InterlockedCompareExchangePointer( (void **)&winhttp_typelib, typelib, NULL ))
2437             ITypeLib_Release( typelib );
2438     }
2439     if (!winhttp_typeinfo[tid])
2440     {
2441         ITypeInfo *typeinfo;
2442
2443         hr = ITypeLib_GetTypeInfoOfGuid( winhttp_typelib, winhttp_tid_id[tid], &typeinfo );
2444         if (FAILED(hr))
2445         {
2446             ERR("GetTypeInfoOfGuid(%s) failed: %08x\n", debugstr_guid(winhttp_tid_id[tid]), hr);
2447             return hr;
2448         }
2449         if (InterlockedCompareExchangePointer( (void **)(winhttp_typeinfo + tid), typeinfo, NULL ))
2450             ITypeInfo_Release( typeinfo );
2451     }
2452     *ret = winhttp_typeinfo[tid];
2453     return S_OK;
2454 }
2455
2456 static HRESULT WINAPI winhttp_request_GetTypeInfo(
2457     IWinHttpRequest *iface,
2458     UINT index,
2459     LCID lcid,
2460     ITypeInfo **info )
2461 {
2462     struct winhttp_request *request = impl_from_IWinHttpRequest( iface );
2463     TRACE("%p, %u, %u, %p\n", request, index, lcid, info);
2464
2465     return get_typeinfo( IWinHttpRequest_tid, info );
2466 }
2467
2468 static HRESULT WINAPI winhttp_request_GetIDsOfNames(
2469     IWinHttpRequest *iface,
2470     REFIID riid,
2471     LPOLESTR *names,
2472     UINT count,
2473     LCID lcid,
2474     DISPID *dispid )
2475 {
2476     struct winhttp_request *request = impl_from_IWinHttpRequest( iface );
2477     ITypeInfo *typeinfo;
2478     HRESULT hr;
2479
2480     TRACE("%p, %s, %p, %u, %u, %p\n", request, debugstr_guid(riid), names, count, lcid, dispid);
2481
2482     if (!names || !count || !dispid) return E_INVALIDARG;
2483
2484     hr = get_typeinfo( IWinHttpRequest_tid, &typeinfo );
2485     if (SUCCEEDED(hr))
2486     {
2487         hr = ITypeInfo_GetIDsOfNames( typeinfo, names, count, dispid );
2488         ITypeInfo_Release( typeinfo );
2489     }
2490     return hr;
2491 }
2492
2493 static HRESULT WINAPI winhttp_request_Invoke(
2494     IWinHttpRequest *iface,
2495     DISPID member,
2496     REFIID riid,
2497     LCID lcid,
2498     WORD flags,
2499     DISPPARAMS *params,
2500     VARIANT *result,
2501     EXCEPINFO *excep_info,
2502     UINT *arg_err )
2503 {
2504     struct winhttp_request *request = impl_from_IWinHttpRequest( iface );
2505     ITypeInfo *typeinfo;
2506     HRESULT hr;
2507
2508     TRACE("%p, %d, %s, %d, %d, %p, %p, %p, %p\n", request, member, debugstr_guid(riid),
2509           lcid, flags, params, result, excep_info, arg_err);
2510
2511     hr = get_typeinfo( IWinHttpRequest_tid, &typeinfo );
2512     if (SUCCEEDED(hr))
2513     {
2514         hr = ITypeInfo_Invoke( typeinfo, &request->IWinHttpRequest_iface, member, flags,
2515                                params, result, excep_info, arg_err );
2516         ITypeInfo_Release( typeinfo );
2517     }
2518     return hr;
2519 }
2520
2521 static HRESULT WINAPI winhttp_request_SetProxy(
2522     IWinHttpRequest *iface,
2523     HTTPREQUEST_PROXY_SETTING proxy_setting,
2524     VARIANT proxy_server,
2525     VARIANT bypass_list )
2526 {
2527     struct winhttp_request *request = impl_from_IWinHttpRequest( iface );
2528     DWORD err = ERROR_SUCCESS;
2529
2530     TRACE("%p, %u, %s, %s\n", request, proxy_setting, debugstr_variant(&proxy_server),
2531           debugstr_variant(&bypass_list));
2532
2533     EnterCriticalSection( &request->cs );
2534     switch (proxy_setting)
2535     {
2536     case HTTPREQUEST_PROXYSETTING_DEFAULT:
2537         request->proxy.dwAccessType = WINHTTP_ACCESS_TYPE_DEFAULT_PROXY;
2538         heap_free( request->proxy.lpszProxy );
2539         heap_free( request->proxy.lpszProxyBypass );
2540         request->proxy.lpszProxy = NULL;
2541         request->proxy.lpszProxyBypass = NULL;
2542         break;
2543
2544     case HTTPREQUEST_PROXYSETTING_DIRECT:
2545         request->proxy.dwAccessType = WINHTTP_ACCESS_TYPE_NO_PROXY;
2546         heap_free( request->proxy.lpszProxy );
2547         heap_free( request->proxy.lpszProxyBypass );
2548         request->proxy.lpszProxy = NULL;
2549         request->proxy.lpszProxyBypass = NULL;
2550         break;
2551
2552     case HTTPREQUEST_PROXYSETTING_PROXY:
2553         request->proxy.dwAccessType = WINHTTP_ACCESS_TYPE_NAMED_PROXY;
2554         if (V_VT( &proxy_server ) == VT_BSTR)
2555         {
2556             heap_free( request->proxy.lpszProxy );
2557             request->proxy.lpszProxy = strdupW( V_BSTR( &proxy_server ) );
2558         }
2559         if (V_VT( &bypass_list ) == VT_BSTR)
2560         {
2561             heap_free( request->proxy.lpszProxyBypass );
2562             request->proxy.lpszProxyBypass = strdupW( V_BSTR( &bypass_list ) );
2563         }
2564         break;
2565
2566     default:
2567         err = ERROR_INVALID_PARAMETER;
2568         break;
2569     }
2570     LeaveCriticalSection( &request->cs );
2571     return HRESULT_FROM_WIN32( err );
2572 }
2573
2574 static HRESULT WINAPI winhttp_request_SetCredentials(
2575     IWinHttpRequest *iface,
2576     BSTR username,
2577     BSTR password,
2578     HTTPREQUEST_SETCREDENTIALS_FLAGS flags )
2579 {
2580     struct winhttp_request *request = impl_from_IWinHttpRequest( iface );
2581     DWORD target, scheme = WINHTTP_AUTH_SCHEME_BASIC; /* FIXME: query supported schemes */
2582     DWORD err = ERROR_SUCCESS;
2583
2584     TRACE("%p, %s, %p\n", request, debugstr_w(username), password);
2585
2586     EnterCriticalSection( &request->cs );
2587     if (request->state < REQUEST_STATE_OPEN)
2588     {
2589         err = ERROR_WINHTTP_CANNOT_CALL_BEFORE_OPEN;
2590         goto done;
2591     }
2592     switch (flags)
2593     {
2594     case HTTPREQUEST_SETCREDENTIALS_FOR_SERVER:
2595         target = WINHTTP_AUTH_TARGET_SERVER;
2596         break;
2597     case HTTPREQUEST_SETCREDENTIALS_FOR_PROXY:
2598         target = WINHTTP_AUTH_TARGET_PROXY;
2599         break;
2600     default:
2601         err = ERROR_INVALID_PARAMETER;
2602         goto done;
2603     }
2604     if (!WinHttpSetCredentials( request->hrequest, target, scheme, username, password, NULL ))
2605     {
2606         err = get_last_error();
2607     }
2608 done:
2609     LeaveCriticalSection( &request->cs );
2610     return HRESULT_FROM_WIN32( err );
2611 }
2612
2613 static void initialize_request( struct winhttp_request *request )
2614 {
2615     request->hrequest = NULL;
2616     request->hconnect = NULL;
2617     request->hsession = NULL;
2618     request->thread   = NULL;
2619     request->wait     = NULL;
2620     request->cancel   = NULL;
2621     request->buffer   = NULL;
2622     request->verb     = NULL;
2623     request->offset = 0;
2624     request->bytes_available = 0;
2625     request->bytes_read = 0;
2626     request->error = ERROR_SUCCESS;
2627     request->logon_policy = WINHTTP_AUTOLOGON_SECURITY_LEVEL_MEDIUM;
2628     request->disable_feature = WINHTTP_DISABLE_AUTHENTICATION;
2629     request->proxy.dwAccessType = WINHTTP_ACCESS_TYPE_DEFAULT_PROXY;
2630     request->proxy.lpszProxy = NULL;
2631     request->proxy.lpszProxyBypass = NULL;
2632     request->resolve_timeout = 0;
2633     request->connect_timeout = 60000;
2634     request->send_timeout    = 30000;
2635     request->receive_timeout = 30000;
2636     VariantInit( &request->data );
2637     request->state = REQUEST_STATE_INITIALIZED;
2638 }
2639
2640 static HRESULT WINAPI winhttp_request_Open(
2641     IWinHttpRequest *iface,
2642     BSTR method,
2643     BSTR url,
2644     VARIANT async )
2645 {
2646     static const WCHAR typeW[] = {'*','/','*',0};
2647     static const WCHAR *acceptW[] = {typeW, NULL};
2648     static const WCHAR httpsW[] = {'h','t','t','p','s'};
2649     static const WCHAR user_agentW[] = {
2650         'M','o','z','i','l','l','a','/','4','.','0',' ','(','c','o','m','p','a','t','i','b','l','e',';',' ',
2651         'W','i','n','3','2',';',' ','W','i','n','H','t','t','p','.','W','i','n','H','t','t','p',
2652         'R','e','q','u','e','s','t','.','5',')',0};
2653     struct winhttp_request *request = impl_from_IWinHttpRequest( iface );
2654     HINTERNET hsession = NULL, hconnect = NULL, hrequest;
2655     URL_COMPONENTS uc;
2656     WCHAR *hostname, *path = NULL, *verb = NULL;
2657     DWORD err = ERROR_OUTOFMEMORY, len, flags = 0, request_flags = 0;
2658
2659     TRACE("%p, %s, %s, %s\n", request, debugstr_w(method), debugstr_w(url),
2660           debugstr_variant(&async));
2661
2662     if (!method || !url) return E_INVALIDARG;
2663
2664     memset( &uc, 0, sizeof(uc) );
2665     uc.dwStructSize = sizeof(uc);
2666     uc.dwSchemeLength   = ~0u;
2667     uc.dwHostNameLength = ~0u;
2668     uc.dwUrlPathLength  = ~0u;
2669     uc.dwExtraInfoLength = ~0u;
2670     if (!WinHttpCrackUrl( url, 0, 0, &uc )) return HRESULT_FROM_WIN32( get_last_error() );
2671
2672     EnterCriticalSection( &request->cs );
2673     if (request->state != REQUEST_STATE_INITIALIZED)
2674     {
2675         cancel_request( request );
2676         free_request( request );
2677         initialize_request( request );
2678     }
2679     if (!(hostname = heap_alloc( (uc.dwHostNameLength + 1) * sizeof(WCHAR) ))) goto error;
2680     memcpy( hostname, uc.lpszHostName, uc.dwHostNameLength * sizeof(WCHAR) );
2681     hostname[uc.dwHostNameLength] = 0;
2682
2683     if (!(path = heap_alloc( (uc.dwUrlPathLength + uc.dwExtraInfoLength + 1) * sizeof(WCHAR) ))) goto error;
2684     memcpy( path, uc.lpszUrlPath, (uc.dwUrlPathLength + uc.dwExtraInfoLength) * sizeof(WCHAR) );
2685     path[uc.dwUrlPathLength + uc.dwExtraInfoLength] = 0;
2686
2687     if (!(verb = strdupW( method ))) goto error;
2688     if (V_BOOL( &async )) flags |= WINHTTP_FLAG_ASYNC;
2689     if (!(hsession = WinHttpOpen( user_agentW, WINHTTP_ACCESS_TYPE_DEFAULT_PROXY, NULL, NULL, flags )))
2690     {
2691         err = get_last_error();
2692         goto error;
2693     }
2694     if (!(hconnect = WinHttpConnect( hsession, hostname, uc.nPort, 0 )))
2695     {
2696         err = get_last_error();
2697         goto error;
2698     }
2699     len = sizeof(httpsW) / sizeof(WCHAR);
2700     if (uc.dwSchemeLength == len && !memcmp( uc.lpszScheme, httpsW, len * sizeof(WCHAR) ))
2701     {
2702         request_flags |= WINHTTP_FLAG_SECURE;
2703     }
2704     if (!(hrequest = WinHttpOpenRequest( hconnect, method, path, NULL, NULL, acceptW, request_flags )))
2705     {
2706         err = get_last_error();
2707         goto error;
2708     }
2709     if (flags & WINHTTP_FLAG_ASYNC)
2710     {
2711         request->wait   = CreateEventW( NULL, FALSE, FALSE, NULL );
2712         request->cancel = CreateEventW( NULL, FALSE, FALSE, NULL );
2713         WinHttpSetOption( hrequest, WINHTTP_OPTION_CONTEXT_VALUE, &request, sizeof(request) );
2714     }
2715     request->state = REQUEST_STATE_OPEN;
2716     request->hsession = hsession;
2717     request->hconnect = hconnect;
2718     request->hrequest = hrequest;
2719     request->verb = verb;
2720     heap_free( hostname );
2721     heap_free( path );
2722     LeaveCriticalSection( &request->cs );
2723     return S_OK;
2724
2725 error:
2726     WinHttpCloseHandle( hconnect );
2727     WinHttpCloseHandle( hsession );
2728     heap_free( hostname );
2729     heap_free( path );
2730     heap_free( verb );
2731     LeaveCriticalSection( &request->cs );
2732     return HRESULT_FROM_WIN32( err );
2733 }
2734
2735 static HRESULT WINAPI winhttp_request_SetRequestHeader(
2736     IWinHttpRequest *iface,
2737     BSTR header,
2738     BSTR value )
2739 {
2740     static const WCHAR fmtW[] = {'%','s',':',' ','%','s','\r','\n',0};
2741     static const WCHAR emptyW[] = {0};
2742     struct winhttp_request *request = impl_from_IWinHttpRequest( iface );
2743     DWORD len, err = ERROR_SUCCESS;
2744     WCHAR *str;
2745
2746     TRACE("%p, %s, %s\n", request, debugstr_w(header), debugstr_w(value));
2747
2748     if (!header) return E_INVALIDARG;
2749
2750     EnterCriticalSection( &request->cs );
2751     if (request->state < REQUEST_STATE_OPEN)
2752     {
2753         err = ERROR_WINHTTP_CANNOT_CALL_BEFORE_OPEN;
2754         goto done;
2755     }
2756     if (request->state >= REQUEST_STATE_SENT)
2757     {
2758         err = ERROR_WINHTTP_CANNOT_CALL_AFTER_SEND;
2759         goto done;
2760     }
2761     len = strlenW( header ) + 4;
2762     if (value) len += strlenW( value );
2763     if (!(str = heap_alloc( (len + 1) * sizeof(WCHAR) )))
2764     {
2765         err = ERROR_OUTOFMEMORY;
2766         goto done;
2767     }
2768     sprintfW( str, fmtW, header, value ? value : emptyW );
2769     if (!WinHttpAddRequestHeaders( request->hrequest, str, len, WINHTTP_ADDREQ_FLAG_REPLACE ))
2770     {
2771         err = get_last_error();
2772     }
2773     heap_free( str );
2774
2775 done:
2776     LeaveCriticalSection( &request->cs );
2777     return HRESULT_FROM_WIN32( err );
2778 }
2779
2780 static HRESULT WINAPI winhttp_request_GetResponseHeader(
2781     IWinHttpRequest *iface,
2782     BSTR header,
2783     BSTR *value )
2784 {
2785     struct winhttp_request *request = impl_from_IWinHttpRequest( iface );
2786     DWORD size, err = ERROR_SUCCESS;
2787
2788     TRACE("%p, %p\n", request, header);
2789
2790     EnterCriticalSection( &request->cs );
2791     if (request->state < REQUEST_STATE_SENT)
2792     {
2793         err = ERROR_WINHTTP_CANNOT_CALL_BEFORE_SEND;
2794         goto done;
2795     }
2796     if (!header || !value)
2797     {
2798         err = ERROR_INVALID_PARAMETER;
2799         goto done;
2800     }
2801     size = 0;
2802     if (!WinHttpQueryHeaders( request->hrequest, WINHTTP_QUERY_CUSTOM, header, NULL, &size, NULL ))
2803     {
2804         err = get_last_error();
2805         if (err != ERROR_INSUFFICIENT_BUFFER) goto done;
2806     }
2807     if (!(*value = SysAllocStringLen( NULL, size / sizeof(WCHAR) )))
2808     {
2809         err = ERROR_OUTOFMEMORY;
2810         goto done;
2811     }
2812     err = ERROR_SUCCESS;
2813     if (!WinHttpQueryHeaders( request->hrequest, WINHTTP_QUERY_CUSTOM, header, *value, &size, NULL ))
2814     {
2815         err = get_last_error();
2816         SysFreeString( *value );
2817     }
2818 done:
2819     LeaveCriticalSection( &request->cs );
2820     return HRESULT_FROM_WIN32( err );
2821 }
2822
2823 static HRESULT WINAPI winhttp_request_GetAllResponseHeaders(
2824     IWinHttpRequest *iface,
2825     BSTR *headers )
2826 {
2827     struct winhttp_request *request = impl_from_IWinHttpRequest( iface );
2828     DWORD size, err = ERROR_SUCCESS;
2829
2830     TRACE("%p, %p\n", request, headers);
2831
2832     if (!headers) return E_INVALIDARG;
2833
2834     EnterCriticalSection( &request->cs );
2835     if (request->state < REQUEST_STATE_SENT)
2836     {
2837         err = ERROR_WINHTTP_CANNOT_CALL_BEFORE_SEND;
2838         goto done;
2839     }
2840     size = 0;
2841     if (!WinHttpQueryHeaders( request->hrequest, WINHTTP_QUERY_RAW_HEADERS_CRLF, NULL, NULL, &size, NULL ))
2842     {
2843         err = get_last_error();
2844         if (err != ERROR_INSUFFICIENT_BUFFER) goto done;
2845     }
2846     if (!(*headers = SysAllocStringLen( NULL, size / sizeof(WCHAR) )))
2847     {
2848         err = ERROR_OUTOFMEMORY;
2849         goto done;
2850     }
2851     err = ERROR_SUCCESS;
2852     if (!WinHttpQueryHeaders( request->hrequest, WINHTTP_QUERY_RAW_HEADERS_CRLF, NULL, *headers, &size, NULL ))
2853     {
2854         err = get_last_error();
2855         SysFreeString( *headers );
2856     }
2857 done:
2858     LeaveCriticalSection( &request->cs );
2859     return HRESULT_FROM_WIN32( err );
2860 }
2861
2862 static void CALLBACK wait_status_callback( HINTERNET handle, DWORD_PTR context, DWORD status, LPVOID buffer, DWORD size )
2863 {
2864     struct winhttp_request *request = (struct winhttp_request *)context;
2865
2866     switch (status)
2867     {
2868     case WINHTTP_CALLBACK_STATUS_DATA_AVAILABLE:
2869         request->bytes_available = *(DWORD *)buffer;
2870         request->error = ERROR_SUCCESS;
2871         break;
2872     case WINHTTP_CALLBACK_STATUS_READ_COMPLETE:
2873         request->bytes_read = size;
2874         request->error = ERROR_SUCCESS;
2875         break;
2876     case WINHTTP_CALLBACK_STATUS_REQUEST_ERROR:
2877     {
2878         WINHTTP_ASYNC_RESULT *result = (WINHTTP_ASYNC_RESULT *)buffer;
2879         request->error = result->dwError;
2880         break;
2881     }
2882     default: break;
2883     }
2884     SetEvent( request->wait );
2885 }
2886
2887 static void wait_set_status_callback( struct winhttp_request *request, DWORD status )
2888 {
2889     if (!request->wait) return;
2890     status |= WINHTTP_CALLBACK_STATUS_REQUEST_ERROR;
2891     WinHttpSetStatusCallback( request->hrequest, wait_status_callback, status, 0 );
2892 }
2893
2894 static DWORD wait_for_completion( struct winhttp_request *request )
2895 {
2896     HANDLE handles[2];
2897
2898     if (!request->wait)
2899     {
2900         request->error = ERROR_SUCCESS;
2901         return ERROR_SUCCESS;
2902     }
2903     handles[0] = request->wait;
2904     handles[1] = request->cancel;
2905     switch (WaitForMultipleObjects( 2, handles, FALSE, INFINITE ))
2906     {
2907     case WAIT_OBJECT_0:
2908         break;
2909     case WAIT_OBJECT_0 + 1:
2910         request->error = ERROR_CANCELLED;
2911         break;
2912     default:
2913         request->error = get_last_error();
2914         break;
2915     }
2916     return request->error;
2917 }
2918
2919 static HRESULT request_receive( struct winhttp_request *request )
2920 {
2921     DWORD err, size, buflen = 4096;
2922
2923     wait_set_status_callback( request, WINHTTP_CALLBACK_STATUS_HEADERS_AVAILABLE );
2924     if (!WinHttpReceiveResponse( request->hrequest, NULL ))
2925     {
2926         return HRESULT_FROM_WIN32( get_last_error() );
2927     }
2928     if ((err = wait_for_completion( request ))) return HRESULT_FROM_WIN32( err );
2929     if (!strcmpW( request->verb, headW ))
2930     {
2931         request->state = REQUEST_STATE_RESPONSE_RECEIVED;
2932         return S_OK;
2933     }
2934     if (!(request->buffer = heap_alloc( buflen ))) return E_OUTOFMEMORY;
2935     request->buffer[0] = 0;
2936     size = 0;
2937     do
2938     {
2939         wait_set_status_callback( request, WINHTTP_CALLBACK_STATUS_DATA_AVAILABLE );
2940         if (!WinHttpQueryDataAvailable( request->hrequest, &request->bytes_available ))
2941         {
2942             err = get_last_error();
2943             goto error;
2944         }
2945         if ((err = wait_for_completion( request ))) goto error;
2946         if (!request->bytes_available) break;
2947         size += request->bytes_available;
2948         if (buflen < size)
2949         {
2950             char *tmp;
2951             while (buflen < size) buflen *= 2;
2952             if (!(tmp = heap_realloc( request->buffer, buflen )))
2953             {
2954                 err = ERROR_OUTOFMEMORY;
2955                 goto error;
2956             }
2957             request->buffer = tmp;
2958         }
2959         wait_set_status_callback( request, WINHTTP_CALLBACK_STATUS_READ_COMPLETE );
2960         if (!WinHttpReadData( request->hrequest, request->buffer + request->offset,
2961                               request->bytes_available, &request->bytes_read ))
2962         {
2963             err = get_last_error();
2964             goto error;
2965         }
2966         if ((err = wait_for_completion( request ))) goto error;
2967         request->offset += request->bytes_read;
2968     } while (request->bytes_read);
2969
2970     request->state = REQUEST_STATE_RESPONSE_RECEIVED;
2971     return S_OK;
2972
2973 error:
2974     heap_free( request->buffer );
2975     request->buffer = NULL;
2976     return HRESULT_FROM_WIN32( err );
2977 }
2978
2979 static DWORD request_set_parameters( struct winhttp_request *request )
2980 {
2981     if (!WinHttpSetOption( request->hrequest, WINHTTP_OPTION_PROXY, &request->proxy,
2982                            sizeof(request->proxy) )) return get_last_error();
2983
2984     if (!WinHttpSetOption( request->hrequest, WINHTTP_OPTION_AUTOLOGON_POLICY, &request->logon_policy,
2985                            sizeof(request->logon_policy) )) return get_last_error();
2986
2987     if (!WinHttpSetOption( request->hrequest, WINHTTP_OPTION_DISABLE_FEATURE, &request->disable_feature,
2988                            sizeof(request->disable_feature) )) return get_last_error();
2989
2990     if (!WinHttpSetTimeouts( request->hrequest,
2991                              request->resolve_timeout,
2992                              request->connect_timeout,
2993                              request->send_timeout,
2994                              request->receive_timeout )) return get_last_error();
2995     return ERROR_SUCCESS;
2996 }
2997
2998 static void request_set_utf8_content_type( struct winhttp_request *request )
2999 {
3000     static const WCHAR fmtW[] = {'%','s',':',' ','%','s',0};
3001     static const WCHAR text_plainW[] = {'t','e','x','t','/','p','l','a','i','n',0};
3002     static const WCHAR charset_utf8W[] = {'c','h','a','r','s','e','t','=','u','t','f','-','8',0};
3003     WCHAR headerW[64];
3004     int len;
3005
3006     len = sprintfW( headerW, fmtW, attr_content_type, text_plainW );
3007     WinHttpAddRequestHeaders( request->hrequest, headerW, len, WINHTTP_ADDREQ_FLAG_ADD_IF_NEW );
3008     len = sprintfW( headerW, fmtW, attr_content_type, charset_utf8W );
3009     WinHttpAddRequestHeaders( request->hrequest, headerW, len, WINHTTP_ADDREQ_FLAG_COALESCE_WITH_SEMICOLON );
3010 }
3011
3012 static HRESULT request_send( struct winhttp_request *request )
3013 {
3014     SAFEARRAY *sa = NULL;
3015     VARIANT data;
3016     char *ptr = NULL;
3017     LONG size = 0;
3018     HRESULT hr;
3019     DWORD err;
3020
3021     if ((err = request_set_parameters( request ))) return HRESULT_FROM_WIN32( err );
3022     if (strcmpW( request->verb, getW ))
3023     {
3024         VariantInit( &data );
3025         if (V_VT( &request->data ) == VT_BSTR)
3026         {
3027             UINT cp = CP_ACP;
3028             const WCHAR *str = V_BSTR( &request->data );
3029             int i, len = strlenW( str );
3030
3031             for (i = 0; i < len; i++)
3032             {
3033                 if (str[i] > 127)
3034                 {
3035                     cp = CP_UTF8;
3036                     break;
3037                 }
3038             }
3039             size = WideCharToMultiByte( cp, 0, str, len, NULL, 0, NULL, NULL );
3040             if (!(ptr = heap_alloc( size ))) return E_OUTOFMEMORY;
3041             WideCharToMultiByte( cp, 0, str, len, ptr, size, NULL, NULL );
3042             if (cp == CP_UTF8) request_set_utf8_content_type( request );
3043         }
3044         else if (VariantChangeType( &data, &request->data, 0, VT_ARRAY|VT_UI1 ) == S_OK)
3045         {
3046             sa = V_ARRAY( &data );
3047             if ((hr = SafeArrayAccessData( sa, (void **)&ptr )) != S_OK) return hr;
3048             if ((hr = SafeArrayGetUBound( sa, 1, &size ) != S_OK))
3049             {
3050                 SafeArrayUnaccessData( sa );
3051                 return hr;
3052             }
3053             size++;
3054         }
3055     }
3056     wait_set_status_callback( request, WINHTTP_CALLBACK_STATUS_REQUEST_SENT );
3057     if (!WinHttpSendRequest( request->hrequest, NULL, 0, ptr, size, size, 0 ))
3058     {
3059         err = get_last_error();
3060         goto error;
3061     }
3062     if ((err = wait_for_completion( request ))) goto error;
3063     if (sa) SafeArrayUnaccessData( sa );
3064     else heap_free( ptr );
3065     request->state = REQUEST_STATE_SENT;
3066     return S_OK;
3067
3068 error:
3069     if (sa) SafeArrayUnaccessData( sa );
3070     else heap_free( ptr );
3071     return HRESULT_FROM_WIN32( err );
3072 }
3073
3074 static HRESULT request_send_and_receive( struct winhttp_request *request )
3075 {
3076     HRESULT hr = request_send( request );
3077     if (hr == S_OK) hr = request_receive( request );
3078     return hr;
3079 }
3080
3081 static DWORD CALLBACK send_and_receive_proc( void *arg )
3082 {
3083     struct winhttp_request *request = (struct winhttp_request *)arg;
3084     return request_send_and_receive( request );
3085 }
3086
3087 static HRESULT WINAPI winhttp_request_Send(
3088     IWinHttpRequest *iface,
3089     VARIANT body )
3090 {
3091     struct winhttp_request *request = impl_from_IWinHttpRequest( iface );
3092     HRESULT hr;
3093
3094     TRACE("%p, %s\n", request, debugstr_variant(&body));
3095
3096     EnterCriticalSection( &request->cs );
3097     if (request->state < REQUEST_STATE_OPEN)
3098     {
3099         LeaveCriticalSection( &request->cs );
3100         return HRESULT_FROM_WIN32( ERROR_WINHTTP_CANNOT_CALL_BEFORE_OPEN );
3101     }
3102     if (request->state >= REQUEST_STATE_SENT)
3103     {
3104         LeaveCriticalSection( &request->cs );
3105         return S_OK;
3106     }
3107     VariantClear( &request->data );
3108     if ((hr = VariantCopyInd( &request->data, &body )) != S_OK) {
3109         LeaveCriticalSection( &request->cs );
3110         return hr;
3111     }
3112
3113     if (request->wait) /* async request */
3114     {
3115         if (!(request->thread = CreateThread( NULL, 0, send_and_receive_proc, request, 0, NULL )))
3116         {
3117             LeaveCriticalSection( &request->cs );
3118             return HRESULT_FROM_WIN32( get_last_error() );
3119         }
3120     }
3121     else hr = request_send_and_receive( request );
3122     LeaveCriticalSection( &request->cs );
3123     return hr;
3124 }
3125
3126 static HRESULT WINAPI winhttp_request_get_Status(
3127     IWinHttpRequest *iface,
3128     LONG *status )
3129 {
3130     struct winhttp_request *request = impl_from_IWinHttpRequest( iface );
3131     DWORD err = ERROR_SUCCESS, flags, status_code, len = sizeof(status_code), index = 0;
3132
3133     TRACE("%p, %p\n", request, status);
3134
3135     if (!status) return E_INVALIDARG;
3136
3137     EnterCriticalSection( &request->cs );
3138     if (request->state < REQUEST_STATE_SENT)
3139     {
3140         err = ERROR_WINHTTP_CANNOT_CALL_BEFORE_SEND;
3141         goto done;
3142     }
3143     flags = WINHTTP_QUERY_STATUS_CODE | WINHTTP_QUERY_FLAG_NUMBER;
3144     if (!WinHttpQueryHeaders( request->hrequest, flags, NULL, &status_code, &len, &index ))
3145     {
3146         err = get_last_error();
3147         goto done;
3148     }
3149     *status = status_code;
3150
3151 done:
3152     LeaveCriticalSection( &request->cs );
3153     return HRESULT_FROM_WIN32( err );
3154 }
3155
3156 static HRESULT WINAPI winhttp_request_get_StatusText(
3157     IWinHttpRequest *iface,
3158     BSTR *status )
3159 {
3160     struct winhttp_request *request = impl_from_IWinHttpRequest( iface );
3161     DWORD err = ERROR_SUCCESS, len = 0, index = 0;
3162
3163     TRACE("%p, %p\n", request, status);
3164
3165     if (!status) return E_INVALIDARG;
3166
3167     EnterCriticalSection( &request->cs );
3168     if (request->state < REQUEST_STATE_SENT)
3169     {
3170         err = ERROR_WINHTTP_CANNOT_CALL_BEFORE_SEND;
3171         goto done;
3172     }
3173     if (!WinHttpQueryHeaders( request->hrequest, WINHTTP_QUERY_STATUS_TEXT, NULL, NULL, &len, &index ))
3174     {
3175         err = get_last_error();
3176         if (err != ERROR_INSUFFICIENT_BUFFER) goto done;
3177     }
3178     if (!(*status = SysAllocStringLen( NULL, len / sizeof(WCHAR) )))
3179     {
3180         err = ERROR_OUTOFMEMORY;
3181         goto done;
3182     }
3183     index = 0;
3184     err = ERROR_SUCCESS;
3185     if (!WinHttpQueryHeaders( request->hrequest, WINHTTP_QUERY_STATUS_TEXT, NULL, *status, &len, &index ))
3186     {
3187         err = get_last_error();
3188         SysFreeString( *status );
3189     }
3190 done:
3191     LeaveCriticalSection( &request->cs );
3192     return HRESULT_FROM_WIN32( err );
3193 }
3194
3195 static DWORD request_get_codepage( struct winhttp_request *request, UINT *codepage )
3196 {
3197     static const WCHAR utf8W[] = {'u','t','f','-','8',0};
3198     static const WCHAR charsetW[] = {'c','h','a','r','s','e','t',0};
3199     WCHAR *buffer, *p;
3200     DWORD size;
3201
3202     *codepage = CP_ACP;
3203     if (!WinHttpQueryHeaders( request->hrequest, WINHTTP_QUERY_CONTENT_TYPE, NULL, NULL, &size, NULL ) &&
3204         get_last_error() == ERROR_INSUFFICIENT_BUFFER)
3205     {
3206         if (!(buffer = heap_alloc( size ))) return ERROR_OUTOFMEMORY;
3207         if (!WinHttpQueryHeaders( request->hrequest, WINHTTP_QUERY_CONTENT_TYPE, NULL, buffer, &size, NULL ))
3208         {
3209             return get_last_error();
3210         }
3211         if ((p = strstrW( buffer, charsetW )))
3212         {
3213             p += strlenW( charsetW );
3214             while (*p == ' ') p++;
3215             if (*p++ == '=')
3216             {
3217                 while (*p == ' ') p++;
3218                 if (!strcmpiW( p, utf8W )) *codepage = CP_UTF8;
3219             }
3220         }
3221         heap_free( buffer );
3222     }
3223     return ERROR_SUCCESS;
3224 }
3225
3226 static HRESULT WINAPI winhttp_request_get_ResponseText(
3227     IWinHttpRequest *iface,
3228     BSTR *body )
3229 {
3230     struct winhttp_request *request = impl_from_IWinHttpRequest( iface );
3231     UINT codepage;
3232     DWORD err = ERROR_SUCCESS;
3233     int len;
3234
3235     TRACE("%p, %p\n", request, body);
3236
3237     if (!body) return E_INVALIDARG;
3238
3239     EnterCriticalSection( &request->cs );
3240     if (request->state < REQUEST_STATE_SENT)
3241     {
3242         err = ERROR_WINHTTP_CANNOT_CALL_BEFORE_SEND;
3243         goto done;
3244     }
3245     if ((err = request_get_codepage( request, &codepage ))) goto done;
3246     len = MultiByteToWideChar( codepage, 0, request->buffer, request->offset, NULL, 0 );
3247     if (!(*body = SysAllocStringLen( NULL, len )))
3248     {
3249         err = ERROR_OUTOFMEMORY;
3250         goto done;
3251     }
3252     MultiByteToWideChar( codepage, 0, request->buffer, request->offset, *body, len );
3253     (*body)[len] = 0;
3254
3255 done:
3256     LeaveCriticalSection( &request->cs );
3257     return HRESULT_FROM_WIN32( err );
3258 }
3259
3260 static HRESULT WINAPI winhttp_request_get_ResponseBody(
3261     IWinHttpRequest *iface,
3262     VARIANT *body )
3263 {
3264     struct winhttp_request *request = impl_from_IWinHttpRequest( iface );
3265     SAFEARRAY *sa;
3266     HRESULT hr;
3267     DWORD err = ERROR_SUCCESS;
3268     char *ptr;
3269
3270     TRACE("%p, %p\n", request, body);
3271
3272     if (!body) return E_INVALIDARG;
3273
3274     EnterCriticalSection( &request->cs );
3275     if (!(sa = SafeArrayCreateVector( VT_UI1, 0, request->offset )))
3276     {
3277         err = ERROR_OUTOFMEMORY;
3278         goto done;
3279     }
3280     if ((hr = SafeArrayAccessData( sa, (void **)&ptr )) != S_OK)
3281     {
3282         SafeArrayDestroy( sa );
3283         LeaveCriticalSection( &request->cs );
3284         return hr;
3285     }
3286     memcpy( ptr, request->buffer, request->offset );
3287     if ((hr = SafeArrayUnaccessData( sa )) != S_OK)
3288     {
3289         SafeArrayDestroy( sa );
3290         LeaveCriticalSection( &request->cs );
3291         return hr;
3292     }
3293     V_VT( body ) =  VT_ARRAY|VT_UI1;
3294     V_ARRAY( body ) = sa;
3295
3296 done:
3297     LeaveCriticalSection( &request->cs );
3298     return HRESULT_FROM_WIN32( err );
3299 }
3300
3301 static HRESULT WINAPI winhttp_request_get_ResponseStream(
3302     IWinHttpRequest *iface,
3303     VARIANT *body )
3304 {
3305     FIXME("\n");
3306     return E_NOTIMPL;
3307 }
3308
3309 static HRESULT WINAPI winhttp_request_get_Option(
3310     IWinHttpRequest *iface,
3311     WinHttpRequestOption option,
3312     VARIANT *value )
3313 {
3314     FIXME("\n");
3315     return E_NOTIMPL;
3316 }
3317
3318 static HRESULT WINAPI winhttp_request_put_Option(
3319     IWinHttpRequest *iface,
3320     WinHttpRequestOption option,
3321     VARIANT value )
3322 {
3323     struct winhttp_request *request = impl_from_IWinHttpRequest( iface );
3324     HRESULT hr = S_OK;
3325
3326     TRACE("%p, %u, %s\n", request, option, debugstr_variant(&value));
3327
3328     EnterCriticalSection( &request->cs );
3329     switch (option)
3330     {
3331     case WinHttpRequestOption_EnableRedirects:
3332     {
3333         if (V_BOOL( &value ))
3334             request->disable_feature &= ~WINHTTP_DISABLE_REDIRECTS;
3335         else
3336             request->disable_feature |= WINHTTP_DISABLE_REDIRECTS;
3337         break;
3338     }
3339     default:
3340         FIXME("unimplemented option %u\n", option);
3341         hr = E_NOTIMPL;
3342         break;
3343     }
3344     LeaveCriticalSection( &request->cs );
3345     return hr;
3346 }
3347
3348 /* critical section must be held */
3349 static DWORD wait_for_response( struct winhttp_request *request, DWORD timeout )
3350 {
3351     HANDLE thread = request->thread;
3352     DWORD err, ret;
3353
3354     LeaveCriticalSection( &request->cs );
3355     while ((err = MsgWaitForMultipleObjects( 1, &thread, FALSE, timeout, QS_ALLINPUT )) == WAIT_OBJECT_0 + 1)
3356     {
3357         MSG msg;
3358         while (PeekMessageW( &msg, NULL, 0, 0, PM_REMOVE ))
3359         {
3360             TranslateMessage( &msg );
3361             DispatchMessageW( &msg );
3362         }
3363     }
3364     switch (err)
3365     {
3366     case WAIT_OBJECT_0:
3367         ret = ERROR_SUCCESS;
3368         break;
3369     case WAIT_TIMEOUT:
3370         ret = ERROR_TIMEOUT;
3371         break;
3372     case WAIT_FAILED:
3373     default:
3374         ret = get_last_error();
3375         break;
3376     }
3377     EnterCriticalSection( &request->cs );
3378     return ret;
3379 }
3380
3381 static HRESULT WINAPI winhttp_request_WaitForResponse(
3382     IWinHttpRequest *iface,
3383     VARIANT timeout,
3384     VARIANT_BOOL *succeeded )
3385 {
3386     struct winhttp_request *request = impl_from_IWinHttpRequest( iface );
3387     DWORD err, msecs = (V_I4(&timeout) == -1) ? INFINITE : V_I4(&timeout) * 1000;
3388
3389     TRACE("%p, %s, %p\n", request, debugstr_variant(&timeout), succeeded);
3390
3391     EnterCriticalSection( &request->cs );
3392     if (!request->thread)
3393     {
3394         LeaveCriticalSection( &request->cs );
3395         return S_OK;
3396     }
3397     if (request->state >= REQUEST_STATE_RESPONSE_RECEIVED)
3398     {
3399         LeaveCriticalSection( &request->cs );
3400         return S_OK;
3401     }
3402     switch ((err = wait_for_response( request, msecs )))
3403     {
3404     case ERROR_TIMEOUT:
3405         if (succeeded) *succeeded = VARIANT_FALSE;
3406         err = ERROR_SUCCESS;
3407         break;
3408
3409     case ERROR_SUCCESS:
3410         if (succeeded) *succeeded = VARIANT_TRUE;
3411         break;
3412
3413     default: break;
3414     }
3415     LeaveCriticalSection( &request->cs );
3416     return HRESULT_FROM_WIN32( err );
3417 }
3418
3419 static HRESULT WINAPI winhttp_request_Abort(
3420     IWinHttpRequest *iface )
3421 {
3422     struct winhttp_request *request = impl_from_IWinHttpRequest( iface );
3423
3424     TRACE("%p\n", request);
3425
3426     EnterCriticalSection( &request->cs );
3427     cancel_request( request );
3428     LeaveCriticalSection( &request->cs );
3429     return S_OK;
3430 }
3431
3432 static HRESULT WINAPI winhttp_request_SetTimeouts(
3433     IWinHttpRequest *iface,
3434     LONG resolve_timeout,
3435     LONG connect_timeout,
3436     LONG send_timeout,
3437     LONG receive_timeout )
3438 {
3439     struct winhttp_request *request = impl_from_IWinHttpRequest( iface );
3440
3441     TRACE("%p, %d, %d, %d, %d\n", request, resolve_timeout, connect_timeout, send_timeout, receive_timeout);
3442
3443     EnterCriticalSection( &request->cs );
3444     request->resolve_timeout = resolve_timeout;
3445     request->connect_timeout = connect_timeout;
3446     request->send_timeout    = send_timeout;
3447     request->receive_timeout = receive_timeout;
3448     LeaveCriticalSection( &request->cs );
3449     return S_OK;
3450 }
3451
3452 static HRESULT WINAPI winhttp_request_SetClientCertificate(
3453     IWinHttpRequest *iface,
3454     BSTR certificate )
3455 {
3456     FIXME("\n");
3457     return E_NOTIMPL;
3458 }
3459
3460 static HRESULT WINAPI winhttp_request_SetAutoLogonPolicy(
3461     IWinHttpRequest *iface,
3462     WinHttpRequestAutoLogonPolicy policy )
3463 {
3464     struct winhttp_request *request = impl_from_IWinHttpRequest( iface );
3465     HRESULT hr = S_OK;
3466
3467     TRACE("%p, %u\n", request, policy );
3468
3469     EnterCriticalSection( &request->cs );
3470     switch (policy)
3471     {
3472     case AutoLogonPolicy_Always:
3473         request->logon_policy = WINHTTP_AUTOLOGON_SECURITY_LEVEL_LOW;
3474         break;
3475     case AutoLogonPolicy_OnlyIfBypassProxy:
3476         request->logon_policy = WINHTTP_AUTOLOGON_SECURITY_LEVEL_MEDIUM;
3477         break;
3478     case AutoLogonPolicy_Never:
3479         request->logon_policy = WINHTTP_AUTOLOGON_SECURITY_LEVEL_HIGH;
3480         break;
3481     default: hr = E_INVALIDARG;
3482         break;
3483     }
3484     LeaveCriticalSection( &request->cs );
3485     return hr;
3486 }
3487
3488 static const struct IWinHttpRequestVtbl winhttp_request_vtbl =
3489 {
3490     winhttp_request_QueryInterface,
3491     winhttp_request_AddRef,
3492     winhttp_request_Release,
3493     winhttp_request_GetTypeInfoCount,
3494     winhttp_request_GetTypeInfo,
3495     winhttp_request_GetIDsOfNames,
3496     winhttp_request_Invoke,
3497     winhttp_request_SetProxy,
3498     winhttp_request_SetCredentials,
3499     winhttp_request_Open,
3500     winhttp_request_SetRequestHeader,
3501     winhttp_request_GetResponseHeader,
3502     winhttp_request_GetAllResponseHeaders,
3503     winhttp_request_Send,
3504     winhttp_request_get_Status,
3505     winhttp_request_get_StatusText,
3506     winhttp_request_get_ResponseText,
3507     winhttp_request_get_ResponseBody,
3508     winhttp_request_get_ResponseStream,
3509     winhttp_request_get_Option,
3510     winhttp_request_put_Option,
3511     winhttp_request_WaitForResponse,
3512     winhttp_request_Abort,
3513     winhttp_request_SetTimeouts,
3514     winhttp_request_SetClientCertificate,
3515     winhttp_request_SetAutoLogonPolicy
3516 };
3517
3518 HRESULT WinHttpRequest_create( IUnknown *unknown, void **obj )
3519 {
3520     struct winhttp_request *request;
3521
3522     TRACE("%p, %p\n", unknown, obj);
3523
3524     if (!(request = heap_alloc( sizeof(*request) ))) return E_OUTOFMEMORY;
3525     request->IWinHttpRequest_iface.lpVtbl = &winhttp_request_vtbl;
3526     request->refs = 1;
3527     request->state = REQUEST_STATE_UNINITIALIZED;
3528     request->proxy.lpszProxy = NULL;
3529     request->proxy.lpszProxyBypass = NULL;
3530     InitializeCriticalSection( &request->cs );
3531     request->cs.DebugInfo->Spare[0] = (DWORD_PTR)(__FILE__ ": winhttp_request.cs");
3532
3533     *obj = &request->IWinHttpRequest_iface;
3534     TRACE("returning iface %p\n", *obj);
3535     return S_OK;
3536 }