HttpClient не отправляет Accept-Encoding в Windows 2008 R2

Думаю, это связано с тем, что библиотека WinHttp, которая по умолчанию используется HttpClient в Windows не поддерживает gzip\deflate в версиях Windows до Windows 8.1+. Если поддерживается — WinHttp также установит заголовок Accept-Encoding. Итак, в Windows Server 2008, когда .NET маршрутизирует запрос через WinHttp, он либо устанавливает этот параметр и игнорирует его, либо проверяет, поддерживается ли этот параметр, а если нет, то просто не устанавливает его.

Если вы устанавливаете этот заголовок вручную (например, client.DefaultRequestHeaders.AcceptEncoding.Add(new StringWithQualityHeaderValue("gzip"));) - опция по-прежнему игнорируется, но заголовок проходит, и сервер возвращает сжатый ответ. Если поддерживается — WinHttp распаковывает этот ответ и удаляет заголовок Content-Encoding, поэтому ответ будет получен в распакованном виде в .NET. Если не поддерживается - ответ будет приходить сжатым, и .NET сам распаковает его, если вы установите AutomaticDecompression.

Итак, в заключение - в версиях Windows до 8.1 кажется, что вам нужно установить как AutomaticDecompression, так и связанные заголовки Accept-Encoding, чтобы это работало должным образом.

Не ответ, хотя я пытался воспроизвести это на Azure Win Server 2008 R2 с разными серверами Echo (.NET Core SDK 2.1.4)

// http://scooterlabs.com/echo output

[headers] => Array
(
    [Connection] => Keep-Alive
    [Host] => scooterlabs.com
)


// http://httpbin.org/headers output
{
  "headers": {
    "Connection": "close",
    "Host": "httpbin.org"
  }
}

// https://postman-echo.com/headers output
{
    "headers": {
        "host": "postman-echo.com",
        "x-forwarded-port": "443",
        "x-forwarded-proto": "https"
    }
}

В Win10 у меня действительно есть эти заголовки.

// http://scooterlabs.com/echo output
[headers] => Array
(
    [Connection] => Keep-Alive
    [Accept-Encoding] => gzip, deflate
    [Host] => scooterlabs.com
)

// http://httpbin.org/headers output
{
  "headers": {
    "Accept-Encoding": "gzip, deflate",
    "Connection": "close",
    "Host": "httpbin.org"
  }
}

// https://postman-echo.com/headers output
{
    "headers": {
        "host": "postman-echo.com",
        "accept-encoding": "gzip, deflate",
        "x-forwarded-port": "443",
        "x-forwarded-proto": "https"
    }
}

что заставляет меня думать, что заголовок Accept-Encoding HttpClient действительно не поддерживается в WS 2008 R2.

Основываясь на ответах Ивана и Евка, кажется, что это проблема, характерная для более старых версий Windows (старше, чем Win8.1). Вот как обойти и успешно справиться со сжатием в старых версиях Windows.

   var handler = new HttpClientHandler()
                {
                    AutomaticDecompression = DecompressionMethods.GZip | DecompressionMethods.Deflate
                };

   using (var client = new HttpClient(handler))
   {
        client.DefaultRequestHeaders.AcceptEncoding.Add(new StringWithQualityHeaderValue("gzip"));
        client.DefaultRequestHeaders.AcceptEncoding.Add(new StringWithQualityHeaderValue("deflate"));
        response = client.GetStringAsync("http://scooterlabs.com/echo").Result;
   }

AutomaticDecompression должен быть установлен в дополнение к заголовкам, иначе вместо этого вы получите сжатую полезную нагрузку.