С# HttpClient.SendAsync throw "Исправлена ошибка при отправке запроса" при тестировании некоторых URL-адресов

Я разрабатываю консольное приложение на С# для проверки того, является ли URL-адрес действительным или работает. Он хорошо работает для большинства URL-адресов и может получать ответ с кодом состояния HTTP с целевого веб-сайта. Но при тестировании некоторых других URL-адресов приложение выдает исключение "Ошибка при отправке запроса" при запуске метода HttpClient.SendAsync. Поэтому я не могу получить какой-либо ответ или код состояния HTTP, даже этот URL-адрес действительно работает в браузере. Я отчаянно хочу узнать, как справиться с этим делом. Если URL-адрес не работает или сервер отклоняет мой запрос, он должен хотя бы дать мне соответствующий код состояния HTTP.

Вот упрощенный код моего тестового приложения:

using System;
using System.Net.Http;
using System.Threading.Tasks;

namespace TestUrl
{
    class Program
    {
        static void Main(string[] args)
        {
           // var urlTester = new UrlTester("http://www.sitename.com/wordpress"); // works well and get 404
           // var urlTester = new UrlTester("http://www.fc.edu/"); // Throw exception and the URL doesn't work
           var urlTester = new UrlTester("http://www.ntu.edu.tw/english/"); // Throw exception and the URL works actually

            Console.WriteLine("Test is started");

            Task.WhenAll(urlTester.RunTestAsync());

            Console.WriteLine("Test is stoped");
            Console.ReadKey();
        }


        public class UrlTester
        {
            private HttpClient _httpClient;
            private string _url;

            public UrlTester(string url)
            {
                _httpClient = new HttpClient();
                _url = url;
            }

            public async Task RunTestAsync()
            {
                var httpRequestMsg = new HttpRequestMessage(HttpMethod.Head, _url);

                try
                {
                    using (var response = await _httpClient.SendAsync(httpRequestMsg, HttpCompletionOption.ResponseHeadersRead))
                    {
                        Console.WriteLine("Response: {0}", response.StatusCode);
                    }
                }
                catch (Exception e) 
                { 
                }
            }
        }

    }
}

Ответ 1

Если вы посмотрите на InnerException, вы увидите, что:

"Удаленное имя не может быть разрешено: 'www.fc.edu'"

Этот URL-адрес не работает и в моем браузере.

Чтобы получить ответ HTTP, клиент должен иметь возможность общаться с сервером (даже для того, чтобы получить ошибка 404) и в вашем случае произошла ошибка на уровне DNS.

В некоторых браузерах есть автозаполнение для таких случаев, когда, если определенный URL-адрес не найден, браузер повторяет другой суффикс/префикс, например:

try "x"
if didn't work, try "www." + x
if this didn't work try "www." + x + ".com"
if this didn't work try "www." + x + ".net"
if this didn't work try "www." + x + "." + currentRegionSuffix.

Но обратите внимание, что вы можете изменить свой код:

catch (Exception e)
{

}

To:

catch (HttpRequestException e)
{
    Console.WriteLine(e.InnerException.Message);
}

И вы сможете узнать, что вызывает вашу ошибку.

Кроме того, Вы никогда не должны пытаться поймать общий Exception, если метатель не выбрал общий Exception, и даже больше, никогда не поймать и ничего не делать с исключением, по крайней мере, log он.

Обратите внимание, что, поскольку вы ждете только одной задачи, которую вы можете использовать:

urlTester.RunTestAsync().Wait();

Вместо:

Task.WhenAll(urlTester.RunTestAsync());

Task.WhenAll создает новый Task, когда данный Task завершен. в вашем случае вам понадобится Task.WaitAll или Task.WhenAll(...).Wait().