【问题标题】:A lot of instanses HttpClient with proxy很多带有代理的实例 HttpClient
【发布时间】:2019-04-03 06:36:17
【问题描述】:

需要你的帮助。

我不明白,在具有不同处理程序的不同线程中使用 HttpClient 的正确方法是什么?我需要我的每个线程一次使用具有不同代理的 HttpClient(大约 300 个线程)。我已经阅读了很多页面 - 我应该使用单个 HttpClient,而不创建新实例。但是如何将它与不同的 httpclienthandlers 一起使用?

现在我使用每个新代理创建新实例,这会增加内存泄漏。 Using, Dispose 无济于事……简单的例子:

public void start_parallel()
    {
        List<int> start = new List<int>();
        int gg = 0;
        while (gg != 30000)
        {
            gg += 1;
            start.Add(gg);
        }
        while (true)
        {


            Parallel.ForEach(start, new ParallelOptions() { MaxDegreeOfParallelism = 300 }, (s) => worker(s));
            Thread.Sleep(1000);
            GC.Collect();
            Thread.Sleep(1000);
        }

    }

public void worker(int i)
{
      using (var http_client = new HttpClient(handler)
      {
           await http_client.PostAsync(url, data);
      };
};

我做错了什么?

谢谢!

【问题讨论】:

  • 很高兴看到您有一个具有 300 个处理器的 CPU 内核。我们大多数人只有大约 4 或 8 个内核可以玩,所以 MaxDegreeOfParallelism = 8 对我们没有帮助。

标签: c# multithreading memory-leaks httpclient


【解决方案1】:

我建议使用HttpClientFactory 而不是手动创建HttpClient 实例。 它解决了HttpClient 的大多数问题。引用文档:

作为第一个问题,虽然这个类是一次性的,但在 using 语句中使用它并不是最佳选择,因为即使您处理 HttpClient 对象,底层套接字也不会立即释放,并可能导致名为“套接字耗尽”的严重问题'。有关此问题的详细信息,请参阅您使用错误的 HttpClient 并破坏了您的软件博客文章。

[...]

但是当您将 HttpClient 用作单例或静态对象时,您可能会遇到第二个问题。在这种情况下,单例或静态 HttpClient 不遵守 DNS 更改,如 .NET Core GitHub 存储库中的本期所述。

更多https://docs.microsoft.com/en-us/dotnet/standard/microservices-architecture/implement-resilient-applications/use-httpclientfactory-to-implement-resilient-http-requests

回答你的问题:你犯了第一点中描述的错误。

【讨论】:

  • 感谢您的回答。不太了解是否使用 Factory 创建 HttpClient 之间的区别。如果我使用 Factory,它们会被丢弃吗?
  • 简单的回答不是,而是从池中取出它们,而不是创建很多。所以 HttpClientFactory 只创建了几个实例然后共享它。此外,当池可以减少时,它将处理冗余实例。
猜你喜欢
  • 1970-01-01
  • 2013-05-07
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2017-09-25
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
相关资源
最近更新 更多