【问题标题】:Why Garbage Collect in web apps?为什么在 Web 应用程序中进行垃圾收集?
【发布时间】:2015-01-15 08:13:33
【问题描述】:

考虑在每个请求都由用户级线程 (ULT)(绿色线程/erlang 进程/goroutine/...任何轻量级线程)处理的平台上构建 Web 应用程序。假设每个请求都是无状态的,并且在应用程序启动时获取数据库连接等资源并在这些线程之间共享。这些线程中的垃圾收集需要什么?

一般来说,这样的线程运行时间很短(几毫秒),如果设计得当,它使用的内存不会超过几个(KB 或 MB)。如果线程中分配的资源的垃圾回收是在线程退出时完成的并且独立于其他线程,那么即使是第 98 个或第 99 个百分位的请求也不会出现 GC 暂停。所有请求都将在可预测的时间内得到答复。

这样的模型有什么问题,为什么没有被广泛使用?

【问题讨论】:

  • 可能是因为这些假设在现实世界的应用中没有得到满足?
  • erlang 每个 erlang 进程(绿色线程)都有 GC,因此如果每个请求都在一个未重用的进程上处理,您可以调整 GC 设置(每个进程),因此您不太可能 GC,除非进程正在使用大量内存。首先要查看的设置是 min_heap_size 和 full_sweep_after。说任何 erlang GC 都不会停止世界,因此只会影响该进程上请求的延迟。
  • 我知道这可以在 erlang 中完成,但我想知道为什么这样做不受欢迎,这样做是否有任何负面影响。

标签: memory-management go garbage-collection erlang green-threads


【解决方案1】:

你的假设可能不正确。

如果设计得当不使用超过几(KB 或 MB)的内存

想象一个用于计算文本文件中的单词的函数,该函数用于 Web 应用程序。一些幼稚的实现可能是,

def count_words(text):
    words = text.split()
    count = {}
    for w in words:
        if w in count:
            count[w] += 1
        else:
            count[w] = 1
    return count

它分配比文本更大的内存。

【讨论】:

  • 大多数面向用户的网络应用程序通常接收请求,从数据库检索或写入数据库,返回响应并完成请求。该假设对于这样的应用程序是有效的,并且我上面建议的模型只会使延迟敏感的应用程序受益。我无法想象每个请求执行繁重处理的应用程序对延迟敏感,因此不会从这种模型中受益。
  • @SacheendraTalluri 这是真的。但是,拥有一个幼稚的标记和清除 gc 根本不会受到伤害。如果最大堆大小大于工作负载大小,则 gc 不会启动。否则,如果未提供 gc,则程序必须停止。
猜你喜欢
  • 1970-01-01
  • 1970-01-01
  • 2018-06-10
  • 1970-01-01
  • 2010-11-10
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
相关资源
最近更新 更多