【问题标题】:Do Idle Snowflake Connections Use Cloud Services Credits?空闲雪花连接是否使用云服务积分?
【发布时间】:2021-01-19 23:23:58
【问题描述】:

动机 |假设有人想要对 Snowflake DB 执行两个 SQL 查询,相隔约 20 分钟。

优化问题 |这将花费更少的云服务积分:

  1. 重复使用一个连接,并允许该连接在此期间处于空闲状态。
  2. 每个查询连接一次。

documentation 表示身份验证会产生云服务信用使用,但不表示空闲连接是否会产生信用使用。

问题 |有谁知道空闲连接是否会导致云服务信用使用?

【问题讨论】:

    标签: connection snowflake-cloud-data-platform cloud-storage cost-management


    【解决方案1】:

    Snowflake 连接是无状态的。它们不占用资源,也不需要像其他数据库连接一样保持 TCP/IP 连接处于活动状态。

    因此,除非您启用“CLIENT_SESSION_KEEP_ALIVE”,否则空闲连接不会消耗任何云服务层积分。

    https://docs.snowflake.com/en/sql-reference/parameters.html#client-session-keep-alive

    当您设置 CLIENT_SESSION_KEEP_ALIVE 时,客户端将更新会话的令牌(默认值为 1 小时)。

    https://docs.snowflake.com/en/sql-reference/parameters.html#client-session-keep-alive-heartbeat-frequency

    正如 Peter 提到的,CSL 使用量高达每日仓库使用量的 10% 是免费的,因此在实践中刷新代币不会花费您任何费用。

    关于您的方法:我不知道您计划每天运行多少个查询,但为每个查询创建一个新连接可能会成为性能杀手。从成本的角度来看,空闲连接一天最多会执行 24 个授权请求,所以如果您计划一天运行超过 24 个查询,我建议您选择第一种方法。

    【讨论】:

    • 感谢您的详细回复!可悲的是,我使用的节点客户端版本不支持 CLIENT_SESSION_KEEP_ALIVE,甚至最新的节点客户端版本doesn't support http keep-alive 请求。但是,您关于雪花连接是无状态的观点非常非常有帮助!
    【解决方案2】:

    即使空闲连接在云服务方面没有任何成本,您的仓库是否在空闲连接上运行,因此需要考虑其他成本?我猜想总体上还有更多因素需要考虑,您可以与 Snowflake 客户团队讨论这些因素。不是想回避你的问题,而是想给出一个更健康的答案!

    一般而言,与您的其他成本相比,云服务成本通常较低。以下是云服务成本的主要驱动因素以及如何将其最小化:https://community.snowflake.com/s/article/Cloud-Services-Billing-Update-Understanding-and-Adjusting-Usage

    您可能会得到的最佳建议是测试您的连接/工作流程并比较一段时间内的成本。总成本将取决于几个因素。即使两个工作流程之间的成本存在差异,您仍可能需要分析成本/产出比,您的业务需要确定是否值得节省。

    【讨论】:

    • 感谢您的回复!在我的上下文中假设仓库始终在运行是合理的(因此那里没有隐藏成本)。事实上,我确实阅读了该计费明细,但该文档并未对空闲连接发表评论。我同意,最好的建议可能是“只是描述它”。 :)
    【解决方案3】:

    方法 1 会减少云服务的使用,但会产生更多的数据传输费用(以保持连接有效)。只有 Auth 事件会导致使用云服务。

    方法 2 会产生更多的云服务使用量,但会产生更少的数据传输费用。

    但是,无论哪种情况,云服务使用量或数据传输费用都非常少。

    注意 - 使用的任何云服务(最多 10% 的每日仓库使用量)都是免费的,而没有免费的带宽分配,因此使用 #2 可能会为您节省几分钱。

    【讨论】:

    • 空闲连接不产生云服务费用的来源是什么?
    猜你喜欢
    • 1970-01-01
    • 2021-12-02
    • 2021-07-22
    • 1970-01-01
    • 2023-03-22
    • 2023-04-09
    • 1970-01-01
    • 2019-06-18
    • 2012-10-25
    相关资源
    最近更新 更多