【问题标题】:How to Access RDD Tables via Spark SQL as a SnowFlake datawarehouse JDBC Distributed Query Engine?如何通过 Spark SQL 作为 SnowFlake 数据仓库 JDBC 分布式查询引擎访问 RDD 表?
【发布时间】:2023-04-10 00:24:01
【问题描述】:

您好,我想从雪花数据库中查询我的临时数据库表。

类似like How to Access RDD Tables via Spark SQL as a JDBC Distributed Query Engine?

有什么方法可以从运行在 AWS 上的雪花数据库做到这一点?

【问题讨论】:

    标签: amazon-web-services apache-spark apache-spark-sql snowflake-cloud-data-platform


    【解决方案1】:

    只是为了确认一下 - 您希望 Snowflake 查询由 Spark 创建的 RDD?

    无法从 Snowflake 连接到 Spark,也无法从 Snowflake 查询 Spark RDD 但是您可以从 Spark 连接到 Snowflake,将 RDD 复制到 Snowflake,然后从 Spark 查询它(例如使用 Utils.runQuery() 或直接从 Snowflake 查询。

    更多信息和例子,在Snowflake documentation

    附:雪花是一个词:)

    【讨论】:

    • 更正了我的话。只是想确认这种功能是否存在。现在我明白了。
    猜你喜欢
    • 2015-10-08
    • 2015-01-22
    • 2019-09-27
    • 2016-02-15
    • 2015-08-08
    • 2020-02-21
    • 1970-01-01
    • 1970-01-01
    • 2017-01-22
    相关资源
    最近更新 更多