【问题标题】:Inserting into table Postgres 9.4 vs 9.1插入表 Postgres 9.4 vs 9.1
【发布时间】:2015-06-29 22:32:13
【问题描述】:

我的团队正在考虑从 9.1 切换到 9.4,作为零件评估,我们想衡量 INSERT INTO TABLE ... 的改进程度,其中有 3-4 固定长度类型的列,例如 INT、@987654325 @。我们使用的是未批处理的INSERT,表格是logged 和not temporary。 fsync 设置为 on。

Q0:有没有理由认为9.4 会比9.1 更快?

例如基于改进的 WAL 性能:

https://momjian.us/main/writings/pgsql/features.pdf

显然,最好的答案是去检查我们的数据并进行实验,但让我们进行一些猜测。

Q1:是否有您知道的绩效评估?

Q2:INSERT 中有多少被WAL 占用?

服务器上的设置(从9.1 配置文件逐字复制)

#fsync = off
#synchronous_commit = on
#wal_sync_method = fsync
#full_page_writes = on
#wal_buffers = -1
#wal_writer_delay = 200ms

shared_buffers = 15GB
temp_buffers = 1024MB
work_mem = 1024MB

【问题讨论】:

  • 消除所有疑虑和意见:安装 9.4,构建几个测试模式,并测量性能。
  • @MikeSherrill'CatRecall' 完全同意,但重要的是要知道为什么会有改进,甚至在开始考虑切换到新版本之前。由于时间和其他限制,有足够的参数来调整和“搜索”以获得最佳配置有时在生产中是不可能的。

标签: postgresql postgresql-9.1 postgresql-9.4


【解决方案1】:

您提供的链接基于在Section E.2.3.1.2. General Performance 中找到的信息 - 顺便说一句,读起来很棒。根据您建议的测试,我预计不会有任何真正的性能差异,因为您不会利用并行或部分写入(关于 wal 文件)。也就是说,您将来可能会遇到这种情况。此外,9.4(好吧,实际上是 9.1 之后)提供了许多有用的工具和性能增强,在我看来,这证明了从 9.1 切换到 9.4 的合理性。例如,从 9.2 开始,JSON 现在是一种数据类型,可以进行仅索引扫描,并且内存中的排序提高了 25%。 9.3 引入了物化视图(在 9.4 中具有并发刷新)和可更新的“简单”(在 9.4 中定义略有扩展)视图。在 9.4 中,聚合得到了增强并定义了 ALTER SYSTEM(使用 SQL 命令更改配置设置的能力(进入最后读取的 postgresql.auto.config,确保它覆盖 postgresql.config 值)。

值得注意的是,默认日志记录也已更改。例如,在创建表时,您不会收到有关隐式索引和序列创建的消息(将日志级别设置为 DEBUG1 以进行修复 - 虽然当我从 9.1 切换到 9.3 时,特别是在讲座期间,但让我发疯了)。

关于问题 1,我会运行 TPC 基准测试(只有 C 和 VMS 不是免费的)。对于问题 2,这实际上取决于您的 wal 设置,但是根据我从您的配置文件中看到的内容,版本性能应该无关紧要。我还会在您的系统上运行 pgtune(下面的链接),以确保您的配置文件在测试之前尽可能优化。

与其他评论者一样,只需构建它,看看会发生什么。直接插入可能不会有太大差异(如果有的话),所以我会尝试大型多表连接、大量排序和大量事务模拟(例如,大量插入、更新和删除 - 只需使用 plpgsql简单)- TCP 查询也可以很好地进行性能测试。

链接:

要查找“新增功能”PostgreSQL wiki 页面,请将版本号添加到以下 URL 的末尾。

您可以在 pgtune.leopard.in.ua 找到 pgtune 的 GUI 版本;独立下载从 pgfoundry 被击中或错过,因为它似乎总是被关闭。

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 2015-08-29
    • 2015-10-13
    • 1970-01-01
    • 2012-06-12
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多