AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / dba / 问题 / 303151
Accepted
Jacob
Jacob
Asked: 2021-11-26 08:42:42 +0800 CST2021-11-26 08:42:42 +0800 CST 2021-11-26 08:42:42 +0800 CST

容器和 kubernetes 的 Postgresql RAM 优化

  • 772

我想知道如何优化部署在 Kubernetes 中的 PostgreSQL 数据库的 RAM 使用率。

特别是我对配置shared_buffers和effective_cache_size值感兴趣。

通常,各种来源提出的建议是使用:

  • 如果您的系统具有 1GB 或更多 RAM,shared_buffers 的合理起始值是系统内存的 1/4。如果您的 RAM 较少,则必须更仔细地考虑操作系统占用了多少 RAM;那里更典型的是接近 15%。在某些工作负载中,更大的 shared_buffers 设置也很有效,但考虑到 PostgreSQL 也依赖于操作系统缓存的方式,您不太可能会发现使用超过 40% 的 RAM 比使用更小的 RAM 更好。(PostgreSQL 网站)

  • 该值应设置为机器总 RAM 的 15% 到 25%(EDB 网站)

  • 不超过 50% 的可用 RAM(EDB PostgreSQL 调优)

由于容器通过设计使用更少的背景 RAM,因此设置 shared_buffers 值的好建议是什么?

现在该值设置为 25%(1GB 的 4GB 总容器限制),我注意到它很快就被填满了。

postgresql docker
  • 1 1 个回答
  • 1337 Views

1 个回答

  • Voted
  1. Best Answer
    Vorsprung
    2021-11-27T02:18:43+08:002021-11-27T02:18:43+08:00

    shared_buffers 与有效缓存大小

    在 postgresql 调优中,这两个数字代表:

    • shared_buffers "有多少内存专用于 PostgreSQL 用于缓存数据"
    • Effective_cache_size “操作系统和数据库本身有多少内存可用于磁盘缓存”

    因此,如果有很多 shared_buffers,缓存的重复查询将“更好”工作。但是如果有更多的 Effective_cache_size,从数据库底层的磁盘读取表会“更好”

    如果工作负载如此多变且不重复,以至于需要重复磁盘读取,则 Effective_cache_size 越高越好。如果一个小集合中有很多相同的查询,那么更多的 shared_buffers 会更好

    值得记住的是,在正常工作的 Linux 系统上,系统将抓取任何“空闲”内存用于磁盘缓存,因为可能会发生意外读取,如果他们这样做,否则未使用的内存可能会加速它们

    如何确定最佳设置

    值得一提的是,最常用的“方法”是不关心和过度配置所使用的内存。硬件很便宜,而正确解决它的时间很昂贵。那说..

    有两种方法

    1. 在 prod 中运行应用程序并监控内存压力
    2. 设计一个测试来找出内存使用的限制

    要监控 prod 中的内存,通常使用第三方软件包(如 cAdvisor 或 Prometheus)来完成

    查看图表并将它们与您的传入请求进行比较。如果明显有很大的余量,则增加参数,看看这是否有助于系统效率。

    对于测试,基本上你做同样的事情,但使用人工测试工作负载

    为了计算出最好的内存大小,有像 senpai这样的自动化工具。基本上,他们将在各种内存设置下重复运行测试工作负载,直到它停止

    • 2

相关问题

  • 我可以在使用数据库后激活 PITR 吗?

  • 运行时间偏移延迟复制的最佳实践

  • 存储过程可以防止 SQL 注入吗?

  • PostgreSQL 中 UniProt 的生物序列

  • PostgreSQL 9.0 Replication 和 Slony-I 有什么区别?

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    连接到 PostgreSQL 服务器:致命:主机没有 pg_hba.conf 条目

    • 12 个回答
  • Marko Smith

    如何让sqlplus的输出出现在一行中?

    • 3 个回答
  • Marko Smith

    选择具有最大日期或最晚日期的日期

    • 3 个回答
  • Marko Smith

    如何列出 PostgreSQL 中的所有模式?

    • 4 个回答
  • Marko Smith

    列出指定表的所有列

    • 5 个回答
  • Marko Smith

    如何在不修改我自己的 tnsnames.ora 的情况下使用 sqlplus 连接到位于另一台主机上的 Oracle 数据库

    • 4 个回答
  • Marko Smith

    你如何mysqldump特定的表?

    • 4 个回答
  • Marko Smith

    使用 psql 列出数据库权限

    • 10 个回答
  • Marko Smith

    如何从 PostgreSQL 中的选择查询中将值插入表中?

    • 4 个回答
  • Marko Smith

    如何使用 psql 列出所有数据库和表?

    • 7 个回答
  • Martin Hope
    Jin 连接到 PostgreSQL 服务器:致命:主机没有 pg_hba.conf 条目 2014-12-02 02:54:58 +0800 CST
  • Martin Hope
    Stéphane 如何列出 PostgreSQL 中的所有模式? 2013-04-16 11:19:16 +0800 CST
  • Martin Hope
    Mike Walsh 为什么事务日志不断增长或空间不足? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland 列出指定表的所有列 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney MySQL 能否合理地对数十亿行执行查询? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx 如何监控大型 .sql 文件的导入进度? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison 你如何mysqldump特定的表? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 对 SQL 查询进行计时? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas 如何从 PostgreSQL 中的选择查询中将值插入表中? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 列出所有数据库和表? 2011-02-18 00:45:49 +0800 CST

热门标签

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve