AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / dba / 问题 / 3076
Accepted
David
David
Asked: 2011-06-01 10:49:38 +0800 CST2011-06-01 10:49:38 +0800 CST 2011-06-01 10:49:38 +0800 CST

我应该期望在高性能计算机上以多快的速度加载数据?

  • 772

我正在考虑使用 PostgreSQL COPY 将数据从文件复制到表中的模型。我想知道在高端硬件上可以期待什么样的性能。以 MB/s 为单位的间隔会很好,所以我可以开始估算。如果您只知道其他数据库上的答案,我很乐意进行比较。

postgresql performance
  • 2 2 个回答
  • 1556 Views

2 个回答

  • Voted
  1. Best Answer
    ik_zelf
    2011-06-01T11:46:23+08:002011-06-01T11:46:23+08:00

    这个有点难说,什么是高端硬件?

    在 EMC 存储 60MB/s 上使用 Oracle 肯定是可能的。在 exadata 上使用相同的旧 Oracle 可能会稍快一些,达到 300MB/s,有时甚至更高,具体取决于配置。全机架比半机架快...

    • 3
  2. Sean
    2011-06-01T12:28:50+08:002011-06-01T12:28:50+08:00

    @David,您几乎肯定会在您的数据库服务器上受到 IO 限制,但需要注意以下(通常理解的)警告:

    1. 如果您的目标COPY使用FUNCTIONs 或TRIGGERs 或FOREIGN KEYs,预计性能会降低
    2. 如果你已经INDEX在你的数据之前创建了 es COPY,数据将被添加到 es 中INDEX,这会减慢速度。

    COPY将数据加载到 PostgreSQL的最快方法是通过COPYin 到一个没有INDEXes 和 has的表fsync = off,并且checkpoint_segments = 50(或至少一些不是默认值 3 的值) in postgresql.conf。我更喜欢以下策略:

    1. BEGIN
    2. `DROP INDEX my_tbl_idx;
    3. COPY...
    4. CREATE INDEXmy_tbl_idx 开启 my_tbl
    5. COMMIT
    6. ANALYZE my_tbl

    ANALYZE我在之后明确添加了,COMMIT因为我通常不想等待pg_autovacuum开始。

    • 1

相关问题

  • PostgreSQL 中 UniProt 的生物序列

  • 如何确定是否需要或需要索引

  • 我在哪里可以找到mysql慢日志?

  • 如何优化大型数据库的 mysqldump?

  • PostgreSQL 9.0 Replication 和 Slony-I 有什么区别?

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    你如何mysqldump特定的表?

    • 4 个回答
  • Marko Smith

    您如何显示在 Oracle 数据库上执行的 SQL?

    • 2 个回答
  • Marko Smith

    如何选择每组的第一行?

    • 6 个回答
  • Marko Smith

    使用 psql 列出数据库权限

    • 10 个回答
  • Marko Smith

    我可以查看在 SQL Server 数据库上运行的历史查询吗?

    • 6 个回答
  • Marko Smith

    如何在 PostgreSQL 中使用 currval() 来获取最后插入的 id?

    • 10 个回答
  • Marko Smith

    如何在 Mac OS X 上运行 psql?

    • 11 个回答
  • Marko Smith

    如何从 PostgreSQL 中的选择查询中将值插入表中?

    • 4 个回答
  • Marko Smith

    如何使用 psql 列出所有数据库和表?

    • 7 个回答
  • Marko Smith

    将数组参数传递给存储过程

    • 12 个回答
  • Martin Hope
    Manuel Leduc PostgreSQL 多列唯一约束和 NULL 值 2011-12-28 01:10:21 +0800 CST
  • Martin Hope
    markdorison 你如何mysqldump特定的表? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Stuart Blackler 什么时候应该将主键声明为非聚集的? 2011-11-11 13:31:59 +0800 CST
  • Martin Hope
    pedrosanta 使用 psql 列出数据库权限 2011-08-04 11:01:21 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 对 SQL 查询进行计时? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas 如何从 PostgreSQL 中的选择查询中将值插入表中? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 列出所有数据库和表? 2011-02-18 00:45:49 +0800 CST
  • Martin Hope
    BrunoLM Guid vs INT - 哪个更好作为主键? 2011-01-05 23:46:34 +0800 CST
  • Martin Hope
    bernd_k 什么时候应该使用唯一约束而不是唯一索引? 2011-01-05 02:32:27 +0800 CST
  • Martin Hope
    Patrick 如何优化大型数据库的 mysqldump? 2011-01-04 13:13:48 +0800 CST

热门标签

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve