AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / user-922

Aaronaught's questions

Martin Hope
Aaronaught
Asked: 2011-10-27 15:48:37 +0800 CST

OracleBulkCopy 具体做什么,如何优化其性能?

  • 14

总结一下细节:我们需要将大约 500 万行暂存到供应商 (Oracle) 数据库中。使用 (ODP.NET) 批量处理 500k 行时,一切都很好OracleBulkCopy,但是当我们尝试扩展到 5M 时,性能一旦达到 1M 标记就会开始缓慢爬行,随着更多行的加载而逐渐变慢,最终3小时左右后超时。

我怀疑它与桌子上的主键有关,但我一直在搜索 Oracle 论坛和 Stack Overflow 以获取信息,而且我正在阅读的很多内容都与此相矛盾(而且,很多帖子似乎相互矛盾) . 我希望有人可以直接记录有关该过程的一些密切相关的问题:

  1. 该类是否OracleBulkCopy使用常规或直接路径加载?有什么方法可以证实这一点,一种或另一种?

  2. 假设它确实使用直接路径加载:Oracle 是否会在加载期间自动将所有索引设置为不可用并在之后将它们重新联机?我已经阅读了几篇关于此的声明,但再次无法确认。

  3. 如果 #2 为真,那么在我启动大容量复制操作之前,表上的索引是否应该有所不同?如果是这样,为什么?

  4. 与#3相关,一般来说,在使用不可用索引的批量加载与在加载之前实际删除索引并在之后重新创建索引之间是否有任何实际区别?

  5. 如果 #2不正确,或者如果有一些我不理解的警告,那么在批量加载之前显式使索引不可用,然后 显式重建它会有什么不同吗?

  6. 随着越来越多的记录被添加,除了索引构建之外,还有什么其他可能导致批量复制操作逐渐变慢的吗?(也许与日志记录有关,尽管我希望不会记录批量操作?)

  7. 如果除了首先删除 PK/index 之外真的没有其他方法可以让性能达到最佳状态,我可以采取哪些步骤来确保索引不会完全消失,即如果与数据库的连接丢失过程的中间?

oracle bulk
  • 2 个回答
  • 13066 Views

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    连接到 PostgreSQL 服务器:致命:主机没有 pg_hba.conf 条目

    • 12 个回答
  • Marko Smith

    如何让sqlplus的输出出现在一行中?

    • 3 个回答
  • Marko Smith

    选择具有最大日期或最晚日期的日期

    • 3 个回答
  • Marko Smith

    如何列出 PostgreSQL 中的所有模式?

    • 4 个回答
  • Marko Smith

    列出指定表的所有列

    • 5 个回答
  • Marko Smith

    如何在不修改我自己的 tnsnames.ora 的情况下使用 sqlplus 连接到位于另一台主机上的 Oracle 数据库

    • 4 个回答
  • Marko Smith

    你如何mysqldump特定的表?

    • 4 个回答
  • Marko Smith

    使用 psql 列出数据库权限

    • 10 个回答
  • Marko Smith

    如何从 PostgreSQL 中的选择查询中将值插入表中?

    • 4 个回答
  • Marko Smith

    如何使用 psql 列出所有数据库和表?

    • 7 个回答
  • Martin Hope
    Jin 连接到 PostgreSQL 服务器:致命:主机没有 pg_hba.conf 条目 2014-12-02 02:54:58 +0800 CST
  • Martin Hope
    Stéphane 如何列出 PostgreSQL 中的所有模式? 2013-04-16 11:19:16 +0800 CST
  • Martin Hope
    Mike Walsh 为什么事务日志不断增长或空间不足? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland 列出指定表的所有列 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney MySQL 能否合理地对数十亿行执行查询? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx 如何监控大型 .sql 文件的导入进度? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison 你如何mysqldump特定的表? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 对 SQL 查询进行计时? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas 如何从 PostgreSQL 中的选择查询中将值插入表中? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 列出所有数据库和表? 2011-02-18 00:45:49 +0800 CST

热门标签

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve