AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / user-159212

Paul's questions

Martin Hope
Paul
Asked: 2023-06-08 18:09:11 +0800 CST

链接服务器和应用程序意图

  • 5

我试图提高我们在本地服务器上的一组视图的性能,从远程 Azure 数据库上的另一组视图中提取数据。

我们的系统提供商建议我们使用,但是如果设置了只读ApplicationIntent=ReadOnly,我们可以通过使用远程服务器上的空间来创建临时表来进一步优化这些查询吗?tempdb

我读了这个答案,它确实有一点帮助,但希望能得到任何直接的答案。

请注意,我不是 DBA,所以我的知识非常有限。提前致谢。

整个过程结合了 SSIS 和本地 SQL Server 上的多个视图,从源头的各种视图中提取数据以尝试和优化提要。

过程如下...

  1. 清除旧数据,从保留表中删除临时信息。
  2. 本地化来自源服务器的密钥列表...
INSERT INTO Source.ResourceCapture (VisitNumber) 
SELECT DISTINCT src.VISIT_NUMBER
FROM   [SOURCE.DATABASE.WINDOWS.NET].[Database].[dbo].[Composition_Questionaire] src
WHERE  src.Composition_Date >= GETDATE()-2 AND 
       src.Document_Title = 'Discharge Summary' AND 
       src.Status = 'final'
  1. 使用一组查询本地化其余数据(包含要传递的信息的主体)。INSERT由于所需的处理量,最终语句失败了。Azure 返回一个错误,指示我们资源不足。
INSERT INTO [Source].[Composition_Questionaire] (
    [Resource_ID],[RTR_ID],[Visit_Number],[Status],[Composition_Date],[Composition_Time],
    [Document_Title],[Document_Description],[Component_Title],[Component_Description],
    [Finalised_By],[Component],[Question],[Response],[Instance],[Row_No],[Col_No])
SELECT 
    [Resource_ID],[RTR_ID],[Visit_Number],[Status],[Composition_Date],[Composition_Time],
    [Document_Title],[Document_Description],[Component_Title],[Component_Description],
    [Finalised_By],[Component],[Question],[Response],[Instance],[Row_No],[Col_No]
FROM 
    [SOURCE.DATABASE.WINDOWS.NET].[Database].[dbo].[Composition_Questionaire] src 
WHERE 
    DOCUMENT_TITLE = 'Discharge Summary' AND 
    VISIT_NUMBER COLLATE SQL_Latin1_General_CP1_CI_AS IN (SELECT VisitNumber FROM Source.ResourceCapture) 

注意:是的——我确实知道使用 aJOIN而不是进行优化的问题IN,但我已经测试了这两种方法,并且该过程在 10 分钟后仍然失败。我也尝试过将供应商端的排序规则调整为我们的排序规则(即在条款内IN),但没有成功。

  1. 从技术上讲,第 3 步之后的所有内容都是无关紧要的,因为它在本地盒子上都可以正常工作。
  2. 资源键(基本上是唯一标识符)在本地数据库中创建,以在目标表中提供特定值。
INSERT INTO Core.KeyMap (ResourceID, MaxDateTime) 
SELECT      Resource_ID, MaxDateTime = MAX(CONVERT(DATETIME, Composition_Date) + CONVERT(DATETIME, Composition_Time)) 
FROM        Source.Composition_Questionaire 
WHERE       Resource_ID NOT IN (SELECT ResourceID FROM Core.KeyMap) AND 
            [Status] = 'final'
GROUP BY    Resource_ID
  1. 重建资源表,删除任何无关信息。
  2. 为主表构建最终数据。
  3. 从其他服务导入数据以生成人口统计信息。
  4. 将目标系统中的密钥映射到步骤 6 中创建的资源密钥。
  5. 将传输的数据标记为完整。

整个过程运行良好,最初,将信息从 Azure 服务器传输到我们自己的服务器所花费的时间最长。

sql-server
  • 2 个回答
  • 47 Views
Martin Hope
Paul
Asked: 2021-03-31 01:21:38 +0800 CST

SSIS 的注释

  • 2

如果这是一个不适合这个论坛的问题,请原谅我(作为 DBA 和所有人,我认为它可能适合)。

我有一个最近升级并从 BIDS 转移到 VS 2019 的 SSIS 包。

创建和编写注释是一个非常简单的过程,但是,流程图上有许多注释需要编辑,但我根本找不到执行此操作的选项。有谁知道一种方法,可以实际编辑 XML (dtsx) 文件并手动使用文本编辑器?

澄清...

作为一个时髦的开发人员并在我的 VS 安装中使用了一个黑暗的方案,这都是我的错!事实证明,您看不到光标,因为它是黑底黑字。

感谢下面的 billinkc 指出我的愚蠢!

sql-server ssis
  • 1 个回答
  • 156 Views

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    连接到 PostgreSQL 服务器:致命:主机没有 pg_hba.conf 条目

    • 12 个回答
  • Marko Smith

    如何让sqlplus的输出出现在一行中?

    • 3 个回答
  • Marko Smith

    选择具有最大日期或最晚日期的日期

    • 3 个回答
  • Marko Smith

    如何列出 PostgreSQL 中的所有模式?

    • 4 个回答
  • Marko Smith

    列出指定表的所有列

    • 5 个回答
  • Marko Smith

    如何在不修改我自己的 tnsnames.ora 的情况下使用 sqlplus 连接到位于另一台主机上的 Oracle 数据库

    • 4 个回答
  • Marko Smith

    你如何mysqldump特定的表?

    • 4 个回答
  • Marko Smith

    使用 psql 列出数据库权限

    • 10 个回答
  • Marko Smith

    如何从 PostgreSQL 中的选择查询中将值插入表中?

    • 4 个回答
  • Marko Smith

    如何使用 psql 列出所有数据库和表?

    • 7 个回答
  • Martin Hope
    Jin 连接到 PostgreSQL 服务器:致命:主机没有 pg_hba.conf 条目 2014-12-02 02:54:58 +0800 CST
  • Martin Hope
    Stéphane 如何列出 PostgreSQL 中的所有模式? 2013-04-16 11:19:16 +0800 CST
  • Martin Hope
    Mike Walsh 为什么事务日志不断增长或空间不足? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland 列出指定表的所有列 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney MySQL 能否合理地对数十亿行执行查询? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx 如何监控大型 .sql 文件的导入进度? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison 你如何mysqldump特定的表? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 对 SQL 查询进行计时? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas 如何从 PostgreSQL 中的选择查询中将值插入表中? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 列出所有数据库和表? 2011-02-18 00:45:49 +0800 CST

热门标签

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve