AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / dba / 问题 / 260398
Accepted
brad
brad
Asked: 2020-02-24 16:15:17 +0800 CST2020-02-24 16:15:17 +0800 CST 2020-02-24 16:15:17 +0800 CST

客户端数据集成的替代方法(Azure SQL 数据库)

  • 772

我有一个应用程序每天/每周将来自客户端的数据(两个不同的数据集,一个每天和另一个每周)摄取到 SQL Azure 数据库中。客户的数据源取决于他们使用的软件,因此可能因客户而异。我目前有两种集成方法,具体取决于客户端:

  1. 使用 Azure 数据工厂和自托管集成运行时。在这种方法中,客户需要(在他们的网络内)提供一个我在其中设置集成运行时的 VM,以及一个只有两个表的 SQL Server 数据库,他们根据需要在其中转储两个数据集。在 ADF 中,我创建管道以将数据直接从其 SQL Server 提取到我的 Azure SQL 数据库中,然后运行必要的导入过程。
  2. 使用 Azure 数据工厂和 BLOB 存储。在这种方法中,我为客户端提供了一组按计划运行的 Powershell 脚本(Windows 任务计划程序),帮助他们将导出的文件 (.CSV) 复制到我们的 BLOB 存储中。然后,ADF 管道从 BLOB 存储复制到 Azure SQL Db,然后运行必要的导入过程。

第一种方法要简单得多,但就客户端的基础架构而言,设置一个几乎空白的 Windows VM 和一个只有几个数据转储表的数据库似乎有点矫枉过正。显然,如果客户自己是云托管的,这可能会很昂贵——启动一个新的虚拟机并不便宜,所以可能会让他们在使用我们的产品时三思而后行。

第二种方法需要我为每个客户端设置一个存储容器,我觉得随着我们的扩展,这可能会使管理变得困难。此外,提供与 Windows 任务计划程序一起运行的脚本并不会让人觉得过于优雅。

有人对这种情况有任何替代解决方案吗?还是我走在正确的轨道上?

任何见解将不胜感激。谢谢。

azure-sql-database integration
  • 1 1 个回答
  • 102 Views

1 个回答

  • Voted
  1. Best Answer
    brad
    2020-08-31T21:20:55+08:002020-08-31T21:20:55+08:00

    更新:没有找到更好的解决方案。

    • 0

相关问题

  • 使用限制和偏移的单选与多选

  • 是否可以在 SQL Azure 中创建数百个数据库而不是一个大数据库并冒死锁的风险

  • 在 SQL Azure 中实现加密表

  • 将服务器链接到 SQL Azure 非常慢

  • 如何更改 SQL Azure 上的现有主键?

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    连接到 PostgreSQL 服务器:致命:主机没有 pg_hba.conf 条目

    • 12 个回答
  • Marko Smith

    如何让sqlplus的输出出现在一行中?

    • 3 个回答
  • Marko Smith

    选择具有最大日期或最晚日期的日期

    • 3 个回答
  • Marko Smith

    如何列出 PostgreSQL 中的所有模式?

    • 4 个回答
  • Marko Smith

    列出指定表的所有列

    • 5 个回答
  • Marko Smith

    如何在不修改我自己的 tnsnames.ora 的情况下使用 sqlplus 连接到位于另一台主机上的 Oracle 数据库

    • 4 个回答
  • Marko Smith

    你如何mysqldump特定的表?

    • 4 个回答
  • Marko Smith

    使用 psql 列出数据库权限

    • 10 个回答
  • Marko Smith

    如何从 PostgreSQL 中的选择查询中将值插入表中?

    • 4 个回答
  • Marko Smith

    如何使用 psql 列出所有数据库和表?

    • 7 个回答
  • Martin Hope
    Jin 连接到 PostgreSQL 服务器:致命:主机没有 pg_hba.conf 条目 2014-12-02 02:54:58 +0800 CST
  • Martin Hope
    Stéphane 如何列出 PostgreSQL 中的所有模式? 2013-04-16 11:19:16 +0800 CST
  • Martin Hope
    Mike Walsh 为什么事务日志不断增长或空间不足? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland 列出指定表的所有列 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney MySQL 能否合理地对数十亿行执行查询? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx 如何监控大型 .sql 文件的导入进度? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison 你如何mysqldump特定的表? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 对 SQL 查询进行计时? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas 如何从 PostgreSQL 中的选择查询中将值插入表中? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 列出所有数据库和表? 2011-02-18 00:45:49 +0800 CST

热门标签

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve