AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / dba / 问题 / 281714
Accepted
G.T.
G.T.
Asked: 2020-12-18 00:41:12 +0800 CST2020-12-18 00:41:12 +0800 CST 2020-12-18 00:41:12 +0800 CST

宏观经济时间序列数据库

  • 772

我决定改善我的幸福感,如果成功的话,请写下关于此的注释并免费与我的同龄人分享,并尝试帮助他们改善幸福感。但在这条道路上,我需要数据库从业者的基本建议。

背景说明:

在我的研究中,我需要收集许多不同类型的时间序列(GDP、实际 GDP、名义 GDP、消费、投资、人均 GDP、工作小时数、单位劳动力成本等等)。现在,我正在关注并收集大约 155 个时间序列。到目前为止,我一直在统计网页上发布更新后立即手动更新它们。我一直在使用 Excel 电子表格执行此操作(例如,下载新的 excel,然后将必要的数据点复制并粘贴到我的 excel 中)。然而,这是一项非常艰巨的任务,而且容易出错。检查并发现错误是另一个噩梦。因此,总的来说,维护这个 Excel 数据库(更新检查和记录)大约需要每周大约 10-12 小时。

我的任务:

  1. 我想创建一个数据库,我将在其中存储所有这些和更多变量(我希望每个变量都有一个名称、描述、源描述(最好包含 URL)、上次更新日期等)。
  2. 我还希望能够从下载的 Excel 或 CSV 文件自动更新数据库(这些文件以不同的格式来自各种网页。有些是垂直结构,有些是水平结构)。
  3. 我还想要一些错误检查器,以便更轻松地调试基础。
  4. 该系列具有不同的频率(有些是每天,有些是每周,有些是每月,有些是每季度,还有一些是每年)。我希望能够使用我自己预先确定的公式轻松地从每日转换为每月或从每月转换为每季度,反之亦然。(无论是平均值还是中值或当前任务需要的任何值)
  5. 我还希望以后能够轻松地查询任何变量或多个变量,并在 MATLAB、Python 或 Julia 等各种程序中创建仪表板,以可视化动态并将它们用于这些程序中的回归或模型估计。

问题

对于上述所有任务,您会推荐哪个数据库管理程序(理想情况下,最好是免费和开源的)

PS 我尝试编写 MATLAB 脚本进行自动更新,但是非常不方便。

PPS 这是来自Cross Validated的交叉帖子,希望能在某处得到答案。

谢谢,乔治。

作为我的数据集外观的示例,请参见以下屏幕截图:

在此处输入图像描述

database-design time-series-database
  • 1 1 个回答
  • 52 Views

1 个回答

  • Voted
  1. Best Answer
    J.D.
    2020-12-18T04:11:46+08:002020-12-18T04:11:46+08:00

    您的根本问题是主观的,如果没有一些示例,很难完全想象您的数据是什么样子,但听起来关系数据库管理系统 (RDBMS) 可以根据您将要执行的查询类型为您工作。

    如果你只想要 PostgreSQL 以外的免费东西。如果您想要开箱即用的内置功能最多的东西,并且可以支付,那么 Microsoft SQL Server。两者都可以容纳您的数据,具有可以保存查询(预定公式)以进行转换的视图(和其他类型的对象),并且如果需要也支持从 CSV 和其他文件导入数据(尽管我建议您尽可能多地这样做)通过 Python 等非数据库语言收集数据并导入数据库)。

    这些数据库中的任何一个也将支持您创建仪表板和其他临时查询的额外要求。

    • 2

相关问题

  • 过滤索引是否有助于改进基于输入时间的查询,还是应该避免这种情况?

  • MySQL VARCHAR 和 TEXT 数据类型有什么区别?

  • 存储计算值或根据要求重新计算它们更好吗?[复制]

  • 存储与计算聚合值

  • 在数据仓库中实现多对多关系有哪些方法?

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    连接到 PostgreSQL 服务器:致命:主机没有 pg_hba.conf 条目

    • 12 个回答
  • Marko Smith

    如何让sqlplus的输出出现在一行中?

    • 3 个回答
  • Marko Smith

    选择具有最大日期或最晚日期的日期

    • 3 个回答
  • Marko Smith

    如何列出 PostgreSQL 中的所有模式?

    • 4 个回答
  • Marko Smith

    列出指定表的所有列

    • 5 个回答
  • Marko Smith

    如何在不修改我自己的 tnsnames.ora 的情况下使用 sqlplus 连接到位于另一台主机上的 Oracle 数据库

    • 4 个回答
  • Marko Smith

    你如何mysqldump特定的表?

    • 4 个回答
  • Marko Smith

    使用 psql 列出数据库权限

    • 10 个回答
  • Marko Smith

    如何从 PostgreSQL 中的选择查询中将值插入表中?

    • 4 个回答
  • Marko Smith

    如何使用 psql 列出所有数据库和表?

    • 7 个回答
  • Martin Hope
    Jin 连接到 PostgreSQL 服务器:致命:主机没有 pg_hba.conf 条目 2014-12-02 02:54:58 +0800 CST
  • Martin Hope
    Stéphane 如何列出 PostgreSQL 中的所有模式? 2013-04-16 11:19:16 +0800 CST
  • Martin Hope
    Mike Walsh 为什么事务日志不断增长或空间不足? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland 列出指定表的所有列 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney MySQL 能否合理地对数十亿行执行查询? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx 如何监控大型 .sql 文件的导入进度? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison 你如何mysqldump特定的表? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 对 SQL 查询进行计时? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas 如何从 PostgreSQL 中的选择查询中将值插入表中? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 列出所有数据库和表? 2011-02-18 00:45:49 +0800 CST

热门标签

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve