AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / dba / 问题

问题[select](dba)

Martin Hope
Brunaldo
Asked: 2024-02-15 03:45:44 +0800 CST

在 CockroachDB 中的表之间移动记录花费的时间太长

  • 6

我有一个要求,必须将过去 N 天的记录从一个表移动original_table到另一个表。new_table

下面是我执行此操作的基本脚本的一个小示例。

while True:

    result = INSERT INTO new_table (SELECT * FROM original_table WHERE (crdb_internal_expiration > (current_timestamp() + INTERVAL 'X days')) ORDER BY (unique_id) DESC LIMIT batch_limit OFFSET starting_point);

    if result.rowcount < batch_size:
        break
    offset += batch_size

问题是我们必须及时在表之间移动记录,目前移动 LIMIT 为 10_000 的记录每次大约需要 30 秒。假设过去 2 天我们有大约 200 万条记录,我们希望限制停机时间。

我们这样做的原因是因为我们需要在表中使用列族,但 cockroachdb 不允许我们更改现有表来添加新的列族(如果它还没有)。

有什么方法可以优化这个查询,使其运行得更快吗?也许不使用OFFSET并跟踪记录id 会更快?

AND id > last_processed_id
ORDER BY id DESC
LIMIT 100;

cockroachdb 版本为 23

select
  • 1 个回答
  • 30 Views
Martin Hope
user1508072
Asked: 2023-12-22 14:53:29 +0800 CST

从事务的角度来看,提交是否同时发生?

  • 6

假设存在“Bank_Account”表并包含单个列“余额”,其中每个人的余额=100。

如果交易执行“update Bank_Account set Balance = 200 where 1=1; commit;” 是否有可能任意 2 个事务在 Bank_Account 表上执行选择,其中一个事务读取 200,另一个事务读取不同银行帐户的 100?

或者,一旦给定银行帐户返回 200,所有其他帐户也必然返回 200,因为提交是原子的?

我的数据库直觉是,一旦一个人读取 200,所有其他人都必须读取 200,因为事务是原子的,但我还了解到某些选择可以在不锁定表或行的情况下执行,并在事务开始时返回数据快照,即使假设读已提交隔离级别。

如果是这样的话,数据库如何在没有锁的情况下实现这种行为呢?提交和选择执行了什么魔法来确保选择同时对提交的原子行为进行操作?

谢谢

select
  • 1 个回答
  • 37 Views
Martin Hope
sunShine
Asked: 2023-01-31 01:02:05 +0800 CST

如何在 SQL (Firebird) 中获取下周的日期?

  • 7

我想使用 SQL 语句获取日期。例如,如果日期为“2018-08-07”,输出应返回:“2018-08-14”(一周后)。然后我将获取这些日期之间的总行数。

SELECT count(*) FROM orders  WHERE dates BETWEEN '2018-08-07'  AND 
DATEADD(day,7,'2018-08-07');

但是,由于 dateadd() 函数,我收到此错误:

SQL Error [335544634] [42000]: Dynamic SQL Error; SQL error code = -104; Token unknown - line 1, column 1; DATEADD [SQLState:42000, ISC error code:335544634]
select
  • 1 个回答
  • 126 Views
Martin Hope
n34_panda
Asked: 2022-09-05 02:25:15 +0800 CST

Mysql如何帮助清理数据,特别是如果包含文本删除

  • 0

我有一个专栏:

尺寸
75cl
70im
7im
30cm
30爬升

我需要将文本转换为数字,但有条件:

尺寸
75cl
70
7
30
30cl

如果大小列包含“im”,那么我只想返回数字。

我试图写一些查询,如:

SELECT DISTINCT(LTRIM(RTRIM(size))) from tbl_size;

要确定我需要清理多少行,但我有点坚持有条件地显示行:

SELECT CASE WHEN size = '70im' THEN '70' etc

但是我有 3,000 个不同的值要适应,我对最好的方法有点坚持。
任何建议表示赞赏,我正在使用 MySQL。

mysql select
  • 2 个回答
  • 43 Views
Martin Hope
Sahasrar
Asked: 2022-08-20 10:43:37 +0800 CST

如何编写查询以选择同一日期的最大值

  • -1

请帮我为 MySQL 编写这个查询。我想从同一日期时间中选择最高值。因此,如果有多个相等的日期时间值,则只返回价格最高的一行。总而言之,每个时间戳一行,价格最高。

+------+---------------+--------------+---------+---------+---------------------+
|  id  | source_curr   | dest_curr    |  price  | act     |   timestamp         |
+------+---------------+--------------+---------+---------+---------------------+
|  164 | EUR           | USD          | 0.99332 | bids    | 2022-07-18 20:52:38 |
|  769 | EUR           | USD          | 0.99125 | bids    | 2022-07-18 20:52:38 |
| 1370 | EUR           | USD          | 0.99332 | bids    | 2022-07-18 20:52:38 |
|  568 | EUR           | USD          | 0.99322 | bids    | 2022-07-18 20:52:38 |
| 1572 | EUR           | USD          | 0.96335 | bids    | 2022-07-18 20:52:38 |
| 1771 | EUR           | USD          | 0.99432 | bids    | 2022-07-18 20:52:38 |
|  971 | EUR           | USD          | 0.99535 | bids    | 2022-07-18 20:52:38 |
|  367 | EUR           | USD          | 0.99334 | bids    | 2022-07-18 20:52:38 |
| 1173 | EUR           | USD          | 0.99332 | bids    | 2022-07-18 20:52:38 |
|  574 | EUR           | USD          |  0.9865 | bids    | 2022-08-11 15:33:22 |
| 1179 | EUR           | USD          |  0.9845 | bids    | 2022-08-11 15:33:22 |
|  373 | EUR           | USD          |  0.9863 | bids    | 2022-08-11 15:33:22 |
| 1578 | EUR           | USD          |  0.9875 | bids    | 2022-08-11 15:33:22 |
|  977 | EUR           | USD          |  0.9868 | bids    | 2022-08-11 15:33:22 |
| 1376 | EUR           | USD          |  0.9864 | bids    | 2022-08-11 15:33:22 |
| 1777 | EUR           | USD          |  0.9365 | bids    | 2022-08-11 15:33:22 |
|  170 | EUR           | USD          |  0.9165 | bids    | 2022-08-11 15:33:22 |
|  775 | EUR           | USD          |  0.9865 | bids    | 2022-08-11 15:33:22 |
|  773 | EUR           | USD          |    0.99 | bids    | 2022-08-11 17:50:31 |
| 1775 | EUR           | USD          |    0.99 | bids    | 2022-08-11 17:50:31 |
| 1576 | EUR           | USD          |    0.98 | bids    | 2022-08-11 17:50:31 |
|  572 | EUR           | USD          |    0.99 | bids    | 2022-08-11 17:50:31 |
|  168 | EUR           | USD          |    0.99 | bids    | 2022-08-11 17:50:31 |
|  371 | EUR           | USD          |    0.95 | bids    | 2022-08-11 17:50:31 |
| 1177 | EUR           | USD          |    0.99 | bids    | 2022-08-11 17:50:31 |
| 1374 | EUR           | USD          |    0.91 | bids    | 2022-08-11 17:50:31 |
|  975 | EUR           | USD          |    0.96 | bids    | 2022-08-11 17:50:31 |
|  581 | EUR           | USD          | 0.98465 | bids    | 2022-08-11 21:10:27 |
| 1784 | EUR           | USD          | 0.98564 | bids    | 2022-08-11 21:10:27 |
|  984 | EUR           | USD          | 0.98123 | bids    | 2022-08-11 21:10:27 |
|  782 | EUR           | USD          | 0.98132 | bids    | 2022-08-11 21:10:27 |
| 1383 | EUR           | USD          | 0.98115 | bids    | 2022-08-11 21:10:27 |
| 1585 | EUR           | USD          | 0.98848 | bids    | 2022-08-11 21:10:27 |
| 1186 | EUR           | USD          | 0.98185 | bids    | 2022-08-11 21:10:27 |
|  380 | EUR           | USD          | 0.98184 | bids    | 2022-08-11 21:10:27 |
|  177 | EUR           | USD          | 0.98148 | bids    | 2022-08-11 21:10:27 |
+------+---------------+--------------+---------+---------+---------------------+
mysql select
  • 2 个回答
  • 63 Views
Martin Hope
Chris Tine
Asked: 2022-07-12 07:46:11 +0800 CST

选择两个列值的结果

  • 0

希望语法选择具有两个可能的列值的结果。

现在我正在 select distinct f1,f2,f3 from table where f3 in ('val1','val2')

并输出文本文件,然后寻找 val1 和 val2 都在同一 f1、f2 的文件中的情况。f3 可以是 val1, val2, val?... 每个值在表中各占一行。谢谢!

select
  • 1 个回答
  • 24 Views
Martin Hope
user6240358
Asked: 2022-07-07 22:34:43 +0800 CST

MariaDB:SELECT 查询可以阻止其他查询吗?

  • 0

如果我使用的存储过程只有在 mariadb 中选择查询(没有更新或插入)。此 Select 是否使用相同的表锁定其他查询(选择、更新或插入)?

select mariadb
  • 2 个回答
  • 39 Views
Martin Hope
Rama Krishna Majety
Asked: 2022-05-26 23:31:32 +0800 CST

Postgresql 在文本中搜索 6 位数字

  • 0

我有一个包含一个字段地址的表 - varchar(250),是否可以在该字段中搜索 6 位(整数)Pincode。是否也可以列出没有任何 12 位密码的记录。

Sl No |  Address 
1 | "16/127, Off M G Road, Goregaon (west) Mumbai, Maharashtra, 400062 02228744298"
2 | "113, 113,ragiptblr-2, Ragi Pet Bangalore, Karnataka, 560002 2229218"
3 | "2, 2, Panchal Estate, Bapunagar Ahmedabad, Gujarat, 380024 079227401432nd Flr, B Wing, Jay Chamber, Service Rd, Near Telephone Exchange, Vile Parle (east) Mumbai, Maharashtra, 400057 02226104168"
4 | "New#27, Gopalakrishna Street, T Nagar Chennai, Tamil Nadu, 600017 04428150211"
5 | "9360 61/8, Multani Dhanda, Pahar Ganj Delhi, Delhi, 110055 01123550815"
6 | "113, 113,ragiptblr-2, Ragi Pet Bangalore, Karnataka,  2229218"
7 | "9360 61/8, Multani Dhanda, Pahar Ganj Delhi, Delhi,  01123550815"
postgresql select
  • 1 个回答
  • 101 Views
Martin Hope
Daniel Halachev
Asked: 2022-05-14 23:44:17 +0800 CST

在不知道会有多少列的情况下,在另一个表的列中显示一个表的行数

  • 0

假设我有一个Library数据库和以下表格:

  • Books(ID, Title, Author, PublihserID, LanguageCode, Genre, DatePublished, ISBN)- 包含作为抽象项目、智力工作的书籍示例
ID 标题 作者 发布者 ID 语言代码 类型 发布日期 国际标准书号
1 尼罗河上的死亡 阿加莎克里斯蒂 2 CN 小说 1937-11-01 4215574186436
  • Branches(ID, Name, City, Address)- 包含不同城市的图书馆分馆
ID 姓名 城市 地址
1 名称1 伦敦 地址1
2 名称2 伯明翰 地址2
3 名称3 曼彻斯特 地址3
  • BookCopies(ID, BookID, BranchID, Condition)- 包含作为物理项目的书籍以及它们所在的分支
ID 书号 分行 ID 健康)状况
3aa99df2-7a88-4ca8-a965-046f478ac9f3 1 1 较差的
34beeffa-14c9-4796-a61c-0477be59af0f 1 1 出色的
1dc0e7cd-0f9e-42b2-829a-04de9a77ae47 1 2 平均
88f0045c-3910-4fd6-9a29-078c2d48bfb8 1 2 好的
ea3aafe9-0ada-4396-9ed3-0867912b7958 1 2 较差的
6d003fd5-83e7-4df5-9aa8-08dd61d53eb2 1 3 出色的
... ... ... ...

我想写一个查询,它为每一本书Books显示图书馆的每个分支中有多少本书的物理副本。到目前为止,我在数据库中的数据有三个带有ID1和. 我编写了以下查询,它正确显示了我想要的内容(添加了一些额外的内容,例如作者 Agatha Christie 的过滤):23

SELECT
    Books.Title,
    Books.PublisherID,
    Books.DatePublished,
    Books.ISBN,
    r1.Branch1,
    r1.Branch2,
    r1.Branch3
FROM
    Books
    JOIN
    (SELECT
        copies.BookID,
        br1.Branch1,
        br2.Branch2,
        br3.Branch3
    FROM
        BookCopies copies
        JOIN
        (SELECT
            BookCopies.BookID,
            COUNT(BookCopies.BranchID) AS Branch1
        FROM
            BookCopies
        GROUP BY BookCopies.BookID, BookCopies.BranchID
        HAVING BookCopies.BranchID=1) br1
        ON copies.BookID=br1.BookID
        FULL JOIN
        (SELECT
            BookCopies.BookID,
            COUNT(BookCopies.BranchID) AS Branch2
        FROM
            BookCopies
        GROUP BY BookCopies.BookID, BookCopies.BranchID
        HAVING BookCopies.BranchID=2) br2
        ON copies.BookID=br2.BookID
        FULL JOIN
        (SELECT
            BookCopies.BookID,
            COUNT(BookCopies.BranchID) AS Branch3
        FROM
            BookCopies
        GROUP BY BookCopies.BookID, BookCopies.BranchID
        HAVING BookCopies.BranchID=3) br3
        ON copies.BookID=br3.BookID
    GROUP BY copies.BookID, br1.Branch1, br2.Branch2, br3.Branch3) r1
    ON Books.ID=r1.BookID
WHERE Books.Author='Agatha Christie'
标题 出版商 发布日期 国际标准书号 分支1 分支2 分支3
尼罗河上的死亡 2 1937-11-01 4215574186436 2 3 1
... ... ... ... ... ... ...

但是这样的查询有两个基本问题:

  1. 我敢肯定它真的很慢,效率低下并且充满了不良做法
  2. 它针对三个分支进行了硬编码。如果图书馆开设第四,第五等分店,它就行不通了。

    如何改进我的查询,使其适用于所有分支(无论它们的数量),并且最好有效地使用资源?
sql-server select
  • 1 个回答
  • 42 Views
Martin Hope
Ron Piggott
Asked: 2022-03-27 17:56:12 +0800 CST

选择给定数组中包含字母数组的行

  • 2

text[]我想在“拼写”( ) 栏中 搜索字母: annoyt

我需要它来查找单词:any , annoy , no , an , toy 但找不到: annoy 的派生词(烦恼,烦恼),只找到一次。

如果甚至缺少一个字母(例如anoyt),我还需要查询 NOT find annoy 。

我正在使用 PostgreSQL 13.5

ronshome=# SELECT reference, word, spelling FROM word_mash_dictionary
           WHERE word LIKE 'annoy';
 reference | word  |  spelling
-----------+-------+-------------
       420 | annoy | {a,n,n,o,y}
(1 row)

这是表结构:

                                                      Table "public.word_mash_dictionary"
   Column    |  Type  | Collation | Nullable |                         Default                         | Storage  | Stats target | Description
-------------+--------+-----------+----------+---------------------------------------------------------+----------+--------------+-------------
 reference   | bigint |           | not null | nextval('word_mash_dictionary_reference_seq'::regclass) | plain    |              |
 word        | text   |           |          |                                                         | extended |              |
 spelling    | text[] |           |          |                                                         | extended |              |
 ignore      | bigint |           |          |                                                         | plain    |              |
 list_100    | bigint |           |          |                                                         | plain    |              |
 list_300    | bigint |           |          |                                                         | plain    |              |
 list_500    | bigint |           |          |                                                         | plain    |              |
 list_800    | bigint |           |          |                                                         | plain    |              |
 list_1000   | bigint |           |          |                                                         | plain    |              |
 list_2000   | bigint |           |          |                                                         | plain    |              |
 list_3000   | bigint |           |          |                                                         | plain    |              |
 list_5000   | bigint |           |          |                                                         | plain    |              |
 list_7000   | bigint |           |          |                                                         | plain    |              |
 list_10000  | bigint |           |          |                                                         | plain    |              |
 word_length | bigint |           |          |                                                         | plain    |              |
postgresql select
  • 1 个回答
  • 106 Views

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    连接到 PostgreSQL 服务器:致命:主机没有 pg_hba.conf 条目

    • 12 个回答
  • Marko Smith

    如何让sqlplus的输出出现在一行中?

    • 3 个回答
  • Marko Smith

    选择具有最大日期或最晚日期的日期

    • 3 个回答
  • Marko Smith

    如何列出 PostgreSQL 中的所有模式?

    • 4 个回答
  • Marko Smith

    列出指定表的所有列

    • 5 个回答
  • Marko Smith

    如何在不修改我自己的 tnsnames.ora 的情况下使用 sqlplus 连接到位于另一台主机上的 Oracle 数据库

    • 4 个回答
  • Marko Smith

    你如何mysqldump特定的表?

    • 4 个回答
  • Marko Smith

    使用 psql 列出数据库权限

    • 10 个回答
  • Marko Smith

    如何从 PostgreSQL 中的选择查询中将值插入表中?

    • 4 个回答
  • Marko Smith

    如何使用 psql 列出所有数据库和表?

    • 7 个回答
  • Martin Hope
    Jin 连接到 PostgreSQL 服务器:致命:主机没有 pg_hba.conf 条目 2014-12-02 02:54:58 +0800 CST
  • Martin Hope
    Stéphane 如何列出 PostgreSQL 中的所有模式? 2013-04-16 11:19:16 +0800 CST
  • Martin Hope
    Mike Walsh 为什么事务日志不断增长或空间不足? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland 列出指定表的所有列 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney MySQL 能否合理地对数十亿行执行查询? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx 如何监控大型 .sql 文件的导入进度? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison 你如何mysqldump特定的表? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 对 SQL 查询进行计时? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas 如何从 PostgreSQL 中的选择查询中将值插入表中? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 列出所有数据库和表? 2011-02-18 00:45:49 +0800 CST

热门标签

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve