AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • Início
  • system&network
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • Início
  • system&network
    • Recentes
    • Highest score
    • tags
  • Ubuntu
    • Recentes
    • Highest score
    • tags
  • Unix
    • Recentes
    • tags
  • DBA
    • Recentes
    • tags
  • Computer
    • Recentes
    • tags
  • Coding
    • Recentes
    • tags
Início / coding / Perguntas / 79564362
Accepted
jpmorr
jpmorr
Asked: 2025-04-09 20:37:34 +0800 CST2025-04-09 20:37:34 +0800 CST 2025-04-09 20:37:34 +0800 CST

SUM valores GROUP BY exclusivos no sqlite e conta grupos de valores consecutivos

  • 772

Sou um usuário iniciante de SQL e estou com dificuldades em uma sqliteconsulta sobre um arquivo GROUP BY. Aqui está um exemplo simplificado do meu problema usando os dados desta tabela:

id, pid, tid, duration
1, 1, 12, 0.099999
2, 1, 13, 0.105
3, 1, 14, 0.102
4, 1, 15, 0.1
5, 1, 22, 0.12
6, 1, 23, 0.101
7, 1, 24, 0.11
8, 2, 13, 0.105
9, 2, 14, 0.102
10, 2, 15, 0.1
11, 2, 16, 0.11
12, 2, 17, 0.11
13, 2, 18, 0.0995
14, 2, 19, 0.0998
15, 1, 12, 0.099999
16, 1, 13, 0.105
17, 1, 23, 0.101
18, 1, 24, 0.11
19, 2, 15, 0.1
20, 2, 16, 0.11
21, 2, 17, 0.11
22, 2, 18, 0.0995
23, 2, 19, 0.0998
24, 1, 13, 0.105
25, 1, 15, 0.1
26, 1, 22, 0.12
27, 1, 23, 0.101
28, 1, 24, 0.11
29, 2, 13, 0.105
30, 2, 14, 0.102
31, 2, 15, 0.1
32, 2, 16, 0.11
33, 2, 19, 0.0998

Estou tentando contar o número de tids únicos para cada um pide somar o durationfor each pid. Embora tidseja único, seu correspondente durationnão é único. Observação: no caso real, durationé na verdade uma coluna unida tide estou mostrando apenas as colunas nas quais estou tentando operar aqui.

Também quero descobrir o número de "visitas" - se houver uma interrupção no "unique_timesteps" de mais de 5 tids, isso conta como uma visita separada - então, neste exemplo, pid=1teríamos 2 visitas, enquanto pid=2teríamos uma visita.

Aqui está o que espero que seja o resultado final:

┌───────┬───────────┬────────────────────┬────────┐
│  pid  │ num_times │   exposure_time    │ visits │
│ int64 │   int64   │       double       │  int64 │
├───────┼───────────┼────────────────────┼──────-─┤
│     1 │         7 │ 0.7379990000000001 │    2   │
│     2 │         7 │ 0.7263000000000001 │    1   │
└───────┴───────────┴────────────────────┴────────┘

Executo a seguinte consulta nos dados, mas ela não retorna os resultados esperados para o agrupamento.

SELECT
    pid,
    COUNT(DISTINCT(tid)) AS num_times,
    SUM(DISTINCT(duration)) AS exposure_time,
    GROUP_CONCAT(DISTINCT(id)) AS rows,
    GROUP_CONCAT(DISTINCT(tid)) AS unique_timesteps
FROM
    distinct_example
GROUP BY
    pid
ORDER BY
    pid;

Aqui está o resultado onde estou adicionando as duas últimas colunas para contexto:

┌───────┬───────────┬────────────────────┬──────────────────────────────────────────────────┬──────────────────────┐
│  pid  │ num_times │   exposure_time    │                       rows                       │   unique_timesteps   │
│ int64 │   int64   │       double       │                     varchar                      │       varchar        │
├───────┼───────────┼────────────────────┼──────────────────────────────────────────────────┼──────────────────────┤
│     1 │         7 │ 0.7379990000000001 │ 24,4,2,7,25,27,16,1,15,18,3,5,28,6,17,26         │ 12,23,15,22,24,13,14 │
│     2 │         7 │             0.6163 │ 13,14,32,9,8,19,23,33,12,31,30,20,22,11,10,21,29 │ 16,19,17,13,14,18,15 │
└───────┴───────────┴────────────────────┴──────────────────────────────────────────────────┴──────────────────────┘

Em cada caso, há 7 intervalos de tempo exclusivos registrados para cada um pid, conforme mostrado corretamente na segunda coluna. A terceira coluna deve ser a soma da durationcoluna para a respectiva group byoperação em pid. Isso deve resultar em (0,737999, 0,726300) como resultado para , exposure_timepois durationdeve ser somado em , unique_timestepsem vez de durations. No entanto, entendi mal o uso de DISTINCTdentro de , GROUP BYe uma das durações de pid=2foi negligenciada (0,11).

Acho que devo fazer alguma subconsulta para selecionar as linhas corretas para usar como índice, mas não consigo entender como fazer isso.

Não tenho ideia de como calcular o visitsresultado, mas presumo que isso poderia ser feito com algumas subconsultas e uma função de janela?

sql
  • 2 2 respostas
  • 63 Views

2 respostas

  • Voted
  1. Bart McEndree
    2025-04-09T21:15:31+08:002025-04-09T21:15:31+08:00

    Usar um CTE que agrupa por pid,tid primeiro ajudará a produzir os resultados esperados

    WITH CTE AS
    (
    SELECT
        pid,
        tid,
        SUM(distinct duration) AS SumDistinctDur,
        GROUP_CONCAT(id) AS Ids
    FROM
        distinct_example
    GROUP BY
        pid, tid
    )  
    SELECT
        pid,
        COUNT(tid) AS num_times,
        SUM(SumDistinctDur) AS exposure_time,
        GROUP_CONCAT(Ids) AS rows,
        GROUP_CONCAT(tid) AS unique_timesteps
    FROM
        CTE
    GROUP BY
        pid
    

    violino

    pid num_vezes período de exposição linhas passos_de_tempo_únicos
    1 7 0,737999 1,15,2,16,24,3,4,25,5,26,6,17,27,7,18,28 12,13,14,15,22,23,24
    2 7 0,7263000000000001 8,29,9,30,10,19,31,11,20,32,12,21,13,22,14,23,33 13,14,15,16,17,18,19
    • 4
  2. Best Answer
    Guillaume Outters
    2025-04-09T21:21:43+08:002025-04-09T21:21:43+08:00

    exposure_time: garantindo a exclusividade

    Como você analisou corretamente, seu DISTINCT durationretorna apenas uma ocorrência quando dois tidcompartilham o mesmo duration. O que naturalmente corresponde à sua necessidade seria o do PostgreSQLDISTINCT ON , que não existe no SQLite, então você terá que emulá-lo.

    Poderíamos usar subseleções com LIMIT 1(para obter 1 valor para cada tid selecionado),
    mas prefiro usar Expressões de Tabela Comuns que podem ser vistas como criação sequencial de tabelas temporárias intermediárias, ajudando a manter a organização (você constrói sua consulta progressivamente, tabela intermediária por tabela intermediária) e facilitando o diagnóstico (você pode, select *a partir de qualquer tabela intermediária, verificar se a etapa do processo está correta em relação às suas expectativas).

    Então, primeiro renormalizaremos todos os seus dados em CTEs , garantindo que eles contenham apenas valores únicos (claro, se você ainda tiver sua tabela tid/ original, sinta-se à vontade para começar a partir dela) e, em seguida, somaremos as tabelas sem (porque temos certeza de que temos apenas uma linha por entrada / e por casal / ):duration
    DISTINCTtiddurationtidpid

    WITH
        -- Get only 1 tid / pid pair 
        pidtid AS (SELECT DISTINCT pid, tid FROM distinct_example),
        -- Reconstitute single tids
        tid as (SELECT DISTINCT tid, duration FROM distinct_example),
        -- Now sum up pid by pid
        sum as
        (
            SELECT pid, COUNT(1) num_times, SUM(duration) exposure_time
            FROM tid JOIN pidtid USING (tid)
            GROUP BY pid
        )
    SELECT * from sum;
    

    visits: função de janela para contar a distância entre as mesmas entradas pid

    Para o seu caso visits, você está certo, uma função de janela será a maneira mais fácil (também poderíamos unir a tabela a si mesma ON b.id BETWEEN a.id - 6 and a.id - 1 WHERE b.pid = a.pidpara encontrar predecessores próximos). Não podemos
    comparar linhas anteriores com a linha atual usando uma função de janela ( ), então particionaremos por pid e usaremos a ordem deles dentro do conjunto de dados completo, que eu entendo ser , para ver a que distância cada entrada está.MIN(CASE WHEN pid = CURRENT.pid THEN 0 ELSE 1 END) OVER (ORDER BY id ROWS BETWEEN 5 PRECEDING AND 1 PRECEDING) AS INCREASE
    id

    WITH
        prev AS
        (
            SELECT
                id, pid, tid,
                CASE WHEN id <= 6 + LAG(id) OVER (PARTITION BY pid ORDER BY id) THEN 0 ELSE 1 END AS new_visit
            FROM distinct_example
        ),
        visits AS (SELECT pid, SUM(new_visit) visits FROM prev GROUP BY pid)
    SELECT * FROM visits;
    

    Contudo

    Agora podemos juntar as nossas duas mesas (cada uma delas garantindo uma entrada por pid):

    WITH
        -- Get only 1 tid / pid pair 
        pidtid AS (SELECT DISTINCT pid, tid FROM distinct_example),
        -- Reconstitute single tids
        tid AS (SELECT DISTINCT tid, duration FROM distinct_example),
        -- Now sum up pid by pid
        sum AS
        (
            SELECT pid, COUNT(1) num_times, SUM(duration) exposure_time
            FROM tid JOIN pidtid USING (tid)
            GROUP BY pid
        ),
        -- Start another "thread" for visits (another = we do not SELECT from the previous CTEs, we start straight from distinct_example)
        -- The following CTE is optional, it recomputes ids *if they are not sequential*.
        -- (some RDBMS allow choosing the same name as the original table to transparently override any use of the original table in the subsequent SELECTs)
        distexreindexed AS (select row_number() OVER (ORDER BY id) id, pid, tid, duration FROM distinct_example),
        prev AS
        (
            SELECT
                id, pid, tid,
                CASE WHEN id <= 6 + LAG(id) OVER (PARTITION BY pid ORDER BY id) THEN 0 ELSE 1 END AS new_visit
            FROM distexreindexed -- ← Switch to the reindexed table.
        ),
        visits AS (SELECT pid, SUM(new_visit) visits FROM prev GROUP BY pid)
    SELECT sum.*, visits FROM sum JOIN visits USING (pid) ORDER BY pid;
    
    pid num_vezes período de exposição visitas
    1 7 0,737999 2
    2 7 0,7263000000000001 1

    Provavelmente poderíamos ter compactado (agrupando algumas consultas), mas ajudar esses dois problemas distintos a permanecerem distintos na consulta final facilitará a manutenção.

    Tudo funciona nesse violino .

    • 2

relate perguntas

  • Atualizando todas as linhas, exceto uma que tenha os mesmos valores em determinadas colunas

  • Existe uma maneira de inverter apenas os números quando eu retornar uma coluna sql? (hebraico)

  • SQL menor/maior comparação entre booleanos produz resultados inesperados

  • Como atualizar valores na tabela Postgres com base em uma correspondência em uma matriz

  • Como somar colunas no sql server

Sidebar

Stats

  • Perguntas 205573
  • respostas 270741
  • best respostas 135370
  • utilizador 68524
  • Highest score
  • respostas
  • Marko Smith

    Reformatar números, inserindo separadores em posições fixas

    • 6 respostas
  • Marko Smith

    Por que os conceitos do C++20 causam erros de restrição cíclica, enquanto o SFINAE antigo não?

    • 2 respostas
  • Marko Smith

    Problema com extensão desinstalada automaticamente do VScode (tema Material)

    • 2 respostas
  • Marko Smith

    Vue 3: Erro na criação "Identificador esperado, mas encontrado 'import'" [duplicado]

    • 1 respostas
  • Marko Smith

    Qual é o propósito de `enum class` com um tipo subjacente especificado, mas sem enumeradores?

    • 1 respostas
  • Marko Smith

    Como faço para corrigir um erro MODULE_NOT_FOUND para um módulo que não importei manualmente?

    • 6 respostas
  • Marko Smith

    `(expression, lvalue) = rvalue` é uma atribuição válida em C ou C++? Por que alguns compiladores aceitam/rejeitam isso?

    • 3 respostas
  • Marko Smith

    Um programa vazio que não faz nada em C++ precisa de um heap de 204 KB, mas não em C

    • 1 respostas
  • Marko Smith

    PowerBI atualmente quebrado com BigQuery: problema de driver Simba com atualização do Windows

    • 2 respostas
  • Marko Smith

    AdMob: MobileAds.initialize() - "java.lang.Integer não pode ser convertido em java.lang.String" para alguns dispositivos

    • 1 respostas
  • Martin Hope
    Fantastic Mr Fox Somente o tipo copiável não é aceito na implementação std::vector do MSVC 2025-04-23 06:40:49 +0800 CST
  • Martin Hope
    Howard Hinnant Encontre o próximo dia da semana usando o cronógrafo 2025-04-21 08:30:25 +0800 CST
  • Martin Hope
    Fedor O inicializador de membro do construtor pode incluir a inicialização de outro membro? 2025-04-15 01:01:44 +0800 CST
  • Martin Hope
    Petr Filipský Por que os conceitos do C++20 causam erros de restrição cíclica, enquanto o SFINAE antigo não? 2025-03-23 21:39:40 +0800 CST
  • Martin Hope
    Catskul O C++20 mudou para permitir a conversão de `type(&)[N]` de matriz de limites conhecidos para `type(&)[]` de matriz de limites desconhecidos? 2025-03-04 06:57:53 +0800 CST
  • Martin Hope
    Stefan Pochmann Como/por que {2,3,10} e {x,3,10} com x=2 são ordenados de forma diferente? 2025-01-13 23:24:07 +0800 CST
  • Martin Hope
    Chad Feller O ponto e vírgula agora é opcional em condicionais bash com [[ .. ]] na versão 5.2? 2024-10-21 05:50:33 +0800 CST
  • Martin Hope
    Wrench Por que um traço duplo (--) faz com que esta cláusula MariaDB seja avaliada como verdadeira? 2024-05-05 13:37:20 +0800 CST
  • Martin Hope
    Waket Zheng Por que `dict(id=1, **{'id': 2})` às vezes gera `KeyError: 'id'` em vez de um TypeError? 2024-05-04 14:19:19 +0800 CST
  • Martin Hope
    user924 AdMob: MobileAds.initialize() - "java.lang.Integer não pode ser convertido em java.lang.String" para alguns dispositivos 2024-03-20 03:12:31 +0800 CST

Hot tag

python javascript c++ c# java typescript sql reactjs html

Explore

  • Início
  • Perguntas
    • Recentes
    • Highest score
  • tag
  • help

Footer

AskOverflow.Dev

About Us

  • About Us
  • Contact Us

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve