AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • Início
  • system&network
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • Início
  • system&network
    • Recentes
    • Highest score
    • tags
  • Ubuntu
    • Recentes
    • Highest score
    • tags
  • Unix
    • Recentes
    • tags
  • DBA
    • Recentes
    • tags
  • Computer
    • Recentes
    • tags
  • Coding
    • Recentes
    • tags
Início / user-213518

Markus Wiedemann's questions

Martin Hope
Markus Wiedemann
Asked: 2021-07-30 03:26:05 +0800 CST

Combinando vários SELECT/WHERE em um resultado com várias colunas com nomes de alias

  • 0

Eu tenho uma tabela Timescale DB / PostgreSQL (DataTable) que se parece com isso

Exemplo de tabela de dados

Estou tentando encontrar uma consulta que retorne colunas diferentes para diferentes combinações de subsistema/métricas como esta

Resultado da consulta

Além disso, gostaria de reduzir a quantidade de pontos de dados solicitados usando a função Timescale DB time_bucket_gapfill() para manter o tempo de resposta baixo para grandes intervalos de tempo. Eu também gostaria de usar diferentes funções de agregação para diferentes combinações de subsistema/métrica. Eu uso os dados consultados para plotar as curvas no Grafana. Qual é a maneira mais eficiente de conseguir isso?

No momento eu uso consultas separadas para cada métrica que rapidamente fica muito lenta. Para o exemplo, as consultas podem ser assim

SELECT
    time_bucket_gapfill('30s',time,start=>'2021-07-19T09:06:26.605Z',finish=>'2021-07-19T20:11:12.340Z') AS "time",
    max(value) AS "Latitude"
FROM DataTable
WHERE
    time BETWEEN '2021-07-19T09:06:26.605Z' AND '2021-07-19T20:11:12.340Z' AND
    subsystem = 'position' AND
    metric = 'lat'
GROUP BY 1,metric,subsystem
ORDER BY time
SELECT
    time_bucket_gapfill('30s',time,start=>'2021-07-19T09:06:26.605Z',finish=>'2021-07-19T20:11:12.340Z') AS "time",
    min(value) AS "Longitude"
FROM DataTable
WHERE
    time BETWEEN '2021-07-19T09:06:26.605Z' AND '2021-07-19T20:11:12.340Z' AND
    subsystem = 'position' AND
    metric = 'lon'
GROUP BY 1,metric,subsystem
ORDER BY time
SELECT
    time_bucket_gapfill('30s',time,start=>'2021-07-19T09:06:26.605Z',finish=>'2021-07-19T20:11:12.340Z') AS "time",
    avg(value) AS "Temperature"
FROM DataTable
WHERE
    time BETWEEN '2021-07-19T09:06:26.605Z' AND '2021-07-19T20:11:12.340Z' AND
    subsystem = 'health' AND
    metric = 'temperature'
GROUP BY 1,metric,subsystem
ORDER BY time

Eu agradeceria muito se alguém pudesse me apontar na direção certa.

Atualizar:

Usar a cláusula FILTER como sugerido por @Charlieface não funciona para mim, porque não remove as outras linhas, mas coloca NULLs lá. Aqui um exemplo com alguns dados reais (o exemplo anterior estava usando dados e nomes simplificados).

insira a descrição da imagem aqui

Também notei que os timestamps das métricas que pertencem juntas têm pequenas diferenças que impediriam que métricas diferentes estivessem na mesma linha, mas isso é fácil de alterar na unidade que alimenta os dados no banco de dados.

Atualização 2:

O problema de timestamps foi corrigido e a instrução WHERE foi adicionada novamente como sugerido por @Charlieface, mas ainda há NULL nos dados, o que faz o Grafana plotar os pontos de dados sem linhas entre eles.

insira a descrição da imagem aqui

Gostaria que o resultado ficasse assim.

insira a descrição da imagem aqui

Atualização 3:

Eu perdi essa resposta do @Charlieface apenas grupos por tempo. Se eu fizer isso, obterei o resultado que eu queria.

postgresql pivot
  • 1 respostas
  • 248 Views
Martin Hope
Markus Wiedemann
Asked: 2020-08-05 15:08:54 +0800 CST

Banco de dados PostgreSQL remoto com buffer local ... como poderia parecer

  • 0

Eu tenho um sensor que está gerando um vetor de dados digamos a cada segundo (ajustável para até 100 vetores por segundo) em um local remoto. O local tem modem 4G para enviar os dados. Devido a limitações de energia, optei por usar um Raspberry Pi 3+ para receber os dados do sensor, decodificá-los e enviá-los para o meu servidor VPS.

No meu servidor executando o Ubuntu 18.04, instalei o TimescaleDB em cima do PostgreSQL, que é uma boa combinação para lidar com dados de séries temporais e gostaria de armazenar os dados do sensor lá e publicá-los no meu site. Gostaria de saber sua opinião sobre como seria o fluxo de dados e tenho algumas perguntas.

  1. Qual seria a melhor forma de inserir os dados do sensor do RPi no banco de dados do servidor? É salvar inseri-los diretamente do RPi usando a biblioteca libpq no meu software C ou devo transportar os dados para o servidor de uma maneira diferente e depois inserir os dados no banco de dados no lado do servidor?

  2. No lado do RPi, gostaria de ter um buffer local para evitar a perda de dados se a conexão com o servidor for interrompida. Eu poderia simplesmente usar um buffer circular no meu programa C ou um pipe nomeado, ou eu poderia instalar o PostgreSQL/TimescaleDB localmente, inserir os dados lá e então usar postgres_fdw ou dblink para transferir os dados de lá para o meu banco de dados do servidor e excluir as entradas de meu banco de dados local. O que você sugeriria?

postgresql remote
  • 1 respostas
  • 107 Views

Sidebar

Stats

  • Perguntas 205573
  • respostas 270741
  • best respostas 135370
  • utilizador 68524
  • Highest score
  • respostas
  • Marko Smith

    conectar ao servidor PostgreSQL: FATAL: nenhuma entrada pg_hba.conf para o host

    • 12 respostas
  • Marko Smith

    Como fazer a saída do sqlplus aparecer em uma linha?

    • 3 respostas
  • Marko Smith

    Selecione qual tem data máxima ou data mais recente

    • 3 respostas
  • Marko Smith

    Como faço para listar todos os esquemas no PostgreSQL?

    • 4 respostas
  • Marko Smith

    Listar todas as colunas de uma tabela especificada

    • 5 respostas
  • Marko Smith

    Como usar o sqlplus para se conectar a um banco de dados Oracle localizado em outro host sem modificar meu próprio tnsnames.ora

    • 4 respostas
  • Marko Smith

    Como você mysqldump tabela (s) específica (s)?

    • 4 respostas
  • Marko Smith

    Listar os privilégios do banco de dados usando o psql

    • 10 respostas
  • Marko Smith

    Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL?

    • 4 respostas
  • Marko Smith

    Como faço para listar todos os bancos de dados e tabelas usando o psql?

    • 7 respostas
  • Martin Hope
    Jin conectar ao servidor PostgreSQL: FATAL: nenhuma entrada pg_hba.conf para o host 2014-12-02 02:54:58 +0800 CST
  • Martin Hope
    Stéphane Como faço para listar todos os esquemas no PostgreSQL? 2013-04-16 11:19:16 +0800 CST
  • Martin Hope
    Mike Walsh Por que o log de transações continua crescendo ou fica sem espaço? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland Listar todas as colunas de uma tabela especificada 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney O MySQL pode realizar consultas razoavelmente em bilhões de linhas? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx Como posso monitorar o andamento de uma importação de um arquivo .sql grande? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison Como você mysqldump tabela (s) específica (s)? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Jonas Como posso cronometrar consultas SQL usando psql? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas Como faço para listar todos os bancos de dados e tabelas usando o psql? 2011-02-18 00:45:49 +0800 CST

Hot tag

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • Início
  • Perguntas
    • Recentes
    • Highest score
  • tag
  • help

Footer

AskOverflow.Dev

About Us

  • About Us
  • Contact Us

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve