AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • Início
  • system&network
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • Início
  • system&network
    • Recentes
    • Highest score
    • tags
  • Ubuntu
    • Recentes
    • Highest score
    • tags
  • Unix
    • Recentes
    • tags
  • DBA
    • Recentes
    • tags
  • Computer
    • Recentes
    • tags
  • Coding
    • Recentes
    • tags
Início / dba / Perguntas / 81966
Accepted
Marcus Junius Brutus
Marcus Junius Brutus
Asked: 2014-11-06 09:04:21 +0800 CST2014-11-06 09:04:21 +0800 CST 2014-11-06 09:04:21 +0800 CST

Verifique se strings vazias estão presentes em colunas de tipo de caractere

  • 772

Eu tenho um aplicativo que (como parte de sua lógica) corta strings e substitui strings vazias por NULL antes da inserção no banco de dados. Acho que uma maneira de garantir que isso seja aplicado seria escrever um CHECK em todas as tabelas que possuem uma coluna VARCHAR, (ou similar).TEXT

Supondo que alguém não possa ou não queira fazer isso, existe uma maneira de escrever uma consulta SQL simples e genérica (obtendo nomes de tabelas e colunas dos metadados do banco de dados) que verificaria se alguma coluna de texto no banco de dados contém strings vazias ?

database-design postgresql
  • 2 2 respostas
  • 16611 Views

2 respostas

  • Voted
  1. Craig Ringer
    2014-11-06T17:41:47+08:002014-11-06T17:41:47+08:00

    A melhor maneira de fazer isso é com uma CHECKrestrição, como você observou, possivelmente por meio de um DOMAIN, por exemplo

    CREATE DOMAIN nonempty_string AS text 
    CONSTRAINT non_empty CHECK (length(VALUE) > 0);
    

    em seguida, ALTERcolunas existentes para usar o domínio.

    Se isso não for possível, você precisará consultar INFORMATION_SCHEMApara localizar todas as colunas do tipo de destino em todas as tabelas e, para cada coluna, gerar dinamicamente uma consulta para verificação. Você pode usar PL/PgSQL e a EXECUTEinstrução para isso; há muitos exemplos de seu uso dessa maneira em outro lugar no Stack Overflow.

    Você não pode escrever uma única consulta para fazer o que deseja. Simplesmente não vai funcionar. Você terá que usar a geração de consulta de information_schema.

    • 3
  2. Best Answer
    Erwin Brandstetter
    2014-11-06T21:36:26+08:002014-11-06T21:36:26+08:00

    Função para uma única tabela

    Retorna todas as colunas de tipo de caractere da tabela fornecida com uma contagem de valores vazios ( '') e se eles estão definidos NOT NULL.

    CREATE OR REPLACE FUNCTION f_tbl_empty_status(_tbl regclass)
      RETURNS TABLE (tbl text, col text, empty_ct bigint, not_null bool)
      LANGUAGE plpgsql AS
    $func$
    DECLARE
       _typ      CONSTANT regtype[] := '{text, bpchar, varchar}';  -- base char types
       _sql      text;
       _col_arr  text[];
       _null_arr bool[];
    BEGIN
       -- Build command
       SELECT INTO _col_arr, _null_arr, _sql
              array_agg(s.col)
            , array_agg(s.attnotnull)
            , '
       SELECT $1
            , unnest($2)
            , unnest(ARRAY [count('
                     || string_agg(s.col, ' = '''' OR NULL), count(')
                                       || ' = '''' OR NULL)])
            , unnest($3)
       FROM   ' || _tbl
       FROM  (
          SELECT quote_ident(attname) AS col, attnotnull
          FROM   pg_attribute
          WHERE  attrelid = _tbl           -- valid, visible, legal table name 
          AND    attnum >= 1               -- exclude tableoid & friends
          AND    NOT attisdropped          -- exclude dropped columns
       -- AND    NOT attnotnull            -- include columns defined NOT NULL
          AND    atttypid = ANY(_typ)      -- only character types
          ORDER  BY attnum
          ) AS s;
    
       -- Debug
       -- RAISE NOTICE '%', _sql;
    
       -- Execute
       IF _sql IS NULL THEN
          -- do nothing, nothing to return
       ELSE
          RETURN QUERY EXECUTE _sql
          USING  _tbl::text, _col_arr, _null_arr;
       END IF;
    END
    $func$;
    

    Ligar:

    SELECT * FROM f_tbl_empty_status('tbl_name'); -- optionally schema-qualified
    

    Retorna:

    tbl   | col        | empty_ct | not_null
    ------+------------+----------+---------
    tbl1  | txt        | 0        | f
    tbl1  | vc         | 3        | f
    tbl1  | "oDD name" | 7        | f
    

    Funciona para Postgres 9.1 ou posterior.

    Os nomes das tabelas de saída são automaticamente qualificados pelo esquema, se necessário, de acordo com o search_path.

    Os nomes da tabela de saída e os nomes das colunas são escapados automaticamente, se necessário.

    empty_cté a contagem de linhas onde o valor da coluna é a string vazia

    not_nullinforma se a coluna está definida NOT NULL(portanto, você não pode converter possíveis strings vazias em NULL!)

    O nome da tabela de entrada pode opcionalmente ser qualificado pelo esquema, caso contrário, o padrão é o atual search_path.

    Sua função precisa de privilégios para realmente ler a tabela fornecida.

    A função é altamente otimizada e executa apenas uma única varredura na tabela fornecida para verificar todas as colunas relevantes.

    Deve ser seguro contra injeção de SQL.

    Usando paralelo unnest()para simplificar um pouco o código complexo:

    • Desaninhar vários arrays em linhas

    Você estará interessado nesta resposta relacionada no SO para realmente substituir strings vazias - com mais explicações :

    • Substituir espaços em branco por valores nulos

    Corresponde também a sequências de apenas caracteres de espaço

    Como você comentou , trim(s.col, ' ') = ''faz o trabalho muito bem. Mas aqui está um atalho:

    s.col::char = ''
    

    Como?
    charé um alias para character(1), o tipo de preenchimento em branco raramente útil. Os valores são preenchidos com caracteres de espaço à direita até o especificador de comprimento (que 1, neste caso, é irrelevante). Espaços à direita são efetivamente insignificantes para este tipo. Então ' 'é o mesmo que ''ou ' '. Voilá. E sim, é mais rápido também, testei.

    Para encontrar strings com apenas caracteres de espaço também (não outros espaços em branco!), adicione a conversão a estas linhas acima:

                      || string_agg(s.col, '::char = '''' OR NULL), count(')
                                        || '::char = '''' OR NULL)])

    Função wrapper para relatar um esquema inteiro

    CREATE OR REPLACE FUNCTION f_schema_empty_status(_sch text DEFAULT 'public')
      RETURNS TABLE (tbl text, col text, empty_ct bigint, not_null bool)
      LANGUAGE plpgsql AS
    $func$
    DECLARE 
       _tbl regclass;
    BEGIN
       FOR _tbl IN
          SELECT c.oid
          FROM   pg_class c
          JOIN   pg_namespace n ON n.oid = c.relnamespace
          WHERE  n.nspname = _sch  -- 'public' by default
       -- AND    c.relname LIKE 'my_pattern%'  -- optionally filter table names
          AND    c.relkind = 'r'  -- regular tables only
          ORDER  BY relname
       LOOP
       -- Debug
       -- RAISE NOTICE 'table: %', _tbl;
    
          RETURN QUERY
          SELECT * FROM f_tbl_empty_status(_tbl);
       END LOOP;
    END
    $func$;
    

    Ligar:

    SELECT * FROM f_schema_empty_status();  -- defaults to 'public' without parameter
    

    Retorna:

    tbl   | col        | empty_ct | not_null
    ------+------------+----------+---------
    tbl1  | txt        | 0        | f
    tbl1  | vc         | 3        | f
    tbl1  | "oDD name" | 7        | f
    tbl2  | some_text  | 123      | t
    ...
    

    db<>fiddle aqui
    Old sqlfiddle

    • 3

relate perguntas

  • Práticas recomendadas para executar a replicação atrasada do deslocamento de tempo

  • Os procedimentos armazenados impedem a injeção de SQL?

  • Quais são algumas maneiras de implementar um relacionamento muitos-para-muitos em um data warehouse?

  • Sequências Biológicas do UniProt no PostgreSQL

  • Qual é a diferença entre a replicação do PostgreSQL 9.0 e o Slony-I?

Sidebar

Stats

  • Perguntas 205573
  • respostas 270741
  • best respostas 135370
  • utilizador 68524
  • Highest score
  • respostas
  • Marko Smith

    conectar ao servidor PostgreSQL: FATAL: nenhuma entrada pg_hba.conf para o host

    • 12 respostas
  • Marko Smith

    Como fazer a saída do sqlplus aparecer em uma linha?

    • 3 respostas
  • Marko Smith

    Selecione qual tem data máxima ou data mais recente

    • 3 respostas
  • Marko Smith

    Como faço para listar todos os esquemas no PostgreSQL?

    • 4 respostas
  • Marko Smith

    Listar todas as colunas de uma tabela especificada

    • 5 respostas
  • Marko Smith

    Como usar o sqlplus para se conectar a um banco de dados Oracle localizado em outro host sem modificar meu próprio tnsnames.ora

    • 4 respostas
  • Marko Smith

    Como você mysqldump tabela (s) específica (s)?

    • 4 respostas
  • Marko Smith

    Listar os privilégios do banco de dados usando o psql

    • 10 respostas
  • Marko Smith

    Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL?

    • 4 respostas
  • Marko Smith

    Como faço para listar todos os bancos de dados e tabelas usando o psql?

    • 7 respostas
  • Martin Hope
    Jin conectar ao servidor PostgreSQL: FATAL: nenhuma entrada pg_hba.conf para o host 2014-12-02 02:54:58 +0800 CST
  • Martin Hope
    Stéphane Como faço para listar todos os esquemas no PostgreSQL? 2013-04-16 11:19:16 +0800 CST
  • Martin Hope
    Mike Walsh Por que o log de transações continua crescendo ou fica sem espaço? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland Listar todas as colunas de uma tabela especificada 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney O MySQL pode realizar consultas razoavelmente em bilhões de linhas? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx Como posso monitorar o andamento de uma importação de um arquivo .sql grande? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison Como você mysqldump tabela (s) específica (s)? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Jonas Como posso cronometrar consultas SQL usando psql? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas Como faço para listar todos os bancos de dados e tabelas usando o psql? 2011-02-18 00:45:49 +0800 CST

Hot tag

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • Início
  • Perguntas
    • Recentes
    • Highest score
  • tag
  • help

Footer

AskOverflow.Dev

About Us

  • About Us
  • Contact Us

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve