AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • Início
  • system&network
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • Início
  • system&network
    • Recentes
    • Highest score
    • tags
  • Ubuntu
    • Recentes
    • Highest score
    • tags
  • Unix
    • Recentes
    • tags
  • DBA
    • Recentes
    • tags
  • Computer
    • Recentes
    • tags
  • Coding
    • Recentes
    • tags
Início / dba / Perguntas / 28655
Accepted
Gnanam
Gnanam
Asked: 2012-11-15 02:27:06 +0800 CST2012-11-15 02:27:06 +0800 CST 2012-11-15 02:27:06 +0800 CST

Soluções de arquivo de banco de dados

  • 772

Em continuação a uma pergunta postada por mim em É uma boa ideia mover tabelas de alto volume e altamente acessadas para um banco de dados separado? , estou procurando diferentes técnicas/soluções disponíveis para arquivamento de banco de dados no PostgreSQL.

Poucas soluções que posso pensar são:

  1. Particionamento de tabela
  2. Espaço de tabela e/ou esquema separado
  3. Movendo registros/tabelas arquivados para um disco rígido diferente

Quaisquer outras sugestões/dicas/soluções são muito bem-vindas e apreciadas.

NOTA: Estamos executando o PostgreSQL v9.1.3 no CentOS5.2

postgresql partitioning
  • 1 1 respostas
  • 11738 Views

1 respostas

  • Voted
  1. Best Answer
    sufleR
    2012-11-15T03:13:52+08:002012-11-15T03:13:52+08:00

    Minha sugestão sobre arquivamento:

    1. Criar archive_tablespace(se você quiser, pode separar o hardware no arquivo)
    2. Crie tabelas. Por exemplo, queremos arquivar postagens de tabela.

      create table  posts_all ( LIKE public.posts)  ;
      create table  posts_archive () inherits  ( public.posts_all)  ;
      alter table  public.posts  inherits ( public.posts_all ) ;
      

      Depois disso teremos 2 novas tabelas: public.posts_all (com as mesmas colunas dos posts) para consultar todos os posts (arquivo e produção) e public.posts_archive para consultar todos os posts do arquivo. Public.posts herdará de posts_all.
      As inserções devem ser feitas da maneira antiga (para a tabela public.posts), a menos que você escreva gatilhos em posts_all para redirecionar as inserções para a tabela de postagens. Se você tiver particionamento, será mais complicado. Com o aplicativo funcionando e antes da migração de dados antigos, você não precisa alterar nada no código do aplicativo para trabalhar com essa abordagem.

    3. Crie um arquivo de esquema para separação lógica. Minha sugestão será separar os dados do arquivo por algum período de tempo (ano ou mês), se possível (archive_2005).

    4. Crie tabelas de arquivo no esquema archive_year

      create table archive_2005.posts (
        check(record_date >= '2005-01-01 00:00:00'::timestamp 
          and record_date <  '2006-01-01 00:00:00'::timestamp)
      ) inherits (posts_archive) tablespace archive_tablesapce;
      

      Depois disso, você terá novas postagens de tabela no esquema archive_2005 e o planejador postgresql saberá que os dados existem apenas no período de tempo projetado. Se você consultar por outro período de tempo, o postgresql não pesquisará nesta tabela.

    5. Crie funções/procedimentos/gatilhos para mover dados para arquivar tabelas.

    6. Arquive uma vez por um período de tempo (ano aqui) e aspire a tabela antiga ou faça-o automaticamente por gatilhos (mais pesado no autovacuum). Existem muitas vantagens e desvantagens em ambas as técnicas.

    Se implementado:

    1. Pode consultar dados de arquivo (selecione * de posts_archive), todos (selecione * de posts_all) e de produção (selecione * de public.posts) separadamente
    2. Pode descarregar esquemas de arquivo separadamente e descarregá-los em cascata de maneira fácil. pg_dump -s archive_2005 datase_name drop schema archive_2005 cascata; --tenha cuidado porque remove todas as tabelas relacionadas
    3. Dados antigos separados fisicamente por tablespace e logicamente por schema.
    4. Estrutura bastante complicada para gerenciar o processo de arquivamento
    5. Pode criar diferentes índices em tabelas de produção e arquivamento para otimizar consultas para ambos (índices menores e especializados = consultas mais rápidas e menos espaço necessário)
    6. Se você tiver tabelas particionadas (por ano ou mês), o processo de arquivamento será apenas para mover a tabela inteira archive_tablespaceou apenas alterá-la para herdar de posts_archive (não testei isso)
    7. Se você não deseja acessar dados antigos (arquivados), não precisa alterar nada no aplicativo.

    Esta é uma técnica geral e você deve adaptá-la às suas necessidades. Alguma sugestão para melhorar isso?

    Leitura adicional: Herança do PostgreSQL , particionamento

    • 14

relate perguntas

  • Posso ativar o PITR depois que o banco de dados foi usado

  • Práticas recomendadas para executar a replicação atrasada do deslocamento de tempo

  • Os procedimentos armazenados impedem a injeção de SQL?

  • Sequências Biológicas do UniProt no PostgreSQL

  • Qual é a diferença entre a replicação do PostgreSQL 9.0 e o Slony-I?

Sidebar

Stats

  • Perguntas 205573
  • respostas 270741
  • best respostas 135370
  • utilizador 68524
  • Highest score
  • respostas
  • Marko Smith

    Como ver a lista de bancos de dados no Oracle?

    • 8 respostas
  • Marko Smith

    Quão grande deve ser o mysql innodb_buffer_pool_size?

    • 4 respostas
  • Marko Smith

    Listar todas as colunas de uma tabela especificada

    • 5 respostas
  • Marko Smith

    restaurar a tabela do arquivo .frm e .ibd?

    • 10 respostas
  • Marko Smith

    Como usar o sqlplus para se conectar a um banco de dados Oracle localizado em outro host sem modificar meu próprio tnsnames.ora

    • 4 respostas
  • Marko Smith

    Como você mysqldump tabela (s) específica (s)?

    • 4 respostas
  • Marko Smith

    Como selecionar a primeira linha de cada grupo?

    • 6 respostas
  • Marko Smith

    Listar os privilégios do banco de dados usando o psql

    • 10 respostas
  • Marko Smith

    Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL?

    • 4 respostas
  • Marko Smith

    Como faço para listar todos os bancos de dados e tabelas usando o psql?

    • 7 respostas
  • Martin Hope
    Mike Walsh Por que o log de transações continua crescendo ou fica sem espaço? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland Listar todas as colunas de uma tabela especificada 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney O MySQL pode realizar consultas razoavelmente em bilhões de linhas? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx Como posso monitorar o andamento de uma importação de um arquivo .sql grande? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison Como você mysqldump tabela (s) específica (s)? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    pedrosanta Listar os privilégios do banco de dados usando o psql 2011-08-04 11:01:21 +0800 CST
  • Martin Hope
    Jonas Como posso cronometrar consultas SQL usando psql? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas Como faço para listar todos os bancos de dados e tabelas usando o psql? 2011-02-18 00:45:49 +0800 CST
  • Martin Hope
    bernd_k Quando devo usar uma restrição exclusiva em vez de um índice exclusivo? 2011-01-05 02:32:27 +0800 CST

Hot tag

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • Início
  • Perguntas
    • Recentes
    • Highest score
  • tag
  • help

Footer

AskOverflow.Dev

About Us

  • About Us
  • Contact Us

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve