AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • Início
  • system&network
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • Início
  • system&network
    • Recentes
    • Highest score
    • tags
  • Ubuntu
    • Recentes
    • Highest score
    • tags
  • Unix
    • Recentes
    • tags
  • DBA
    • Recentes
    • tags
  • Computer
    • Recentes
    • tags
  • Coding
    • Recentes
    • tags
Início / dba / Perguntas / 286047
Accepted
Newbie-DBA
Newbie-DBA
Asked: 2021-02-26 12:36:33 +0800 CST2021-02-26 12:36:33 +0800 CST 2021-02-26 12:36:33 +0800 CST

Reduzindo o arquivo de dados para economizar espaço em disco antes da migração

  • 772

Eu sei que isso é mais discutido em vários fóruns: Eu entendo completamente que a resposta é não na maioria das vezes ou nos casos.

No entanto, quero saber se pode ser uma boa abordagem em qualquer cenário:

Vamos dizer para o banco de dados prod atual que no nosso caso tem mais de 30 TB e tem retenção de dados por 1 ano. As tabelas são principalmente compactadas e particionadas.

A equipe de desenvolvimento criou uma lógica em que eles não precisam de dados para permanecer até o ano e desejam alterar a retenção para 6 meses. Portanto, espera-se que os dados sejam reduzidos à metade após a eliminação e apenas com dados de 6 meses daqui para frente.

É aqui que fomos solicitados a trabalhar na redução de arquivos de dados para que esses LUNS com TB de espaço pudessem ser retornados ou, se migrarmos para uma nova versão do sql, estaríamos solicitando, digamos, alguns (aprox10) TB a menos que economizam algum dinheiro, supondo que mantenhamos 5 TB extras para crescimento no banco de dados no futuro.

Nesse caso, seria útil reduzir a redução em pequenos pedaços, assumindo que o bloqueio no horário de pico baixo pode ser aceito ou se a redução for executada por mais tempo pode ser cancelada?

Quanto vale a atividade de arquivo de dados de redução acima ou existe uma abordagem melhor?

Editar --> Estamos migrando para a versão mais recente possivelmente SQL 2017 ou SQL2K19. As tabelas não são particionadas com base em grupos de arquivos, pois para esses bancos de dados todos os mais de 30 arquivos estão no primário. Eu sei, é apenas um design de banco de dados de fornecedor e não tenho muito na minha mão.

sql-server sql-server-2012
  • 3 3 respostas
  • 108 Views

3 respostas

  • Voted
  1. Shamvil Kazmi
    2021-02-26T13:02:29+08:002021-02-26T13:02:29+08:00

    você pode ler sobre isso aqui - https://www.brentozar.com/archive/2017/12/whats-bad-shrinking-databases-dbcc-shrinkdatabase/

    e sobre quando encolher é uma obrigação o que você pode fazer aqui - https://www.brentozar.com/archive/2020/07/what-if-you-really-do-need-to-shrink-a-database/

    Quando reduzimos nosso banco de dados, ele introduz fragmentação externa e interna, causa bloqueio, causa crescimento do log de transações enquanto é executado. A fragmentação do índice aumenta. Quando reconstruímos o índice, o tamanho do banco de dados volta a aumentar. Assim, causando o ciclo interminável de reconstrução por encolhimento.

    Supondo que você tenha o tempo de inatividade no local, e se eu precisar fazer uma redução para mover o banco de dados, eu criaria scripts de todos os índices e os descartaria. execute o checkpoint várias vezes, faça backup de log, reduza o arquivo de log e reduza o banco de dados, faça backup completo e restaure esse backup para um novo local. execute o script de índice para criá-los novamente e deixá-lo crescer no novo servidor. Cuidado: criar um índice em 30 TB será uma dor.

    Poderia haver uma maneira melhor de fazer isso, ficaria feliz em ficar de olho em outras respostas.

    • 3
  2. Best Answer
    Tibor Karaszi
    2021-02-27T00:22:56+08:002021-02-27T00:22:56+08:00

    Esse é um banco de dados bastante robusto para encolher. Gostaria apenas de apontar duas coisas que você deseja verificar antes de iniciar suas operações de redução:

    Dados LOB. Isso levará uma eternidade, pois não há backpointers para os dados LOB. Ou seja, uma página LOB foi movida e tudo o que o SQL Server sabe é a qual tabela ela pertence. Ele precisa fazer uma varredura na tabela para encontrar a linha, uma para cada valor de lob nessa página.

    Tabelas de pilha. Para cada página movida, o SQL Server precisa modificar cada índice nc para cada linha dessa página. Pode levar de 5 a 10 vezes mais tempo para reduzir uma tabela de heap em comparação com uma tabela em cluster.

    Uma opção que você pode querer considerar para esse tamanho é mover os dados para outro lugar (grupo de arquivos) antes da redução (ou possivelmente apenas remover esse grupo de arquivos se estiver vazio agora).

    • 2
  3. Stephen Morris - Mo64
    2021-02-27T00:09:08+08:002021-02-27T00:09:08+08:00

    Uma possibilidade seria usar a replicação transacional e adicionar filtros de linha estática para filtrar os dados mais antigos, isso também teria a vantagem de um corte mais curto ao longo do tempo para o novo servidor (suponho que você esteja fazendo uma migração lado a lado não uma atualização no local).

    • 0

relate perguntas

  • SQL Server - Como as páginas de dados são armazenadas ao usar um índice clusterizado

  • Preciso de índices separados para cada tipo de consulta ou um índice de várias colunas funcionará?

  • Quando devo usar uma restrição exclusiva em vez de um índice exclusivo?

  • Quais são as principais causas de deadlocks e podem ser evitadas?

  • Como determinar se um Índice é necessário ou necessário

Sidebar

Stats

  • Perguntas 205573
  • respostas 270741
  • best respostas 135370
  • utilizador 68524
  • Highest score
  • respostas
  • Marko Smith

    conectar ao servidor PostgreSQL: FATAL: nenhuma entrada pg_hba.conf para o host

    • 12 respostas
  • Marko Smith

    Como fazer a saída do sqlplus aparecer em uma linha?

    • 3 respostas
  • Marko Smith

    Selecione qual tem data máxima ou data mais recente

    • 3 respostas
  • Marko Smith

    Como faço para listar todos os esquemas no PostgreSQL?

    • 4 respostas
  • Marko Smith

    Listar todas as colunas de uma tabela especificada

    • 5 respostas
  • Marko Smith

    Como usar o sqlplus para se conectar a um banco de dados Oracle localizado em outro host sem modificar meu próprio tnsnames.ora

    • 4 respostas
  • Marko Smith

    Como você mysqldump tabela (s) específica (s)?

    • 4 respostas
  • Marko Smith

    Listar os privilégios do banco de dados usando o psql

    • 10 respostas
  • Marko Smith

    Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL?

    • 4 respostas
  • Marko Smith

    Como faço para listar todos os bancos de dados e tabelas usando o psql?

    • 7 respostas
  • Martin Hope
    Jin conectar ao servidor PostgreSQL: FATAL: nenhuma entrada pg_hba.conf para o host 2014-12-02 02:54:58 +0800 CST
  • Martin Hope
    Stéphane Como faço para listar todos os esquemas no PostgreSQL? 2013-04-16 11:19:16 +0800 CST
  • Martin Hope
    Mike Walsh Por que o log de transações continua crescendo ou fica sem espaço? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland Listar todas as colunas de uma tabela especificada 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney O MySQL pode realizar consultas razoavelmente em bilhões de linhas? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx Como posso monitorar o andamento de uma importação de um arquivo .sql grande? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison Como você mysqldump tabela (s) específica (s)? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Jonas Como posso cronometrar consultas SQL usando psql? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas Como faço para listar todos os bancos de dados e tabelas usando o psql? 2011-02-18 00:45:49 +0800 CST

Hot tag

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • Início
  • Perguntas
    • Recentes
    • Highest score
  • tag
  • help

Footer

AskOverflow.Dev

About Us

  • About Us
  • Contact Us

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve