AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • Início
  • system&network
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • Início
  • system&network
    • Recentes
    • Highest score
    • tags
  • Ubuntu
    • Recentes
    • Highest score
    • tags
  • Unix
    • Recentes
    • tags
  • DBA
    • Recentes
    • tags
  • Computer
    • Recentes
    • tags
  • Coding
    • Recentes
    • tags
Início / dba / Perguntas / 230109
Accepted
Learning_DBAdmin
Learning_DBAdmin
Asked: 2019-02-19 22:36:01 +0800 CST2019-02-19 22:36:01 +0800 CST 2019-02-19 22:36:01 +0800 CST

Trabalho de manutenção de banco de dados e agendamento de backup

  • 772

Gostaria de solicitar aconselhamento especializado sobre agendamento de manutenção e trabalhos de backup. Abaixo estava o cenário antes da minha alteração:

  1. Backup completo do banco de dados programado para ser executado às 12h30 todos os dias.
  2. Backup Diferencial programado para ser executado a cada 2 horas no horário comercial (8h às 18h) e a cada 6 horas fora do horário comercial.
  3. O backup de log está programado para ser executado a cada 15 minutos, conforme o envio de log é configurado.
  4. Trabalho de otimização de índice (usando script do Grande Sr. Ola Hallengren) executado todos os domingos de manhã às 1h45.

Costumávamos enfrentar problemas de espaço no disco de armazenamento no cenário acima, pois o backup completo era executado antes do trabalho de manutenção e, portanto, o backup diferencial subsequente estava ficando cada vez maior até que o próximo backup completo fosse executado. Isso me levou a executar o backup completo após o trabalho de manutenção e também verifiquei o nível de fragmentação no meio da semana e com base nos valores decidi executar o trabalho de manutenção duas vezes por semana, abaixo está o plano modificado:

  1. Backup completo do banco de dados programado para ser executado às 12h30 em todos os dias, exceto no domingo e na terça-feira, quando o trabalho de manutenção está programado. No domingo e na terça-feira, o backup completo é feito às 2h30.
  2. Backup Diferencial programado para ser executado a cada 2 horas no horário comercial (8h às 18h) e a cada 6 horas fora do horário comercial - Sem alteração.
  3. O backup de log está programado para ser executado a cada 15 minutos, pois o envio de log está configurado - Nenhuma alteração
  4. Trabalho de otimização de índice (usando script do Grande Sr. Ola Hallengren) sendo executado todos os domingos e terças de manhã às 1h45.

O problema que estou enfrentando agora é o tamanho do backup de log imediatamente após o trabalho de manutenção, o backup de log é muito maior que o backup completo do próprio banco de dados. Escusado será dizer que os backups de log são transferidos para o site secundário, que é então carregado lá para fins de sincronização. Isso levou mais tempo do que o esperado e entre o alerta de envio de logs é acionado, pois o primário e o secundário não estão sincronizados. Anteriormente também, o backup de log era maior, mas costumava ser muito menor que o backup completo e estava demorando consideravelmente menos tempo na transferência do servidor primário para o secundário.

Não tenho certeza se este é um cenário válido em que as alterações (inserir/atualizar/excluir) foram tão volumosas nos últimos 3 dias que o trabalho de manutenção criou um arquivo de log maior que o backup completo e se estabilizaria gradualmente ou eu deveria agendar dois backup completo no domingo e na terça-feira (quando o trabalho de manutenção está em execução) - Um às 12h30 e outro após o trabalho de manutenção.

Aprecie seu conselho gentil.

sql-server backup
  • 2 2 respostas
  • 508 Views

2 respostas

  • Voted
  1. Best Answer
    Rajesh Ranjan
    2019-02-20T06:04:20+08:002019-02-20T06:04:20+08:00

    De acordo com as tarefas de manutenção programada e a segunda estratégia de backup, aqui está minha sugestão que pode atender às suas necessidades de reduzir o backup do log de transações. Como você disse no comentário, “O Log-Shipping está habilitado para os bancos de dados. O recurso Log-Shipping suporta o modelo de recuperação FULL e BULK_LOGGED.

    Então

    A primeira coisa que você pode fazer se quiser continuar com o modelo de recuperação COMPLETO.

    Você pode adicionar duas etapas no trabalho de manutenção programada:

    1. Altere o modelo de recuperação do banco de dados para BULK_LOGGED
    2. Executar script de manutenção do índice
    3. E altere o modelo de recuperação de volta para FULL

    Prós: reduzirá o tamanho do backup do log de truncamento. Contras: A recuperação pontual não será possível durante a duração.

    2ª coisa que você pode fazer se for adequado ao seu SLA (RTO e RPO), pois você está fazendo backup do log de transações a cada 15 minutos, “altere o modelo de recuperação para BULK_LOGGED.

    3ª ação que você pode executar para encontrar todos os índices não utilizados e removê-los, isso ajudará a reduzir o tamanho do backup do T-Log e a duração da manutenção também. Você pode usar este script para encontrar detalhes do índice.

    CREATE TABLE #tbl_index_info(
        [Table Name] [sysname] NOT NULL,
        [Index Name] [sysname] NULL,
        [Index Type] [nvarchar](60) NULL,
        [Index Columns] [sysname] NULL,
        [Row Count] [bigint] NULL,
        [Fill Factor] [tinyint] NOT NULL,
        [user_seeks] [bigint] NOT NULL,
        [user_scans] [bigint] NOT NULL,
        [user_lookups] [bigint] NOT NULL,
        [Index Read] [bigint] NULL,
        [Index Writes] [bigint] NOT NULL,
        [Last Used (Read)] [datetime] NULL,
        [Last Used (Write)] [datetime] NULL,
        [Last Index Re-Built/Re-Organize] [datetime] NULL,
        [index_id] [int] NOT NULL,
        [object_id] [int] NOT NULL
    ) 
    GO
    
    insert into #tbl_index_info
    select      t.name [Table Name]
                ,i.name [Index Name]
                ,i.type_desc [Index Type]
                ,c.name [Index Columns]
                ,p.rows [Row Count]
                ,i.fill_factor [Fill Factor]
                ,ius.user_seeks
                ,ius.user_scans
                ,ius.user_lookups
                ,(ius.user_seeks+ius.user_scans+ius.user_lookups) [Index Read]
                ,ius.user_updates [Index Writes]
                ,COALESCE(ius.last_user_seek,ius.last_user_scan,ius.last_user_lookup) [Last Used (Read)]
                ,ius.last_user_update [Last Used (Write)]
                ,STATS_DATE(s.object_id, s.stats_id) [Last Index Re-Built/Re-Organize]
                ,i.index_id
                ,t.object_id
    
    from        sys.tables t
    inner join  sys.columns c
    on          t.object_id=c.object_id
    inner join  sys.indexes i
    on          t.object_id=i.object_id
    inner join  sys.index_columns ic
    on          t.object_id=ic.object_id and i.index_id=ic.index_id and c.column_id=ic.column_id
    inner join  sys.dm_db_index_usage_stats ius
    on          t.object_id=ius.object_id and i.index_id=ius.index_id
    inner join  sys.stats s
    on          t.object_id=s.object_id and i.index_id=s.stats_id
    inner join  sys.partitions p
    on          p.object_id=i.object_id and p.index_id=i.index_id
    where i.name is not null and i.is_unique!=1
    Order by ius.user_lookups desc
    GO
    
    Select      DISTINCT
                a.[Table Name],a.[Index Name],a.[Index Type],
                (SELECT SUBSTRING(
                (
                    SELECT ',' + [Index Columns] FROM #tbl_index_info b
                    WHERE a.[Table Name]=b.[Table Name] and a.[Index Name]=b.[Index Name]
                    FOR XML PATH('')), 2,10000)
                    )[Index Columns]
                    ,a.[Row Count]
                ,ips.avg_fragmentation_in_percent,a.[Fill Factor],a.user_seeks,a.user_scans
                ,a.user_lookups,a.[Index Read],a.[Index Writes],a.[Last Used (Read)],a.[Last Used (Write)]
                ,[Last Index Re-Built/Re-Organize]
    from
    #tbl_index_info a
    cross apply
                sys.dm_db_index_physical_stats(db_id(),a.object_id,a.index_id,0,DEFAULT) ips
    ORDER BY [Index Read] ASC
    GO
    
    DROP TABLE #tbl_index_info
    GO
    

    4º você precisa verificar se está usando FILLFACTOR apropriado para índices. Menos FILLFACTOR significa mais número de páginas. Portanto, escolha FILLFACTOR de acordo com o uso da tabela.

    Obrigado!

    • 0
  2. Alen
    2019-02-27T08:13:11+08:002019-02-27T08:13:11+08:00

    Além do acima, você pode agendar para que seus backups de log não sejam executados durante a manutenção do índice e reagendar seu total para execução após o trabalho de manutenção. Você precisará configurar um log de backup como nulo também para executar durante o trabalho de manutenção. O backup completo pegará todas as alterações, mas somente se você limpar o log durante o processo. Caso contrário, o full será executado e você terá outro backup de log grande para lidar. Eu faço algo semelhante para grandes cargas ETL.

    A manutenção do índice cria muitos logs de log de transações. Outra coisa que você pode fazer é executar a manutenção diariamente. Isso resultará em backups de log menores.

    Eu lidei com os mesmos problemas anos atrás e mudar para a manutenção diária ajudou. Em vez de um processo semanal de 3 a 6 horas, tornou-se um processo diário de 15 a 30 minutos.

    • 0

relate perguntas

  • Preciso de índices separados para cada tipo de consulta ou um índice de várias colunas funcionará?

  • Backups de banco de dados no Oracle - Exportar o banco de dados ou usar outras ferramentas?

  • Quando devo usar uma restrição exclusiva em vez de um índice exclusivo?

  • Quais são as principais causas de deadlocks e podem ser evitadas?

  • Como determinar se um Índice é necessário ou necessário

Sidebar

Stats

  • Perguntas 205573
  • respostas 270741
  • best respostas 135370
  • utilizador 68524
  • Highest score
  • respostas
  • Marko Smith

    conectar ao servidor PostgreSQL: FATAL: nenhuma entrada pg_hba.conf para o host

    • 12 respostas
  • Marko Smith

    Como fazer a saída do sqlplus aparecer em uma linha?

    • 3 respostas
  • Marko Smith

    Selecione qual tem data máxima ou data mais recente

    • 3 respostas
  • Marko Smith

    Como faço para listar todos os esquemas no PostgreSQL?

    • 4 respostas
  • Marko Smith

    Listar todas as colunas de uma tabela especificada

    • 5 respostas
  • Marko Smith

    Como usar o sqlplus para se conectar a um banco de dados Oracle localizado em outro host sem modificar meu próprio tnsnames.ora

    • 4 respostas
  • Marko Smith

    Como você mysqldump tabela (s) específica (s)?

    • 4 respostas
  • Marko Smith

    Listar os privilégios do banco de dados usando o psql

    • 10 respostas
  • Marko Smith

    Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL?

    • 4 respostas
  • Marko Smith

    Como faço para listar todos os bancos de dados e tabelas usando o psql?

    • 7 respostas
  • Martin Hope
    Jin conectar ao servidor PostgreSQL: FATAL: nenhuma entrada pg_hba.conf para o host 2014-12-02 02:54:58 +0800 CST
  • Martin Hope
    Stéphane Como faço para listar todos os esquemas no PostgreSQL? 2013-04-16 11:19:16 +0800 CST
  • Martin Hope
    Mike Walsh Por que o log de transações continua crescendo ou fica sem espaço? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland Listar todas as colunas de uma tabela especificada 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney O MySQL pode realizar consultas razoavelmente em bilhões de linhas? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx Como posso monitorar o andamento de uma importação de um arquivo .sql grande? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison Como você mysqldump tabela (s) específica (s)? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Jonas Como posso cronometrar consultas SQL usando psql? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas Como faço para listar todos os bancos de dados e tabelas usando o psql? 2011-02-18 00:45:49 +0800 CST

Hot tag

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • Início
  • Perguntas
    • Recentes
    • Highest score
  • tag
  • help

Footer

AskOverflow.Dev

About Us

  • About Us
  • Contact Us

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve