AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • Início
  • system&network
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • Início
  • system&network
    • Recentes
    • Highest score
    • tags
  • Ubuntu
    • Recentes
    • Highest score
    • tags
  • Unix
    • Recentes
    • tags
  • DBA
    • Recentes
    • tags
  • Computer
    • Recentes
    • tags
  • Coding
    • Recentes
    • tags
Início / dba / Perguntas / 230491
Accepted
HoneyBadger
HoneyBadger
Asked: 2019-02-23 07:00:41 +0800 CST2019-02-23 07:00:41 +0800 CST 2019-02-23 07:00:41 +0800 CST

Espaço em disco cheio durante a inserção, o que acontece?

  • 772

Hoje descobri que o disco rígido que armazena meus bancos de dados estava cheio. Isso já aconteceu antes, geralmente a causa é bastante evidente. Normalmente, há uma consulta incorreta, que causa grandes vazamentos no tempdb, que crescem até o disco ficar cheio. Desta vez foi um pouco menos evidente o que aconteceu, já que tempdb não foi a causa da unidade cheia, foi o próprio banco de dados.

Os fatos:

  • O tamanho normal do banco de dados é de cerca de 55 GB, cresceu para 605 GB.
  • O arquivo de log tem tamanho normal, o arquivo de dados é enorme.
  • Datafile tem 85% de espaço disponível (eu interpreto isso como 'ar': espaço que foi usado, mas foi liberado. O SQL Server reserva todo o espaço uma vez alocado).
  • O tamanho do Tempdb é normal.

Encontrei a causa provável; há uma consulta que seleciona muitas linhas (junção ruim causa a seleção de 11 bilhões de linhas onde são esperadas algumas centenas de milhares). Esta é uma SELECT INTOconsulta, o que me fez pensar se o seguinte cenário poderia ter acontecido:

  • SELECT INTO é executado
  • A tabela de destino é criada
  • Os dados são inseridos conforme são selecionados
  • O disco enche, fazendo com que a inserção falhe
  • SELECT INTO é abortado e revertido
  • A reversão libera espaço (os dados já inseridos são removidos), mas o SQL Server não libera o espaço liberado.

Nesta situação, no entanto, eu não esperava que a tabela criada pelo SELECT INTOainda existisse, ela deveria ser descartada pelo rollback. Eu testei isso:

BEGIN TRANSACTION 
SELECT  T.x
INTO    TMP.test
FROM    (VALUES(1))T(x)

ROLLBACK

SELECT  * 
FROM    TMP.test

Isto resulta em:

(1 row affected)
Msg 208, Level 16, State 1, Line 8
Invalid object name 'TMP.test'.

No entanto, a tabela de destino existe. A consulta real não foi executada em uma transação explícita, isso pode explicar a existência da tabela de destino?

As suposições que esbocei aqui estão corretas? Este é um cenário provável de ter acontecido?

sql-server sql-server-2016
  • 2 2 respostas
  • 3116 Views

2 respostas

  • Voted
  1. Best Answer
    sepupic
    2019-02-23T08:32:52+08:002019-02-23T08:32:52+08:00

    A consulta real não foi executada em uma transação explícita, isso pode explicar a existência da tabela de destino?

    Sim, exatamente assim.

    Se você fizer um simples select intofora de um explicit transaction, existem dois transactionsno modo autocommit: o primeiro cria o tablee o segundo o preenche.

    Você pode provar isso para si mesmo desta forma:

    Em um servidor de teste dedicado databaseem simple recovery model, primeiro faça um checkpointe certifique-se de que o log contenha apenas algumas linhas (3 no caso de 2016) relacionadas ao checkpoint. Em seguida, execute uma select intolinha e verifique lognovamente, procurando por um begin tranassociado a select into:

    checkpoint;
    
    select *
    from sys.fn_dblog(null, null);
    
    select 'a' as col
    into dbo.t3;  
    
    select *
    from sys.fn_dblog(null, null)
    where Operation = 'LOP_BEGIN_XACT'
          and [Transaction Name] = 'SELECT INTO';
    

    Você obterá 2 linhas, mostrando que você tinha 2 transactions.

    As suposições que esbocei aqui estão corretas? Este é um cenário provável de ter acontecido?

    Sim, eles estão corretos.

    A insertparte de select intowas rolled back, mas não libera nenhum espaço de dados. Você pode verificar isso executando sp_spaceused; você verá muitos unallocated space.

    Se você quiser que o banco de dados libere esse espaço não alocado, você deve usar shrinkseu(s) arquivo(s) de dados.

    • 17
  2. Josh Darnell
    2019-02-23T08:27:11+08:002019-02-23T08:27:11+08:00

    Você está correto, o SELECT...INTOcomando não é atômico. Isso não foi documentado no momento da postagem original, mas agora é chamado especificamente na página SELECT - INTO Clause (Transact-SQL) no MS Docs (yay open source!):

    A SELECT...INTOinstrução opera em duas partes - a nova tabela é criada e as linhas são inseridas. Isso significa que, se as inserções falharem, todas serão revertidas, mas a nova tabela (vazia) permanecerá. Se você precisar que toda a operação seja bem-sucedida ou falhe como um todo, use uma transação explícita .

    Vou criar um banco de dados que usa o modelo de recuperação completo. Vou fornecer um arquivo de log bastante pequeno e, em seguida, informar que o arquivo de log não pode crescer automaticamente:

    CREATE DATABASE [SelectIntoTestDB]
    ON PRIMARY 
    ( 
        NAME = N'SelectIntoTestDB', 
        FILENAME = N'C:\Program Files\Microsoft SQL Server\MSSQL14.SQL2017\MSSQL\DATA\SelectIntoTestDB.mdf', 
        SIZE = 8192KB, 
        FILEGROWTH = 65536KB
    )
    LOG ON 
    ( 
        NAME = N'SelectIntoTestDB_log', 
        FILENAME = N'C:\Program Files\Microsoft SQL Server\MSSQL14.SQL2017\MSSQL\DATA\SelectIntoTestDB_log.ldf', 
        SIZE = 8192KB, 
        FILEGROWTH = 0
    )
    

    E então tentarei inserir todas as postagens da minha cópia do banco de dados StackOverflow2010. Isso deve gravar um monte de coisas no arquivo de log.

    USE [SelectIntoTestDB];
    GO
    
    SELECT *
    INTO dbo.Posts
    FROM StackOverflow2010.dbo.Posts;
    

    Isso resultou no seguinte erro após a execução por 4 segundos:

    Msg 9002, Level 17, State 4, Line 1
    O log de transações do banco de dados 'SelectIntoTestDB' está cheio devido a 'ACTIVE_TRANSACTION'.

    Mas há uma tabela Posts vazia no meu novo banco de dados:

    captura de tela de zero resultados da tabela recém-criada

    Então, como você suspeitava, deu CREATE TABLEcerto, mas a INSERTparte foi toda revertida. Uma solução alternativa seria usar uma transação explícita (que você já observou em sua pergunta).

    • 16

relate perguntas

  • SQL Server - Como as páginas de dados são armazenadas ao usar um índice clusterizado

  • Preciso de índices separados para cada tipo de consulta ou um índice de várias colunas funcionará?

  • Quando devo usar uma restrição exclusiva em vez de um índice exclusivo?

  • Quais são as principais causas de deadlocks e podem ser evitadas?

  • Como determinar se um Índice é necessário ou necessário

Sidebar

Stats

  • Perguntas 205573
  • respostas 270741
  • best respostas 135370
  • utilizador 68524
  • Highest score
  • respostas
  • Marko Smith

    conectar ao servidor PostgreSQL: FATAL: nenhuma entrada pg_hba.conf para o host

    • 12 respostas
  • Marko Smith

    Como fazer a saída do sqlplus aparecer em uma linha?

    • 3 respostas
  • Marko Smith

    Selecione qual tem data máxima ou data mais recente

    • 3 respostas
  • Marko Smith

    Como faço para listar todos os esquemas no PostgreSQL?

    • 4 respostas
  • Marko Smith

    Listar todas as colunas de uma tabela especificada

    • 5 respostas
  • Marko Smith

    Como usar o sqlplus para se conectar a um banco de dados Oracle localizado em outro host sem modificar meu próprio tnsnames.ora

    • 4 respostas
  • Marko Smith

    Como você mysqldump tabela (s) específica (s)?

    • 4 respostas
  • Marko Smith

    Listar os privilégios do banco de dados usando o psql

    • 10 respostas
  • Marko Smith

    Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL?

    • 4 respostas
  • Marko Smith

    Como faço para listar todos os bancos de dados e tabelas usando o psql?

    • 7 respostas
  • Martin Hope
    Jin conectar ao servidor PostgreSQL: FATAL: nenhuma entrada pg_hba.conf para o host 2014-12-02 02:54:58 +0800 CST
  • Martin Hope
    Stéphane Como faço para listar todos os esquemas no PostgreSQL? 2013-04-16 11:19:16 +0800 CST
  • Martin Hope
    Mike Walsh Por que o log de transações continua crescendo ou fica sem espaço? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland Listar todas as colunas de uma tabela especificada 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney O MySQL pode realizar consultas razoavelmente em bilhões de linhas? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx Como posso monitorar o andamento de uma importação de um arquivo .sql grande? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison Como você mysqldump tabela (s) específica (s)? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Jonas Como posso cronometrar consultas SQL usando psql? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas Como faço para listar todos os bancos de dados e tabelas usando o psql? 2011-02-18 00:45:49 +0800 CST

Hot tag

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • Início
  • Perguntas
    • Recentes
    • Highest score
  • tag
  • help

Footer

AskOverflow.Dev

About Us

  • About Us
  • Contact Us

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve