AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • Início
  • system&network
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • Início
  • system&network
    • Recentes
    • Highest score
    • tags
  • Ubuntu
    • Recentes
    • Highest score
    • tags
  • Unix
    • Recentes
    • tags
  • DBA
    • Recentes
    • tags
  • Computer
    • Recentes
    • tags
  • Coding
    • Recentes
    • tags
Início / dba / Perguntas / 127550
Accepted
blobbles
blobbles
Asked: 2016-01-28 17:29:38 +0800 CST2016-01-28 17:29:38 +0800 CST 2016-01-28 17:29:38 +0800 CST

Banco de dados no modelo de recuperação SIMPLE completo usando a tarefa de inserção em massa do SSIS

  • 772

Tenho um banco de dados no modelo de recuperação SIMPLES com 10GB livres.

O arquivo que estou tentando carregar por meio do carregamento em massa do SSIS é de 1 GB.

A tabela está vazia (truncada antes de cada carregamento), é um heap e não possui índices não clusterizados. É uma tabela de campos varchar(255).

Ao executar a tarefa de inserção em massa, posso observar o tamanho do banco de dados crescer de 2 GB para 12 GB (espaço máximo disponível), onde fica sem espaço e retorna a seguinte mensagem:

Erro [Bulk Insert Task]: Ocorreu um erro com a seguinte mensagem de erro: "Não foi possível alocar espaço para o objeto 'dbo.tablename' no banco de dados 'DBNAME' porque o grupo de arquivos 'PRIMARY' está cheio. Crie espaço em disco excluindo arquivos desnecessários, soltando objetos no grupo de arquivos, adicionando arquivos adicionais ao grupo de arquivos ou definindo o crescimento automático para arquivos existentes no grupo de arquivos.".

Em primeiro lugar, pensei porque estava no modelo de recuperação SIMPLES, o carregamento em massa não é registrado. Eu sei que é quando há dados na tabela E um índice clusterizado, mas nenhum dos dois é o caso aqui. Presumo que a Tarefa de Inserção em Massa esteja incluída nisso, pois deve usar o BCP. Estou errado?

Em segundo lugar, parece estranho que um arquivo de texto de 1 GB resulte em 10 GB nos campos varchar do SQL Server. Isso parece muito estranho. Os dados não estão sendo transformados, estão sendo carregados em massa em uma tabela. Por que está crescendo tanto?

sql-server sql-server-2014
  • 1 1 respostas
  • 840 Views

1 respostas

  • Voted
  1. Best Answer
    IT Thug Ninja
    2016-01-28T20:21:56+08:002016-01-28T20:21:56+08:00

    Posso observar o tamanho do banco de dados crescer de 2 GB para 12 GB (espaço máximo disponível), onde fica sem espaço e retorna a seguinte mensagem:

    O problema é que você está simplesmente ficando sem espaço em disco e o arquivo físico não pode crescer para concluir a transação, ou você tem um limite nas configurações de crescimento do arquivo SQL e o arquivo físico não pode crescer mais para concluir a transação (seja qual for o espaço máximo disponível significa exatamente, por exemplo, por configurações ou capacidade de disco).

    Eu pensei que porque eu estava no modelo de recuperação SIMPLES, o carregamento em massa não é registrado.

    De acordo com o site abaixo e o texto citado, ele afirma que o registro mínimo é mais eficiente do que o registro completo, mas NÃO afirma que NENHUM registro ocorre no SIMPLEmodo de recuperação.

    Pré-requisitos para registro mínimo em importação em massa

    no modelo de recuperação simples ou no modelo de recuperação bulk-logged, o registro mínimo de operações de importação em massa reduz a possibilidade de que uma operação de importação em massa preencha o espaço de log. O registro mínimo também é mais eficiente do que o registro completo.

    Portanto, isso significa que ainda há log de transações SQL que ocorre quando o banco de dados está no SIMPLEmodo de recuperação, mas é um log mínimo quando comparado ao FULLmodo de recuperação.

    Por que está crescendo tanto?

    Parece que a explicação seria que seus tamanhos de transação comprometidos com as BULK INSERToperações são ENORMES. Simplesmente faça os parâmetros de tamanho de commit\batch de sua lógica no SSIS ou execute o TSQL no pacote de tamanho menor. Tente testar com 100, 1000, 10000, 100000 e assim por diante para ver o que oferece o melhor resultado e evita que o problema ocorra.

    Se as transações forem menores, depois que as transações confirmadas forem confirmadas no SIMPLEmodo de recuperação, o espaço de log das transações confirmadas poderá ser reutilizado por transações subsequentes BULK INSERT(ou outras).


    Recursos adicionais

    (Estes artigos parecem ter algumas referências a parâmetros potenciais em áreas de pacote SSIS para definir para transações menores, etc. Os títulos ou as etapas podem ser para um objetivo final diferente, mas há conteúdo potencialmente aplicável neles para o que você pode precisar alteração em sua lógica SSIS para corrigir seu problema, portanto, pode valer a pena uma simples leitura.)

    • As 10 principais práticas recomendadas do SQL Server Integration Services
    • Tenha também suas mensagens de erro SSIS Fast Load (Bulk Load) e Row by Row
    • 4

relate perguntas

  • SQL Server - Como as páginas de dados são armazenadas ao usar um índice clusterizado

  • Preciso de índices separados para cada tipo de consulta ou um índice de várias colunas funcionará?

  • Quando devo usar uma restrição exclusiva em vez de um índice exclusivo?

  • Quais são as principais causas de deadlocks e podem ser evitadas?

  • Como determinar se um Índice é necessário ou necessário

Sidebar

Stats

  • Perguntas 205573
  • respostas 270741
  • best respostas 135370
  • utilizador 68524
  • Highest score
  • respostas
  • Marko Smith

    conectar ao servidor PostgreSQL: FATAL: nenhuma entrada pg_hba.conf para o host

    • 12 respostas
  • Marko Smith

    Como fazer a saída do sqlplus aparecer em uma linha?

    • 3 respostas
  • Marko Smith

    Selecione qual tem data máxima ou data mais recente

    • 3 respostas
  • Marko Smith

    Como faço para listar todos os esquemas no PostgreSQL?

    • 4 respostas
  • Marko Smith

    Listar todas as colunas de uma tabela especificada

    • 5 respostas
  • Marko Smith

    Como usar o sqlplus para se conectar a um banco de dados Oracle localizado em outro host sem modificar meu próprio tnsnames.ora

    • 4 respostas
  • Marko Smith

    Como você mysqldump tabela (s) específica (s)?

    • 4 respostas
  • Marko Smith

    Listar os privilégios do banco de dados usando o psql

    • 10 respostas
  • Marko Smith

    Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL?

    • 4 respostas
  • Marko Smith

    Como faço para listar todos os bancos de dados e tabelas usando o psql?

    • 7 respostas
  • Martin Hope
    Jin conectar ao servidor PostgreSQL: FATAL: nenhuma entrada pg_hba.conf para o host 2014-12-02 02:54:58 +0800 CST
  • Martin Hope
    Stéphane Como faço para listar todos os esquemas no PostgreSQL? 2013-04-16 11:19:16 +0800 CST
  • Martin Hope
    Mike Walsh Por que o log de transações continua crescendo ou fica sem espaço? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland Listar todas as colunas de uma tabela especificada 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney O MySQL pode realizar consultas razoavelmente em bilhões de linhas? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx Como posso monitorar o andamento de uma importação de um arquivo .sql grande? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison Como você mysqldump tabela (s) específica (s)? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Jonas Como posso cronometrar consultas SQL usando psql? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas Como faço para listar todos os bancos de dados e tabelas usando o psql? 2011-02-18 00:45:49 +0800 CST

Hot tag

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • Início
  • Perguntas
    • Recentes
    • Highest score
  • tag
  • help

Footer

AskOverflow.Dev

About Us

  • About Us
  • Contact Us

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve