AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • Início
  • system&network
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • Início
  • system&network
    • Recentes
    • Highest score
    • tags
  • Ubuntu
    • Recentes
    • Highest score
    • tags
  • Unix
    • Recentes
    • tags
  • DBA
    • Recentes
    • tags
  • Computer
    • Recentes
    • tags
  • Coding
    • Recentes
    • tags
Início / dba / Perguntas / 5295
Accepted
Adam Butler
Adam Butler
Asked: 2011-09-02 02:45:19 +0800 CST2011-09-02 02:45:19 +0800 CST 2011-09-02 02:45:19 +0800 CST

A criação de partições reduzirá o bloqueio e como implementamos isso no sql-server?

  • 772

Um cliente deseja que nosso aplicativo processe mais dados com mais rapidez, então agende uma reunião com seu dba para discutir as opções.

Este aplicativo gera muitos dados que são usados ​​para relatórios. Antes de cada execução, os dados antigos desse item são excluídos, os cálculos são executados e, em seguida, os novos dados são inseridos. Em períodos de maior movimento, os usuários enfileiram centenas dessas tarefas de geração e executamos até 30 delas simultaneamente. Cada execução pode criar 60 mil linhas.

O dba sugeriu que poderíamos alterar o aplicativo para usar 30 partições (por exemplo, uma por thread) para reduzir o bloqueio entre threads durante a inserção e exclusão. Eles sugeriram que no sql padrão poderíamos fazer algo como

INSERT INTO schema.table.partition (...) VALUES (...)

Não vejo essa sintaxe nos documentos do msdn e isso significará alterar esse aplicativo, o que é uma dor, mas é possível fazer isso? Pelo que entendi, em vez disso, particionaríamos com base nas colunas das tabelas usando funções de partição?

Eu li os documentos de função de criação de partição, mas não tenho certeza de como criar uma função para atender às nossas necessidades. Para piorar a situação, ainda não tenho a edição corporativa para testar isso, então peço desculpas pela sintaxe incorreta.

Estou pensando que, por exemplo, se tivermos uma tabela de itens e uma tabela itemdata com dados para esse item, podemos particionar a tabela itemdata dividindo os dados com base em uma função como itemid mod 30. Isso colocaria o item 1 na partição 1, o item 2 na partição 2 etc. Não tenho certeza se poderíamos fazer isso na função de partição, no esquema, na declaração da tabela ou precisaríamos criar uma coluna calculada e usar um cláusula de valores? Também não tenho certeza se veremos alguma melhoria de desempenho?

É assim que acho que poderíamos implementar isso:

CREATE PARTITION FUNCTION SplittingItemIds_PFunc(decimal(18,0)) AS
RANGE LEFT FOR VALUES
(0,1,2,3, ... ,29)

CREATE PARTITION SCHEME SplittingItemIds_Scheme 
AS PARTITION SplittingItemIds_PFunc
ALL TO ([PRIMARY]);

CREATE TABLE ItemData  
(
    Id decimal(18,0),
    ItemId decimal(18,0),
    ...
)
ON PartitionSplittingItemIds_Scheme(ItemId % 30)

CREATE INDEX ItemData_ItemId_Idx ON ItemData(ItemId);

Isso está certo? Pelo que li, o índice será particionado automaticamente - correto?

sql-server sql-server-2005
  • 2 2 respostas
  • 3367 Views

2 respostas

  • Voted
  1. gbn
    2011-09-02T06:33:14+08:002011-09-02T06:33:14+08:00

    O software não pode consertar isso se os IO/discos subjacentes forem opacos para você.

    • Se você adicionar partições, não gerará 30 threads
    • Se todas as suas partições estiverem no mesmo volume, você diminuirá a taxa de transferência

    Eu trabalhei em sistemas semelhantes onde tínhamos

    • um banco de dados de preparo
    • Recuperação SIMPLES no estágio
    • exclusões adiadas (por exemplo, uma execução nova ou atualizada é um INSERT) que duram horas
    • cada execução tem uma linha de cabeçalho para rastrear esse status
    • liberar para o banco de dados real quando o cliente estiver pronto

    Nós também

    • removidos FKs e outros ajustes na mesa principal
    • coloque o banco de dados de preparo em volumes separados.
    • 8
  2. Best Answer
    SqlACID
    2011-09-02T13:53:19+08:002011-09-02T13:53:19+08:00

    Parece que o dba está falando sobre particionamento horizontal em vez de particionamento de tabela, quebrando as tabelas problemáticas usando regras, como todos os clientes que começam com a letra a na tabelaA, b na tabelaB, etc. Isso pode ser útil em algumas circunstâncias , e pode ser feito com qualquer edição do servidor SQL, mas tem muitos dos mesmos problemas já mencionados, ou seja, E/S.

    • 2

relate perguntas

  • Preciso de índices separados para cada tipo de consulta ou um índice de várias colunas funcionará?

  • Quando devo usar uma restrição exclusiva em vez de um índice exclusivo?

  • Quais são as principais causas de deadlocks e podem ser evitadas?

  • Como determinar se um Índice é necessário ou necessário

  • Downgrade do SQL Server 2008 para 2005

Sidebar

Stats

  • Perguntas 205573
  • respostas 270741
  • best respostas 135370
  • utilizador 68524
  • Highest score
  • respostas
  • Marko Smith

    Como você mysqldump tabela (s) específica (s)?

    • 4 respostas
  • Marko Smith

    Como você mostra o SQL em execução em um banco de dados Oracle?

    • 2 respostas
  • Marko Smith

    Como selecionar a primeira linha de cada grupo?

    • 6 respostas
  • Marko Smith

    Listar os privilégios do banco de dados usando o psql

    • 10 respostas
  • Marko Smith

    Posso ver Consultas Históricas executadas em um banco de dados SQL Server?

    • 6 respostas
  • Marko Smith

    Como uso currval() no PostgreSQL para obter o último id inserido?

    • 10 respostas
  • Marko Smith

    Como executar o psql no Mac OS X?

    • 11 respostas
  • Marko Smith

    Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL?

    • 4 respostas
  • Marko Smith

    Como faço para listar todos os bancos de dados e tabelas usando o psql?

    • 7 respostas
  • Marko Smith

    Passando parâmetros de array para um procedimento armazenado

    • 12 respostas
  • Martin Hope
    Manuel Leduc Restrição exclusiva de várias colunas do PostgreSQL e valores NULL 2011-12-28 01:10:21 +0800 CST
  • Martin Hope
    markdorison Como você mysqldump tabela (s) específica (s)? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Stuart Blackler Quando uma chave primária deve ser declarada sem cluster? 2011-11-11 13:31:59 +0800 CST
  • Martin Hope
    pedrosanta Listar os privilégios do banco de dados usando o psql 2011-08-04 11:01:21 +0800 CST
  • Martin Hope
    Jonas Como posso cronometrar consultas SQL usando psql? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas Como faço para listar todos os bancos de dados e tabelas usando o psql? 2011-02-18 00:45:49 +0800 CST
  • Martin Hope
    BrunoLM Guid vs INT - Qual é melhor como chave primária? 2011-01-05 23:46:34 +0800 CST
  • Martin Hope
    bernd_k Quando devo usar uma restrição exclusiva em vez de um índice exclusivo? 2011-01-05 02:32:27 +0800 CST
  • Martin Hope
    Patrick Como posso otimizar um mysqldump de um banco de dados grande? 2011-01-04 13:13:48 +0800 CST

Hot tag

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • Início
  • Perguntas
    • Recentes
    • Highest score
  • tag
  • help

Footer

AskOverflow.Dev

About Us

  • About Us
  • Contact Us

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve