Início / dba / Perguntas / 148833
Accepted
Michael Green
Asked: 2016-09-06 04:06:20 +0800 CST

Como o PolyBase coleta estatísticas de tabelas externas?

  • 772

Os livros on-line têm a dizer sobre a otimização de consultas no PolyBase:

O otimizador de consulta toma uma decisão baseada em custo para enviar a computação para o Hadoop quando isso melhorar o desempenho da consulta. Ele usa estatísticas em tabelas externas para tomar a decisão baseada em custo. A computação push cria tarefas MapReduce e aproveita os recursos computacionais distribuídos do Hadoop.

Minha pergunta - como e quando o otimizador coleta essas estatísticas?

Dentro do mecanismo relacional do SQL Server, as estatísticas podem ser criadas implícita ou explicitamente, envelhecem conforme ocorrem as gravações e podem ser atualizadas explicitamente ou durante a manutenção da tabela. Existem estratégias semelhantes empregadas no PolyBase?

Dado que os dados podem ser carregados no blob do Hadoop/Azure sem que o SQL Server os veja no caminho, e os volumes de dados serão grandes (provavelmente) a criação de estatísticas ad hoc em tempo de execução por meio de amostragem ou similar parece uma estratégia improvável para mim.

sql-server sql-server-2016

1 respostas

  1. Best Answer

    A criação e manutenção das estatísticas do PolyBase está nas mãos do DBA.

    O guia "primeiros passos" fornece várias etapas para estabelecer o PolyBase, a última das quais é CREATE STATISTICS referenciando a tabela externa.

    A documentação em CREATE STATISTICS declara:

    Estatísticas para tabelas externas

    Ao criar estatísticas de tabela externa, o SQL Server importa a tabela externa para uma tabela temporária do SQL Server e, em seguida, cria as estatísticas. Para estatísticas de amostras, apenas as linhas de amostra são importadas. Se você tiver uma tabela externa grande, será muito mais rápido usar a amostragem padrão em vez da opção de varredura completa.

    e mais abaixo

    Limitações e Restrições

    A atualização de estatísticas não é suportada em tabelas externas. Para atualizar as estatísticas em uma tabela externa, elimine e recrie as estatísticas.

    A partir disso concluo que cabe ao administrador do sistema

    • criar estatísticas apropriadas para a carga de trabalho pretendida
    • monitorar estatísticas obsoletas
    • implementar procedimentos de manutenção para estatísticas externas
    • garantindo que haja espaço suficiente para a "tabela temporária" (TempDB?)

    Imagina-se que, à medida que o produto amadurece e ganha força, mais recursos do mecanismo de dados atual (criação automática e estatísticas de atualização automática) serão transferidos para o PolyBase. Por outro lado, você realmente quer esperar pelos resultados enquanto uma loja de 5 PB é amostrada?

    • 3

relate perguntas