Início / dba / Perguntas / 213199
Accepted
gotqn
Asked: 2018-07-26 06:36:25 +0800 CST

Quais são os benefícios exatos de usar os serviços R no Enterprise vs Standard?

  • 772

Atualmente, estou usando SQL Server 2016 SPa edição padrão e quero instalar os serviços R. Na documentação é dito que uma instalação autônoma é permitida apenas no Enterprise ( Machine Learning Server (Standalone)).

Além disso, encontrei um post, onde o cara está falando que no padrão não consigo usar operações paralelas e há limitações de memória:

insira a descrição da imagem aqui

Alguém poderia dizer quais são as limitações exatas de memória/processadores?

Preciso de detalhes como usar cálculos pesados ​​de R e os testes por enquanto mostram que a implementação na edição padrão não está funcionando como eu esperava.

sql-server t-sql

2 respostas

  1. Best Answer

    Confira a página "Disponibilidade de recursos nas edições do SQL Server Machine Learning Services" dos Manuais Online:

    A diferença entre integração básica e avançada é a escala. A integração avançada pode usar todos os núcleos disponíveis para processamento paralelo de conjuntos de dados em qualquer tamanho que seu computador possa acomodar. A integração básica é limitada a 2 núcleos e a conjuntos de dados que cabem na memória.

    Books Online entra em mais detalhes nessa página sobre as restrições de implantação, bem como:

    Apenas um servidor (autônomo) oferece os recursos de operacionalização incluídos em uma instalação do R Server ou Machine Learning Server da Microsoft (sem marca SQL). A operacionalização inclui a implantação de serviços da Web e recursos de hospedagem.

    Para uma instalação (no banco de dados), a abordagem equivalente para operacionalizar soluções é aproveitar os recursos do mecanismo de banco de dados, quando você converte o código em uma função que pode ser executada em um procedimento armazenado.

    • 6

  2. Como Brent citou lá, uma das principais diferenças é a escala.

    Se o seu cálculo for embaraçosamente paralelo, ou seja, cada linha pode ser calculada independentemente uma da outra, então usar sp_execute_external_scriptwith @parallel = 1permitirá que você execute seus cálculos R em paralelo facilmente. Observe que ainda é possível morder mais do que você pode mastigar e ficar sem memória; nesse caso, você pode adicionar @params = N'@r_rowsPerRead INT', @r_rowsPerRead = Nonde N é a quantidade máxima de linhas que você gostaria de ler de uma só vez.

    Usando o acima, consegui executar um cálculo R contra 2 bilhões de linhas de dados em menos de 10 minutos (obviamente, sua milhagem pode variar).

    Se você precisar de mais controle do lote, como garantir que as linhas apropriadas sejam agrupadas, acho que você pode conseguir isso chamando as funções RevoScaleR diretamente de seu script R, mas não brinquei com isso.

    Se você absolutamente precisar usar a Standard Edition, poderá ser criativo ao agrupar os dados em lote, mas quando tentei isso, descobri que o código ficaria bastante complexo e também não era tão rápido quanto aproveitar o streaming da Enterprise Edition.

    Mais informações aqui: https://learn.microsoft.com/en-us/sql/relational-databases/system-stored-procedures/sp-execute-external-script-transact-sql?view=sql-server-2017

    Observação O SSDT não oferece suporte GRANT EXECUTE ANY EXTERNAL SCRIPT, portanto, se você estiver usando isso para implantações, as coisas se tornarão dolorosas. Eu levantei isso como um problema na voz do usuário https://feedback.azure.com/forums/908035-sql-server/suggestions/32896864-grant-execute-any-external-script-not-recognised-b .

    • 4

relate perguntas