Início / coding / Perguntas / 78604674
Accepted
Joshua Shew
Asked: 2024-06-11 06:03:36 +0800 CST

Quais valores podem ser inseridos para `R_MAX_VSIZE` em R?

  • 772

Estou trabalhando em operações com uso intensivo de memória em R. Vi alguns conselhos neste site sobre como aumentar o limite de memória, R_MAX_VSIZEmas não encontrei uma explicação clara sobre exatamente quais tipos de valores podem ser inseridos e como eles são lidos.

Quais formatos são aceitos/válidos para a R_MAX_VSIZEvariável de ambiente?

Aqui está o que descobri até agora:

  1. Documentação base R - Memória: Memória disponível para armazenamento de dados

    O tamanho máximo do heap vetorial pode ser definido com a variável de ambienteR_MAX_VSIZE

    Não consigo encontrar informações adicionais sobre quais valores são permitidos nesta página de ajuda.

  2. Resposta de Graeme Frost ao R no MacOS Erro: memória vetorial esgotada (limite atingido?)

    Esta resposta sugere definir o valor como "100Gb". Quando encontrei o problema em minha máquina, isso realmente resolveu meu problema, mas há outras respostas que indicam que outros valores são válidos.

  3. Resposta de Connor Dibble ao erro: memória vetorial esgotada (limite atingido?) R 3.5.0 macOS

    Esta resposta define o valor export R_MAX_VSIZE=32000000000which não inclui as unidades, então presumo que esteja sendo interpretado como bytes.

1 respostas

  1. Best Answer

    Pelo menos desde o R-devel no momento em que este artigo foi escrito (4.5.0), o capítulo MemóriaR_MAX_VSIZE que cobre foi atualizado para incluir qual deveria ser seu valor:

    Os limites de heap vetorial são fornecidos em bytes.

    No entanto, no código-fonte do R (pelo menos um espelho dele), podemos ver que o valor recuperado da variável de ambiente é passado para R_Decode2Long:

    if ((p = getenv("R_MAX_VSIZE"))) {
value = R_Decode2Long(p, &ierr);

    Na definição desta função também são interpretados valores com unidades (ou seja, 100G, 20M, etc.):

    R_size_t R_Decode2Long(char *p, int *ierr)
{
    R_size_t v = strtol(p, &p, 10);
    *ierr = 0;
    if(p[0] == '\0') return v;
    /* else look for letter-code ending : */
    if(R_Verbose)
    REprintf("R_Decode2Long(): v=%ld\n", (long)v);
    // NOTE: currently, positive *ierr are not differentiated in the callers:
    if(p[0] == 'G') {
    if((Giga * (double)v) > (double) R_SIZE_T_MAX) { *ierr = 4; return(v); }
    return (R_size_t) Giga * v;
    }
    else if(p[0] == 'M') {
    if((Mega * (double)v) > (double) R_SIZE_T_MAX) { *ierr = 1; return(v); }
    return (R_size_t) Mega * v;
    }
    else if(p[0] == 'K') {
    if((1024 * (double)v) > (double) R_SIZE_T_MAX) { *ierr = 2; return(v); }
    return (1024*v);
    }
    else if(p[0] == 'k') {
    if((1000 * (double)v) > (double) R_SIZE_T_MAX) { *ierr = 3; return(v); }
    return (1000*v);
    }
    else {
    *ierr = -1;
    return(v);
    }
}
    • 3

relate perguntas