Início / dba / Perguntas / 316497
Accepted
Erick Ramirez
Asked: 2022-09-06 20:44:22 +0800 CST

Como restauro snapshots do Cassandra para outro cluster com configuração idêntica?

  • 772

Essa é uma pergunta comum dos operadores do Cassandra que desejam migrar dados de um cluster para outro.

Qual seria o procedimento para restaurar instantâneos de um cluster Cassandra para outro cluster com configuração idêntica?

cassandra

1 respostas

  1. Best Answer

    Restaurar instantâneos para outro cluster ou "migrar" dados também é conhecido como clonagem de dados. O objetivo é copiar (clonar) os dados do aplicativo para outro cluster, geralmente para fins de teste ou desenvolvimento.

    Definição

    Dois clusters (ou seja, origem e destino) são considerados como tendo configuração idêntica quando:

    • as topologias de cluster são idênticas - mesmo número de DCs, mesmo número de nós em cada DC
    • as atribuições de token são idênticas - os tokens atribuídos para nós no cluster de origem são exatamente os mesmos que os tokens atribuídos para nós no cluster de destino

    Se as condições acima forem verdadeiras, use o "método de atualização" em que SSTables dos nós no cluster de origem são copiados para os nós correspondentes no cluster de destino e depois "carregados" executando nodetool refresh.

    Exemplo de topologia

    Aqui está um exemplo de um cluster de origem e destino com 3 nós em cada um dos 2 DCs:

    Fonte Destino
    AlphaDC Charlie DC
    nodeA: tokenA1, tokenA2, tokenA3 nodeU: tokenA1, tokenA2, tokenA3
    nodeB: tokenB1, tokenB2, tokenB3 nodeV: tokenB1, tokenB2, tokenB3
    nodeC: tokenC1, tokenC2, tokenC3 nodeW: tokenC1, tokenC2, tokenC3
    BetaDC DeltaDC
    nodeD: tokenD1, tokenD2, tokenD3 nodeX: tokenD1, tokenD2, tokenD3
    nodeE: tokenE1, tokenE2, tokenE3 nodeY: tokenE1, tokenE2, tokenE3
    nodeF: tokenF1, tokenF2, tokenF3 nodeZ: tokenF1, tokenF2, tokenF3

    Neste exemplo, nodeA(do cluster de origem) e nodeU(no cluster de destino) têm os mesmos tokens atribuídos nodeBe nodeVtêm os mesmos tokens e assim por diante.

    O método "refresh"

    Siga este procedimento para clonar dados de aplicativo de um cluster de origem para o cluster de destino no exemplo.

    IMPORTANTE : Crie o keyspace do aplicativo no cluster de destino com as mesmas configurações de replicação do cluster de origem. Por exemplo, se o keyspace de origem estiver configurado com um fator de replicação de 3, ele também precisará ter RF=3no cluster de destino.

    AVISO : NÃO clone keyspaces/tabelas do sistema porque os dados contidos neles são específicos do nó/cluster ao qual pertencem. Apenas clone dados do aplicativo.

    PASSO 1 - Para a primeira tabela, crie o esquema no cluster de destino.

    PASSO 2 - Tire o snapshot da primeira tabela nodeAe copie-o para o diretório de tabela correspondente no nodeU. Observe que o sufixo dos diretórios de tabela são carimbos de data/hora UUID e serão diferentes entre os clusters, pois são baseados em quando a tabela foi criada.

    PASSO 3 - Em nodeU, force o Cassandra a ler e carregar as novas SSTables do disco com:

    $ nodetool refresh -- ks_name table_name

    ETAPA 4 - Verifique os logs no nó para verificar se as novas SSTables foram abertas.

    PASSO 5 - Repita os passos acima na próxima tabela e continue repetindo até que todas as tabelas tenham sido migradas.

    ETAPA 6 - Repita as etapas acima migrando o snapshot de nodeBpara nodeV. Continue repetindo até que todos os nós do segundo cluster tenham os snapshots restaurados.

    Coisas para saber

    • Este é um procedimento online. Ele não requer que os nós de destino sejam encerrados.
    • Este procedimento se aplica apenas a clusters com topologias e atribuições de token idênticas.
    • Não funcionará para clusters não idênticos porque as partições nas SSTables de origem não necessariamente cairão no(s) intervalo(s) de tokens pertencentes aos nós de destino.
    • Não há necessidade de usar a clonagem do OpsCenter ou sstableloaderpara este cenário.

    Para obter instruções sobre como clonar dados para um novo cluster, consulte Como migrar dados em tabelas para um novo cluster do Cassandra? .

    • 0

relate perguntas