Nosso DBA criou um esquema para nossa equipe em HDFS/HIVE. Não tenho certeza se 'esquema' é a palavra certa, eles chamam de 'grupo'. De qualquer forma, só podemos escrever no data lake dentro desse esquema, sejam arquivos parquet ou tabelas hive. Existe uma maneira de verificar qual é o espaço máximo alocado para nosso grupo, sabendo apenas o nome do esquema? Eu não quero carregar acidentalmente muitos dados.
Obrigada.
Quando olho para os processos de data warehouse/BI/ETL em meu grupo, como posso saber se estamos usando a metodologia Kimball ou não?
Se eu usar dimensões de alteração lenta, ou seja, expirar o registro antigo e criar um novo registro, e também estiver usando um esquema em estrela, isso significa automaticamente que estamos usando Kimball?
Depois de ler este artigo sobre software de banco de dados composto aqui
parece-me que o software db composto não é exatamente um armazenamento de banco de dados como o Oracle, que armazena fisicamente os dados. É mais como um adaptador que se conecta a diferentes fontes no back-end e fornece um único ponto de acesso aos dados para o cliente. isso está correto?
Se o acima estiver correto, como ele é diferente de um ESB que pode atuar como um único ponto para os clientes acessarem os dados? O ESB pode buscar dados de uma variedade de fontes e apresentar ao cliente e o cliente não precisa saber aqui ou como os dados são armazenados.