Catálogo Dremio espelhado

Um catálogo Dremio espelhado no Fabric integra os seus dados geridos pelo Dremio com o resto dos seus dados no Fabric. Pode replicar continuamente o seu catálogo Dremio diretamente no OneLake da Fabric.

Para um tutorial sobre como configurar o teu ambiente Dremio para espelhar o catálogo Dremio em Fabric, vê Tutorial: Configurar catálogo Dremio espelhado.

Importante

Este recurso está em pré-visualização.

Quando espelhas um catálogo Dremio, não há movimento ou replicação de dados. Apenas a estrutura do catálogo Dremio é espelhada no Fabric, e os dados subjacentes do catálogo são acedidos através de atalhos. As alterações nos dados subjacentes podem não aparecer no Fabric imediatamente. A propagação pode demorar desde alguns segundos até vários minutos, conforme descrito na documentação de desempenho dos endpoints de análise SQL.

Quais experiências de análise são incorporadas

Catálogos espelhados são itens no Fabric distintos de outros itens, como Lakehouses e pontos finais para análise SQL.

Quando espelhas um catálogo da Dremio, a Fabric cria estes itens:

Pode aceder aos seus dados espelhados do catálogo Dremio de várias formas:

  • Utilize comandos T-SQL para consultar e definir objetos de dados a partir do ponto de extremidade de análise SQL em modo apenas leitura. Cada item do catálogo Dremio espelhado tem um endpoint de análise SQL gerado automaticamente que proporciona uma experiência analítica rica criada pelo processo de espelhamento.
  • Use o Power BI com o modo Direct Lake para criar relatórios contra o item espelhado do catálogo Dremio.
  • Use outras cargas de trabalho do Fabric para consultar tabelas no item espelhado do catálogo Dremio.

As tabelas espelhadas ficam disponíveis para serem consultadas segundos após serem selecionadas, sendo que a propagação integral dos metadados demora normalmente de segundos a alguns minutos.

Ligue e autentique

O espelhamento liga-se a um endpoint do Dremio Iceberg REST Catalog. Os seguintes métodos de autenticação são suportados:

  • Venda automática de credenciais – O Dremio fornece credenciais de curta duração para aceder aos dados subjacentes da tabela Iceberg.
  • Token de Acesso Pessoal (PAT) – Autenticar com um token de acesso pessoal emitido pela Dremio.

Para passos detalhados sobre como configurar a ligação e autenticação, veja Tutorial: Configurar catálogo Dremio espelhado.

Sincronização de metadados

Quando crias um novo catálogo Dremio espelhado no Fabric, a opção Sincronizar automaticamente tabelas futuras está ativada por defeito. As seguintes alterações de metadados são refletidas do seu ambiente Dremio para o Fabric se a sincronização automática estiver ativada:

  • Adição de espaços de nomes ao catálogo
  • Eliminação de espaços de nomes do catálogo
  • Adição de tabelas a um espaço de nomes
  • Eliminação de tabelas de um espaço de nomes
  • Quando o Sincronizar automaticamente futuras tabelas está ativado, as tabelas Iceberg recém-criadas em espaços de nomes selecionados são automaticamente incluídas no Fabric sem necessidade de atualização manual.
  • As alterações de esquemas e dados em tabelas existentes seguem intervalos normais de propagação.

Seleção de esquema/tabela:

  • O utilizador pode selecionar quais os namespaces que devem ser incluídos como esquemas, e pode excluir certas tabelas.
  • Desmarcar um namespace desmarca todas as tabelas dentro do mesmo namespace.
  • Se o utilizador voltar atrás e selecionar o namespace, todas as tabelas dentro desse namespace são selecionadas novamente.