Ingerir dados do Fabric OneLake

O Power Automate Process Mining dá-lhe a opção de armazenar e ler dados de registo de eventos diretamente do Fabric OneLake através do Fabric Lakehouse. Esta funcionalidade simplifica a gestão de extrair, transformar e carregar (ETL), ligando-se diretamente ao seu OneLake.

Atualmente, esta funcionalidade suporta a ingestão dos seguintes elementos:

Tabelas e vistas

• Tabelas Delta
  • Uma única tabela Delta no Fabric Lakehouse.
• Visões materializadas
  • Uma vista materializada no Fabric Lakehouse.

Ficheiros e pastas

• CSV
  • Ficheiro CSV único.
  • Pasta com vários ficheiros CSV que têm a mesma estrutura. Todos os ficheiros são ingeridos.
• Parquet
  • Um ficheiro parquet único.
  • Pasta com vários ficheiros parquet que têm a mesma estrutura. Todos os ficheiros são ingeridos.
• Delta-parquet
  • Pasta que contém uma estrutura delta-parquet.

Pré-requisitos

• Certifique-se de que a opção Utilizadores podem aceder a dados armazenados no OneLake com aplicações externas ao Fabric está ativada nas definições de inquilino do OneLake.

• Uma área de trabalho do Fabric diferente da Minha área de trabalho predefinida.

• A função de Administrador tem de ser atribuída ao utilizador que executa a configuração inicial da área de trabalho para o ambiente para os outros utilizadores no mesmo ambiente.

• A área de trabalho do Fabric tem de ser partilhada com o principal de serviço Process Insight Prod com a função de Administrador. Para registar a entidade de serviço do Process Insights Prod, siga os passos em Instalar Azure tools.

  

• Tem de ser criado um Fabric Lakehouse nesta área de trabalho com os dados em formatos suportados.

• Os dados CSV no seu Lakehouse deverão satisfazer os seguintes requisitos do formato de ficheiro CSV:

  • Tipo de compressão: nenhum
  • Delimitador de colunas: vírgula (,)
  • Delimitador de linhas: predefinição e codificação. Por exemplo, Predefinido (\r,\n, ou \r\n)

  

• Todos os dados têm de estar no formato de registo de eventos final e satisfazerem os requisitos listados em Requisitos de dados. Os dados devem estar prontos para mapeamento para o esquema de mineração de processos. Não está disponível qualquer transformação de dados pós-ingestão.

• O tamanho (largura) da linha do cabeçalho está atualmente limitado a 1 MB.

Ligar ao Fabric OneLake

1. No painel de navegação à esquerda, selecione Process Mining>Começar aqui.

2. No campo Nome do Processo, selecione o tipo de processo e insira um nome para o seu processo.

3. No título da fonte de dados , selecione OneLake>Continue.

   

4. Selecione um espaço de trabalho opcional do Power BI ou do Fabric ou selecione Ignorar.

5. No ecrã Configuração da ligação, selecione a sua Área de trabalho do Fabric no menu pendente. Isto preenche o menu pendente do Lakehouse. No menu, selecione o lakehouse que contém os seus dados e selecione Seguinte.

6. Navegue pela estrutura de pastas do Lakehouse e selecione a tabela Delta, o ficheiro ou a pasta que contém os dados do registo de eventos.

   Pode selecionar uma única tabela Delta, um único ficheiro ou uma pasta com vários ficheiros. Todos os ficheiros têm de ter os mesmos cabeçalhos e formato.

7. Selecione Seguinte.

8. No ecrã Mapear os dados, mapeie os dados para o esquema necessário.

   

9. Conclua a ligação selecionando Guardar e Analisar.

Definir definições de atualização incremental de dados

Pode atualizar de forma agendada um processo ingerido a partir do Fabric OneLake, com uma atualização completa ou incremental. Apesar de não haver políticas de retenção, pode ingerir dados incrementalmente utilizando um dos seguintes métodos:

Se selecionou uma única tabela Delta na secção anterior, anexe mais dados à tabela selecionada.

Se selecionou um único ficheiro na secção anterior, anexe mais dados ao ficheiro selecionado.

Se selecionou uma pasta na secção anterior, adicione ficheiros incrementais à pasta selecionada.

Para atualizar um processo:

1. Aceda à página Detalhes do processo.

2. Selecione Definições de Atualização.

3. No ecrã Agendar atualização, conclua os seguintes passos:

   1. Ligue o interruptor Manter os dados atualizados.
   2. Nas listas de seleção Atualizar dados a cada, selecione a frequência de atualização.
   3. Nos campos Começar às, selecione a data e hora da atualização.
   4. Ative o botão de alternância Atualização incremental.