Criar e usar fluxos de as no Microsoft Power Platform

Observação

A partir de novembro de 2020:

  • Common Data Service foi renomeado para o Microsoft dataverso. Saiba mais
  • Alguma terminologia no Microsoft dataverso foi atualizada. Por exemplo, a entidade agora é tabela e o campo agora é coluna. Saiba mais

Este artigo será atualizado em breve para refletir a terminologia mais recente.

O uso de fluxos de dados com o Microsoft Power Platform facilita a preparação dos dados e permite reutilizar o trabalho de preparação de dados em relatórios, aplicativos e modelos subsequentes.

No mundo dos dados em constante expansão, a preparação de dados pode ser difícil e dispendiosa, consumindo de 60 a 80% do tempo e do custo de um projeto de análise típico. Esses projetos podem exigir dados fragmentados e incompletos do Wrangling, integração de sistema complexa, dados com inconsistência estrutural e uma barreira com alta habilidade.

Para facilitar a preparação dos dados e ajudá-lo a obter mais valor dos seus dados, os fluxos de dataPower Query e a plataforma de energia foram criados.

Entidades vinculadas no Power BI.

com os fluxos de dados, a Microsoft traz os recursos de preparação de autoatendimento de Power Query para o Power BI e Power Apps serviços online e expande os recursos existentes das seguintes maneiras:

  • Preparação de dados de autoatendimento para Big data com fluxos de dados: o Dataflows pode ser usado para facilmente ingerir, limpar, transformar, integrar, enriquecer e schematizer dados de uma matriz grande e cada vez maior de fontes transacionais e de observação, abrangendo toda a lógica de preparação de dados. anteriormente, a lógica de extração, transformação, carregamento (ETL) só podia ser incluída em conjuntos de os Power BI, copiados entre os conjuntos de valores e ligados às configurações de gerenciamento de conjunto de linhas.

    Com fluxos de as, a lógica de ETL é elevada para um artefato de primeira classe dentro dos serviços do Microsoft Power Platform e inclui experiências de criação e gerenciamento dedicadas. Os analistas de negócios, os profissionais de BI e os cientistas de dados podem usar fluxos de trabalho para lidar com os desafios de preparação de dados mais complexos e se basear em cada um dos outros, graças a um mecanismo de cálculo baseado em modelos revolucionário, que cuida de toda a transformação e da lógica de dependência — cortar tempo, custo e experiência em uma fração do que tradicionalmente era necessário Você pode criar fluxos de dados usando a experiência de preparação de dado de autoatendimento e conhecida do Power Query. os fluxos de trabalho são criados e gerenciados facilmente em ambientes ou espaços de trabalho de aplicativo, em Power BI ou Power Apps, respectivamente, aproveitando todos os recursos que esses serviços têm a oferecer, como o gerenciamento de permissões e as atualizações agendadas.

  • carregar dados para o dataverso ou Azure Data Lake Storage: dependendo de seu caso de uso, você pode armazenar dados preparados por fluxos de data da plataforma de energia no dataverso ou na conta de Azure Data Lake Storage da sua organização:

    • O dataverso permite armazenar e gerenciar com segurança os dados usados por aplicativos de negócios. Os dados no dataverso são armazenados em um conjunto de tabelas. Uma tabela é um conjunto de linhas (anteriormente conhecido como registros) e colunas (anteriormente chamadas de campos/atributos). Cada coluna na tabela é projetada para armazenar um determinado tipo de dados, por exemplo, nome, idade, salário e assim por diante. O dataverso inclui um conjunto de base de tabelas padrão que abrangem cenários típicos, mas você também pode criar tabelas personalizadas específicas para sua organização e preenchê-las com dados usando fluxos. os criadores de aplicativos podem usar Power Apps e Power Automate para criar aplicativos avançados que usam esses dados.

    • Azure Data Lake Storage permite colaborar com pessoas em sua organização usando Power BI, dados do Azure e serviços de ia ou usando uma linha personalizada de Business Applications que lêem dados do Lake. os fluxos de dados que carregam arquivos em uma conta de Azure Data Lake Storage armazenam dados em pastas de modelo de dados comuns. as pastas de modelo de dados comuns contêm dados e metadados do esquematizados em um formato padronizado, para facilitar a troca de dados e para permitir a interoperabilidade total entre serviços que produzem ou consomem dados armazenados na conta de Azure Data Lake Storage da organização como a camada de armazenamento compartilhada.

  • análise avançada e ia com o Azure: os fluxos de dados da plataforma de energia armazenam data no dataverso ou Azure Data Lake Storage, — o que significa que os dados ingeridos por meio de fluxos de dados agora estão disponíveis para os engenheiros e cientistas de dados para aproveitar todo o potencial dos serviços de dados do azure, como Azure Machine Learning, Azure Databricks e SQL Data Warehouse do azure para análise avançada e ia. Isso permite que analistas de negócios, engenheiros de dados e cientistas de dados colaborem nos mesmos dados dentro de sua organização.

  • Suporte para modelo de dados comuns: o Common Data Service é um conjunto de esquemas de dados padronizados e um sistema de metadados para permitir a consistência de dados e seu significado entre aplicativos e processos de negócios. Os fluxos de dados dão suporte ao Common Data Service oferecendo mapeamento fácil de qualquer dado em qualquer forma para as entidades do modelo de dados comuns padrão, como Account e Contact. Os fluxos de dados também esterram as entidades padrão e personalizada, no formulário modelo de dados comuns do esquematizados. Os analistas de negócios podem aproveitar o esquema padrão e sua consistência semântica, ou personalizar suas entidades com base em suas necessidades exclusivas. O modelo de dados comuns continua a evoluir como parte da iniciativa de dados abertos.

Funcionalidades de fluxo de recursos nos serviços do Microsoft Power Platform

a maioria das funcionalidades de fluxo de recursos estão disponíveis em Power Apps e Power BI. Os fluxos de entrada estão disponíveis como parte dos planos dos serviços. Alguns recursos de fluxo de informações são específicos do produto ou estão disponíveis em diferentes planos de produto. A tabela a seguir descreve os recursos de Dataflow e sua disponibilidade.

Capacidade do fluxo de dados Power Apps Power BI
Atualização agendada Até 48 por dia Até 48 por dia
Máximo de tempo de atualização por entidade Até 2 horas Até 2 horas
Criação de Dataflow com Power Query online Sim Sim
Gerenciamento de fluxo de os no portal de administração do Power Apps no portal de administração do Power BI
Novos conectores Sim Sim
Esquema padronizado/suporte interno para o modelo de dados comuns Sim Sim
Conector de dados de Dataflows no Power BI Desktop para fluxos de os com Azure Data Lake Storage como o destino Sim
integração com o Azure Data Lake Storage da organização Sim Sim
Integração com o dataverso Sim Não
Entidades vinculadas de fluxo de dados para fluxos de os com Azure Data Lake Storage como o destino Sim
Entidades computadas (transformações no armazenamento usando M) para fluxos de os com Azure Data Lake Storage como o destino somente Power BI Premium
Atualização incremental do fluxo de dados para fluxos de entrada com Azure Data Lake Storage como o destino, o requer Power Apps Plan2 somente Power BI Premium
executando em Power BI Premium capacidade/execução paralela de transformações Não Sim

Mais informações sobre fluxos de dados no Power Apps:

Mais informações sobre fluxos de dados no Power BI:

Próximas etapas

Os artigos a seguir oferecem mais detalhes sobre cenários de uso comuns para fluxos de dados.

Para obter mais informações sobre o modelo de dados comum e o padrão de pasta Common Data Service, leia os seguintes artigos: