Microsoft Fabric incorpora inteligência em tempo real, conjunto de ferramentas para desenvolvimento de carga de trabalho.

As melhorias de tecido reveladas durante o evento Build 2024 abrangem a incorporação de Snowflake e Databricks, juntamente com o lançamento oficial do Copilot para Power BI.

Na conferência de desenvolvedores Build 2024, a Microsoft revelou diversas melhorias para a Fabric, a plataforma em nuvem da empresa voltada para análise de dados. As novidades incluem um módulo de Inteligência em tempo real, um conjunto de ferramentas para personalizar fluxos de trabalho do Tecido e a disponibilidade do Copilot para Power BI.

Outros assistentes para Tecido ainda estão sendo avaliados antes do lançamento.

No ano passado, em maio, a Fabric foi lançada, unindo o armazenamento de dados, a inteligência de negócios e os produtos de análise de dados da empresa em uma única solução. Isso auxilia as empresas a combinar cargas de trabalho, ao mesmo tempo em que reduz a sobrecarga de integração de TI, a complexidade e os custos.

A proposta na nuvem, que oferece uma experiência de software na forma de serviço (SaaS) para programadores, auxilia na interpretação de informações a partir de dados brutos e na sua apresentação aos profissionais de negócios. Ela inclui sete módulos principais e conjuntos de ferramentas, como conectores de dados, ferramentas de processamento de dados, fluxos de trabalho para ciência de dados e ferramentas de análise.

Os componentes de tecido abrangem Data Factory, Synapse Data Engineering, Synapse Data Science, Synapse Data Warehouse, Synapse Real-Time Analytics, Power BI e Data Activator, todos desenvolvidos com base na solução de Data Lake da empresa, OneLake.

Análise em tempo real do Synapse combinada com o ativador de dados.

No âmbito das atualizações da Fabric, a Microsoft uniu dois de seus componentes – Synapse Real-Time Analytics e Data Activator – para apresentar um novo módulo ou carga de trabalho denominado Real-Time Intelligence, que está agora em fase de visualização.

De acordo com a Microsoft, a inteligência em tempo real integra tarefas analíticas e ativadoras, e inclui funcionalidades extras, como uma interface simplificada, para auxiliar as empresas na obtenção de insights de dados instantaneamente.

A empresa explicou que, com a Inteligência em tempo real, os usuários corporativos conseguem receber informações detalhadas de streaming, transformar dados de streaming e de consulta em tempo real para obter insights imediatos, e realizar ações como notificar um gerente de produção sobre um equipamento superaquecendo ou ajustar processos de trabalho quando houver falhas nos pipelines de dados.

O Real-Time Hub é um suporte para o novo módulo, funcionando como uma plataforma para acessar, controlar e aproveitar dados de streaming de eventos da Fabric e de outras fontes.

A empresa afirmou que os usuários podem obter informações através do perfil de dados no Real-Time Hub, ajustar a quantidade adequada de suporte, estabelecer notificações sobre alterações nas condições e realizar outras tarefas, tudo sem sair do hub.

Criação de uma carga de trabalho inicial para tecidos Kit.

A Microsoft lançou o Fabric Workload Development Kit, uma coleção de ferramentas criada para auxiliar os programadores na criação de aplicações compatíveis com a Fabric.

Segundo a Microsoft, as aplicações desenvolvidas com esse kit serão integradas de forma nativa na Fabric, oferecendo uma experiência uniforme para os usuários sem necessidade de intervenção manual. Os desenvolvedores têm a possibilidade de disponibilizar e lucrar com essas aplicações através do Azure Marketplace.

Adicionalmente, a Microsoft mencionou que estava desenvolvendo um hub de carga de trabalho na Fabric, permitindo que usuários corporativos encontrem, adicionem e administrem as cargas de trabalho diretamente na plataforma.

Neo4j utilizou o SDK de carga de trabalho de tecido para disponibilizar sua solução dentro do tecido.

A Microsoft está introduzindo dois novos recursos para desenvolvedores em fase de visualização: a API para funções GraphQL e dados de usuário.

“A empresa descreve a API para Gráfico QL como uma ferramenta flexível e robusta, projetada para permitir que profissionais de dados acessem informações de diversas fontes na Tecido por meio de uma única API de consulta. Segundo a empresa, essa solução pode auxiliar as organizações na redução da sobrecarga de rede e no aumento da velocidade de resposta.”

De acordo com a Microsoft, as funções de dados do usuário são funções personalizadas criadas pelos desenvolvedores para serem usadas nos serviços de dados do Microsoft Fabric, como notebooks, pipelines e fluxos de eventos. Essas funções auxiliam os desenvolvedores na construção de aplicativos de forma mais simples, podendo acessar diferentes fontes de dados, como data warehouses, casas de lagos e bancos de dados espelhados, por meio de código nativo e lógica personalizada.

A Microsoft fez melhorias no módulo de Fábrica de Dados na interface, introduzindo um recurso chamado fluxos de trabalho de dados. Este novo recurso, atualmente em fase de pré-visualização, possibilita que as empresas estabeleçam gráficos acíclicos direcionados (DAG) para coordenar de forma complexa o fluxo de dados na Fábrica.

De acordo com a Microsoft, o Apache Airflow é utilizado para impulsionar os fluxos de trabalho de dados, os quais são desenvolvidos com o objetivo de auxiliar as empresas a criar, agendar e supervisionar os fluxos de trabalho ou pipelines de dados utilizando a linguagem Python.

Copilot para Power BI modifica a experiência do usuário no Google Analytics.

A Microsoft anunciou na terça-feira que o primeiro Copilot for Fabric foi lançado oficialmente. No ano passado, ao introduzir o Fabric, a empresa mencionou que iria incorporar o seu Copilot, que é alimentado por inteligência artificial generativa, à sua plataforma analítica unificada.

O Copilot agora está disponível por meio do módulo Power BI na interface, conforme informado pela Microsoft. Além disso, a empresa mencionou que os Copilots nos módulos Fábrica de Dados, Engenharia de Dados Synapse, Ciência de Dados Synapse e Synapse Data Warehouse ainda estão em fase de visualização.

O recurso Copilot no Power BI pode ser utilizado para criar e resumir relatórios. Adicionalmente, os Copilots em outras áreas da tela podem ser empregados para desenvolver fluxos de dados, escrever código e construir modelos de machine learning através de linguagem natural.

Além disso, a Microsoft anunciou um novo Copilot para o seu módulo de Inteligência em tempo real em visualização, o qual possibilitaria aos usuários empresariais consultar informações em tempo real.

Novas formas de obter informações e conexões com a plataforma Snowflake da Databricks.

Algumas das mudanças recentes no Fabric incluem a inclusão de atalhos do OneLake para conectar-se a diferentes fontes de dados além do Azure Data Lake Service Gen2, com esses atalhos do OneLake estando atualmente em fase de pré-visualização.

Segundo a Microsoft, ao utilizar um gateway de dados local, é possível estabelecer conexões diretas com o Google Cloud Storage, Amazon S3 e repositórios de armazenamento que seguem o padrão S3, os quais podem estar localizados no próprio ambiente ou restritos à rede.

Além disso, a Microsoft afirmou que estava colaborando com a Snowflake para garantir a plena compatibilidade entre Snowflake e OneLake.

“A Microsoft expressou entusiasmo ao anunciar o suporte futuro ao Apache Iceberg na Fabric OneLake, bem como a capacidade de acesso bidirecional entre Snowflake e Fabric. Essa integração possibilitará aos usuários analisar seus dados do Snowflake e Fabric em diferentes motores, em diversas plataformas, e acessar esses dados em aplicativos como Microsoft 365, Power Platform e Azure AI Studio.”

Em breve, serão disponibilizados os caminhos mais curtos para acessar o OneLake no Iceberg, conforme comunicado por Arun Ulagaratchagan, vice-presidente corporativo da Azure Data.

Além disso, a Microsoft anunciou que em breve os clientes empresariais poderão acessar diretamente as tabelas do Azure Databricks Unity Catalog através do Microsoft Fabric.

Segundo a companhia, os usuários podem facilmente criar e configurar um novo item no catálogo do Azure Databricks Unity através do portal Fabric com apenas alguns cliques. É possível incluir um catálogo completo, um esquema ou mesmo tabelas individuais.

Quando ocorrem alterações nos dados ou nas tabelas em Azure Databricks, tais como adição, remoção ou renomeação, o Tecido garantirá que os dados permaneçam sincronizados, conforme afirmou Ulagaratchagan.

Além disso, segundo a Microsoft, em breve os profissionais de empresas poderão acessar dados da tela, como Lakehouses, como um catálogo no Azure Databricks.

“Segundo Ulagaratchagan, ao manter os dados no OneLake, será possível acessar e visualizar a origem dos dados e outros metadados no Azure Databricks, além de usufruir das capacidades do Unity Catalog. Essa nova funcionalidade permitirá ampliar a governança unificada do Unity Catalog para dados e inteligência artificial no Azure Databricks Mosaic AI.”

Isso implica que os usuários de empresas terão a capacidade de mesclar essas informações com outras informações locais e distribuídas no Azure Databricks, conduzir análises e compartilhar os dados consolidados em um ambiente Power BI.