Dataflow Gen1 vs Gen2 no Microsoft Fabric: Comparativo de Performance e Custo
Com o lançamento do Microsoft Fabric, a Microsoft trouxe uma nova geração de fluxos de dados: o Dataflow Gen2. Essa evolução representa um marco importante na forma como profissionais de dados lidam com integração, transformação e carga de dados em ambientes corporativos. Neste artigo, vamos explorar em profundidade as diferenças entre o Dataflow Gen1, originalmente introduzido no Power BI, e o Dataflow Gen2, que faz parte do ecossistema do Microsoft Fabric. O foco será nas diferenças de performance e custo, com exemplos práticos e recomendações para quem está considerando migrar ou iniciar novos projetos.
DataFlow Gen2 · Fabric · Data Flow Gen 1

Neste post
O que são Dataflows?
Os Dataflows são fluxos de dados baseados em nuvem que permitem extrair, transformar e carregar (ETL) dados de diversas fontes, utilizando a interface visual do Power Query. Eles são ideais para cenários de preparação de dados, automação de processos e integração com soluções de BI, Lakehouse e Data Warehousing.
Dataflow Gen1
Introduzido como parte do Power BI, o Gen1 oferece uma experiência de baixo código para transformar dados. Ele é amplamente utilizado por analistas e desenvolvedores que trabalham com relatórios e dashboards.
Dataflow Gen2
O Gen2 foi desenvolvido para o Microsoft Fabric, com foco em alta performance, flexibilidade de destinos, monitoramento avançado e integração com IA. Ele representa uma evolução significativa, especialmente para ambientes corporativos e projetos de larga escala.
Comparativo de Recursos
| Recurso | Dataflow Gen1 | Dataflow Gen2 |
|---|---|---|
| Interface Power Query | Sim | Sim |
| Criação simplificada | Não | Sim |
| Salvamento automático | Não | Sim |
| Vários destinos de saída | Não | Sim |
| Monitoramento e rastreamento | Não | Sim |
| Computação de alto desempenho | Não | Sim |
| Atualização incremental | Sim | Sim |
| Insights baseados em IA | Não | Sim |
| Consulta direta via conector | Sim | Não |
Diferenças de Performance
Engine de Execução
O Gen2 utiliza uma engine de computação distribuída, que permite processar grandes volumes de dados com mais rapidez e eficiência. Isso é especialmente útil em cenários com múltiplas transformações ou fontes complexas.
Exemplo: Um fluxo que extrai dados de SQL Server, SharePoint e CSV, com 15 transformações, pode levar 40 minutos no Gen1. No Gen2, com execução paralela, esse tempo pode cair para menos de 15 minutos.
Transformações Otimizadas
O Gen2 suporta push-down queries, permitindo que transformações sejam executadas diretamente na fonte de dados, reduzindo o volume trafegado e acelerando o processamento.
Atualizações Inteligentes
Ambas as versões suportam atualização incremental, mas o Gen2 oferece uma abordagem mais eficiente, atualizando apenas os dados alterados com menor latência.
Monitoramento Detalhado
O Gen2 oferece logs de execução, rastreamento de erros e visualização de tempo de execução por etapa, permitindo identificar gargalos e otimizar fluxos com precisão.
Diferenças de Custo
Modelo de Precificação
O Gen1 está incluído no licenciamento do Power BI. Já o Gen2 utiliza o modelo de Capacidade de Computação (CU) do Microsoft Fabric, com cobrança baseada em tempo de execução e recursos utilizados.
Custo por Execução
No Gen2, o custo depende do tempo de execução, volume de dados e recursos computacionais utilizados.
Exemplo: Um fluxo que consome 2 CUs por 10 minutos terá um custo proporcional ao tempo e capacidade, permitindo maior controle e previsibilidade.
Eficiência de Recursos
Apesar do modelo baseado em consumo, o Gen2 tende a ser mais econômico em cenários de alto volume, devido à sua performance otimizada.
Planejamento de Capacidade
É possível configurar limites de uso, agendamentos inteligentes e alertas de consumo, evitando surpresas na cobrança.
Cenários de Migração
A Microsoft recomenda realizar uma POC para comparar o consumo de CPU entre Gen1 e Gen2 antes de migrar.
Exemplo: Uma empresa que utiliza 20 fluxos Gen1 pode migrar para Gen2 e consolidar os fluxos em apenas 10, com execução mais rápida e monitoramento centralizado.
Recomendações
Quando usar o Gen1?
- Projetos simples com poucos dados
- Ambientes já integrados ao Power BI
- Necessidade de consulta direta via conector
Quando migrar para o Gen2?
- Projetos com grande volume de dados
- Necessidade de múltiplos destinos de saída
- Requisitos de monitoramento detalhado
- Integração com Lakehouse ou Warehouse
- Uso de Copilot para acelerar a criação de fluxos
Conclusão
O Dataflow Gen2 representa uma evolução significativa em relação ao Gen1, oferecendo melhor performance, mais recursos e um modelo de custo mais flexível. Para profissionais que trabalham com dados em larga escala ou que desejam maior controle sobre seus fluxos, o Gen2 é a escolha ideal.
Se você está começando um novo projeto no Microsoft Fabric, recomenda-se fortemente iniciar com o Gen2. E se já utiliza o Gen1, vale a pena considerar a migração, especialmente se seus fluxos estiverem crescendo em complexidade.
