Delta e Lakeflow: por onde o dado ruim passa sem dar erro

Declarar uma regra de qualidade não é barrar o dado. No Delta, NOT NULL e CHECK barram; no Lakeflow, a expectativa sem ação retém; chave e unique só declaram; o MERGE ignora a coluna nova. Veja o que cada camada faz, como montar quarentena e como ler a contagem, com um exemplo executado localmente.

Continue lendoDelta e Lakeflow: por onde o dado ruim passa sem dar erro

Databricks Lakeflow: o código vai de dev a prod, o estado não

O deploy passou verde, e o full refresh apagou a bronze que o Kafka não tinha mais como repor. No Databricks Lakeflow, o bundle leva o código de dev a prod, mas o estado fica em cada ambiente: o registro do deploy, os checkpoints do streaming, as próprias tabelas e a identidade que roda o pipeline. Este artigo mostra os quatro estados que o bundle não leva, o que cada comando pode apagar e as guardas que se declaram no bundle antes do primeiro deploy em produção.

Continue lendoDatabricks Lakeflow: o código vai de dev a prod, o estado não

Fabric IQ: a ontologia virou item de workspace e o refresh tem preço

A demonstração convence, o workspace desmente. No Microsoft Fabric a ontologia virou item de verdade: REST API, definição em arquivos e um grafo filho que nasce sozinho — e é esse filho que emite a fatura. Este artigo reúne o que o item realmente é, por que todo refresh é integral e o frescor virou decisão de custo, os quatro medidores da capacidade, até onde o binding chega de fato, três pontos em que a documentação oficial se contradiz — e o que precisa estar de pé antes de ligar isso em produção.

Continue lendoFabric IQ: a ontologia virou item de workspace e o refresh tem preço

Federar, espelhar ou ingerir: a decisão entre Databricks e Fabric

Federar, espelhar e ingerir não são sinônimos — e no Fabric "espelhar" já significa três mecanismos diferentes. Quando usar Lakehouse Federation, quando espelhar catálogo ou banco no Microsoft Fabric, quando ingerir com Lakeflow Connect, o que é realmente grátis e por que a permissão da origem não atravessa a fronteira do OneLake.

Continue lendoFederar, espelhar ou ingerir: a decisão entre Databricks e Fabric

IA Generativa: Redefinindo o Futuro do Trabalho e da Criatividade

IA Generativa: Redefinindo o Futuro do Trabalho e da Criatividade A inteligência artificial generativa (IA Generativa) está na vanguarda da revolução tecnológica, transformando fundamentalmente a forma como trabalhamos, criamos e…

Continue lendoIA Generativa: Redefinindo o Futuro do Trabalho e da Criatividade