Posts

Databricks Artifact Registry tenta resolver a fragmentação de onde seus modelos e containers moram

O Databricks MVP Ajay Kumar Pandey destacou o Artifact Registry, um repositório centralizado para armazenar, descobrir e governar modelos, bibliotecas e containers ao longo do ciclo de vida de dados e IA.

Agente de atendimento lê dado do Databricks sem cópia, e devolve a conversa estruturada de volta

A parceria entre Decagon e Databricks usa OpenSharing zero-copy nos dois sentidos: agentes de atendimento leem registro de cliente governado direto do Databricks sem ETL, e cada conversa volta estruturada, com intenção, causa raiz e sentimento, pra enriquecer tabela de receita e produto.

Sua fila de quarentena do DLT não sabe quando o registro já foi corrigido

O Databricks MVP Gary Nakanelua testou três desenhos de fila de quarentena centralizada para expectation failures do DLT, e descobriu que apenas uma condição extra impede que um registro corrigido continue listado como pendente.

O que acontece quando um delete chega depois que o tombstone do AUTO CDC já expirou

O Databricks MVP Gary Nakanelua testou deletes tardios contra tabelas AUTO CDC do tipo SCD 1 e 2 com diferentes janelas de retenção de tombstone, e mostrou o que sobrevive e o que muda quando o delete chega fora da janela.

Onde sua managed table mora não precisa mais ser decisão do metastore inteiro

A Databricks publicou um guia detalhando o comando SET MANAGED LOCATION em três níveis de hierarquia, metastore, catálogo e schema, cada um sobrepondo o anterior, além de ALTER CATALOG/SCHEMA para redirecionar tabela nova sem afetar a existente e ALTER TABLE para converter external em managed copiando o dado.

Redação de PII na Silver não elimina o dado sensível, só muda onde ele mora

O Databricks MVP Gary Nakanelua rodou um benchmark comparando redação permanente de PII na camada Silver contra Dynamic Data Masking via Unity Catalog, e mediu custo de escrita, leitura e reversão em cada abordagem.

LTAP não é um Lakebase com nome novo, é o Databricks tentando apagar o pipeline entre transação e análise

O Databricks MVP Awadelrahman Ahmed explica LTAP (Lake Transactional/Analytical Processing) como uma extensão do padrão HTAP aplicada à camada de armazenamento do lakehouse: Postgres continua fazendo transação e o motor do lakehouse continua fazendo análise, só que sem CDC no meio, porque os dois leem o mesmo dado na mesma storage.

Um trigger novo nas Databricks Asset Bundles dispara o job assim que o deploy termina

O trigger on_bundle_deploy em job_runs faz um job rodar automaticamente assim que uma Databricks Asset Bundle é implantada, sem agendamento externo, útil para DDL e povoamento único de tabela logo após o deploy.

Rotular com Jev, revisar com Luna, treinar Laya: o circuito completo de rotulagem ficou mais barato

O Databricks MVP Casper Lubbers fechou o ciclo completo de rotulagem e classificação usando Jev para rotular em massa, Luna para revisão em lote e Laya para treinar um classificador open source, gastando cerca de 100 dólares no processo.

Mil agentes de IA sem identidade nenhuma é um problema de governança, não de escala

O Databricks MVP Mantu Samadder mapeou o Agent Control Plane emergente no Databricks, unindo Agent Registry, Agent Identity, Unity Gateway, Service Policies, Unity Catalog e MLflow com System Tables para governar agentes de IA como workloads corporativos accountable.