Estamos buscando um(a) Arquiteto(a) de Dados com forte experiência em Databricks para atuar em um projeto estratégico, com foco em arquitetura, escalabilidade, performance e governança de dados em ambiente Azure.
Procuramos um perfil com visão mais estratégica, mas também hands-on, capaz de atuar como referência técnica junto ao cliente e ao time.
Responsabilidades
Definir e evoluir a arquitetura de dados em Databricks
Projetar e implementar pipelines de dados escaláveis e performáticos
Garantir boas práticas de engenharia, governança, segurança e observabilidade
Atuar na otimização de pipelines, clusters e custos em cloud
Apoiar troubleshooting em produção e direcionar melhorias técnicas
Ser referência técnica para o time e para o cliente
Experiência sólida com Databricks em produção: Workflows, Unity Catalog, Delta Lake e Asset Bundles
Domínio avançado de PySpark e Spark
Experiência com arquitetura Medallion e modelagem dimensional
Forte atuação em otimização de pipelines, performance e volumetria de dados
Experiência com clusters Databricks e tuning de custo vs performance
Vivência com Azure: Key Vault, ADLS Gen2, Service Principals e permissões
Experiência com CI/CD para dados, versionamento e deploy
Conhecimento em Data Quality, Data Contracts, logging e observabilidade
Experiência com integrações seguras e múltiplas fontes de dados
Capacidade de troubleshooting em produção
SQL avançado
Diferenciais:
Vivência com FinOps
Conhecimento em segurança e governança no Unity Catalog
Experiência com frameworks de engenharia de dados e testes automatizados
Certificações Databricks e/ou Azure