Engenheiro de Dados Sênior - DBT

Já pensou em se tornar um Roxpert e trabalhar na empresa que ficou no 66º lugar entre as 1212 pequenas melhores para se trabalhar ranqueadas pelo GPTW? 🚀 A Rox Partner é uma empresa jovem, focada em dados, em rápido crescimento como consultoria. Com 7 anos de atuação no mercado, já contamos com mais de 180 Roxperts, ótimos clientes, parceiros e inúmeros desafios!! E aí, bora evoluir juntos? 🚀🚀

Estamos em busca de um Engenheiro de Dados Sênior - DBT qualificado e proativo para se juntar à nossa equipe de Engenharia. Se você é um profissional apaixonado por dados gostaríamos de conhecê-lo.

Responsabilidades e Atribuição

• Monitorar continuamente pipelines de dados batch, streaming e on-demand, garantindo a disponibilidade e qualidade das cargas.
• Atuar na identificação, análise e resolução de incidentes operacionais e falhas críticas em ambientes de dados.
• Realizar troubleshooting avançado por meio da análise de logs, métricas e alertas em plataformas GCP.
• Monitorar e suportar workflows de dados, incluindo DAGs, reprocessamentos, dependências e validações de cargas.
• Acompanhar a execução de processos em Dataproc, Spark, BigQuery e demais componentes da arquitetura de dados.
• Trabalhar em conjunto com equipes de Engenharia de Dados, Arquitetura, Governança e áreas de
• Negócio para resolução de problemas e melhorias contínuas.
• Contribuir para a estabilidade, confiabilidade e evolução dos ambientes de dados.
• Elaborar e manter documentação de incidentes, análises de causa raiz (RCA), procedimentos operacionais e planos de ação.
• Participar de iniciativas de automação, observabilidade e otimização de processos operacionais.

• Experiência comprovada com Google Cloud Platform (GCP);
• Domínio em BigQuery, incluindo modelagem de dados, otimização de performance e controle de custos;
• Experiência com Dataproc / Apache Spark;
• Atuação em pipelines de dados batch, incluindo monitoramento e reprocessamento;
• Capacidade de análise de logs, identificação e tratamento de falhas em pipelines de dados;
• Conhecimento em IAM (Identity and Access Management) e gestão de permissões na GCP;
• Vivência em ambientes regulados, críticos ou de alta disponibilidade;
• Conhecimento em Continuous Query, com foco em processamento contínuo de dados e atualizações incrementais (streaming ou near real-time);
• Experiência com Pub/Sub, incluindo integração, monitoramento e operação de pipelines orientados a eventos e mensageria;
• Conhecimento em Cloud SQL (MySQL) para operação, suporte e análise de dados em bases relacionais gerenciadas;
• Experiência com Cloud Functions, atuando no suporte e manutenção de funções serverless orientadas a eventos;
• Atuação com Cloud Run, incluindo operação e monitoramento de aplicações containerizadas em ambientes serverless;
• Experiência com Cloud Composer (Apache Airflow), realizando monitoramento, análise e suporte a DAGs, incluindo falhas, reprocessamentos e dependências;
• Conhecimento em MongoDB, com foco em consultas, análise de dados e suporte a bases NoSQL;
• Experiência prática com metodologias ágeis (Scrum, Kanban ou similares).

Diferenciais:

• Experiência em projetos relacionados a Open Finance;
• Conhecimento ou experiência com DBT (Data Build Tool).

Benefits