Engenheiro de Dados Pleno

Sobre a Computécnica:

A Computécnica é uma empresa apaixonada por tecnologia, com mais de 30 anos de experiência no mercado. Somos parceiros Microsoft e certificados ISO 9001, o que nos garante qualidade e excelência no atendimento ao nosso cliente. Oferecemos capacitações e treinamentos para que nossos funcionários estejam sempre atualizados com as mais recentes tecnologias e tendências. Se você gosta de desafios, quer trabalhar com grandes empresas, atuar com as mais recentes tecnologias e fazer parte de uma equipe apaixonada por tecnologia, a CPT é o seu lugar!

Requisitos:

• Experiência com Delta Lake e Lakehouse Architecture.
• Certificações em Databricks, AWS/Azure/GCP.
• Experiência com Kafka, Event Hubs ou outras soluções de streaming.
• Conhecimento em Infraestrutura como Código (Terraform, CloudFormation).
• Experiência com metodologias ágeis (Scrum, Kanban).

Projeto inicial de 3 meses

Atividades:

• Desenvolver, otimizar e manter pipelines de dados escaláveis e eficientes utilizando Databricks, Apache Spark e Python.
• Projetar e implementar soluções de engenharia de dados para processamento de grandes volumes de dados em ambientes distribuídos.
• Criar e gerenciar modelos de dados estruturados e não estruturados, garantindo sua integridade e qualidade.
• Trabalhar em conjunto com cientistas de dados e analistas para facilitar o consumo de dados e melhorar a tomada de decisão baseada em dados.
• Implementar processos de automação e orquestração de pipelines de dados utilizando Apache Airflow, Databricks Workflows ou outras ferramentas.
• Monitorar a performance e otimizar consultas e processos para garantir eficiência e escalabilidade.
• Garantir segurança e governança de dados de acordo com as melhores práticas do setor.
• Colaborar com equipes de tecnologia e negócios para entender necessidades e traduzir requisitos em soluções técnicas robustas.

Benefits