Engenheiro(a) de Dados Sênior (Remoto)

Sobre a Beyond

Nosso maior diferencial é que não enxergamos profissionais como meros recursos, e sim, como pessoas reais, com sonhos, ambições e vontade de fazer o seu melhor. Buscamos Talentos que vão ALÉM de capacidades técnicas excepcionais, perseverança, olhar crítico e novas ideias são qualidades que nos movem diariamente em direção a um futuro cada vez mais tecnológico. Aqui as pessoas são o nosso maior ativo, nosso maior orgulho e são verdadeiramente valorizadas por suas habilidades. 

Estamos presentes como Outsourcing e Projetos em grandes nomes do mercado financeiro! 

• Domínio profundo de linguagens de programação Python, além de ferramentas de processamento de dados como Apache Spark, Kafka, Flink ou equivalentes.
• Conhecimento em LLMs, ajuste fino de modelos de IA e uso de RAG para melhorar eficiência na busca e recuperação de informações.
• Domínio dos serviços do Amazon Bedrock e/ou Azure OpenAI.
• Experiência com arquitetura de sistemas de dados, big data (Hadoop, Hive, HBase), streaming (Kafka, Kinesis) e bancos de dados (SQL, NoSQL).
• Conhecimento avançado de ferramentas de modelagem de dados, processamento de dados e visualização de dados, como SQL, NoSQL, Tableau, Power BI, etc.
• Conhecimento avançado em construção de Data Lake e Data Warehouse usando ferramentas como AWS Athena, AWS Redshift, AWS S3, AWS Glue, Airbyte, DBT e Postgres.
• Compreensão profunda de conceitos de machine learning e aplicacão de técnicas de machine learning em sistemas de dados.
• Graduação em Ciência da Computação, Estatística, Matemática ou áreas afins.
• Inglês técnico para leitura, escrita e comunicação profissional.

Responsabilidades

• Projetar e implementar sistemas de dados complexos e escaláveis, utilizando tecnologias como cloud computing, big data, streaming e machine learning e IA definindo estratégias de armazenamento, processamento e análise de dados.
• Incorporar Large Language Models (LLMs), Retrieval-Augmented Generation (RAG) e bancos vetoriais para processamento inteligente de dados.
• Guiar e inspirar a equipe de engenharia de dados, compartilhando conhecimento, definindo padrões e melhores práticas, e promovendo o crescimento técnico da equipe.
• Identificar e resolver problemas complexos relacionados a sistemas de dados, arquitetura, performance e escalabilidade, utilizando ferramentas de monitoramento, análise de logs e depuração de código.
• Criar e implementar soluções inovadoras para otimizar os sistemas de dados, utilizando tecnologias emergentes, como machine learning, data lake, streaming de dados em tempo real e big data analytics.
• Comunicar soluções técnicas de forma clara e concisa para stakeholders, gestores, desenvolvedores e outras áreas, influenciando decisões estratégicas e contribuindo para o alinhamento da estratégia de dados com os objetivos da empresa.

Benefits