Engenheiro De Dados Sr
OPEA SECURITIZADORA S.A.São Paulo - SP
1 posição
Não informado
Integral
CLT
Híbrido
Sênior
Tecnologia
Sobre a Opea
A Opea é o hub de soluções de crédito que impulsiona negócios e resultados de empresas, estruturadores e investidores. Nossos serviços integrados conectam conhecimento de indústria, tecnologias e inovações em operações escaláveis via mercado de capitais e de crédito. Atuamos em sintonia com você em cada operação. Sempre parceira, garantindo os resultados que promovem a verdadeira transformação.
Atividades
- Projetar e implementar sistemas de dados complexos e escaláveis, utilizando tecnologias como cloud computing, big data, streaming e machine learning e IA definindo estratégias de armazenamento, processamento e análise de dados. Incorporar Large Language Models (LLMs), Retrieval-Augmented Generation (RAG) e bancos vetoriais para processamento inteligente de dados.
- Guiar e inspirar a equipe de engenharia de dados, compartilhando conhecimento, definindo padrões e melhores práticas, e promovendo o crescimento técnico da equipe.
Identificar e resolver problemas complexos relacionados a sistemas de dados, arquitetura, performance e escalabilidade, utilizando ferramentas de monitoramento, análise de logs e depuração de código. - Criar e implementar soluções inovadoras para otimizar os sistemas de dados, utilizando tecnologias emergentes, como machine learning, data lake, streaming de dados em tempo real e big data analytics.
- Comunicar soluções técnicas de forma clara e concisa para stakeholders, gestores, desenvolvedores e outras áreas, influenciando decisões estratégicas e contribuindo para o alinhamento da estratégia de dados com os objetivos da empresa.
Requisitos e Qualificações
- Domínio profundo de linguagens de programação Python, além de ferramentas de processamento de dados como Apache Spark, Kafka, Flink ou equivalentes.
- Conhecimento em LLMs, ajuste fino de modelos de IA e uso de RAG para melhorar eficiência na busca e recuperação de informações. Domínio dos serviços do Amazon Bedrock e/ou Azure OpenAI.
- Experiência com arquitetura de sistemas de dados, big data (Hadoop, Hive, HBase), streaming (Kafka, Kinesis) e bancos de dados (SQL, NoSQL).
- Conhecimento avançado de ferramentas de modelagem de dados, processamento de dados e visualização de dados, como SQL, NoSQL, Tableau, Power BI, etc.
- Conhecimento avançado em construção de Data Lake e Data Warehouse usando ferramentas como AWS Athena, AWS Redshift, AWS S3, AWS Glue, Airbyte, DBT e Postgres.
- Compreensão profunda de conceitos de machine learning e aplicacão de técnicas de machine learning em sistemas de dados.
- Graduação em Ciência da Computação, Estatística, Matemática ou áreas afins.
- Inglês técnico para leitura, escrita e comunicação profissional.
Informações Adicionais
- Plano de Saúde e Odontológico;
- Vale Alimentação e Refeição;
- Vale Transporte;
- Totalpass;
- Seguro de Vida;
- Auxílio Creche/Babá.
Requisitos
Escolaridade
- Graduação
Idioma
- Inglês - Iniciante
Habilidade Técnica
- Python - Avançado
- Big Data - Avançado
- AWS - Intermediário
Benefícios
- Convênio com Farmácia
- Seguro de vida
- Vale alimentação
- Assistência médica
- Assistência odontológica
- Vale transporte
- Vale refeição
Localização
Rua Girassol, Vila Madalena, São Paulo - SP, Brasil, 05433-001