Analista de Engenharia de Dados Sênior - Vaga Afirmativa para Mulheres

Serasa Experian

3d • Remote

About The Position

Atuamos no Data Office da maior DataTech do mercado, construindo fluxos complexos de dados e pipelines altamente resilientes. O profissional atuará diretamente na evolução dos pipelines de dados, suportando a transformação de processos legados para uma solução mais escalável e resiliente em nuvem, construirá novos Data Products e aplicará tansformações complexas em dados com uso de diversas ferramentas e tecnologias de Nuvem. Essa posição suportará a equipe de qualidade de dados com aplicações de monitoramento de qualidade e construção de Dashboards, bem como os fluxos de dados para que essas soluções sejam possíveis. Também terá contato com fluxos de ingestão, limpeza e priorização de dados em larga escala.

Requirements

• Ensino superior completo
• Experiência sólida com PySpark e frameworks de processamento distribuído
• Conhecimento em Apache Airflow , Spark e Hadoop (quando aplicável)
• Proficiência em linguagens de programação, preferencialmente Python
• Experiência com serviços AWS relevantes (ex.: EMR, Lambda, DynamoDB , S3, Glue opcional)
• Conhecimento em bancos de dados SQL
• Familiaridade com práticas de DevOps e pipelines de CI/CD
• Capacidade de lidar com problemas complexos e entender regras de negócio
• Senso crítico e foco em eficiência
• Gosto por otimização e melhoria contínua
• Comunicação clara e colaboração efetiva com diferentes áreas
• Mentalidade orientada a resultados
• Aprendizado rápido e adaptabilidade a mudanças tecnológicas

Nice To Haves

• Experiência com provisionamento de infraestrutura (IaC)
• Vivência com metodologias ágeis
• Experiência prévia em migração de processos legados para arquiteturas distribuídas
• Conhecimento aplicado de Machine Learning e Arquitetura de Agentes de IA

Responsibilities

• Desenvolver e manter pipelines de dados escaláveis e eficientes em PySpark
• Migrar e modernizar processos legados para novos modelos de processamento distribuído
• Implementar soluções de processamento de dados em ambiente AWS
• Colaborar com times de produto e analistas do Data Office para detalhar necessidades e regras de negócio
• Otimizar arquiteturas de dados considerando performance, governança e custo
• Participar de iniciativas de automação, observabilidade e melhoria contínua dos processos

What This Job Offers

• Job Type: Full-time
• Career Level: Senior