
Spark Developer Senior
Ernst and Young19 days ago
São Paulo, BrazilSenior
Responsibilities
- Projetar, desenvolver e manter aplicações escaláveis de processamento de dados usando Apache Spark com Java na AWS.
- Colaborar com engenheiros de dados, cientistas de dados e partes interessadas do negócio para coletar requisitos e traduzi-los em especificações técnicas.
- Otimizar trabalhos do Spark para desempenho e eficiência, garantindo processamento de dados de alta qualidade.
- Implementar práticas de engenharia de dados para ingestão, transformação e armazenamento de dados.
- Utilizar EMR, S3, Glue e Redshift para construir e implantar soluções de dados.
- Realizar revisões de código e fornecer mentoria a desenvolvedores juniores.
- Solucionar problemas em aplicações existentes de processamento de dados, garantindo desempenho e confiabilidade.
- Acompanhar tecnologias e tendências do setor para aprimorar as práticas de desenvolvimento.
Requirements
- Graduação em Sistemas de Informação, Ciência da Computação, Engenharia de Dados ou área relacionada.
- Inglês avançado ou fluente, nível C2, para contato com clientes internacionais.
- Experiência em desenvolvimento de software com forte foco em Apache Spark, Java e AWS.
- Proficiência em ferramentas e frameworks de processamento de dados, especialmente Spark SQL e DataFrames.
- Sólido conhecimento dos serviços AWS EMR, S3, Glue e Redshift.
- Excelentes habilidades analíticas e de resolução de problemas.
Benefits
- Vale-alimentação, vale-refeição e vale-transporte.
- Plano de saúde e assistência odontológica.
- Universidade Corporativa e outros benefícios educacionais.
- Wellhub e PLR.
- Modelo presencial, com flexibilidade para trabalho remoto, nos escritórios da EY em todo o Brasil.
Tech Stack
Categories
Data Engineering