Data Engineer (AWS, Redshift & Spark)
Ernst and Young29 days ago
São Paulo, BrazilMid Level
Responsibilities
- Projetar, desenvolver e implementar soluções de dados na AWS utilizando AWS Glue, Apache Spark e Amazon Redshift.
- Colaborar com engenheiros de dados e cientistas de dados para traduzir requisitos em pipelines de dados escaláveis.
- Criar e gerenciar processos ETL para extrair, transformar e carregar dados de diversas fontes.
- Otimizar fluxos de processamento no Apache Spark para garantir processamento eficiente dos dados.
- Desenvolver e manter modelos e esquemas de dados no Amazon Redshift para relatórios e análises.
- Monitorar e solucionar problemas em pipelines, assegurando a qualidade e a integridade dos dados.
- Documentar processos de dados, arquitetura e melhores práticas para compartilhamento de conhecimento e conformidade.
Requirements
- Graduação em Sistemas de Informação, Ciência da Computação, Engenharia de Dados ou área relacionada.
- Inglês avançado ou fluente, nível C2, para contato com cliente internacional.
- Experiência comprovada com desenvolvimento na AWS, com foco em AWS Glue, Apache Spark e Amazon Redshift.
- Proficiência em Python ou Scala para processamento de dados.
- Forte entendimento de conceitos e melhores práticas de data warehousing.
- Experiência necessária com SQL e sistemas de gerenciamento de banco de dados.
Benefits
- Assistência médica e odontológica.
- Auxílio-creche, plataforma de benefícios e descontos exclusivos da EY.
- Incentivos à educação.
- Day off de aniversário.
- Gympass/Wellhub.
- Participação nos Lucros (PLR).
- Previdência privada.
- Vale-alimentação e/ou vale-refeição e vale-transporte.
- Modelo presencial, com flexibilidade para trabalho remoto, nos escritórios da EY em todo o Brasil.
- Oportunidade de atuar em projeto internacional para cliente de grande porte do setor financeiro.
Tech Stack
Categories
Data Engineering
About Ernst and Young
Ernst & Young (EY) provides audit/assurance, tax, consulting, strategy and transactions services to enterprises, financial institutions, and public‑sector clients. Structured as a global network of partner‑owned member firms, it sells professional services on a fee basis, including a dedicated Financial Services Organization for banking, insurance, and capital markets. Headquartered in London, EY was formed in 1989 from the merger of Ernst & Whinney and Arthur Young, and operates in 150+ countries.