Oportunidade: Engenheiro(a) de Dados
Como Engenheiro(a) de Dados você será responsável por desenvolver, implementar e manter esse ambiente. É nele que vamos criar todas as etapas relacionadas ao fluxo de dados, desde a extração, passando pelo armazenamento, até a distribuição dos dados para consumo.
Remoto
São Leopoldo - RS
Buscamos alguém que:
- Desenvolvimento e otimização de esquemas no MongoDB e SQL
- Implementação de consultas para manipulação de grandes conjuntos de dados
- Integração do MongoDB em arquiteturas de dados mais amplas
- Trabalho em ambientes transacionais e de data warehousing
- Pipelines de Dados Synapse Analytics
- Desenho e implementação de pipelines eficientes para extração, transformação e carga de dados
- Configuração e otimização de pipelines de integração no ambiente Synapse Analytics
- Integração de dados de várias fontes para um armazenamento centralizado em Lake
- Desenvolvimento de scripts PySpark para processamento distribuído de dados
- Implementação de transformação de dados utilizando Python
- Otimização de desempenho em ambientes big data
- Desenvolvimento e atuação Databrick
- Vivência em metodologias ágeis (Kanban, Scrum).