Engenheiro de Dados SR
- Empregos
- Não Divulgado
- 11/07/2024
Responsabilidades:
Projetar, desenvolver e manter pipelines de dados robustos e escaláveis para coleta, armazenamento, processamento e análise de grandes volumes de dados.
Colaborar com as partes interessadas para entender os requisitos de dados e garantir a integridade, qualidade e segurança dos dados em todo o ciclo de vida.
Implementar e otimizar soluções de armazenamento de dados, como data warehouses, data lakes e bancos de dados NoSQL, para suportar análises avançadas e insights acionáveis.
Desenvolver e implementar modelos de dados dimensionais e semânticos para suportar análises e relatórios de negócios.
Implementar técnicas de ETL (Extract, Transform, Load) e ELT (Extract, Load, Transform) para integrar dados de diversas fontes e sistemas.
Desenvolver e manter dashboards, relatórios e visualizações de dados para fornecer insights acionáveis para as equipes de negócios.
Requisitos:
Experiência comprovada em engenharia de dados, com foco em Data Management & Analytics, preferencialmente em ambientes de Big Data.
Profundo conhecimento em ferramentas e tecnologias de armazenamento e processamento de dados, como Hadoop, Spark, Kafka, Hive, AWS EMR, Google BigQuery, etc.
Experiência em design e implementação de arquiteturas de dados distribuídas e escaláveis.
Fortes habilidades de programação em uma ou mais linguagens, como Python, Scala, SQL, etc.
Conhecimento em técnicas de modelagem de dados e design de esquema para suportar análises avançadas.
Experiência com metodologias ágeis de desenvolvimento de software, como Scrum ou Kanban.
Graduação em Ciência da Computação, Engenharia de Software, Engenharia de Dados ou área relacionada (mestrado é um plus).