Engenheiro DevOps Pleno
- Empregos
- Rio de Janeiro
- 04/07/2024
A IPNET está com vaga aberta para Engenheiro de Dados Pleno.
Responsabilidades:
Projetar e desenvolver pipelines de dados para extrair, transformar e carregar (ETL) dados de várias fontes em data warehouses ou data lakes;
Otimizar e melhorar processos de dados existentes para melhor desempenho e eficiência;
Colaborar com cientistas de dados e analistas para entender os requisitos de dados e fornecer o suporte necessário;
Garantir a qualidade, integridade e consistência dos dados entre diferentes fontes;
Desenvolver e manter modelos de dados, metadados e documentação;
Monitorar e solucionar problemas em pipelines de dados para garantir alta disponibilidade e confiabilidade;
Implementar as melhores práticas de governança e segurança de dados;
Manter-se atualizado com as últimas tecnologias e tendências da indústria em engenharia de dados.
Requisitos:
Graduação em Ciência da Computação, Tecnologia da Informação, Engenharia ou área relacionada.
Experiência em engenharia de dados ou função simila;
Experiência com SQL e experiência com bancos de dados relacionais (por exemplo, MySQL, PostgreSQL, SQL Server);
Experiência com programação em linguagens como Python, Java ou Scala;
Experiência com tecnologias de big data (por exemplo, Hadoop, Spark, Kafka);
Conhecimento de soluções de data warehousing (por exemplo, Snowflake, Redshift, BigQuery);
Experiência com ferramentas de orquestração de pipelines de dados (por exemplo, Apache Airflow, Luigi);
Experiência com processamento de dados em tempo real e streaming;
Conhecimento de conceitos de machine learning e data science;
Experiência com ferramentas de conteinerização e orquestração (por exemplo, Docker, Kubernetes).
Modelo de trabalho: Híbrido, Presencial no escritório 3 vezes por semana.
Atualmente estamos com dois escritórios no Brasil, um no Rio de Janeiro (Zona Portuária / Santo Cristo) e outro em São Paulo (Vila Olímpia).
Benefícios: