Objetivo
Estamos procurando por um Engenheiro de dados experiente, com habilidades em SQL, Python e ETL, para contribuir no desenvolvimento de arquiteturas de dados e pipelines de dados robustos.
O foco será na estruturação e otimização dos dados de eventos, colaborando com outras equipes para garantir a disponibilidade e qualidade dos dados para análises estratégicas
Requisitos Essenciais :
Experiência comprovada em engenharia de dados, com um portfólio demonstrável de projetos relacionados.
Experiência em ferramentas de ETL (Extract, Transform, Load), como AWS Glue, AWS Athena e AWS Redshift, será considerada um diferencial.
Habilidades avançadas em SQL para manipulação e consulta de grandes volumes de dados.
Experiência em linguagens de programação para desenvolvimento de pipelines de dados e automação de processos.
Familiaridade com arquiteturas de dados distribuídas e técnicas de modelagem de dados.
Capacidade de projetar e implementar soluções escaláveis para armazenamento, processamento e análise de dados.
Fortes habilidades de comunicação e colaboração para trabalhar em equipe e interagir com diferentes áreas da empresa
Responsabilidades :
Projetar, desenvolver e manter pipelines de dados para coleta, processamento e análise de dados em larga escala.
Desenvolver e implementar arquiteturas de dados eficientes e escaláveis, utilizando tecnologias como data lakes, data warehouses e sistemas de processamento distribuído.
Criar e manter infraestrutura de dados, incluindo bancos de dados, sistemas de armazenamento e ferramentas de ETL.
Automatizar processos de ingestão, transformação e disponibilização de dados para facilitar a análise e geração de insights.
Colaborar com equipes de análise de dados e cientistas de dados para entender os requisitos de dados e fornecer soluções técnicas adequadas.
Garantir a qualidade, integridade e segurança dos dados em todos os estágios do pipeline de dados.
Fornecer suporte técnico e treinamento para outros membros da equipe em questões relacionadas a dados e infraestrutura.