EndereçoEstamos em busca de Engenheiro(a) de Dados para trabalhar no desenvolvimento de arquitetura e fluxo de Dados robusta e escalável, que suporte os times de Dados e negócios, democratizando o acesso aos dados, de forma segura, baixa complexidade, estruturada e com qualidade. Experiência com implantação de arquitetura de Dados e modelagem de camadas de Dados; Ingestão de Dados via Streaming (com foco no Azure Event Hub) e Batch; Conhecimento em Cloud (preferencialmente Azure); Experiência em Python e PySpark (com foco no Azure Databricks e Azure Functions); Proficiência em SQL, com domínio de queries complexas, índices e particionamento; Experiência e domínio da modelagem de objetos complexos em grandes negócios, com alta volumetria de Dados e diversidade de Dados; Construção de Pipelines de ingestão e manipulação de Dados (ETL/ELT), com foco em Azure Data Factory; Conhecimento em banco de Dados (SQL Server); Conhecimento em banco não-relacional (Cosmos DB). Principais desafios: Interação próxima com as áreas de negócio Você será responsável por estabelecer uma forte relação e interação com as áreas de negócio, absorvendo conhecimentos específicos para entender profundamente os problemas e necessidades dos(as) usuários(as) finais. Esta interação é crucial para garantir que os objetos de Dados que você modela sejam aderentes e resolvam efetivamente os desafios enfrentados pelos clientes. Modelagem de Dados alinhada às necessidades do cliente Utilizando sua expertise em modelagem de Dados e conceitos, como a criação de tabelas fato e tabelas mestras, você deverá traduzir as necessidades do cliente em modelos de Dados eficientes e coerentes. Sua excelente capacidade analítica será fundamental para compreender as demandas dos clientes e transformá-las em soluções práticas e eficazes. Desenvolvimento de soluções escaláveis e robustas Você será responsável por criar e manter pipelines de Dados e processos de ETL/ELT que garantam a escalabilidade e robustez necessárias para suportar as operações de negócio. Isso inclui o desenvolvimento de arquiteturas de Dados sólidas e fluxos de Dados que atendam às demandas de diversas soluções de negócio. Garantia de qualidade e segurança dos dados Você terá o desafio de garantir a qualidade e a segurança dos dados, garantindo que os dados sejam processados de forma confiável e que permaneçam protegidos contra possíveis ameaças. Colaboração multidisciplinar Sua capacidade de comunicação e trabalho em equipe será essencial para colaborar efetivamente com outras pessoas da equipe, incluindo desenvolvedores(as), analistas de Dados e profissionais de negócio, garantindo que as soluções desenvolvidas atendam às expectativas e necessidades de todas as partes interessadas.
