[Hiring] Data Engineer @Cadmus

Role Description

Executar o desenvolvimento e sustentação de pipelines (processos) de dados em plataformas de big data em nuvem para todas as áreas da empresa, coletando requisitos de negócio, implementando soluções técnicas em Azure e Databricks e apoiando na governança e qualidade dos dados, com o objetivo de contribuir com a disponibilidade, confiabilidade e performance das informações que suportam as operações e decisões corporativas.

• Desenvolver e sustentar pipelines (processos) de engenharia de dados nas plataformas Azure e Databricks, garantindo a disponibilidade, confiabilidade e performance das soluções de dados corporativas.
• Capturar e analisar requisitos de negócio junto às diferentes áreas da organização, propondo soluções técnicas de dados alinhadas às necessidades operacionais e estratégicas.
• Executar testes e validações nos pipelines e sistemas de dados em projetos de média e alta complexidade, assegurando a qualidade e integridade das informações processadas.
• Monitorar a performance dos sistemas de big data em nuvem, identificando oportunidades de otimização e garantindo a eficiência operacional das soluções implementadas.
• Apoiar a implementação de práticas de qualidade, segurança, privacidade e governança de dados em todos os projetos da organização.
• Participar de projetos de migração e implementação de soluções de dados corporativas, executando atividades técnicas de acordo com cronogramas e especificações definidas.
• Elaborar e manter documentação técnica dos pipelines, processos e soluções de dados implementadas.
• Realizar troubleshooting e apoiar na resolução de problemas técnicos nos sistemas de dados.
• Apoiar profissionais de menor experiência e outras áreas da empresa em questões relacionadas à engenharia de dados de menor complexidade.
• Participar de reuniões com stakeholders internos para apresentar soluções, esclarecer requisitos técnicos e acompanhar o andamento dos projetos de dados.

Qualifications

• Experiência mínima de 3 anos na área;
• Experiência prática com ferramentas de ETL/ELT e pipelines de dados;
• Vivência em plataformas de nuvem, preferencialmente Azure;
• Experiência em linguagens SQL e Python.

Requirements

• Linguagens de programação SQL, Python e PySpark;
• Plataformas Microsoft Azure (Data Factory, Databricks, Data Lake);
• Desenvolvimento e manutenção de pipelines de dados;
• Bancos de dados relacionais e NoSQL;
• Fundamentos de big data e processamento distribuído;
• Metodologias ágeis (Scrum, Kanban);
• Controle de versionamento (Git);
• Conceitos de governança de dados e LGPD.

Benefits

• Comunicação clara e objetiva;
• Trabalho em equipe e colaboração;
• Orientação para resultados e qualidade;
• Adaptabilidade e aprendizagem contínua;
• Organização e gestão de tempo.