[Hiring] Senior/Staff Data Engineer @Incognia Confidential

Role Description

O time de Engenharia de Dados da Incognia é responsável por sustentar e manter a infraestrutura que processa e armazena volumes massivos de dados. O objetivo é garantir que a nossa arquitetura de dados seja performática, escalável, que os orquestradores e motores de processamento operem com alta confiabilidade e que os pipelines de dados rodem de forma eficiente e segura.

Buscamos uma pessoa que tenha experiência em infraestrutura de dados, orquestração e arquitetura de Data Lakes. Você vai liderar com múltiplos bancos de dados e engines de processamento distribuído (como Spark), entendendo a fundo nossas ferramentas para criar soluções internas, contribuir com projetos open-source ou resolver gargalos técnicos e de performance. Procuramos alguém disposto a encarar desafios de dados em altíssima escala que ainda não possuem soluções padronizadas pela indústria.

Dia a dia da posição:

• Criar, implantar, manter e monitorar a infraestrutura de dados e a arquitetura do nosso Data Lake, incluindo deployments de ferramentas open-source e soluções internas;
• Prover ferramentas como software, guidelines e templates que tornem o uso da infraestrutura de dados fluida e de fácil acesso aos colaboradores;
• Implantar e gerenciar sistemas de orquestração, além de criar e manter pipelines de dados batch e em tempo real de alta performance;
• Monitorar constantemente nossos sistemas para garantir alta disponibilidade, performance e redução de custos;
• Criar mecanismos que garantam as políticas de acesso aos dados;

Qualifications

• Graduação em Engenharia de Software, Ciência da Computação ou áreas correlatas;
• Experiência em Kubernetes e deployment de sistemas distribuídos em larga escala;
• Experiência com Data Lakes e formatos de tabela Open Table como Apache Iceberg, Delta Lake ou Hudi;
• Experiência no uso e gerenciamento de ferramentas de orquestração de Dados;
• Experiência com pipelines de dados/ETLs em larga escala e o ecossistema Spark;
• Conhecimentos sólidos em sistemas distribuídos e engines de consulta distribuídas;
• Experiência com ferramentas de observabilidade e monitoramento;
• Familiaridade com diferentes tipos de bancos de dados;
• Capacidade de investigar e solucionar problemas open-ended, com profundidade para entender as ferramentas até o nível de criar patches ou customizações;
• Excelente comunicação para articular conceitos técnicos, facilitar tomadas de decisão e disseminar conhecimento;
• Inglês avançado.

Benefits

Confira nossos benefícios em nosso e-book.

Etapas do processo

• Entrevista com People;
• Entrevista com Gestor;
• Teste técnico;
• Apresentação de teste técnico;
• Fit Cultural com CEO e CTO.

Company Description

A Incognia é a empresa inovadora em soluções de identidade de última geração que possibilitam experiências digitais seguras e sem fricção. Com sua solução persistente de identificação de dispositivos, a Incognia combina sinais de reconhecimento de dispositivo de excelência e à prova de adulteração e análise de localização para verificação de usuários e prevenção de fraudes. As avaliações de risco personalizáveis e insights acionáveis da Incognia permitem que empresas de serviços financeiros, plataformas de delivery e da economia compartilhada e marketplaces protejam sua reputação, retenção de clientes e receita. Para mais informações, visite Incognia.com/pt.