[Hiring] Data Tech Lead @Confi

Role Description

Buscamos um(a) Tech Lead de Dados para liderar tecnicamente a evolução da nossa plataforma de dados na OCI (Oracle Cloud Infrastructure): uma arquitetura Lakehouse moderna, com ingestão near-real time e processamento distribuído em PySpark, organizada em modelo medalhão (Bronze → Platinum) e com consumo via MySQL HeatWave e Metabase.

Você será a referência técnica do time de dados:

• Define padrões, garante a qualidade e a performance da plataforma.
• Conduz a relação com o parceiro cloud.
• Faz a ponte entre as demandas das áreas de negócio e a execução da engenharia.
• Continua próximo(a) do código, mas com foco em multiplicar o impacto do time.

Qualifications

• Experiência prévia em liderança técnica de times de dados (tech lead, líder técnico ou equivalente), com histórico de mentoria e definição de padrões.
• Domínio avançado em PySpark, Python e SQL.
• Domínio avançado em modelagem de dados.
• Domínio de Data Lake / Delta Lake.
• Experiência com arquitetura medalhão e pipelines near-real time.
• Experiência com Airflow e Git/GitHub Actions.
• Experiência com infraestrutura em cloud (AWS, GCP, Azure, OCI...).
• Experiência em troubleshooting, tuning e otimização de performance de pipelines distribuídos.
• Integrações com APIs e MongoDB.
• Boa comunicação e capacidade de negociação com stakeholders e fornecedores.

Requirements

• Liderar tecnicamente o time de engenharia de dados: orientar decisões de arquitetura, conduzir code reviews e definir padrões de desenvolvimento.
• Mentorar engenheiros(as) e apoiar o desenvolvimento técnico do time, promovendo boas práticas e compartilhamento de conhecimento.
• Definir e evoluir a arquitetura Lakehouse em OCI (buckets, HeatWave, external tables) e o modelo medalhão, com visão de longo prazo e trade-offs claros.
• Garantir a entrega com qualidade, previsibilidade e alinhamento às prioridades da empresa.
• Ser o ponto focal técnico com o parceiro cloud (OCI): acompanhar entregas, escalar incidentes, avaliar propostas e garantir que o SLA e as expectativas técnicas sejam atendidas.
• Apoiar decisões de custo, capacidade e roadmap da plataforma, com visão crítica sobre soluções e serviços contratados.
• Atuar como interlocutor(a) das áreas de negócio: entender necessidades, traduzir em requisitos técnicos, priorizar o backlog e alinhar prazos e expectativas.
• Comunicar riscos, dependências e resultados de forma clara para stakeholders técnicos e não técnicos.
• Definir e implementar a estratégia de observabilidade dos pipelines: monitoramento, alertas, métricas de SLA/SLO, linhagem e qualidade de dados.
• Conduzir o tuning e a otimização de performance de jobs PySpark, consultas SQL e cargas no HeatWave, atuando na identificação de gargalos e na redução de custo.
• Consolidar práticas de DataOps, governança e confiabilidade da plataforma.
• Desenvolver e revisar pipelines em PySpark nas camadas Bronze/Silver/Gold/Platinum.
• Estruturar ingestão via EventHub, flat files e MongoDB (API).
• Criar e manter DAGs no Airflow.
• Automatizar processos e CI/CD com GitHub + GitHub Actions.
• Implementar integrações e exports com Python + Metabase API.

Benefits

• Modelo: 100% Remoto
• Contrato: PJ
• Remuneração: aberto para negociação
• Ajuda de custo + VA/VR: R$1068,00 no cartão Ifood
• Plano de Saúde Amil
• Parceria com Wellhub
• Telemedicina pela Starbem