[Hiring] Data Engineer Consultant @FSB Holding

Role Description

Buscamos uma Pessoa Consultora Data Engineer para atuar na construção e evolução de pipelines, transformações e modelos de dados, contribuindo para uma plataforma cada vez mais confiável, escalável e eficiente. Essa pessoa terá atuação próxima às diferentes etapas da jornada dos dados — da ingestão e transformação à qualidade, documentação, monitoramento e otimização — utilizando tecnologias de engenharia de dados e cloud.

• Desenvolver e manter pipelines de ingestão batch e streaming das fontes corporativas (ERPs como Protheus, sistemas como Fluig, APIs e arquivos) para a camada Bronze.
• Construir transformações e modelagem física de dados nas camadas Silver e Gold, aplicando regras de qualidade, deduplicação e padronização.
• Implementar e monitorar testes de qualidade de dados alinhados às cinco dimensões do Farol de Qualidade (Completude, Acurácia, Consistência, Tempestividade e Unicidade), garantindo cumprimento de SLAs.
• Instrumentar métricas e observabilidade dos pipelines (execução, falhas, latência) e configurar alertas.
• Catalogar tabelas e datasets no catálogo de dados corporativo, documentando linhagem e metadados.
• Colaborar com Analytics Engineers e áreas de negócio para garantir dados confiáveis e disponíveis para consumo analítico.
• Otimizar performance, custo e ciclo de vida dos dados (particionamento, retenção, arquivamento) em ambiente de nuvem (GCP).
• Participar dos rituais ágeis do time (planning, dailies, retros) e contribuir para a evolução das práticas de engenharia de dados.

Qualifications

• Graduação em Ciência da Computação, Engenharia, Sistemas de Informação ou áreas correlatas.
• Experiência sólida com SQL e ao menos uma linguagem de programação para engenharia de dados, preferencialmente Python.
• Conhecimento de orquestração de pipelines (Airflow, Dagster ou similar).
• Desejável: conhecimento de dbt, esteiras de CI/CD para dados (DataOps) e conceitos de governança de dados (catálogo, LGPD).

Requirements

• Construção de pipelines de ingestão batch e streaming a partir de fontes corporativas (ERP, BPM, ferramentas corporativas, APIs, planilhas, arquivos).
• Experiência com GCP: BigQuery, Cloud Storage, Dataflow, Pub/Sub e/ou Cloud Composer (Airflow gerenciado).
• Construção física das camadas Bronze, Silver e Gold como tabelas materializadas (não views), com deduplicação, padronização e regras de negócio.
• Modelagem de dados dimensional e/ou normalizada, com versionamento de código (Git).
• Implementação de testes de qualidade alinhados às cinco dimensões de Qualidade.
• Definição e cumprimento de SLAs de disponibilidade e atualização dos dados entregues, com ferramentas como Great Expectations, dbt tests, Soda ou Pandera.
• Monitoramento de pipelines (métricas de execução, falhas, latência) e configuração de alertas.
• Documentação de métricas operacionais dos pipelines para o time de engenharia e stakeholders.
• Otimização de custo dos pipelines e do armazenamento em nuvem (FinOps).
• Gestão do ciclo de vida dos dados: particionamento, retenção e arquivamento.

Benefits

• 100% remoto.
• Esta é uma vaga também para Pessoas com Deficiência (PCD).