[Hiring] Data Engineer - Mid-level @dti digital

Role Description

• Tenha vontade de aprender coisas novas e crescer junto com a dti digital;
• Seja uma pessoa proativa, goste de trabalhar em equipe e se comunique bem;
• Tenha facilidade em estabelecer relações interpessoais;
• E que se identifique com a nossa cultura!

Requirements

• Construir pipelines de dados e plataformas de dados de produção que forneçam modelos, dados e fluxos de trabalho de IA para aplicativos internos e voltados para o cliente, sendo responsável por eles sob tráfego real;
• Responsável pela qualidade não funcional — orçamentos de latência e throughput, escalabilidade, confiabilidade, observabilidade e custo — dos sistemas em seu domínio;
• Design e a operação de armazenamentos de dados multimodelos — bancos de dados relacionais (PostgreSQL, MySQL), bancos de dados vetoriais (Pinecone, Weaviate, pgvector) e bancos de dados de grafos (Neo4j, Neptune) — garantindo a ferramenta adequada para cada padrão de acesso;
• Trabalhar em toda a pilha de tecnologia quando necessário — serviços, acesso a dados, infraestrutura como código, CI/CD — e depurar quando houver problemas em produção;
• Orientar padrões de qualidade para engenheiros de dados de nível júnior.

Qualifications

• Experiência profissional em engenharia de software, no desenvolvimento e na operação de sistemas de produção, lidando com escalabilidade, confiabilidade, plantão e a transição de um protótipo funcional para um serviço confiável;
• Experiência comprovada e profunda no design e construção de pipelines de dados distribuídos com Apache Airflow, além de sólida modelagem de dados em bancos de dados relacionais, vetoriais e de grafos;
• Proficiência em pelo menos uma linguagem de programação de propósito geral (por exemplo, Python, Scala ou Java) e capacidade de trabalhar efetivamente com outras linguagens;
• Experiência prática com plataformas em nuvem (GCP/AWS), contêineres (Docker), CI/CD e infraestrutura como código (Terraform);
• Sólidos hábitos de engenharia de software — controle de versão, testes, revisão de código e CI/CD;
• Conforto com ambiguidade. Muitos dos nossos problemas não têm uma solução ideal conhecida;

Responsibilities

• Processamento de dados — construção de pipelines ETL/ELT robustos com Apache Spark que ingerem, transformam e fornecem conjuntos de dados multimodais em escala de terabytes em toda a pilha de inteligência de marketing;
• Infraestrutura de dados poliglota — projeto e operação de bancos de dados relacionais para cargas de trabalho transacionais, bancos de dados vetoriais para busca semântica e sistemas RAG, e bancos de dados de grafos para modelagem de relacionamento com o público e atribuição;
• Transformação e modelagem de dados — orquestração de fluxos de trabalho de engenharia analítica com dbt para criar modelos de dados bem documentados, testados e com controle de versão que alimentam sistemas de IA e BI subsequentes;
• Confiabilidade da plataforma de dados — construção das bases da plataforma (orquestração, monitoramento, verificações de qualidade de dados e rastreamento de linhagem) que garantem a confiabilidade de nossos pipelines e bancos de dados sob carga de produção.

Benefits

• Previdência Privada (Para cada real depositado pelo colaborador, limitado a 6% do salário, a dti complementa com o mesmo valor);
• Plano Odontológico;
• Vale Refeição e/ou Vale alimentação (R$890/mês);
• Plano de Saúde sem desconto para o colaborador e dependentes;
• Auxílio home office de 120,00;
• TotalPass para desconto em academias, estúdios, aulas on-line e muito mais;
• Parceria com SESC para desconto em acomodações e atividades de lazer;
• Reembolso de certificação;
• Desconto em cursos de inglês com a Open English, Cultura Inglesa, CNA e EHeadset;
• Parceria com USP/ESALQ: descontos em cursos de pós-graduação e especialização;
• Parceria com a PUC-RS: desconto em cursos de graduação, pós-graduação, especialização, idiomas e certificações;
• Parceria com FIAP: desconto em cursos de graduação e pós-graduação;
• Parceria com FIA: desconto em cursos de graduação e pós-graduação;
• Parceria com a ESPM: desconto em cursos de pós-graduação e cursos de curta duração;
• Plano de saúde para seus pets;
• Descontos em Farmácias - Drogasil e Droga Raia;
• Ambiente descontraído, flexível e com feedbacks constantes;
• Rotina com aprendizado constante, com Tech Shots, Mentorias, Rodas de Conversa e Knowledge Transfers.