[Hiring] Senior Data Engineer Big Data & Streaming @Accenture

Role Description

Actualmente nos encontramos en la búsqueda de un Ingeniero de Datos Senior – Big Data & Streaming. La persona seleccionada será responsable de diseñar, construir y optimizar pipelines de datos a gran escala, garantizando el procesamiento eficiente de información tanto en entornos batch como en tiempo real. Trabajará en una célula ágil orientada a datos, construyendo soluciones robustas, escalables y de alto desempeño en la nube.

• Diseñar, desarrollar y optimizar pipelines de datos de gran escala utilizando Apache Spark.
• Implementar procesos de transformación y procesamiento de datos en batch y tiempo real.
• Construir soluciones de streaming mediante Apache Kafka, Spark Structured Streaming o Apache Flink.
• Integrar plataformas de datos con servicios AWS y arquitecturas cloud escalables.
• Desarrollar y mantener flujos de procesamiento sobre Data Lakes utilizando formatos modernos como Parquet, Avro y Delta Lake.
• Implementar buenas prácticas de rendimiento, monitoreo y optimización de jobs distribuidos.
• Orquestar workflows de datos mediante herramientas como Airflow o AWS Step Functions.
• Participar activamente en ceremonias ágiles y colaborar con equipos multidisciplinarios de desarrollo, DevOps, QA y negocio.
• Garantizar la calidad, seguridad y confiabilidad de los datos en ambientes productivos de alta demanda.

Qualifications

• Experiencia avanzada en Apache Spark, especialmente con PySpark y Spark SQL.
• Conocimiento sólido en optimización de jobs, DataFrames, Datasets y RDDs.
• Experiencia práctica en Apache Kafka y procesamiento de datos en tiempo real con Spark Structured Streaming o Apache Flink.
• Experiencia trabajando con servicios AWS como Glue, S3, EMR, Kinesis o MSK y Lambda.
• Conocimientos en IAM, VPC y buenas prácticas de seguridad en entornos cloud.
• Experiencia en orquestación de flujos de datos con Apache Airflow o AWS Step Functions.
• Manejo de Git y conocimientos en procesos CI/CD para pipelines de datos.
• Conocimientos deseables en Terraform o AWS CDK.
• Nivel avanzado de Python y SQL.
• Experiencia utilizando formatos de datos como Parquet, Avro, JSON y Delta Lake.
• Mínimo 3 años de experiencia en Ingeniería de Datos.
• Experiencia comprobable trabajando con Apache Spark en entornos productivos de alto volumen.
• Experiencia en proyectos de streaming de datos en tiempo real.
• Deseable experiencia en sector financiero, fintech o banca digital.
• Experiencia trabajando bajo metodologías ágiles como Scrum o SAFe.

Requirements

• Los conocimientos en Apache Spark, Streaming (Kafka/Flink) y AWS son excluyentes.

Benefits

• Buscamos profesionales apasionados por la tecnología, los datos y la innovación, con mentalidad analítica, flexibles y con ganas de aportar al crecimiento continuo de nuestros equipos.