
Ingeniero de Datos Senior Big Data & Streaming
3 años de experiencia, Tecnólogo hasta Especialización/ Maestría
Salario a convenir
Medellín - Bogotá, D.C. - Barranquilla
Requisitos para aplicar a la vacante:
Accenture es una compañía global líder en servicios profesionales, con soluciones en estrategia y consultoría, tecnología, operaciones y capacidades digitales que impulsan a nuestros clientes a alcanzar su máximo potencial.
En nuestro equipo de #Tecnología, acompañamos a organizaciones de todas las industrias en su transformación digital, ayudándolas a adoptar tecnologías emergentes que habilitan innovación, eficiencia y resultados reales.
Actualmente nos encontramos en la búsqueda de un Ingeniero de Datos Senior – Big Data & Streaming.
La persona seleccionada será responsable de diseñar, construir y optimizar pipelines de datos a gran escala, garantizando el procesamiento eficiente de información tanto en entornos batch como en tiempo real. Trabajará en una célula ágil orientada a datos, construyendo soluciones robustas, escalables y de alto desempeño en la nube.
📌 Responsabilidades del rol:
Diseñar, desarrollar y optimizar pipelines de datos de gran escala utilizando Apache Spark.
Implementar procesos de transformación y procesamiento de datos en batch y tiempo real.
Construir soluciones de streaming mediante Apache Kafka, Spark Structured Streaming o Apache Flink.
Integrar plataformas de datos con servicios AWS y arquitecturas cloud escalables.
Desarrollar y mantener flujos de procesamiento sobre Data Lakes utilizando formatos modernos como Parquet, Avro y Delta Lake.
Implementar buenas prácticas de rendimiento, monitoreo y optimización de jobs distribuidos.
Orquestar workflows de datos mediante herramientas como Airflow o AWS Step Functions.
Participar activamente en ceremonias ágiles y colaborar con equipos multidisciplinarios de desarrollo, DevOps, QA y negocio.
Garantizar la calidad, seguridad y confiabilidad de los datos en ambientes productivos de alta demanda.
✔️ Requerimientos del puesto:
Experiencia avanzada en Apache Spark, especialmente con PySpark y Spark SQL.
Conocimiento sólido en optimización de jobs, DataFrames, Datasets y RDDs.
Experiencia práctica en Apache Kafka y procesamiento de datos en tiempo real con Spark Structured Streaming o Apache Flink.
Experiencia trabajando con servicios AWS como Glue, S3, EMR, Kinesis o MSK y Lambda.
Conocimientos en IAM, VPC y buenas prácticas de seguridad en entornos cloud.
Experiencia en orquestación de flujos de datos con Apache Airflow o AWS Step Functions.
Manejo de Git y conocimientos en procesos CI/CD para pipelines de datos.
Conocimientos deseables en Terraform o AWS CDK.
Nivel avanzado de Python y SQL.
Experiencia utilizando formatos de datos como Parquet, Avro, JSON y Delta Lake.
Mínimo 3 años de experiencia en Ingeniería de Datos.
Experiencia comprobable trabajando con Apache Spark en entornos productivos de alto volumen.
Experiencia en proyectos de streaming de datos en tiempo real.
Deseable experiencia en sector financiero, fintech o banca digital.
Experiencia trabajando bajo metodologías ágiles como Scrum o SAFe.
🚨 Importante: Los conocimientos en Apache Spark, Streaming (Kafka/Flink) y AWS son excluyentes.
Buscamos profesionales apasionados por la tecnología, los datos y la innovación, con mentalidad analítica, flexibles y con ganas de aportar al crecimiento continuo de nuestros equipos. 💜
Todas las decisiones de Accenture se tomarán sin discriminar por motivos de raza, religión, color, sexo, edad, discapacidad, nacionalidad, orientación sexual, identidad o expresión de género, ni por ninguna otra razón cubierta por la legislación local.
Habilidades
- Ingeniería de datos
- AWS
- SQL
- Python
- Apache Spark
- Streaming (Kafka/Flink)
- Apache Airflow
Palabras clave:
Ingeniería de datos, Datos, AWS
Ver empresa: ACCENTURE LTDA
