Data Engineer – Procesamiento de datos en la nube con PySpark

Data Engineer especializado en procesamiento de datos en la nube para trabajar en Grupo Éxito, utilizando PySpark y herramientas avanzadas de ingeniería de datos.

1. Descripción: Diseño y mantenimiento de infraestructuras escalables en Google Cloud (Dataproc, Dataflow, BigQuery). Creación y automatización de pipelines ETL/ELT con PySpark, NiFi y Airflow. Modelado de Data Lakes y Data Warehouses con formatos Parquet/Delta.
2. Responsabilidades:
   1. Seleccionar servicios cloud adecuados para procesamiento de datos.
   2. Construir y orquestar pipelines serverless ETL/ELT.
   3. Monitorear sistemas mediante observabilidad para optimizar costos y rendimiento.
   4. Garantizar gobernanza de datos con cifrado y auditorías.
3. Requisitos:
   1. Título profesional en Ingeniería de Sistemas o similar.
   2. 2 a 5 años de experiencia en inteligencia de datos en la nube.
   3. Conocimiento en Python, SQL, NoSQL, Spark, Git.
   4. Manejo de NiFi, Airflow, Kubernetes GKE.
   5. Disponibilidad para movilidad nacional.

Condiciones: Contrato indefinido, salario de $6.600.000 COP y movilización a nivel nacional.