(CSC987) Ingeniero de Datos
Chile | hybrid
Sobre Nosotros
- Trabajamos con ellos.
- Desde adentro.
- Como parte de su ritmo.
- Como una extensión natural de su capacidad tecnológica.
Proposito del rol
Buscamos un Ingeniero/a de Datos Senior para unirse a un equipo enfocado en la construcción y optimización de soluciones de datos robustas. Este rol es crucial para el diseño, desarrollo y mantenimiento de arquitecturas de datos escalables, asegurando la calidad y consistencia de la información.
Se espera un fuerte criterio técnico y capacidad analítica, utilizando herramientas de Inteligencia Artificial como apoyo para potenciar el trabajo y mantener un enfoque inquebrantable en la calidad del dato.
Principales funciones
- Diseñar y construir pipelines de datos eficientes, flujos de ingesta y sistemas de orquestación en la nube (Azure Data Factory / Databricks) desde sistemas de origen industriales hacia el Data Lake.
- Ingestar y consolidar nuevos orígenes de datos en el Lakehouse corporativo, evaluando arquitecturas y restricciones de conectividad/ciberseguridad entre capas OT, DMZ e IT.
- Desarrollar lógica de transformación, limpieza y procesamiento masivo de datos utilizando PySpark, Apache Spark SQL, Delta Lake y Delta Live Tables (DLT).
- Ejecutar tareas de auditoría, limpieza y monitoreo para asegurar la calidad y consistencia de los datos a lo largo de toda la solución.
- Implementar estándares de desarrollo corporativos, aplicar políticas de control de acceso y seguridad (Unity Catalog), y gestionar credenciales y secretos (Azure Key Vault).
- Realizar consultas avanzadas en bases de datos relacionales y no relacionales, optimizando su rendimiento y el consumo de recursos en clústeres.
- Gestionar el versionamiento de código (Git/GitHub) e implementar flujos de despliegue continuo (CI/CD) e infraestructura como código mediante Azure DevOps y Databricks Asset Bundles (DABs).
- Identificar y mitigar riesgos técnicos que puedan afectar la disponibilidad o continuidad de la ingesta de datos, documentando procesos para el traspaso a Continuidad Operacional.
Requisitos
- Título profesional de Ingeniero/a Civil en Informática, Computación o carrera afín, con una duración mínima de 8 semestres.
- Más de 5 años de experiencia comprobable en el desarrollo de flujos de datos y/o integración de sistemas de información.
- Más de 3 años de experiencia en desarrollo e implementación sobre el ecosistema Microsoft Azure.
- Más de 2 años de experiencia en desarrollo sobre la plataforma Databricks.
- Experiencia en proyectos industriales o mineros, con enfoque en la integración de sistemas de proceso u operaciones (redes y plataformas OT/IT, sistemas FMS o de despacho mina).
- Dominio avanzado de Python y SQL.
- Manejo de procesamiento distribuido de datos a gran escala mediante Apache Spark y PySpark.
- Experiencia práctica en arquitectura Lakehouse (Patrón Medallón: Bronze/Silver/Gold), Workflows, Delta Lake, Databricks Asset Bundles (DABs) y Autoloader.
- Conocimiento en Unity Catalog para gobernanza de datos y uso de Delta Live Tables (DLT).
- Experiencia con Azure Data Factory (ADF), Azure Data Lake Storage Gen2 (ADLS Gen2), Azure Key Vault y Azure DevOps / Git para CI/CD.
- Conocimiento en arquitectura de conectividad (transporte seguro de datos entre dominios de red como OT, DMZ e IT) y conceptos de ciberseguridad industrial.
Deseables
- Certificación Microsoft Certified: Azure Data Engineer Associate (o equivalente en ecosistema de datos Azure).
- Certificación Databricks Certified Data Engineer (Associate o Professional).
- Formación complementaria en Big Data, Computación Distribuida, Arquitectura de Datos o Gobernanza Cloud.
Habilidades
- Liderazgo técnico.
- Pensamiento analítico y resolución de problemas complejos.
- Orientación a la calidad y al detalle en el desarrollo de soluciones de datos.
- Autonomía y proactividad en la gestión de tareas y proyectos.
- Capacidad de validar y cuestionar resultados generados por herramientas de IA.
- Foco en la mejora continua y la optimización de procesos.
- Habilidad para el trabajo colaborativo en equipos multidisciplinarios.
Con presencia en más de 10 países y un equipo multicultural, trabajamos con organizaciones que están cambiando la forma en que Latinoamérica opera, se conecta y se digitaliza.
Lo hacemos desde una cultura que pone a las personas en el centro y lleva la excelencia y la innovación como hábito, no como excepción.
Nuestros valores
- Entregamos con excelencia.
- Creamos valor para el cliente.
- Hacemos lo correcto.
- Hacemos que las cosas pasen.
- Ganamos como equipo.
Creamos impacto real porque creemos en las personas reales que lo construyen.
¡Los beneficios empresariales dependerán del lugar de LATAM donde te encuentres!