Realizar el descubrimiento y valoración del potencial existente en los datos de un cliente, para la implementación de soluciones basadas en técnicas de Inteligencia Artificial. Seleccionar, desarrollar y aplicar asertivamente técnicas estadísticas, matemáticas y econométricas avanzadas y/o complejas según el comportamiento de los datos, para solucionar problemas de negocio y garantizando la calidad y confiabilidad de los resultados del modelo.
Volver
#5509 Senior Data Engineer – Etl/Dba Con Airflow Y Python (Remoto Colombia)
Personal Soft S. A.s
Jornada Completa
Staffing
1 vacante
Colombia
Publicado hace menos de una semana
Descripción
Requerimientos
Ingeniero de sistemas o carreras afines con más de 5 años de experiencia, ejecutar el proyecto y la implementación de la arquitectura propuesta, ingerir fuentes complejas, diseñar transformaciones y asegurar performance e incrementalidad.
CONOCIMIENTOS NECESARIOS
• Python avanzado (pandas, polars, SQLAlchemy)
• Apache Airflow avanzado (DAGs, Hooks, Operators, Sensors, Pools, XCom, SLA)
• SQL y PL/SQL experto (Oracle, MSSQL y Postgres)
• Diseño de procesos ETL/ELT con reglas de negocio
• Incrementalidad, idempotencia, particionamiento lógico
• Buenas prácticas de extracción para proteger al core Oracle
• Patrones de carga a Postgres (UPSERT, MERGE, batch insert)
• Azure DevOps, Azure Pilelines
• Power Bi
• Validaciones de calidad (DQ)
RESPONSABILIDADES
• Diseñar plantillas base de DAGs
• Asegurar calidad técnica de codebase
• Modelar staging/core/curated
• Convertir reglas PL/SQL en transformaciones Python/SQL
• Guiar a Data Engineers Jr/Semi-Sr
• Garantizar seguridad, gobernanza y observabilidad
Cargando ofertas similares...