Descripción
Resumen:
Buscamos un Ingeniero Líder de Data DevOps para diseñar y ejecutar pipelines de datos y ML fiables en Domino Data Lab, guiando las mejores prácticas en ingeniería de pipelines y operaciones de Kubernetes.
Aspectos destacados:
1. Dirigir el diseño de pipelines de datos y ML de extremo a extremo en Domino Data Lab
2. Operar cargas de trabajo basadas en Kubernetes para trabajos de datos y ML
3. Definir las mejores prácticas para la fiabilidad, la seguridad y la reproducibilidad
Estamos buscando un **Ingeniero Líder de Data DevOps** para diseñar y ejecutar pipelines de datos y ML fiables en la plataforma Domino Data Lab, garantizando una infraestructura informática y de datos segura y eficiente. Usted guiará las mejores prácticas en ingeniería de pipelines, operaciones de Kubernetes y automatización de entregas. ¡Postúlese ahora para contribuir a mejorar la fiabilidad y la velocidad de la plataforma!
**Responsabilidades**
* Dirigir el diseño de pipelines de datos y ML de extremo a extremo en la plataforma Domino Data Lab
* Diseñar patrones seguros y escalables para la ingesta, transformación, validación y orquestación de datos
* Crear y mantener proyectos, entornos, conjuntos de datos, trabajos, conectores y flujos de Domino para respaldar flujos de trabajo productivos
* Operar cargas de trabajo basadas en Kubernetes para trabajos de datos y ML, incluyendo despliegue, depuración y ajuste del rendimiento
* Crear y optimizar imágenes Docker para la ejecución reproducible de datos y ML
* Implementar automatización CI/CD para pruebas, lanzamiento e implementación de pipelines y artefactos de flujos de trabajo
* Definir mejores prácticas y salvaguardias para la fiabilidad, la seguridad, la conciencia de costes y la reproducibilidad
* Diagnosticar fallos en los pipelines y problemas de la plataforma, realizar análisis de causas raíz y aplicar correcciones preventivas
* Colaborar con partes interesadas para traducir requisitos en diseños técnicos y planes de entrega
* Capacitar a ingenieros en el uso de Domino, patrones de pipelines y excelencia operativa
* Documentar arquitecturas, manuales operativos y procedimientos operativos para soporte continuo
* Mejorar la supervisión y la visibilidad operativa de los flujos de trabajo de datos y ML
* Asegurar que las soluciones cumplan con las prácticas orientadas al cumplimiento exigidas en ámbitos regulados
**Requisitos**
* 5 o más años de experiencia en ingeniería de software de datos y entrega de pipelines
* Conocimientos expertos en Domino Data Lab, incluidos Orígenes de Datos, Conjuntos de Datos, Entornos, Proyectos, Trabajos y Flujos
* 5 o más años de experiencia con Python para ingeniería de datos y automatización
* Excelentes habilidades en SQL para extracción, transformación y optimización
* Experiencia práctica con Kubernetes en despliegue, depuración y ajuste de cargas de trabajo (incluidas ofertas gestionadas)
* Sólidas habilidades en contenerización, incluida la creación y solución de problemas de imágenes Docker
* Experiencia comprobada en CI/CD para pipelines de datos y ML mediante herramientas modernas de automatización
* Excelentes habilidades de liderazgo para establecer estándares, capacitar a compañeros y tomar decisiones técnicas
* Sólidas habilidades de propiedad del proyecto para planificar, priorizar y entregar mejoras de extremo a extremo
* Excelentes habilidades de comunicación con partes interesadas, con un enfoque consultivo y directo
* Nivel de inglés intermedio-alto (B2)
* Experiencia laboral en entornos farmacéuticos y de biotecnología
**Deseable**
* Experiencia con Amazon Web Services para la arquitectura de plataformas de datos y ML
* Experiencia en MLOps abarcando flujos de trabajo de entrenamiento, despliegue, supervisión y reentrenamiento
* Experiencia con MLflow para el seguimiento de experimentos y la coordinación del ciclo de vida
* Experiencia en desarrollo de aplicaciones de IA generativa centrada en RAG y pipelines de datos
**Ofrecemos**
* Proyectos internacionales con marcas líderes
* Trabajo con equipos globales de profesionales altamente calificados y diversos
* Beneficios sanitarios
* Programas financieros para empleados
* Días de vacaciones remunerados y baja por enfermedad
* Cursos de actualización de competencias, reconversión profesional y certificación
* Acceso ilimitado a la biblioteca de LinkedIn Learning y a más de 22.000 cursos
* Oportunidades profesionales globales
* Oportunidades de voluntariado y participación comunitaria
* Grupos de empleados de EPAM
* Cultura galardonada reconocida por Glassdoor, Newsweek y LinkedIn
*EPAM es un empleador que ofrece igualdad de oportunidades. Todos los candidatos calificados recibirán consideración para el empleo sin distinción de raza, color, religión, sexo, origen nacional, edad, orientación sexual, identidad o expresión de género, discapacidad, condición de veterano protegido o cualquier otra característica protegida por la ley aplicable.*