Arquitecto de Soluciones de Datos, AWS

Descripción

Resumen: Buscamos un Arquitecto de Soluciones de Datos, AWS, para liderar el diseño e implementación de pipelines de datos destinados a análisis nativos en la nube y habilitación de GenAI, asumiendo la responsabilidad de las decisiones arquitectónicas en los ámbitos de ingesta, transformación, almacenamiento y búsqueda/recuperación de datos mediante servicios de AWS. Aspectos destacados: 1. Liderar el diseño de pipelines de datos para análisis nativos en la nube y habilitación de GenAI 2. Tomar decisiones arquitectónicas en los ámbitos de ingesta, transformación y almacenamiento de datos 3. Diseñar y arquitecturar pipelines de datos escalables utilizando AWS Glue, Lambda y S3 Buscamos un **Arquitecto de Soluciones de Datos, AWS**, para liderar el diseño e implementación de pipelines de datos en una iniciativa de análisis nativo en la nube y habilitación de GenAI, asumiendo la responsabilidad de las decisiones arquitectónicas en los ámbitos de ingesta, transformación, almacenamiento y búsqueda/recuperación de infraestructura mediante servicios de AWS. **Responsabilidades** * Diseñar y arquitecturar pipelines de datos escalables utilizando AWS Glue para la orquestación ETL, Lambda para el procesamiento impulsado por eventos y S3 para el almacenamiento en un data lake * Definir patrones de arquitectura de datos alineados con los principios del Framework Well-Architected de AWS en cuanto a fiabilidad, rendimiento y optimización de costos * Crear especificaciones técnicas y diagramas arquitectónicos para los componentes de la plataforma de datos * Liderar el desarrollo de soluciones en Python y PySpark para el procesamiento y transformación de datos a gran escala * Arquitecturar soluciones basadas en OpenSearch y bases de datos vectoriales para soportar búsquedas semánticas, generación aumentada por recuperación y cargas de trabajo de IA/ML * Diseñar modelos de datos y pipelines que permitan análisis avanzados, incluyendo análisis de regresión y aplicaciones de procesamiento del lenguaje natural (PLN) * Brindar orientación arquitectónica sobre estrategia, asesoramiento y operacionalización de GenAI integrada con la infraestructura de datos existente * Diseñar patrones de infraestructura que apoyen los flujos de trabajo de entrenamiento, inferencia e implementación de modelos de aprendizaje automático * Asesorar sobre enfoques de preparación de datos e ingeniería de características para casos de uso de ML/IA * Establecer patrones de CI/CD para la implementación de pipelines de datos y prácticas de infraestructura como código * Colaborar con equipos de ingeniería para garantizar que los componentes de la plataforma de datos cumplan con los estándares de excelencia operacional * Apoyar la transferencia de conocimientos y la documentación técnica para asegurar una entrega sostenida **Requisitos** * 7 años o más de experiencia en ingeniería de análisis de datos * Alto nivel de competencia en PySpark * Conocimiento avanzado de AWS Glue, AWS Lambda y Amazon S3 * Experiencia comprobada con Amazon OpenSearch * Dominio del inglés a nivel B2 o superior **Deseable** * Conocimientos de aprendizaje automático * Familiaridad con CI/CD * Comprensión de bases de datos vectoriales **Ofrecemos** * Proyectos internacionales con marcas líderes * Trabajo con equipos globales altamente calificados y diversos * Beneficios médicos * Programas financieros para empleados * Días libres remunerados y licencias por enfermedad * Cursos de actualización de habilidades, reconversión profesional y certificación * Acceso ilimitado a la biblioteca de LinkedIn Learning y a más de 22.000 cursos * Oportunidades profesionales globales * Oportunidades de voluntariado y participación comunitaria * Grupos de empleados de EPAM * Cultura galardonada reconocida por Glassdoor, Newsweek y LinkedIn *EPAM es un empleador que ofrece igualdad de oportunidades. Todos los candidatos calificados recibirán consideración para el empleo sin distinción de raza, color, religión, sexo, origen nacional, edad, orientación sexual, identidad o expresión de género, discapacidad, condición de veterano protegido u otra característica protegida por la ley aplicable.*