Ingeniero de Databricks

Descripción

Resumen: Buscamos un Ingeniero de Databricks de alto nivel para construir, optimizar e implementar canalizaciones de datos de alto rendimiento y marcos MLOps para clientes empresariales. Aspectos destacados: 1. Construir soluciones Lakehouse desde cero en la vanguardia de la inteligencia artificial y los grandes datos 2. Colaborar con ingenieros de aprendizaje automático y científicos de datos en características de calidad para producción 3. Exposición a tecnologías de vanguardia de AWS en IA generativa, datos y nube * **Reporta a:** Líder de la práctica de Datos e IA * **Ubicación:** Teletrabajo (preferentemente en Estados Unidos / zona horaria del este o central) * **Tipo de empleo:** Contrato ¿Listo para construir soluciones Lakehouse desde cero en la vanguardia de la inteligencia artificial y los grandes datos? RevStar es un estudio de innovación y socio oficial de Databricks que lanza una práctica especializada y agnóstica respecto a la nube en los ámbitos de Datos, Aprendizaje Automático e IA. Buscamos un Ingeniero de Databricks de alto nivel para construir, optimizar e implementar canalizaciones de datos y marcos MLOps de alto rendimiento para clientes empresariales en AWS, Azure y GCP. En este puesto, trabajará directamente con arquitectos de datos, científicos de datos y líderes de clientes para transformar datos complejos en modelos de IA escalables y listos para producción. Por encima de todo, el candidato ideal encarna los valores fundamentales de RevStar: **Maestría personal**: Mantenemos un alto estándar en cómo pensamos, comunicamos y mejoramos. **Responsabilidad**: Nos hacemos responsables de los resultados, no solo del esfuerzo. **Destino compartido**: Ascendemos o caemos juntos. Pilares de su impacto Sus contribuciones técnicas se organizan en cuatro pilares estratégicos: 1\. Arquitectura Lakehouse e ingeniería de canalizaciones * Diseñar, construir y optimizar canalizaciones ETL/ELT escalables mediante Apache Spark y Delta Lake en entornos multi-nube (AWS S3, Azure Data Lake, GCS). * Implementar arquitecturas Lakehouse robustas que procesen sin problemas tanto datos estructurados como no estructurados a escala empresarial. * Automatizar flujos de trabajo de ingesta y almacenamiento de datos para respaldar análisis posteriores y reportes operativos en tiempo real. 2\. Optimización del rendimiento y automatización * Ajustar finamente trabajos Spark para baja latencia, alto rendimiento y máxima eficiencia de costos en la nube. * Implementar canalizaciones CI/CD e Infraestructura como Código (IaC) (Terraform, CLI de Databricks) para despliegues automatizados. * Construir marcos automatizados de supervisión, alertas y validación de calidad de datos para garantizar la fiabilidad de las canalizaciones. 3\. MLOps e integración de IA * Colaborar con ingenieros de aprendizaje automático y científicos de datos para construir canalizaciones de ingeniería de características de calidad para producción. * Apoyar el entrenamiento, seguimiento, versionado e implementación de modelos dentro de Databricks mediante MLflow. * Operacionalizar modelos de IA/ML en entornos de producción seguros y escalables para aplicaciones de clientes. 4\. Gobernanza de datos y excelencia con clientes * Hacer cumplir la seguridad empresarial de los datos, los controles de acceso y los estándares de cumplimiento (GDPR, HIPAA, SOC 2). * Establecer buenas prácticas para la trazabilidad de datos, gestión de metadatos y documentación operativa. * Colaborar con partes interesadas orientadas al cliente para alinear las implementaciones técnicas con resultados empresariales críticos. **Requisitos** **Imprescindibles:** * 3 o más años de experiencia práctica en ingeniería de datos, con énfasis en procesamiento de grandes volúmenes de datos y arquitecturas nativas de la nube. * 2 o más años de experiencia práctica con Databricks, incluidos Apache Spark, Delta Lake y MLflow. * Certificaciones de Databricks (obligatorias): * + Certificación de Ingeniero de Datos Asociado de Databricks (o superior) * Competencia en Python, SQL y marcos basados en Spark. * Experiencia en desarrollo y optimización de canalizaciones ETL/ELT a gran escala. * Profundo conocimiento de la arquitectura Lakehouse y soluciones de datos agnósticas respecto a la nube. * Familiaridad con canalizaciones CI/CD e Infraestructura como Código (IaC) para Databricks (por ejemplo, Terraform, CLI de Databricks). * Conocimiento de buenas prácticas en gobernanza, seguridad y cumplimiento de datos. * Experiencia trabajando en entornos ágiles de desarrollo, siguiendo las mejores prácticas de DevOps/MLOps. **Deseables:** * Otras certificaciones de Databricks (por ejemplo, Certificación de Aprendizaje Automático Asociado de Databricks). * Experiencia con soluciones de transmisión en tiempo real (por ejemplo, Kafka, Kinesis, Event Hub). * Familiaridad con herramientas de almacenamiento y orquestación en la nube (por ejemplo, Apache Airflow, Prefect). * Antecedentes en integración de IA/ML dentro de Databricks, apoyando la ingeniería de características y la implementación de modelos. * Experiencia en puestos orientados al cliente o en entornos de consultoría. **Beneficios** **Beneficios para puestos a tiempo completo bajo modalidad W2:** * **Días de descanso remunerados** – Tome el tiempo que necesite para recargar energías y mantener su productividad. * **Entorno de trabajo centrado en el teletrabajo** – Colabore desde cualquier lugar mientras permanece conectado con nuestro equipo global. * **Cobertura médica integral** – Médica, dental y visual * **Plan de jubilación 401(k)** – Planifique su futuro con acceso a un programa 401(k) patrocinado por la empresa. * **Subsidio anual para aprendizaje y desarrollo** – Invierta en sus habilidades mediante conferencias, certificaciones o cursos. * **Mentoría y coaching entre pares** – Aprenda de ingenieros, gerentes de producto y arquitectos experimentados para acelerar su crecimiento. * **Oportunidades de crecimiento profesional** – Exposición a tecnologías de vanguardia de AWS en IA generativa, datos y nube en diversos sectores industriales. * **Actividades sociales de la empresa y oportunidades de voluntariado** – Fortalezca relaciones y aporte a la comunidad. * **Cultura colaborativa e innovadora** – Trabaje junto a los mejores talentos en un entorno dinámico y solidario que valora la curiosidad y la iniciativa. **Igualdad de oportunidades en el empleo** En RevStar, no solo aceptamos las diferencias: las celebramos, las apoyamos y prosperamos gracias a ellas, en beneficio de nuestros empleados, clientes y comunidad. RevStar se enorgullece de ser un lugar de trabajo con igualdad de oportunidades. **Acomodaciones razonables** RevStar se compromete a brindar acceso, igualdad de oportunidades y acomodaciones razonables a personas con discapacidades en el empleo, sus servicios, programas y actividades. Para solicitar una acomodación razonable, comuníquese con Recursos Humanos en hr@revstarconsulting.com.