Resumen: Buscamos un talentoso Ingeniero Senior de Software de Datos para diseñar, implementar y optimizar tuberías de procesamiento de datos destinadas a iniciativas globales de seguridad alimentaria. Aspectos destacados: 1. Diseñar e implementar tuberías de procesamiento de datos en un lago de datos sin servidor de AWS. 2. Utilizar AWS, Apache Spark, Python y SQL para soluciones de datos robustas. 3. Colaborar de forma transversal para desarrollar soluciones de datos que satisfagan las necesidades empresariales. Buscamos un talentoso **Ingeniero Senior de Software de Datos** para unirse a nuestro equipo **remoto**, trabajando con una destacada empresa agrícola que contribuye a mejorar la seguridad alimentaria global al permitir que millones de agricultores aprovechen mejor los recursos disponibles. Como Ingeniero Senior de Software de Datos, será responsable de diseñar e implementar tuberías de procesamiento de datos, garantizar la calidad de los datos y optimizar la entrega de datos. Trabajarás con una plataforma AWS para ejecutar tuberías de datos, que es un lago de datos basado en AWS sin servidor que carga datos desde múltiples bases de datos. Si te apasiona la ingeniería de datos y cuentas con una sólida experiencia en AWS, Apache Spark y Python, ¡te invitamos a unirte a nuestro equipo. **Responsabilidades** * Diseñar e implementar tuberías de procesamiento de datos, garantizando la calidad de los datos y optimizando su entrega * Desarrollar y mantener la infraestructura de procesamiento de datos mediante servicios de AWS * Optimizar las tuberías de procesamiento de datos para lograr un rendimiento y escalabilidad óptimos * Diagnosticar y resolver incidencias relacionadas con las tuberías de procesamiento de datos * Garantizar la seguridad de los datos y el cumplimiento de las normativas de protección de datos * Documentar las tuberías de procesamiento de datos y los procesos relacionados * Colaborar con equipos transversales para comprender los requisitos empresariales y desarrollar soluciones de datos que los satisfagan **Requisitos** * Un mínimo de 3 años de experiencia en Ingeniería de Software de Datos, demostrando experiencia en el diseño e implementación de tuberías de procesamiento de datos * Amplia experiencia con Amazon Web Services, incluidos AWS Lambda, S3, EC2, Athena y Redshift * Competencia en Apache Spark, Python y SQL, lo que te permitirá desarrollar soluciones de procesamiento de datos robustas y escalables * Excelentes habilidades comunicativas y una sólida capacidad de pensamiento crítico, que te permitan colaborar eficazmente con equipos transversales * Capacidad para trabajar de forma independiente y gestionar adecuadamente el estrés, manteniendo un alto nivel de rendimiento incluso bajo presión * Dominio fluido del inglés hablado y escrito, al menos en nivel intermedio\-alto, lo que permita una comunicación efectiva **Deseable** * Experiencia con otros servicios de AWS, como AWS Glue, AWS EMR y AWS Kinesis * Conocimientos básicos sobre conceptos de aprendizaje automático y ciencia de datos