Resumen: Este puesto implica diseñar y entregar la infraestructura de datos central para una capa analítica impulsada por IA sobre una plataforma de datos de seguridad de redes. Aspectos destacados: 1. Diseñar e implementar DynamoDB para datos de registros de seguridad 2. Construir canalizaciones ETL robustas para herramientas de monitoreo de redes 3. Colaborar con expertos en ciberseguridad e ingenieros de IA Nuestro cliente está desarrollando una capa analítica impulsada por IA sobre una plataforma de datos de seguridad de redes. Como **Ingeniero de Datos Senior** en este proyecto, usted diseñará y entregará la infraestructura de datos central para derivar políticas de seguridad a partir de registros de redes de tecnología operacional. Trabajará con exportaciones de datos diversas y complejas procedentes de plataformas industriales de seguridad —como sistemas de monitoreo de redes— y las transformará en una base de datos DynamoDB bien estructurada. Una vez establecida la base de datos, la conectará a AWS QuickSight para ofrecer paneles interactivos de BI que brinden a los interesados visibilidad inmediata del comportamiento de la red, eventos de seguridad y brechas en las políticas. **Responsabilidades** * Diseñar e implementar bases de datos DynamoDB como almacén analítico principal para datos de registros de redes y seguridad * Definir estructuras de tablas, claves de partición, claves de ordenación e índices secundarios globales para datos de eventos de alta frecuencia y serie temporal * Optimizar el rendimiento y la eficiencia de costos de la base de datos aprovechando las funciones de DynamoDB y estableciendo estrategias de archivado de datos * Construir canalizaciones ETL robustas para ingerir datos desde archivos Excel, CSV y fuentes API de herramientas de monitoreo de redes * Limpiar, validar, normalizar y enriquecer los datos brutos de eventos de seguridad, gestionando esquemas inconsistentes y valores ausentes * Automatizar la orquestación, la programación y el manejo de errores para garantizar la ejecución confiable de las canalizaciones y la entrega oportuna de los datos * Conectar DynamoDB a AWS QuickSight para crear paneles y informes interactivos sobre eventos de seguridad y patrones de tráfico de red * Diseñar y mantener conjuntos de datos, campos calculados y análisis visuales en QuickSight, iterando en el diseño de los paneles según los comentarios recibidos * Colaborar con expertos en ciberseguridad, ingenieros de IA/analítica, arquitectos de IA y partes interesadas para traducir los requisitos comerciales en arquitectura de datos * Elaborar documentación técnica clara, incluidas definiciones de esquemas, diccionarios de datos, especificaciones de canalizaciones y manuales operativos **Requisitos** * Mínimo 3 años de experiencia en puestos de ingeniería de datos * Conocimientos avanzados de DynamoDB, incluido el diseño de tablas, estrategias de claves de partición y de ordenación, índices secundarios globales (GSIs), planificación de capacidad, Streams y modelado de datos NoSQL para cargas de trabajo de alto rendimiento * Experiencia comprobada construyendo canalizaciones ETL/ELT de producción en Python utilizando bibliotecas como boto3 y pandas, capaces de manejar datos fuente desordenados y de múltiples formatos, y cargarlos en DynamoDB * Competencia en servicios de AWS, incluidos S3, Lambda, IAM y CloudWatch, y su integración con DynamoDB y QuickSight * Experiencia con AWS QuickSight para la creación de conjuntos de datos, análisis y paneles interactivos, conexión a fuentes de datos de AWS y diseño de visualizaciones dirigidas a audiencias no técnicas * Experticia en modelado de datos NoSQL, diseñando modelos de datos desnormalizados orientados a consultas para cargas de trabajo basadas en clave-valor y orientadas a documentos * Amplia experiencia en ingeniería de calidad de datos, implementando marcos de validación, contratos de datos y pruebas automatizadas para canalizaciones * Competencia en Python para escribir código ETL limpio y mantenible, incluida la familiaridad con entornos virtuales, pruebas y control de versiones mediante Git * Capacidad para documentar claramente las decisiones técnicas y colaborar eficazmente con partes interesadas no técnicas * Excelentes habilidades de comunicación en inglés, nivel B2+ o superior, tanto escritas como habladas **Deseable** * Experiencia con AWS Glue y Athena para ETL sin servidor y consultas ad-hoc en lagos de datos basados en S3 * Familiaridad con bases de datos de grafos como Neo4j o Amazon Neptune y modelado de datos como nodos y relaciones para representar topologías de redes y estructuras de políticas * Experiencia con herramientas de CI/CD como GitHub Actions o GitLab CI para pruebas y despliegue automatizados de canalizaciones * Antecedentes en registros de seguridad de redes, análisis de ciberseguridad o entornos del dominio de la seguridad * Comprensión de la minería de procesos, incluidos los registros de eventos y las estructuras que alimentan los algoritmos de minería de procesos * Experiencia con herramientas o flujos de trabajo de desarrollo asistidos por IA