Ingeniero de Datos Senior con Experiencia en Procesamiento, Arquitectura y Análisis

Se busca un Ingeniero de Datos Senior con experiencia práctica en el procesamiento de datos estructurados, semiestructurados y complejos, así como en marcos de streaming. Se requieren excelentes habilidades en ingeniería de software para ejecutar las iniciativas de Ingeniería y Análisis de Datos y convertirlas en productos que aporten gran valor a los miembros. 

Para este puesto, se espera incorporar a alguien entusiasmado con la misión de la empresa, que aprenda la tecnología utilizada y que pueda colaborar de forma interdisciplinaria con otros equipos de ingeniería.

Responsabilidades:

Trabajar en múltiples proyectos y esfuerzos para orquestar y brindar soluciones de ingeniería de datos cohesivas en asociación con varios equipos funcionales.
Tomar posesión del ciclo completo de servicios de datos, desde la ingesta, el procesamiento y la ETL hasta la entrega para informes.
Colaborar con otros equipos técnicos para brindar soluciones de datos que cumplan con los requisitos comerciales y técnicos, definiendo los requisitos y detalles de implementación de los datos.
Identificar, solucionar y resolver problemas de integridad y rendimiento de los datos de producción.
Gestión de datos para garantizar que los patrones, decisiones y herramientas se implementen según los estándares empresariales.
Realizar análisis de brechas de fuentes de datos y crear catálogos y asignaciones de fuentes y destinos.
Desarrollar un conocimiento de la integración entre sistemas, interacciones y relaciones para anticipar futuras necesidades de datos.
Diseñar, coordinar y ejecutar pilotos, prototipos y pruebas de concepto para validar escenarios específicos y proporcionar una hoja de ruta de implementación.
Garantizar la funcionalidad técnica de la ingeniería de datos en aspectos como escalabilidad, seguridad, rendimiento, recuperación de datos y confiabilidad.
Facilitar talleres para definir requisitos y desarrollar diseños de soluciones de datos.
Aplicar decisiones de arquitectura empresarial y de soluciones a marcos y modelos de datos.
Mantener un repositorio de artefactos y procedimientos de arquitectura de datos.
Colaborar con equipos de TI, proveedores de software y propietarios de negocios para diseñar una arquitectura de datos que aborde las necesidades de recopilación, agregación e interacción con múltiples flujos de datos.

Requisitos:

Experiencia en programación con Python, Scala o Java.
Experiencia con RDBMS y almacenamiento de datos (SQL avanzado) con Redshift, Snowflake o tecnologías similares.
Conocimiento y experiencia en patrones de arquitectura de datos, implementación de almacenes de datos operativos, marts de datos y lagos de datos.
Competencia en arquitectura, diseño y desarrollo de datos lógicos y físicos.
Experiencia en implementación de plataformas de análisis de Big Data/Data Lake, ya sea en la nube o en entornos locales (preferiblemente AWS).
Experiencia trabajando con grandes volúmenes de datos, diseño, implementación y soporte de aplicaciones de datos altamente distribuidos.
Experiencia con herramientas de desarrollo para CI/CD, pruebas unitarias e integración, automatización y orquestación (GitHub, Jenkins, Concourse, Airflow, Terraform).
Experiencia con la escritura de productores y consumidores de Kafka o AWS Kinesis.
Experiencia en el desarrollo de plataformas de procesamiento de datos distribuidos con tecnologías como Hadoop y Spark.
Habilidad para trabajar de forma independiente y en equipo.
Excelentes habilidades analíticas y de resolución de problemas, incluso en contextos de información ambigua o contradictoria.
Experiencia con ingesta de datos en streaming, aprendizaje automático y Apache Spark (deseable).
Capacidad para obtener, recopilar y gestionar requisitos en un entorno de entrega ágil.
Excelentes habilidades de comunicación y presentación a todos los niveles de la organización, con la capacidad de traducir conceptos abstractos en ideas tangibles.