Colaborarás con los equipos de operaciones de datos y productos para integrar datos de diversas fuentes, diseñar flujos de datos eficientes y mejorar la plataforma de análisis existente, creando paneles sólidos y capacidades de autoservicio.

Responsabilidades:

Colaborarás con las partes interesadas, desde gerentes hasta equipos de productos, para traducir los requisitos de monitoreo y análisis en proyectos procesables, entregando resultados de alta calidad.
Utilizarás principalmente Scala Spark, pero también tendrás la oportunidad de trabajar con Python o cualquier lenguaje adecuado para crear servicios de datos de alto rendimiento.
Serás responsable de los componentes de Lakehouse, aplicando las mejores prácticas tanto en contextos de lotes como de transmisión, garantizando que la arquitectura de datos esté optimizada para tareas analíticas.
Escribirás RFC, participarás en conversaciones técnicas y compartirás conocimientos, asesorando a ingenieros con menos experiencia, especialmente a ingenieros analíticos que trabajan dentro del marco de Lakehouse.
Iterarás en ciclos de desarrollo cortos, ejecutando entornos de desarrollo efímeros para probar y fallar rápidamente, todo bajo una mentalidad impulsada por GitOps con las mejores prácticas de CI/CD.

Requisitos:

Experiencia en la creación y operación de canales de datos confiables, con un fuerte enfoque en la transformación analítica y las mejores prácticas de Lakehouse.
Experiencia en la implementación de dbt en entornos de producción, incluyendo modelado, pruebas y documentación avanzada.
Experiencia con marcos de transmisión (Kafka, Spark Structured Streaming o similares) y lenguajes de programación funcional (Scala u otros lenguajes JVM) es una ventaja
Familiaridad con los servicios de AWS (Glue, Athena, S3) y formatos de archivos abiertos (Iceberg, Delta o similares) para construir una arquitectura Lakehouse moderna.
Conocimiento de herramientas de gobernanza/catalogación de datos, asegurando la capacidad de descubrimiento, linaje y cumplimiento de los datos.
Mentalidad centrada en el usuario, enfocada en ofrecer soluciones que realmente resuelvan las necesidades de datos y análisis del mundo real.
Comodidad trabajando en inglés y con equipos distribuidos.