Ingeniero de Datos Líder

Una empresa que gestiona una popular cadena de tiendas de guitarras y amplificadores en Estados Unidos busca un ingeniero de datos líder. El candidato seleccionado para este trabajo remoto se encargará de la arquitectura, aplicación de normas y asesoramiento técnico. La empresa está decidida a proporcionar a las personas las herramientas que necesitan para crear y conectarse entre sí a través del poder de la música. Ha recaudado más de 30 millones de dólares en financiación hasta el momento.

Responsabilidades:

• Asumir la responsabilidad de la modernización, migración/transformación a una plataforma de datos en la nube
• Diseñar y desarrollar una infraestructura de datos confiable con técnicas de privacidad y seguridad líderes para salvaguardar los datos mediante las tecnologías de AWS
• Diseñar soluciones seguras, de baja latencia, resistentes y rentables para permitir el análisis predictivo en toda la organización
• Diseñar y construir frameworks para poner en funcionamiento modelos de ML a través de una arquitectura sin servidor y admitir modelos de entrenamiento continuo sin supervisión
• Trabajar con el equipo para escalar los modelos de datos de la empresa (Tableau, Dynamo DB, Kibana)
• Comunicar los hallazgos respaldados por datos a una comunidad diversa de partes interesadas internas y externas
• Construir frameworks para la canalización de ingesta de datos tanto en tiempo real como por lotes, utilizando las mejores prácticas en el modelado de datos
• Participar en las decisiones técnicas y colaborar con compañeros talentosos
• Revisar el código y ofrecer comentarios significativos que ayuden a otros a crear soluciones altamente escalables
• Impulsar la dirección tecnológica y la elección de tecnologías, haciendo recomendaciones basadas en la experiencia y la investigación

Requisitos:

• Licenciatura o Maestría en Ingeniería, Informática (o experiencia equivalente)
• Al menos 10 años o más de experiencia relevante como ingeniero de datos
• Sólido conocimiento de los procesos ETL/ELT 
• Experiencia práctica trabajando en un entorno de nube pública e infraestructura on-prem
• Experiencia en bases de datos columnares como Redshift Spectrum, almacenes de datos de series temporales como Apache Pinot y la infraestructura de la nube de AWS
• Experiencia con tecnologías in-memory, serverless, streaming y herramientas de orquestación como Spark, Kafka, Airflow, Kubernetes
• Experiencia práctica actual en la implementación de plataformas de TI
• Es deseable tener experiencia en big data certificada por AWS 
• Es deseable tener experiencia en el diseño e implementación de soluciones de big data y analítica de AWS en grandes entornos digitales y de venta al por menor
• Conocimiento avanzado y experiencia en bases de datos de procesamiento transaccional (OLTP) y de procesamiento analítico (OLAP), lagos de datos y esquemas
• Experiencia con tecnologías de lago de datos en la nube de AWS y experiencia operativa con Kinesis/Kafka, S3, Glue y Athena
• Experiencia con cualquiera de los formatos de mensajes/archivos: Parquet, Avro, ORC
• Experiencia en el diseño y desarrollo de un servicio de streaming, EMS, MQ, Java, XSD, File Adapter y aplicaciones basadas en ESB
• Experiencia en arquitecturas distribuidas como Microservicios, SOA, APIs RESTful, y arquitecturas de integración de datos
• Experiencia práctica en la migración de soluciones de datos On-Prem a la nube
• Tener experiencia previa en la gestión de soluciones de almacenamiento de datos empresariales on-prem como Netezza es una ventaja
• Ser experto en servicios AWS de uso común (S3, Lambda, Redshift, Glue, EC2, etc.)
• Experiencia en Python, PySpark o lenguajes de programación similares 
• La experiencia con herramientas de BI (Tableau, Domo, MicroStrategy) es un plus
• Experiencia en AWS Compute como EC2, Lambda, Beanstalk, o ECS
• Experiencia en el conjunto de productos de gestión y gobierno de AWS, como CloudTrail, CloudWatch o Systems Manager
• Amplia experiencia en las ofertas, el desarrollo y las plataformas de red de Amazon Web Services (AWS)
• Experiencia con AWS Analytics como Athena, EMR o Glue
• El dominio de las bases de datos Oracle, MYSQL y Microsoft SQL Server es una ventaja
• Conocimiento sólido de la integración continua / entrega continua 
• Experiencia en Jenkins
• Inglés oral y escrito fluido