Ingeniero de Datos

Una empresa estadounidense que trabaja en el desarrollo de proyectos de carbono de nueva generación y alto impacto busca un ingeniero de datos. El ingeniero trabajará en tándem con el equipo de ingeniería de software y los científicos de datos para desarrollar soluciones eficientes a problemas acuciantes. La empresa aborda el cambio climático al tiempo que empodera a las mujeres y mejora las condiciones de vida en los países en desarrollo. Hasta ahora, la empresa ha conseguido más de 48 millones de dólares de financiación.

Responsabilidades:

• Crear e implementar tareas ETL automatizadas a partir de aplicaciones empresariales y fuentes de datos públicas (como datos censales) en un moderno lago de datos
• Implementar una solución vanguardista de data lakehouse mientras se asesora al arquitecto principal sobre la tecnología y la arquitectura en función de los casos de uso y los resultados previstos
• Como parte de una migración de sistemas para operaciones empresariales, apoyar la migración de datos de un servidor SQL obsoleto a un nuevo RDBMS
• Garantizar que el lago de datos contenga los componentes para el catálogo de datos y la documentación asociada para los usuarios finales analíticos
• Discutir de forma transparente los plazos y entregables con el equipo y la dirección
• Cumplir los plazos y colaborar con la dirección de TI en el desarrollo iterativo

Requerimientos:

• Licenciatura/Máster en Ingeniería, Informática (o experiencia equivalente)
• Al menos 4 o más años de experiencia relevante en desarrollo de aplicaciones o como ingeniero de datos
• 4 o más años de experiencia trabajando con Python, SQL y Scala
• 3 o más años de experiencia con AWS y tecnologías relacionadas
• 3 o más años de experiencia utilizando herramientas de computación distribuida y datos, incluyendo MapReduce, Hadoop, Hive, EMR, Spark y Athena
• 3 o más años de experiencia laboral con herramientas ETL como Kafka, AirFlow y SSIS
• Profunda experiencia en el desarrollo de soluciones de data lake o data warehouse como Snowflake y Redshift
• Experiencia prolífica trabajando con control de versiones Git y repositorios remotos GitLab/GitHub
• Capacidad para trabajar de forma autónoma, solucionar problemas y comunicarse de forma proactiva
• Agradable tener alguna experiencia de trabajo en entornos de desarrollo ágiles e iterativos
• Se valorará la experiencia previa en interfaz con API .NET (.NET C# para .NET Core 6)
• Se prefiere cierta familiaridad con Elasticsearch y/o Solr
• Excelentes habilidades de comunicación oral y escrita en inglés