Ingeniero de Datos Azure y Databrick

Una empresa bien establecida que está decidida a revolucionar la industria de la salud con su tecnología innovadora y sistemas de atención al paciente está buscando un Ingeniero de Datos Azure y Databricks. El candidato se encargará de garantizar la calidad, coherencia y fiabilidad de los datos mediante la realización de procesos de transformación e integración de datos. La organización, con sede en EE. UU., ofrece excelentes servicios y soluciones de salud conductual y adicción que les han situado a la vanguardia del tratamiento sanitario mundial. Este puesto requiere al menos 4 a 6 horas de superposición con la zona horaria CST.

Responsabilidades:

• Utilizar el ecosistema Azure y la plataforma Databricks para crear, construir y mantener soluciones de ingeniería de datos
• Crear canalizaciones de datos escalables y eficaces, realizar la transformación e integración de datos y habilitar flujos de trabajo sofisticados de análisis y aprendizaje automático mientras se colabora estrechamente con equipos multifuncionales que incluyen científicos de datos, analistas e ingenieros de software
• Utilizar su conocimiento de Databricks y los servicios de Azure para apoyar los esfuerzos de inteligencia empresarial y ofrecer información basada en datos
• En la plataforma Azure con Databricks, ayudar a diseñar, crear e implementar soluciones de ingeniería de datos de extremo a extremo
• Con la ayuda de las partes interesadas, recopilar e interpretar los requisitos empresariales en soluciones técnicas de ingeniería de datos
• Ejecutar operaciones de ingestión de datos, que implican recopilar datos de diversas fuentes, procesarlos para adaptarlos a los requisitos empresariales e introducirlos en lagos de datos o almacenes de datos
• Utilizar Azure Data Factory, Databricks y otras herramientas pertinentes para crear y mantener flujos de trabajo y canalizaciones de datos escalables
• Para un almacenamiento y recuperación de datos eficaces, crear y mejorar los modelos y esquemas de datos
• Implementar medidas de seguridad y asegurarse de que se cumplen todas las normas legales y reglamentarias relativas a la protección de datos

Requerimientos:

• Licenciatura/Máster en Ingeniería, Informática (o experiencia equivalente)
• Al menos 6 a 8 años de experiencia relevante como ingeniero de datos
• Experiencia prolífica trabajando con Azure y Databricks
• Conocimiento profundo de los principios, procedimientos y mejores prácticas de ingeniería de datos
• Experiencia demostrable aprovechando Azure Data Factory, Databricks y otras tecnologías pertinentes para desarrollar e implementar pipelines de datos
• Conocimientos avanzados de lenguajes de programación como Python, SQL y Scala
• Conocimiento profundo de tecnologías de procesamiento y almacenamiento de datos como Apache Spark, Azure Data Lake Storage y Azure SQL Data Warehouse
• Familiaridad con procedimientos ETL/ELT, diseño de esquemas y modelado de datos
• Capacidades probadas de resolución de problemas y solución de problemas, incluida la capacidad de reconocer y solucionar problemas relacionados con los datos
• Capacidades excepcionales de trabajo en equipo y comunicación para trabajar bien con equipos interfuncionales
• Certificados de Azure relacionados con la ingeniería de datos o certificaciones de Databricks son agradables de tener
• Las credenciales de Azure en Machine Learning o DevOps son deseables
• Experiencia previa en gestión de proyectos remotos es crucial
• Fluidez en la comunicación oral y escrita en inglés