Engenheiro de Dados Sênior

Uma empresa em rápido crescimento, que está desenvolvendo uma plataforma de trading de vários ativos, regulamentada e de primeira classe, está procurando contratar um Engenheiro de Dados Sênior. O engenheiro será responsável por combinar suas habilidades analíticas a uma sólida compreensão comercial e recursos superiores de engenharia de dados a fim de fornecer à organização os benefícios esperados. A empresa está determinada a introduzir soluções e tecnologias revolucionárias na indústria FinTech. Esta é uma vaga de trabalho online incrível para engenheiros de software brasileiros que desejam aprimorar o calibre das decisões baseadas em dados tomadas em toda a organização, utilizando tecnologia avançada em um ambiente baseado em nuvem e atuando como parte de uma equipe multidisciplinar de analistas, cientistas de dados, engenheiros de dados e PMEs .

Responsabilidades:

• Fornecer uma plataforma e um sistema de suporte para análise de dados que tornará o acesso e o compartilhamento de dados simples e padronizado
• Assumir a responsabilidade pela arquitetura da informação e por como ela pode ser desenvolvida a fim de oferecer suporte à estratégia comercial e aos requisitos funcionais
• Explorar e usar Databricks, Azure Events Hub, Azure Data Lake e Synapse
• Ajudar no desenvolvimento e manutenção de funis de dados para várias fontes de dados e estabelecer contato com os proprietários do sistema
• Trabalhar com ingestão e transformações de dados em tempo real para oferecer suporte a casos de uso
• Envolver-se em situações de plantão para ajudar com qualquer falha catastrófica
• Apoiar ideias e ajudar seus colegas de equipe a acompanhar seu raciocínio e aumentar seus conhecimentos
• Trabalhar com a stack Azure e estabelecer uma compreensão geral dos esforços de engenharia da equipe de dados
• Participar da escala de plantão para oferecer suporte à produção
• Desempenhar um papel fundamental no programa de transformação de dados, fazendo interface com as equipes de governança, ciência de dados, relatórios e parcerias comerciais
• Certificar-se de que o backlog de transformação seja entregue para sistemas de origem, tabelas derivadas e produtos de dados
• Analisar dados complexos e, em seguida, apresentar os resultados
• Integrar governança, recursos de dados de qualidade e tecnologias para garantir a consistência dos dados
• Entregue novos produtos ativamente e constantemente, além de apoiar os esforços BAU (Business as Usual) juntamente com outros engenheiros seniores e líderes
• Oferecer suporte a solicitações de dados ad hoc e problemas de produção
• Solucionar problemas relacionados ao BAU (Business as Usual), criar tarefas no JIRA e trabalhar na otimização do processo

Requisitos:

• Bacharelado ou Mestrado em Engenharia ou Ciência da Computação (ou experiência equivalente)
• Pelo menos 5 anos de experiência relevante como engenheiro de dados
• Vasta experiência trabalhando com Python, SQL e PySpark
• Mais de 9 anos de experiência relevante na indústria de serviços comerciais/financeiros
• Mais de 9 anos de experiência com o Azure Data Factory
• Boa consciência política e capacidades de comunicação e de definição de prioridades
• Amplas habilidades com debugging e resolução de problemas
• Vasta experiência na criação de funis de dados, processos ETL, armazenamento de dados e processamento de Big Data que sejam eficazes e confiáveis
• Experiência trabalhando com e compreensão sobre o Azure Databricks, Azure Events Hub e Azure Data Lake
• Vasta experiência com Azure Synapse e Azure SQL
• Experiência trabalhando com programação e frameworks Python
• Histórico comprovado trabalhando com processamento de negócios, mapeamento de dados e análise
• Conhecimento de desenvolvimento em tempo real e princípios de modelagem de dados corporativos
• É recomendável ter a certificação de Engenharia de Dados da Azure ou a Google Certified Professional
• Boas habilidades de comunicação verbal e escrita em inglês