Arquiteto de Dados na Nuvem

Uma empresa com sede nos EUA, que atende a músicos e entusiastas da música operando uma rede de lojas de instrumentos musicais, está procurando contratar um Arquiteto de Dados na Nuvem. O candidato selecionado terá um forte papel de liderança no desenvolvimento da arquitetura de dados corporativos dos negócios digitais e de varejo da empresa ligados a diferentes marcas. A organização tem mais de 500 lojas nos EUA que vendem instrumentos musicais novos e usados e oferecem reparos e aluguel de instrumentos, assim como aulas para músicos de todas as idades e habilidades. Ela arrecadou com sucesso mais de US$30 milhões por meio de financiamento de dívida. Esta vaga de trabalho online requer uma sobreposição de 7 a 8 horas com o fuso horário IST e alguma sobreposição com o fuso horário PST, sendo uma vaga ideal para arquitetos de software brasileiros que desejam impulsionar sua carreira e receber em dólar.

Responsabilidades:

• Avaliar e criar protótipos de novos conceitos e tecnologias
• Desenvolver funcionalidades essenciais que possam ser entregues às equipes de desenvolvimento
• Analisar problemas complexos e participar ativamente das decisões de design da tech stack empresarial
• Responsabilizar-se pela modernização, migração e transformação da plataforma de dados em nuvem
• Proteger os dados, elaborando e construindo uma infraestrutura de dados confiável e escalável com as principais técnicas de privacidade e segurança
• Arquitetar soluções escaláveis, seguras, de baixa latência, resilientes e econômicas para permitir análises preditivas e prescritivas em toda a organização
• Criar e desenvolver frameworks que possam efetivamente operacionalizar modelos de ML por meio de uma arquitetura serverless, ao mesmo tempo em que oferece suporte a modelos de treinamento contínuo e não supervisionado
• Responsabilizar-se por analisar os modelos de dados da empresa, incluindo Tableau, DynamoDB e Kibana
• Analisar dados para compartilhar descobertas acionáveis com stakeholders internos e externos, sejam eles profissionais com conhecimento técnico ou não 
• Utilizar as melhores práticas de modelagem de dados para criar frameworks de funis de ingestão de dados em tempo real e em batches, além de responsabilizar-se por processos ETL/ELT e entregá-los efetivamente aos engenheiros de dados
• Colaborar com colegas e participar ativamente da tomada de decisões técnicas cruciais
• Revisar o código e as implementações de código para compartilhar feedback construtivo
• Utilizar sua experiência e conhecimentos para fazer recomendações que possam orientar a direção da tecnologia e as escolhas tecnológicas

Requisitos:

• Bacharelado ou Mestrado em Engenharia ou Ciência da Computação (ou experiência equivalente)
• 7 anos de experiência relevante como arquiteto de dados na nuvem
• 7 anos de experiência trabalhando diretamente com soluções de dados comerciais
• Exposição prática a um ambiente de nuvem pública e infraestrutura local
• Proficiência com tecnologias de armazenamento de dados de séries temporais, como Apache Pinot
• Compreensão profunda sobre a infraestrutura de nuvem da AWS
• Experiência comprovada com tecnologias de streaming in-memory, serverless e com ferramentas de orquestração, como Kubernetes, Airflow, Spark e Kafka
• 7 anos de experiência prática na implementação de plataformas de TI
• Certificação AWS sobre Big Data será um ótimo diferencial
• Experiência implementando e criando análises na AWS e soluções de Big Data em um grande ambiente digital e de varejo será uma vantagem competitiva
• Compreensão profunda sobre, e experiência com, processamento transacional online (OLTP), bancos de dados, data lakes e esquemas de processamento analítico transacional online (OLAP)
• Experiência prática com tecnologias da AWS Cloud Data Lake e experiência operacional com Kinesis/Kafka, S3, Glue e Athena
• Familiaridade com os seguintes formatos de mensagem e arquivo: Parquet, Avro ou ORC
• Experiência elaborando e desenvolvendo serviços de streaming, EMS, MQ, Java, XSD, adaptadores de arquivos e aplicativos baseados em ESB
• Forte compreensão sobre arquiteturas distribuídas, como microsserviços, SOA, APIs RESTful e arquiteturas de integração de dados
• Experiência com Big Data Stack: Spark, Spectrum, Flume, Kafka, Kinesis, etc.
• Compreensão sobre as tecnologias modernas de streaming de dados, como Kafka, queuing da SQS e SNS, etc.
• Familiaridade com bancos de dados colunares como Redshift, Snowflake, Firebolt, etc.
• Conhecimento sobre os serviços AWS mais comumente usados, como S3, Lambda, Redshift, Glue e EC2
• Experiência com Python, pySpark ou tecnologias semelhantes
• Compreensão sobre ferramentas de BI, como Tableau, Domo e MicroStrategy
• Familiaridade com os conceitos de CI/CD
• Excelentes habilidades de comunicação em inglês