Arquiteto de Dados na Nuvem

Uma empresa sediada nos EUA, que vende diversos tipos de instrumentos e equipamentos musicais para clientes de todo o país, está procurando contratar um Arquiteto de Dados na Nuvem. O candidato selecionado será responsável por ajudar a equipe no direcionamento tecnológico da empresa ao oferecer pesquisas e ideias baseadas em dados. A empresa tem mais de 255 instalações espalhadas pelos Estados Unidos e seu quadro de funcionários é composto por habilidosos músicos que ajudam os clientes a localizar o equipamento ideal para suas bandas, grupos ou espaços musicais. Ela já conseguiu arrecadar mais de US$30 milhões em investimentos até hoje. Essa é uma ótima vaga de trabalho online para arquitetos de dados brasileiros que querem expandir seus horizontes profissionais para fora das fronteiras do Brasil.

Responsabilidades:

• Oferecer direcionamento técnico e implementar padrões técnicos
• Oferecer avaliações e protótipos para novas ideias e tecnologias
• Desenvolver habilidades que possam ser transferidas para as equipes operacionais de desenvolvimento
• Analisar problemas difíceis e participar ativamente na tomada de decisões tecnológicas da empresa
• Aceitar a responsabilidade por modernizar sistemas e movê-los para uma plataforma de dados na nuvem
• Elaborar o design e construir um infraestrutura de dados escalável e confiável, que use o que há de mais avançado em tecnologia de privacidade e segurança para proteção de dados
• Criar para toda a empresa soluções de análises preditivas e prescritivas que sejam escaláveis, seguras, resilientes, de baixa latência e com bom custo
• Arquitetar frameworks que ofereçam arquitetura serverless e treinamento contínuo não supervisionado para modelos de machine learning
• Gerenciar e escalar modelos de dados utilizando tecnologias como Tableau, DynamoDB e Kibana
• Relatar o andamento do trabalho para stakeholders internos e externos
• Usar as melhores práticas em modelagem de dados, processos ETL/ELT e na passagem de tarefas e funções em engenharia de dados para desenvolver frameworks para funis de importação de dados em grupo e em tempo real
• Colaborar com colegas talentosos e participar da tomada de decisões técnicas
• Revisar a implementação e o código, oferecendo críticas pertinentes para ajudar os outros a criarem soluções melhores

Requisitos:

• Bacharelado ou Mestrado em Engenharia ou Ciência da Computação (ou experiência equivalente)
• Ao menos 7 anos de experiência relevante como arquiteto de dados na nuvem
• Ao menos 7 anos de experiência trabalhando diretamente com soluções de dados para grandes empresas
• Ao menos 7 anos de experiência com implementações em plataformas de TI
• Vastos conhecimentos sobre ambientes de nuvem pública e infraestrutura on-premise
• Profunda experiência com bancos de dados em colunas, como Redshift Spectrum, armazéns de dados Time Series, como Apache Pinot, e infraestrutura na nuvem AWS
• Experiência prática com tecnologias in-memory, serverless e de streaming, além de ferramentas de orquestração como Spark, Kafka, Airflow e Kubernetes
• Profundo conhecimento sobre AWS, com certificação em Big Data, será um diferencial
• Será vantajoso possuir alguma experiência com Big Data e AWS, além de soluções de análise de dados usadas em grandes ambientes digitais e de vendas
• Grande experiência com bancos de dados, data lakes e schemas para OLTP (online transactional) e OLAP (online analytical processing)
• Conhecimento funcional sobre Kinesis/Kafka, S3, Glue e tecnologias operacionais Athena no data lake na nuvem da AWS
• Conhecimento sobre qualquer um dos seguintes formatos de mensagens/arquivos: Plywood, Avro e ORC
• Grandes conhecimentos sobre EMS, MQ, Java, XSD, File Adapter e sistemas baseados em ESB, além de sobre outros serviços de streaming
• Vastos conhecimentos sobre design distribuído, incluindo arquiteturas de integração de dados e de microsserviços, SOA e APIs RESTful
• Diversas experiências com tecnologias contemporâneas de processamento de dados, como a Big Data Stack (Spark, Spectra, Flume, Kafka, Kinesis, etc.)
• Conhecimentos avançados sobre tecnologias de streaming, como Kafka e SQS/SNS queuing
• Sólida compreensão sobre Redshift, Snowflake e bancos de dados em colunas Firebolt 
• Conhecimentos sobre Python, PySpark e outras linguagens de programação relacionadas
• Familiaridade com tecnologias de BI, como Tableau, Domo e MicroStrategy
• Ótima compreensão sobre CI/CD
• Sólidos conhecimentos sobre S3, Lambda, Redshift, Glue e EC2, além de sobre outros serviços AWS usados frequentemente
• Ótima comunicação em inglês, falado e escrito