Engenheiro de Dados Sênior

Uma empresa sediada nos EUA, que está desenvolvendo uma plataforma de aprendizado para conectar estudantes com profissionais especializados no ensino de qualquer tema, sob demanda, está procurando contratar um Engenheiro de Dados Sênior. O engenheiro será responsável por aprimorar as consultas, tabelas e índices. A plataforma criada pela empresa conecta alunos de todas as idades com especialistas nos mais diversos assuntos enquanto oferece um ótimo valor para ambos os lados, aproveitando o poder da inteligência artificial e machine learning para isso. A empresa conseguiu arrecadar mais de US$105 milhões em investimentos durante sua Série C. Essa vaga de trabalho online requer ao menos 6 horas de sobreposição com o fuso horário EST/PST, sendo ideal para engenheiros de dados brasileiros que querem construir uma lucrativa carreira internacional enquanto trabalham do conforto de suas casas.

Responsabilidades:

• Assumir a responsabilidade por elaborar e gerenciar a replicação de informações entre vários bancos de dados
• Oferecer conselhos sobre o design de bancos de dados transacionais para sistemas operacionais
• Abordar questões de recuperação de desastres, alta disponibilidade e dimensionamento eficaz de clusters
• Utilizar o AWS RDS para gerenciar os bancos de dados relacionais MySQL e PostgreSQL da empresa
• Gerenciar nosso armazém de dados baseado em Redshift e tabelas AWS DynamoDB
• Gerenciar e automatizar o acesso seguro ao banco de dados tanto para pessoas quanto para máquinas
• Encarregar-se de construir tabelas de relatórios Redshift
• Usar o Kafka para criar fluxos de eventos de dados e funis de ingestão
• Responsabilizar-se por trabalhos de dados em lote planejados
• Estabelecer e implementar governança de dados em todo o ecossistema
• Configurar bancos de dados automaticamente usando infraestrutura como código

Requisitos:

• Bacharelado ou Mestrado em Engenharia ou Ciência da Computação (ou experiência equivalente)
• Ao menos 3 anos de experiência relevante como engenheiro de dados
• Experiência trabalhando com RDBMS, Terraform e Ansible
• Ampla experiência com Puppet, Chef e armazenamento de dados
• Algum conhecimento sobre NoSQL, ETL, Big Data e AWS será visto como diferencial
• Conhecimento aprofundado sobre modelagem de bancos de dados lógicos e físicos
• Profunda experiência com sistemas de gerenciamento de banco de dados relacionais, como MySQL, PostgreSQL, MS SQL e Oracle
• Familiaridade com o design e otimização de consultas SQL
• Ampla experiência com tecnologias de armazenamento de dados, como Redshift, Snowflake, etc.
• Compreensão sólida sobre tecnologias de gerenciamento de código-fonte como Git, scm, mercurial e subversion
• Conhecimento sobre ferramentas como Terraform, CloudFormation, Puppet, Chef ou Ansible
• Profundo conhecimento sobre tecnologias de desenvolvimento de software
• É desejável ter alguma experiência com tecnologias NoSQL, incluindo DynamoDB, MongoDB, Cassandra, Redis, HBase ou Cosmos
• É desejável ter experiência trabalhando com Big Data, como com as tecnologias BigQuery, Hadoop, Spark e Presto
• É recomendável ter experiência sólida com design de armazenamento de dados em camadas
• Conhecimento sobre tecnologias de eventos, como Kafka (MSK, Confluent), SQS e RabbitMQ, será visto como um diferencial
• É desejável possuir certa compreensão sobre tecnologias de ETL, como Airflow, Pentaho, Upsolver, Blendo e Etleap
• Conhecimento sobre algumas linguagens de programação como Python, Go e Ruby, além de tecnologias de relatório como Looker, Tableau, Crystal, etc., será um diferencial
• Compreensão sobre como diferentes ORMs convertem código em SQL será vista com bons olhos
• É desejável demonstrar um conhecimento aprofundado sobre tecnologias de conteinerização, como Docker, assim como serviços da AWS, como RDS, Lambda, Kinesis, DMS e Batch
• Boa compreensão sobre AWS IAM será visto como diferencial
• Excelentes habilidades de comunicação em inglês, tanto falado quanto escrito