Vagas remotas de engenheiro de dados Spark

Nós, da Turing, estamos procurando engenheiros de dados Spark talentosos que possam trabalhar de forma remota e que serão responsáveis por limpar, transformar e analisar grandes quantidades de dados brutos de vários recursos usando o Apache Spark para fornecer dados prontos para o uso dos desenvolvedores e analistas de negócios. Tenha a chance de trabalhar com as principais empresas do Vale do Silício enquanto acelera sua carreira.

Candidatar-se para esse trabalho

Confira os melhores empregos para setembro de 2022aqui

Descrição do trabalho

Responsabilidades

  • Construir e otimizar pipelines Apache Spark ETL
  • Fornecer soluções escaláveis, econômicas e flexíveis aos clientes
  • Participar do desenvolvimento iterativo de aplicativos de ponta a ponta
  • Construir e otimizar pipelines Apache Spark ETL
  • Fornecer soluções escaláveis, econômicas e flexíveis aos clientes
  • Participar do desenvolvimento iterativo de aplicativos de ponta a ponta
  • Acompanhar as práticas modernas de desenvolvimento de software e gerenciamento do ciclo de vida
  • Usar ferramentas ETL para carregar dados de diferentes fontes na plataforma Hadoop
  • Comunicar-se regularmente e de forma eficiente com clientes e partes interessadas
  • Criar trabalhos Spark baseados em Java para transformações e agregar dados
  • Realizar unit tests para transformações Spark
  • Implementar pipelines de processamento de dados com Spark

Requerimentos mínimos

  • Bacharelado ou Mestrado em Ciência da Computação (ou experiência equivalente)
  • Mais de 3 anos de experiência com engenharia de dados (com raras exceções para desenvolvedores talentosos)
  • Experiência em linguagens de programação populares como Python, Java, Scala, etc.
  • Bacharelado ou Mestrado em Ciência da Computação (ou experiência equivalente)
  • Mais de 3 anos de experiência com engenharia de dados (com raras exceções para desenvolvedores talentosos)
  • Experiência em linguagens de programação populares como Python, Java, Scala, etc.
  • Domínio do Apache Spark e diferentes frameworks Spark e serviços de nuvem, como Databricks, EMR, Azure HDI
  • Experiência com tecnologias como Storm, Apache Kafka, Hadoop, etc.
  • Conhecimento avançado de nuvem (AWS, Azure), bem como CI/CD e visualização de dados
  • Experiência prática com tecnologias de conteinerização e orquestração de contêineres usando Kubernetes, OpenShift, Docker, etc.
  • Conhecimento de tecnologias como Spark e Hadoop HDFS, Hive, Hbase com profundo conhecimento em Spark
  • Proficiência em inglês para uma comunicação eficaz com o resto do time
  • Capacidade de trabalhar em tempo integral (40 horas/semana) e sobrepor mais de 4 horas com os fusos horários dos EUA

Habilidades desejadas

  • Conhecimento básico com conceitos de ETL, SQL (DDL, DML, procedural)
  • Experiência prática em change capture (CDC) e ingestion tools para AWS, como StreamSets, Informatica
  • Forte experiência em ferramentas de controle de versão como Git, SVN e Jenkins
  • Conhecimento básico com conceitos de ETL, SQL (DDL, DML, procedural)
  • Experiência prática em change capture (CDC) e ingestion tools para AWS, como StreamSets, Informatica
  • Forte experiência em ferramentas de controle de versão como Git, SVN e Jenkins
  • Conhecimento prático de NRT e stacks de tecnologia associada - Spark, MemSQL, etc.
  • Compreender arquitetura de dados, perfil de dados e qualidade de dados
  • Conhecimento de bancos de dados de data warehouse como Teradata, Oracle, etc.
  • Familiaridade com Unix e Shell Scripting
  • Conhecimento de diversas indústrias, ferramentas e tecnologias de data warehousing
  • Experiência prática para construir e administrar VMs e contêineres
  • Conhecimento prático sobre o HashiCorp Vault Consul é desejável
  • Excelente comunicação e habilidades organizacionais
  • Certificados profissionais em AWS, RHCE, DevOps serão um diferencial

Interessado neste trabalho online?

Inscreva-se na Turing hoje

Inscreva-se agora

Como se tornar um desenvolvedor da Turing?

Trabalhe com as melhores empresas de software em apenas 4 passos fáceis
  1. Crie seu perfil

    Preencha seus dados básicos: nome, endereço, habilidades, salário e experiência.

  2. Realize nossos testes e entrevista

    Resolva os testes e realize uma entrevista técnica.

  3. Receba ofertas de trabalho

    Seja selecionado pelas melhores empresas dos EUA e do Vale do Silício

  4. Comece a trabalhar no seu emprego dos sonhos

    Quando você estiver na Turing, não precisará procurar outro emprego.

Liderança

Em poucas palavras, a Turing tem como objetivo fazer com que exista um equilíbrio de oportunidades ao redor do mundo. A Turing é uma criação dos empreendedores de IA em série Jonathan e Vijay, cuja empresa anterior de IA (vendida com sucesso) foi potencializada por talentos remotos excepcionais. Também fazem parte do grupo de inovadores da Turing investidores de alto perfil, como o primeiro CTO do Facebook (Adam D'Angelo), executivos de Google, Amazon, Twitter e Foundation Capital.

Política de Igualdade de Oportunidades

Turing é uma contratante que dá oportunidades iguais. A Turing proíbe discriminação e assédios de qualquer tipo e oferece oportunidades de emprego iguais para funcionários e candidatos, sem discriminar raça, cor, religião, sexo, orientação sexual, identidade ou expressão de gênero, idade, status de deficiência, status de veterano protegido ou qualquer outra característica protegida por lei.

Trabalhe em tempo integral em grandes empresas dos EUA.

Crie seu perfil, passe nos testes da Turing e receba ofertas de emprego a partir de 2 semanas.

Inscreva-se agora

Apply now