Vaga de parceiro

Pessoa engenheira de dados pleno - Brasília / DF

Disponível para Assinantes
Salvar nos Favoritos
  • Compartilhe:

Detalhes da Vaga

  • Escolaridade Não Informado
  • Segmento Não Informado
  • Salário Não Informado
  • Área de AtuaçãoDiversos / Outros

O que você irá fazer

  • A vaga também envolve experiência com ingestão e processamento de dados, linguagens de programação (Java ou Scala e Python), armazenamento e manipulação de dados, gerenciamento e monitoramento de clusters.
  • A capacidade de trabalhar em equipes multidisciplinares, comunicar-se efetivamente e resolver problemas complexos é essencial.
  • Requisitos:Conhecimento e experiência com o ecossistema Hadoop: HDFS, MapReduce, Hive, HBase, Pig, YARN.
  • Experiência com ingestão e processamento de dados utilizando técnicas e ferramentas como Sqoop, Flume, Kafka.
  • Capacidade de realizar ETL em ambientes distribuídos.
  • Linguagens de Programação: Java ou Scala.
  • Conhecimento sobre parquet, ORC, Avro como formatos de armazenamento eficientes no ecossistema Hadoop.
  • Experiência com Impala ou Presto para consultas SQL de alta performance em dados armazenados no Hadoop.
  • Experiência no uso de ferramentas de gerenciamento e monitoramento de clusters, como Ambari, Cloudera Manager.
  • Experiência como engenheiro de dados, com envolvimento direto em projetos que utilizem Hadoop e tecnologias relacionadas.
  • Habilidade para trabalhar em equipes multidisciplinares e comunicar-se eficazmente.
  • Capacidade de documentar soluções técnicas e processos de maneira clara e objetiva.
  • Habilidade para solucionar problemas complexos relacionados a grandes volumes de dados e otimizar pipelines de dados.
  • Desejáveis:Experiência com Apache Spark.
  • Conhecimento de Python para automação e processamento de dados.
  • Capacidade de diagnosticar e resolver problemas de desempenho e falhas nos clusters.
  • #J-18808-Ljbffr

Informações Adicionais

  • Quantidade de Vagas 1
  • Jornada Não Informado