3 vagas | Código: 5986

Engenheiro de Dados Pleno

Atenção! Esta vaga foi publicada há mais de 30 dias e pode já não estar mais aberta

Efetivo (CLT)Período Integral

Principais Atividades:

Desenvolver componentes para coleta, armazenamento, processamento e análise de conjuntos de dados. O foco principal será a escolha de soluções ideais para uso para esses fins e então realizar a implementação, manutenção e monitoramento. Realizar a implementação de processos ETL alavancando o ecossistema de tecnologias de Big e Fast Data.Planejar e aplicar políticas de retenção de dados (ciclo de vida). Atuar em conjunto com as equipes de arquitetura para fomentar a utilização e atualização dos componentes de acordo com as demandas.

 

Requisitos:

• Proficiência na utilização do ecossistema Hadoop - Cloudera;

• Experiência na construção de sistemas de processamento de dados em streaming, usando soluções como Storm ou Spark-Streaming;

• Bom conhecimento das ferramentas de consulta de dados, como Pig, Hive e Impala;

• Experiência com o Frameworks Spark;

• Experiência em desenvolvimento utilizando as liguagens: Java, JavaScript, Python, Scala e SQL;

• Experiência com integração de dados de várias fontes (estruturadas ou não);

• Experiência com bancos de dados NoSQL, como HBase, Cassandra, MongoDB e preferencialmente ScyllaDB;

• Conhecimento de várias técnicas de integração e estruturas de ETL;

• Experiência com sistemas de mensagens, como Kafka ou RabbitMQ;

• Bom entendimento dos padrões de arquieturas Lambda e Kappa, juntamente com suas vantagens e desvantagens;

• Experiência em desenvolvimento utilizando padrões de arquitetura: : Client-Server, N-Camadas e Micro Services.


Competências:

• Facilidade e bons conhecimentos com as práticas ágeis (Scrum, Fluxo Contínuo, Kanban);

• Desejavel experiência de 3 anos na função;

• Boa comunicação verbal e escrita;

• Trabalho em Equipe;

• Resiliência;

• Disponibilidade;

• Capacidade de auto-organização;

• Pensamento analítico.

 

Informações Adicionais:

Regime de contratação: CLT Flex

Horário de trabalho: Comercial

Região de trabalho: Zona Sul/ Itaim

* Projeto para trabalhar em parceria com a empresa DELL (prazo indeterminado).

Salário: à combinar

Responsável: Gabriela

Benefícios

  • Assistência Médica, Vale Refeição