Offer summary

Qualifications:

Experience with shell scripting (sh/ksh/bash) and programming languages Python 3.x and Scala 2.x., Familiarity with build tools like sbt/maven and IDEs such as IntelliJ and VS Code., Knowledge of CI/CD practices and configuration management tools like GitLab and Git., Experience with relational databases (Oracle) and non-relational databases (MongoDB, ElasticSearch) as well as columnar databases (HBASE)..

Key responsabilities:

Develop and maintain data processing systems using Big Data technologies like Hadoop and Spark.

Integrate systems and work with REST and SOAP APIs for data ingestion and processing.

Manage and optimize data storage solutions and ensure data quality and accessibility.

Collaborate with cross-functional teams to implement data-driven solutions in a remote work environment.

Há quase duas décadas, a Runtalent se consolidou como uma referência no mercado de tecnologia, proporcionando soluções inovadoras em TI para empresas B2B que buscam se manter competitivas na corrida pela transformação digital de seus negócios. Oferecemos uma variedade de serviços, como alocação de profissionais, squads ágeis e gestão de times e serviços. Além disso, dispomos de um banco de talentos com mais de 30 mil profissionais especializados em múltiplas áreas, aptos a atuar em projetos de TI por tempo determinado ou indeterminado, agregando soluções para diversos cenários de negócios. Para os nossos colaboradores, conhecidos como Runners, oferecemos suporte e investimento em qualificações técnicas e programas de realocação, para que possam desempenhar suas atividades da melhor forma possível. Venha fazer parte da Runtalent e transforme seu negócio com a ajuda de nossos serviços especializados em tecnologia.

Job description

Este é um cargo remoto.

Requisitos:

Experiência com shell script ( sh/ksh/bash ) ;

Experiência em Linguagem de programação python 3.x e scala 2.X; Paradigma de Linguagem de Programação: Funcional, Procedural e OO. 3;

Ferramentas de build: sbt/maven IDEs Intellij/Vs-Code ;

Ferramentas de gestão de configuração gitlab e git; Conhecimentos de CI/CD ;

Conhecimentos de Linux ( Sistema operacional, comandos básicos, gerenciamento de processos, gerenciamento de arquivos ) ; Conhecimento em Banco de Dados Relacional : Oracle ;

Conhecimento e Experiência em Banco de Dados Não Relacional : Mongodb/ElasticSearch ;

Conhecimento e Experiência em Banco de Dados colunar: HBASE; Integração de Sistemas conhecimento e experiência com APIs REST, APIs Soap;

Dominar os conceitos de Big-Data ( Hadoop, MapReduce, Ingestão de dados;

Processamento de dados e Armazenamento de dados ).

Desejável:

Conhecimentos de conteiner (docker/docker-compose), orquestração de conteiner (K8S, docker-swarm) e Kubernetes; Conhecimentos, experiências e domínio em ecossistema Hadoop: Hive/HUE/Impala/Hbase/Hdfs/Sqoop/Beeline consultas, Armazenamento, Spark2/Spark3 SQL e Streaming, Dataframe Dados estruturados e semiestruturados em forma tabular Operações Transformações e Ações; Formato de Arquivos Parquet, ORC, JSON, CSV, Plain Text YARN/Zookeeper ;

Gerenciamento de Processos Kerberos Autenticação ;

Conhecimentos em Control-M e Cloudera Manager; Conhecimentos em Telecomunicações ( Operadora Móvel/Fixa ).

9759 - Engenheiro de Dados Sênior

Offer summary

Qualifications:

Key responsabilities:

Job description

Required profile

Experience

Hard Skills

Related jobs

UKG Capability Lead

Sales Development Representative DACH (m/w/d)

Meteorologist and Solutions Operations Specialist

Toll Free Intake Specialist

AI Research Engineer