Match score not available

Pessoa Engenheira de Dados Sênior

Remote: 
Full Remote
Contract: 
Work from: 

Offer summary

Qualifications:

Advanced Python skills, including development and consumption of REST APIs., Proficient in PySpark, with knowledge of Spark architecture and optimization techniques., Strong SQL skills, including DDL, DQL, DML, and query optimization., Familiarity with AWS services such as S3, DynamoDB, and Redshift. .

Key responsabilities:

  • Develop and optimize SQL queries and PySpark jobs for performance and cost efficiency.
  • Create and maintain efficient and scalable data pipelines, ensuring data integrity and quality.
  • Implement and monitor data ingestion, transformation, and availability processes.
  • Work with large datasets in distributed environments, applying best practices for partitioning and job tuning.

A3Data logo
A3Data SME https://www.a3data.com.br/
51 - 200 Employees
See all jobs

Job description

JOB DESCRIPTION

A3Data é uma consultoria referência em #Dados🚀

 

Temos a missão de acelerar a cultura Data Driven nas organizações. Nosso foco é implantar Inteligência Estratégica e potencializar a cultura dos dados para os nossos clientes! 🎯

 

Somos parceiros e estamos presentes no maior parque tecnológico urbano e aberto do Brasil o Porto Digital, localizado em Recife. 🌎

 

Somos ágeisanalíticos avançados e temos uma cultura leve, horizontal e muito colaborativa! ✌️

 

Nosso propósito é empoderar as pessoas por meio dos dados. E, por isso, buscamos parceiros que também sejam loucos por dados e apaixonados por gente! 🤩

 

#VemSerUmEu.A3 💙


RESPONSIBILITIES AND ASSIGNMENTS

Como Pessoa Engenheira de Dados na A, você irá:


  • Desenvolver e otimizar consultas SQL e jobs PySpark, garantindo a performance e otimização de custos computacionais;
  • Criar e manter pipelines de dados eficientes e escaláveis, garantindo a integridade e qualidade dos dados;
  • Implementar e monitorar processos de ingestão, transformação e disponibilização de dados;
  • Trabalhar com grandes conjuntos de dados em ambientes distribuídos, aplicando boas práticas de particionamento, cache e tuning de jobs.



REQUIREMENTS AND QUALIFICATIONS

O que precisamos que você tenha (requisitos):


  • Python avançado (desenvolvimento e consumo de APIs REST).
  • PySpark avançado (arquitetura do Spark, DataFrame API, funções embutidas, Window Functions, UDFs, otimização de jobs distribuídos);
  • SQL avançado (DDL, DQL, DML, DCL, TCL; Window Functions, pivot tables, CTEs, otimização de queries);
  • Versionamento de código com Git;
  • Grande familiaridade com serviços AWS, S3, DynamoDB, EMR, Athena, Lambda, Redshift, Kinesis, EKS, Glue;
  • Disponibilidade para 1 encontro presencial a cada 3 meses em São Paulo / SP.


Vamos ficar felizes se você tiver (diferencial):


  • Experiência com GitLab CI/CD (automação de deploys e testes).
  • Databricks (Delta Tables, Jobs, otimização de workloads distribuídos).
  • Terraform (provisionamento de infraestrutura como código).
  • Certificação AWS.

ADDITIONAL INFORMATION

Nossos benefícios:

 

  • Vale Alimentação/Refeição flexível (Swile);
  • Total Pass (academias);
  • Zenklub (apoio psicológico online);
  • Plano Saúde SulAmérica- 100% subsidiado para você Eu.A3;
  • Plano Dental Amil;
  • Seguro de Vida;
  • Participação nos Lucros e Resultados;
  • Desconto nos cursos de idioma da Open English;
  • Parceria AWS nível Advanced;
  • Desconto na conta de energia elétrica (operadora CEMIG);
  • Empresa Cidadã: licenças maternidade e paternidade estendidas.



E mais:


  • Trabalho remoto com 1 encontro presencial a cada 3 meses em São Paulo / SP;
  • 40 horas semanais;
  • Dia a dia descontraído e acolhedor;
  • Plano de carreira e acompanhamento individual;
  • Programas internos de compartilhamento de conhecimento;
  • Prezamos pela diversidade, liberdade, flexibilidade e autonomia!


Curtiu o desafio? 

 

Estamos ansiosos para receber seu CV. 🎯 

 

Um dos nossos valores é ser transparente, sempre! Por isso, é importante que saiba que avaliamos todos os CVs cadastrados e, se você tiver fit com a vaga e com nossa cultura, te convidaremos para um primeiro bate papo! 😉

 

Mas, caso seu CV não seja selecionado dessa vez, não se preocupe! Ficaremos de olho, para futuras oportunidades. ✅



Sobre Nós 💙

Somos loucos por dados, apaixonados por gente e obcecados pela excelência! 🚀


Somos uma consultoria especializada em dados e inteligência artificial. Nosso propósito é empoderar pessoas e corporações por meio de dados, transferindo know-how e fortalecendo bases para a criação de uma Cultura Data Driven. Atuando como um advisor, realizamos projetos de alto impacto e transformação cultural por meio de uma jornada de maturidade analítica, desde a implantação de Data Lakes, passando pelo Self-Service Analytics, até a criação de Modelos Preditivos e Prescritivos.


Utilizamos, integramos e criamos diversas tecnologias em Inteligência Artificial. Nossas soluções ajudam nossos clientes a compreender padrões de comportamento e relações entre indicadores, gerando valor a partir de diferentes fontes de dados.  


Nossos produtos aceleram a inovação por meio da análise avançada de dados, ajudando nossos clientes a reduzirem custos e aumentarem a eficiência operacional. Atuamos nos setores de saúde, educação, finanças, infraestrutura, logística, turismo, dentre outros.  


Nossos princípios moldam a essência de quem somos e definem a visão que temos para o futuro. São esses pilares que norteiam nossas ações e estratégias. 


Foco nas pessoas 

Compromisso com a excelência 

Simplicidade

Comunicação transparente e eficaz


VEM SER UM EU.A3 🚀 


Somos um time de pessoas engajadas em um mesmo propósito atuando juntas com orgulho e senso de pertencimento, com evolução e desafios constantes. Que tal fazer parte de uma empresa certificada pelo GPTW como uma Excelente empresa para trabalhar no Brasil? 🤩


Aqui, incentivamos o trabalho em equipe, somos obcecados pela excelência e queremos pessoas para crescer com a gente! 🎯 


#VemSerUmEu.A3 💙


Required profile

Experience

Spoken language(s):
Portuguese
Check out the description to know which languages are mandatory.

Other Skills

  • Collaboration
  • Communication
  • Problem Solving

Related jobs