Offer summary

Qualifications:

Bachelor's degree in Computer Science, Engineering, or a related field., Experience in data engineering and developing data pipelines., Proficiency in Azure Data Factory, Azure Synapse, Databricks, and SQL Server., Knowledge of Python, Spark, ETL processes, and workflow orchestration (Airflow)..

Key responsabilities:

Design, implement, and maintain data pipelines for large-scale data ingestion, processing, and analysis.

Develop and optimize databases and data warehouses for performance and reliability.

Automate ETL processes to integrate data from various sources ensuring data quality.

Collaborate with multidisciplinary teams to understand data requirements and implement solutions.

Job description

Este é um cargo remoto.

Você é apaixonado por tecnologia, busca sempre inovar na sua área e está super atento às práticas ágeis?

Achou seu próximo time!! ;)

Um grande projeto, pronto para receber talentos únicos!

Você é Engenheiro de Dados Sr ?! Se sim, se inscreva para esta posição!

Nos projetos que a Spassu desenvolve sempre tem lugar para mentes inquietas como a sua!

Venha expandir seus conhecimentos conosco!

Os CV's permanecerão em poder da empresa enquanto perdurar o processo seletivo e pelo período adicional de 2 anos, para eventuais processos seletivos futuros, em atendimento a Lei Geral de Proteção de Dados.

Principais responsabilidades:

· Projetar, implementar e manter pipelines de dados para ingestão, processamento, armazenamento e análise de dados em grande escala;

· Desenvolver e otimizar bancos de dados, data warehouses e sistemas de processamento de dados distribuídos para garantir desempenho, escalabilidade e confiabilidade;

· Implementar políticas de segurança de dados, garantindo o acesso autorizado e a proteção dos dados sensíveis;

· Automatizar processos de ETL (Extract, Transform, Load) para integrar dados de várias fontes e garantir consistência e qualidade dos dados;

· Colaborar com equipes multidisciplinares para entender requisitos de dados e implementar soluções que atendam às necessidades da organização;

· Monitorar o desempenho e a integridade dos sistemas de dados, identificando e resolvendo problemas de forma proativa;

· Ficar atualizado com as últimas tecnologias e tendências em engenharia de dados, contribuindo para a evolução contínua das práticas e ferramentas de dados;

· Implantar esteira de entregas contínuas utilizando Metodologias Ágeis como o DEVOPS;

· Elaborar relatórios de acompanhamento para a administração do cliente;

· Executar outras tarefas de mesma natureza e nível de complexidade associadas ao ambiente organizacional.

Requisitos

Escolaridade: Superior completo preferencialmente, nas áreas correlatas à Ciência da Computação; Engenharias; ou outra área relacionada a dados.

Experiência Mínima: Engenharia de dados e desenvolvimento de pipelines de dados; Azure Data Factory, Azure Synapse, Databricks e SQL Server; Integração de dados, automação e otimização de pipelines.

Conhecimentos Mínimos: Azure Data Factory, Azure Synapse, Databricks e SQL Server; Python, Spark, ETL e orquestração de workflows (Airflow); Habilidade em trabalhar com dados estruturados e não estruturados; Conhecimento em boas práticas de performance e escalabilidade.