Engenheiro de Dados Senior

Remote: 
Full Remote
Contract: 
Work from: 

Offer summary

Qualifications:

Bachelor's degree in Computer Science, Computer Engineering, Systems Analysis, or related fields., Strong knowledge of Cloud services and Software architecture, preferably AWS, Azure, or GCP., Solid understanding of Big Data ecosystems and distributed processing tools like Spark and pySpark., Advanced programming skills in Python and experience with ETL tools and process automation..

Key responsibilities:

  • Build data ingestion and transformation processes using pySpark in AWS Cloud environment.
  • Apply best practices for distributed processing and contribute to the evolution of the Datalake.
  • Collaborate with stakeholders to discuss business needs and contribute to new data-driven products and insights.
  • Utilize best practices in implementing data projects and work within multidisciplinary squads.

DIGISYSTEM - IT Solutions logo
DIGISYSTEM - IT Solutions Large http://www.digisystem.com.br/
1001 - 5000 Employees
See all jobs

Job description

?  Sobre a Digi 

Com inúmeras certificações nas principais tecnologias, a Digisystem conta hoje com uma infraestrutura robusta para prestar serviços de soluções em TI.  

Fundada em 1990, em são Paulo, são mais de 30 anos de experiência no mercado, mais de 1000 funcionários com alto nível de especialização é o seu melhor parceiro na jornada da Transformação Digital.  

Nós entendemos do negócio e transformamos tecnologia em resultado

? Como será o seu dia a dia: 

MISSÃO

Aplicação da Estratégia de Dados na Jornada Data-Driven, disseminando conhecimento e promovendo o aculturamento de Dados frente as Torres de negócios e áreas Cross da companhia. Busca constante por conhecimento frente a tecnologias inovadoras para aprimorar processos, assim como o Ecossistema tecnológico de Dados (Datalake). Atuação como engenheiro de dados, com intuito de disponibilizar dados confiáveis, de forma ágil, democratizando dados para áreas de negócio, estratégicas, ciência de dados e demais áreas da empresa, possibilitando assim a tomada de decisões estratégicas, táticas e operacionais. Trabalho em conjunto com os especialistas, apoiando o time nas decisões mais relevantes para prover soluções de dados para as mais diversas necessidades da empresa.

PRÉ-REQUISITOS

  • Formação Superior completa: Ciência da Computação, Engenharia da Computação, Análise de Sistemas ou correlatas;
  • Conhecimento de serviços Cloud e arquitetura de Software (AWS preferencialmente, Azure ou GCP);
  • Sólidos conhecimento de ecossistemas Big Data (Hadoop, HDFS, MapReduce, Kafka etc);
  • Sólidos conhecimento de processamento distribuído (Spark, RDD, pySpark, SparkSQL);
  • Conhecimento em ferramentas ETL (PowerCenter, Data Stage, Pentaho ou outras);
  • Conhecimento em ferramentas de automatização de processos - Airflow, Control-M;
  • Programação avançada em Python com Dados;
  • Conhecimento e vivência de frameworks ágeis;
  • Experiência com liderança técnicas, boa gestão de tempo e sólidas habilidades de comunicação (capacidade de transmitir conceitos relacionados a dados a não-peritos);
  • Desejável conhecimento em Business Intelligence;
  • Perfil para Mudanças e Inovação de processos;
  • Experiência com desenho estratégico de arquitetura de dados;
  • Conhecimentos sólidos em ferramentas de front-end de dados, como Power BI, QuickSight ou similar;
  • Perfil colaborador, mentalidade de resolução de problemas e bom relacionamento interpessoal;
  • Inglês avançado é um diferencial.

RESPONSABILIDADES

  • Construção de processos de ingestão e transformação de dados, utilizando pySpark em ambiente Cloud AWS;
  • Aplicar melhores práticas de desenvolvimento para processamento distribuído;
  • Construção e evolução do Datalake atuando em squads multidisciplinares;
  • Discutir necessidades do negócio com stakeholders, contribuindo com novos produtos, visões que tragam• descobertas e gerem insights para o negócio/produtos através de dados.
  • Conhecer e utilizar as melhores práticas na implementação dos projetos de dados;

Na Digisystem, valorizamos a diversidade e entendemos que o que acrescenta é justamente ideias e pontos de vistas variados. Por isso, raça, cor, religião, gênero e identidade de gênero, nacionalidade, deficiência, orientação sexual, ascendência ou idade, não serão impeditivos de você fazer parte do nosso time.  ??‍??‍?✊? 

#VemserumDigier  

Required profile

Experience

Spoken language(s):
English
Check out the description to know which languages are mandatory.

Other Skills

  • Social Skills
  • Time Management
  • Communication
  • Problem Solving

Related jobs