Match score not available

Data Engineer - PySpark

Remote:

Full Remote

Contract:

Full time

Experience:

Mid-level (2-5 years)

Work from:

Brazil

Offer summary

Qualifications:

Intermediate experience with PySpark, Proficient in Python and database management, Experience in data modeling and ETL processes, Familiarity with Agile methodologies is a plus, Exposure to cloud services like Azure, AWS, GCP.

Key responsabilities:

Build medium complexity data pipelines for diverse data sources
Clean, transform, and organize low complexity data
Develop and maintain data pipelines using programming languages and tools
Participate in team meetings to align project demands and solutions
Structure and organize data logically ensuring consistent manipulation

$MATH logo$

MATH SME https://www.math.group/

201 - 500 Employees

See more MATH offers

Job description

Somos uma consultoria de marketing e tecnologia que utiliza ciências exatas para melhorar a relação entre marcas e pessoas. Combinamos nossas diversas experiências, equipes, tecnologia e processos testados em mais de 200 marcas, 20 países e milhões de pessoas impactadas para decodificar desafios.

Data Engineer

Missão do cargo: Realizar o processo de limpeza, transformação e organização de dados de média complexidade, desenvolvendo sistemas para o gerenciamento desses dados, através das ferramentas específicas de BI, com o objetivo de criar soluções que atendam às necessidades do cliente.

Atividades

Realizar a construção de pipelines de dados de média complexidade, visando coletar fontes diversas e estrategias de armazenamento
Realizar limpeza, transformação e organização de dados de baixa complexidade da entrega, através de linguagens de programação, planilhas e/ou outras ferramentas, visando a clareza e a consistência dos dados.
Realizar o desenvolvimento e manutenção de pipeline de dados, através de linguagens de programação, ferramentas específicas e soluções de mercado, com o objetivo de centralizar e organizar as fontes de dados da empresa para usabilidade das áreas.
Participar das reuniões de alinhamento com o time, com o objetivo de alinhar as demandas, prazos, apresentar riscos e soluções dos projetos, bem como apoiar ativamente nas demandas mais urgentes.
Realizar o processo de estruturação lógica e organização de dados, através das técnicas de modelagem, de acordo com boas práticas, visando garantir organização e manipulação consistente de dados.

Tech Skills (intermediário)