Data Engineer | Data, AI

Há 5 dias

Porto, Porto, Portugal Noesis Tempo integral 45 000 € - 65 000 € Contrato

A Noesis Procura o Seguinte Perfil

  • Desenhar, construir e manter pipelines de dados robustos e soluções de arquitetura no ecossistema Azure;
  • Desenvolver workflows de processamento de dados otimizados utilizando Databricks, Spark e Python;
  • Realizar consultas SQL avançadas e modelação de dados para garantir a qualidade e integridade dos dados entre ambientes;
  • Colaborar com equipas técnicas para otimizar o desempenho dos pipelines e suportar requisitos de negócio orientados a dados.

Principais Tarefas e Responsabilidades

  • Desenhar, construir e manter pipelines de dados robustos e soluções de arquitetura no ecossistema Azure;
  • Desenvolver workflows de processamento de dados otimizados utilizando Databricks, Spark e Python;
  • Realizar consultas SQL avançadas e modelação de dados para garantir a qualidade e integridade dos dados entre ambientes;
  • Colaborar com equipas técnicas para otimizar o desempenho dos pipelines e suportar requisitos de negócio orientados a dados.

Requisitos

  • Pelo menos 1 ano de experiência como Data Engineer;
  • Experiência em SQL, Python e PySpark (ou tecnologias equivalentes de processamento de dados);
  • Conhecimento de modelação e armazenamento de dados (Data Warehouse, Data Lake, …);
  • Conhecimento de boas práticas de engenharia: versionamento de código (Git), code review, padrões de desenvolvimento e automatização;
  • Familiaridade em ambientes de cloud (ex.: Azure, GCP ou AWS);
  • Familiaridade com ecossistemas distribuídos, idealmente incluindo Hadoop, Hive, Spark ou Databricks;

Todos os nossos processos de recrutamento e seleção baseiam-se na igualdade de oportunidades, valorizando a competência e o potencial de cada pessoa e garantindo que nenhum candidato ou candidata é discriminado com base em género, etnia, orientação sexual, idade, religião ou condição física.

Requisitos mínimos