Expert Data Engineer
Há 23 horas
Porto, Portugal
WINPROVIT
Tempo integral
Grátis com e-mail ou Google
Guarde esta oferta e mantenha a sua pesquisa organizada
Crie uma conta gratuita para guardar ofertas, criar alertas e voltar a este anúncio a partir do seu painel.
Grátis com e-mail ou Google
Ao continuar, aceita os nossos Termos & Política de Privacidade.
Procuramos um(a) Expert Data Engineer para integrar uma equipa tecnológica, assumindo um papel de referência técnica na definição, governação e evolução da arquitetura de Data Engineering.
O profissional será responsável por assegurar a coerência e qualidade das arquiteturas de dados, definir standards e boas práticas de engenharia e promover a evolução tecnológica dos Data Products e respetivos pipelines.
Terá um papel fundamental na definição da estratégia técnica da área, contribuindo para a construção de soluções escaláveis, robustas e sustentáveis, alinhadas com as necessidades do negócio e com a evolução da Plataforma de Dados.
Principais responsabilidades
• Definir e governar a arquitetura dos Data Products e dos pipelines de Data Engineering, assegurando a coerência transversal entre diferentes domínios e o alinhamento com a Plataforma de Dados;
• Estabelecer, desenvolver e implementar standards, princípios e boas práticas de Data Engineering, aplicáveis às diferentes equipas e projetos;
• Definir e promover boas práticas em todas as etapas do ciclo de vida dos dados, incluindo ingestão, transformação, modelação, desenvolvimento de Data Products e disponibilização de dados para Analytics, Reporting e Inteligência Artificial (AI);
• Garantir a adoção de práticas de engenharia de referência, nomeadamente idempotência, reprocessamento de dados, controlo de dependências, versionamento, observabilidade e definição de SLAs de dados;
• Definir e implementar o roadmap técnico da área de Data Engineering, promovendo a evolução contínua da arquitetura, das tecnologias e dos Data Products;
• Planear, acompanhar e suportar migrações tecnológicas, evoluções e upgrades dos Data Products, em articulação com a equipa de Data Platform;
• Assegurar a continuidade funcional durante processos de migração, garantindo a validação e qualidade dos dados e a redução sustentada da dívida técnica;
• Manter uma visão global e atualizada sobre a stack tecnológica, os padrões de desenvolvimento e as ferramentas utilizadas na área de Data Engineering;
• Atuar como referência técnica na análise e resolução de desafios complexos, apoiando a tomada de decisões arquiteturais e a definição das melhores abordagens técnicas;
• Colaborar com diferentes equipas de Engenharia, Produto, Data Platform e Negócio, assegurando que as soluções desenvolvidas respondem a requisitos técnicos e funcionais de elevada complexidade. Requisitos obrigatórios
• Formação superior em Engenharia, Ciências da Computação, Tecnologias de Informação ou áreas similares;
• Experiência profissional mínima de 6 anos em Engenharia de Dados (Data Engineering);
• Experiência comprovada em funções de arquitetura, liderança técnica ou definição de orientações técnicas em ambientes de Data Engineering;
• Experiência na definição, implementação e evolução de arquiteturas modernas de dados;
• Conhecimento e experiência com arquiteturas Lakehouse e plataformas analíticas híbridas, integrando Data Lake e Data Warehouse;
• Capacidade de definir standards técnicos, orientar equipas e garantir a qualidade e sustentabilidade das soluções de dados. Requisitos técnicos
• Conhecimentos sólidos de SQL, Python e PySpark ou tecnologias equivalentes;
• Experiência com tecnologias de processamento distribuído, nomeadamente Apache Spark, Databricks, Hadoop e Hive;
• Experiência de trabalho em ambientes Cloud, preferencialmente Azure, Google Cloud Platform (GCP) ou Amazon Web Services (AWS);
• Experiência no processamento e transformação de grandes volumes de dados;
• Conhecimentos de arquiteturas e processos de processamento de dados em Batch e/ou Streaming;
• Experiência com ferramentas de controlo de versões, nomeadamente Git;
• Conhecimentos sólidos de automatização, desenvolvimento e implementação de pipelines CI/CD;
• Domínio de boas práticas de desenvolvimento de software aplicadas a ambientes de dados, incluindo versionamento, gestão de dependências, monitorização e observabilidade. Competências comportamentais
• Elevada capacidade analítica, atenção ao detalhe e facilidade na estruturação de informação complexa;
• Forte sentido de responsabilidade técnica, pensamento crítico e visão sistémica;
• Autonomia, proatividade e capacidade de antecipar desafios e propor soluções;
• Capacidade de tomar decisões técnicas fundamentadas, considerando a escalabilidade, eficiência e sustentabilidade das soluções a longo prazo;
• Facilidade de comunicação e colaboração com equipas multidisciplinares;
• Capacidade de influência e orientação técnica, promovendo a adoção de standards e boas práticas;
• Curiosidade tecnológica, espírito de iniciativa e motivação para acompanhar novas tendências e tecnologias na área de Data Engineering. O que procuramos neste profissional Procuramos um perfil sénior, com forte experiência técnica e capacidade de visão arquitetural, que consiga assumir um papel de liderança e influência na área de Data Engineering. Mais do que desenvolver pipelines, deverá ser capaz de definir a forma como os produtos de dados são concebidos, implementados, governados e evoluídos, garantindo elevados padrões de qualidade, fiabilidade, desempenho e escalabilidade. Vaga híbrida
- 2x por semana no escritório na Maia/Porto/Portugal
• Definir e governar a arquitetura dos Data Products e dos pipelines de Data Engineering, assegurando a coerência transversal entre diferentes domínios e o alinhamento com a Plataforma de Dados;
• Estabelecer, desenvolver e implementar standards, princípios e boas práticas de Data Engineering, aplicáveis às diferentes equipas e projetos;
• Definir e promover boas práticas em todas as etapas do ciclo de vida dos dados, incluindo ingestão, transformação, modelação, desenvolvimento de Data Products e disponibilização de dados para Analytics, Reporting e Inteligência Artificial (AI);
• Garantir a adoção de práticas de engenharia de referência, nomeadamente idempotência, reprocessamento de dados, controlo de dependências, versionamento, observabilidade e definição de SLAs de dados;
• Definir e implementar o roadmap técnico da área de Data Engineering, promovendo a evolução contínua da arquitetura, das tecnologias e dos Data Products;
• Planear, acompanhar e suportar migrações tecnológicas, evoluções e upgrades dos Data Products, em articulação com a equipa de Data Platform;
• Assegurar a continuidade funcional durante processos de migração, garantindo a validação e qualidade dos dados e a redução sustentada da dívida técnica;
• Manter uma visão global e atualizada sobre a stack tecnológica, os padrões de desenvolvimento e as ferramentas utilizadas na área de Data Engineering;
• Atuar como referência técnica na análise e resolução de desafios complexos, apoiando a tomada de decisões arquiteturais e a definição das melhores abordagens técnicas;
• Colaborar com diferentes equipas de Engenharia, Produto, Data Platform e Negócio, assegurando que as soluções desenvolvidas respondem a requisitos técnicos e funcionais de elevada complexidade. Requisitos obrigatórios
• Formação superior em Engenharia, Ciências da Computação, Tecnologias de Informação ou áreas similares;
• Experiência profissional mínima de 6 anos em Engenharia de Dados (Data Engineering);
• Experiência comprovada em funções de arquitetura, liderança técnica ou definição de orientações técnicas em ambientes de Data Engineering;
• Experiência na definição, implementação e evolução de arquiteturas modernas de dados;
• Conhecimento e experiência com arquiteturas Lakehouse e plataformas analíticas híbridas, integrando Data Lake e Data Warehouse;
• Capacidade de definir standards técnicos, orientar equipas e garantir a qualidade e sustentabilidade das soluções de dados. Requisitos técnicos
• Conhecimentos sólidos de SQL, Python e PySpark ou tecnologias equivalentes;
• Experiência com tecnologias de processamento distribuído, nomeadamente Apache Spark, Databricks, Hadoop e Hive;
• Experiência de trabalho em ambientes Cloud, preferencialmente Azure, Google Cloud Platform (GCP) ou Amazon Web Services (AWS);
• Experiência no processamento e transformação de grandes volumes de dados;
• Conhecimentos de arquiteturas e processos de processamento de dados em Batch e/ou Streaming;
• Experiência com ferramentas de controlo de versões, nomeadamente Git;
• Conhecimentos sólidos de automatização, desenvolvimento e implementação de pipelines CI/CD;
• Domínio de boas práticas de desenvolvimento de software aplicadas a ambientes de dados, incluindo versionamento, gestão de dependências, monitorização e observabilidade. Competências comportamentais
• Elevada capacidade analítica, atenção ao detalhe e facilidade na estruturação de informação complexa;
• Forte sentido de responsabilidade técnica, pensamento crítico e visão sistémica;
• Autonomia, proatividade e capacidade de antecipar desafios e propor soluções;
• Capacidade de tomar decisões técnicas fundamentadas, considerando a escalabilidade, eficiência e sustentabilidade das soluções a longo prazo;
• Facilidade de comunicação e colaboração com equipas multidisciplinares;
• Capacidade de influência e orientação técnica, promovendo a adoção de standards e boas práticas;
• Curiosidade tecnológica, espírito de iniciativa e motivação para acompanhar novas tendências e tecnologias na área de Data Engineering. O que procuramos neste profissional Procuramos um perfil sénior, com forte experiência técnica e capacidade de visão arquitetural, que consiga assumir um papel de liderança e influência na área de Data Engineering. Mais do que desenvolver pipelines, deverá ser capaz de definir a forma como os produtos de dados são concebidos, implementados, governados e evoluídos, garantindo elevados padrões de qualidade, fiabilidade, desempenho e escalabilidade. Vaga híbrida
- 2x por semana no escritório na Maia/Porto/Portugal