Data Engineer

3 semanas atrás

Braga Lisboa Viana do Castelo, Portugal Xpand IT Tempo inteiro

Problemas complexos exigem a experiência certa Um dos maiores desafios da atualidade é o correto armazenamento e processamento de dados tendo em consideração estes três domínios (3Vs): Volume, Velocidade e Variedade.

Na Xpand IT, a equipa de Data Engineering desenvolve e implementa arquiteturas e soluções de software que tratam da captura, ingestão, armazenamento e gestão de dados críticos de grandes clusters de informação onde os 3Vs estão sempre presentes. Tiramos partido de um conjunto de frameworks avançadas como Spark, Kafka, Hive/Impala, Azure Data Services ou MongoDB usando Java e Scala como linguagens de programação para interagir com estas frameworks.

Principais responsabilidades

Enquanto Data Engineer é essencial trabalhar juntamente com os Platform Engineers, para desenvolver soluções de software, aplicando as melhores práticas em termos de desenho e arquitetura de sistemas distribuídos de grande escala.

As principais responsabilidades passam por garantir o desempenho e a escalabilidade do software que interage com os sistemas backend Big Data, contribuindo para a manutenção da performance geral do sistema.

Principais responsabilidades diárias:

- Implementar soluções em arquiteturas distribuídas em que a performance de tratamento de grandes volumes de dados é fulcral
- Desenhar e desenvolver soluções de software robustas e escaláveis, independentemente da quantidade de dados a processar
- Implementar boas práticas e padrões de desenho das soluções Big Data no software produzido;
- Analisar problemas complexos que necessitam de soluções eficientes para manipular grandes quantidades de informação;
- Desenvolver modelos e organização de estruturas de dados que otimizem as operações de “pesquisa” e “armazenamento” em sistemas distribuídos de grande escala;
- Desenhar e desenvolver de APIs de comunicação entre os sistemas de backend Big Data e sistemas externos através de protocolos de comunicação standard.

Stacks:

Python, Java/Scala, Spark, Kafka/Confluent, MongoDB, Databricks

Requisitos

- Licenciatura e/ou Mestrado em Informática, Sistemas de Informação ou Ciência da Computação;
- Experiência em tecnologias baseadas em Java (JBoss, Spring, Spring MVC, Hibernate) e na definição de interfaces de comunicação utilizando standards como XML, JSON, SOAP;
- Experiência na implementação de padrões de design em soluções de software avançadas (multi-threaded, multi-process, multi-cloud);
- Experiência com bases de dados relacionais e não relacionais (SQL, MySQL, NoSQL, Hadoop, MongoDB);
- Elevada experiência no uso de ferramentas como Eclipse, Maven, Jenkins, GIT, JIRA ou equivalentes;
- omínio do Inglês, falado e escrito.

Candidata-te aqui

Poderá encontrar o anúncio original publicado em: https://www.itjobs.pt/oferta/508300/data-engineer

  • Senior Data Engineer

    Há 3 dias

    Viana do Castelo, Portugal Descompagnons Trabalho Temporário Lda Tempo inteiro

    Bitsight is a cyber risk management leader transforming how companies manage exposure, performance, and risk for themselves and their third parties. Companies rely on Bitsight to prioritize their cybersecurity investments, build greater trust within their ecosystem, and reduce their chances of financial loss. Built on over a decade of technological...

  • Data Engineer

    1 semana atrás

    Castelo do Neiva, Portugal Wire IT Tempo inteiro

    Join or sign in to find your next job Join to apply for the Data Engineer role at Wire IT Based in Portugal, Wire IT is your specialised IT consulting partner with 18 years of experience driven by an experienced and senior team that helps clients make the right decisions in a fast‑moving market. Wire IT’s ambition is to grow while keeping true to its...

  • Lisbon

    1 dia atrás

    Lisboa, Portugal Automation Engineer Tempo inteiro

    Job Description Automation Engineer - SDET - Lisbon Overview #TEamCandour are seeking a talented and motivated Automation Engineer - SDET - to join our thriving, global enterprise client working out of their expanding Lisbon tech hub. This position is being offered on a hybrid basis and will required 2 days attendance per week at the office in Central...

  • Data Engineer

    Há 3 dias

    Castelo Do Neiva, Portugal Wire IT Tempo inteiro

    A leading IT consulting firm in Portugal is seeking a Data Engineer to join their team. This role offers a hybrid work model with a full-time contract. The ideal candidate will have a Master's degree in Computer Engineering, at least 3 years of experience, and solid skills in SQL, DBT, and Google Cloud Platform. Additional perks include health insurance,...

  • Lisbon

    Há 5 dias

    Lisboa, Lisboa, Portugal Automation Engineer Tempo inteiro

    Job DescriptionAutomation Engineer - SDET - LisbonOverview#TEamCandour are seeking a talented and motivated Automation Engineer - SDET - to join our thriving, global enterprise client working out of their expanding Lisbon tech hub. This position is being offered on a hybrid basis and will required 2 days attendance per week at the office in Central Lisbon.As...

  • Data Engineer On-site Xpand IT Viana do Castelo December 23, 2025

    2 semanas atrás

    Viana do Castelo, Portugal Devs.pt Tempo inteiro

    Problemas complexos exigem a experiência certa! Um dos maiores desafios da atualidade é o correto armazenamento e processamento de dados tendo em consideração estes três domínios (3Vs): Volume, Velocidade e Variedade. Na Xpand IT, a equipa de Data Engineering desenvolve e implementa arquiteturas e soluções de software que tratam da captura,...

  • Aws Data Engineer

    2 semanas atrás

    Braga, Portugal Adentis Portugal Tempo inteiro

    A Data Engineer is needed to design and maintain ETL pipelines, databases, and data integration systems. They will ensure data quality, automate workflows, and support data-driven initiatives.

  • Big Data Engineer

    Há 7 dias

    Braga, Portugal Adentis Portugal Tempo inteiro

    Data Engineer needed with 5+ years experience in data engineering, cloud platforms, and IaC tools, fluency in English is mandatory.

  • Data Engineer

    2 semanas atrás

    Braga, Portugal Decskill Tempo inteiro

    Decskill was founded in 2014 as an IT Consulting Company and their main mission is to delivery value through the knowledge. We enable companies to meet the chalenges of digital world by providing our clients with business models that ensure technological capacity, flexibility and agility. We are more than 500 consultants with offices in Lisbon, Porto and...

  • Data Engineer

    2 semanas atrás

    Braga, Portugal Decskill Tempo inteiro

    Decskill was founded in 2014 as an IT Consulting Company and their main mission is to delivery value through the knowledge. We enable companies to meet the chalenges of digital world by providing our clients with business models that ensure technological capacity, flexibility and agility. We are more than 500 consultants with offices in Lisbon, Porto and...