Data Operation Engineer

Há 3 dias

Lisboa, Portugal Welvaart Tempo inteiro

Sobre a Welvaart Diariamente, assumimos compromissos e apresentamos soluções aos nossos stakeholders de forma a criar uma estrutura de valores humanos, assente no profissionalismo, honestidade e rigor. Com uma gestão baseada no Human Centered Design, cuidamos dos nossos profissionais com planos de carreira consistentes, mas flexíveis com as suas necessidades e expectativas de evolução. A nossa equipa de gestão garante uma liderança empática e presente que proporcionará um envolvimento e entrega tecnológica superior aos projectos e produtos dos nossos clientes. ProjetoIntegração numa equipa de Data Operations responsável por sustentar e evoluir o ecossistema de dados de uma instituição bancária de grande escala. O foco principal está nas plataformas de Data Lake, workloads analíticas e pipelines críticos em ambientes cloud on-prem e Azure (Databricks).A equipa tem um papel central no processo de offloading de dados, modernização tecnológica e redução do consumo em mainframe, garantindo disponibilidade, qualidade e fiabilidade dos dados para vários stakeholders internos.Função Suporte operacional (L2) às plataformas de dados, incluindo workloads em Databricks, Cloudera e pipelines geridos por Control-M. Monitorização e análise de falhas em jobs, identificação de incidentes recorrentes e aplicação de correções definitivas. Operação e sustentação dos ambientes de Kafka, Confluent, bases de dados e clusters de processamento relacionados com o pipeline de ingestão. Gestão do processo de offloading de dados, garantindo a replicação correta e consistente entre múltiplas origens (DB2, mainframe, Oracle, MongoDB). Análise de logs e troubleshooting avançado para compreender anomalias, padrões de falha e impactos potenciais nos serviços. Suporte ao programa de transformação para Databricks, garantindo que workloads são migradas, otimizadas e operacionais. Garantir que os dados estão disponíveis, íntegros e que não existem perturbações nos serviços de consumo a jusante. Participar no processo de transição tecnológica: retirar cargas do mainframe, migrar dados e suportar integrações híbridas (ex.: transações que ainda escrevem no mainframe mas lêem do Oracle). Trabalhar em estreita colaboração com a equipa de Offloading & Confluence para assegurar governança, rastreabilidade e estabilidade do fluxo de dados. Documentar procedimentos, melhorias e padrões operacionais. Estamos à procura deExperiência sólida com Apache Kafka e/ou Confluent Platform. Conhecimentos de Data Lakes, arquiteturas distribuídas e workloads de dados de larga escala. Experiência com Databricks (Azure) e/ou Cloudera. Experiência prática em ambientes de DataOps e pipelines de ingestão. Familiaridade com DB2, Oracle, MongoDB e processos de replicação/offloading. Experiência em ferramentas de scheduling, preferencialmente Control-M. Conhecimentos de análise de logs, troubleshooting e suporte a aplicações/serviços de dados. Compreensão de plataformas on-prem e cloud híbrida. Valorizado: experiência com ecossistemas de mainframe ou migrações a partir de mainframe. O que pode descobrir connosco? Fazer parte de uma start-up tecnológica em crescimento Diferentes âmbitos de projeto em diferentes sectores Estrutura de remuneração justa e equitativa (Consultant Profile) Formação e certificação Gestão do percurso profissional Mais de 30 parcerias Programa Welvaart Embassador UNLEASH THE POWER OF YOUR CAREER

  • Pkis Operation Service

    Há 2 dias

    Lisboa, Portugal Olisipo Tempo inteiro

    Referência 11940_PKIS Operation Service_Lisboa **Descrição**: DevOps Engineer **Perfil**: We are looking for?PKIS Operation Service?to integrate a project in?Lisbon. - 1 years’ implementing data integration processes; - Experience working with Cloud platforms (AWS, preferably); - Experience working with DevOps technologies (e.g. Git, Docker,...

  • Lisbon

    1 semana atrás

    Lisboa, Portugal Automation Engineer Tempo inteiro

    Job Description Automation Engineer - SDET - Lisbon Overview #TEamCandour are seeking a talented and motivated Automation Engineer - SDET - to join our thriving, global enterprise client working out of their expanding Lisbon tech hub. This position is being offered on a hybrid basis and will required 2 days attendance per week at the office in Central...

  • Lisbon

    Há 8 horas

    Lisboa, Lisboa, Portugal Automation Engineer Tempo inteiro

    Job DescriptionAutomation Engineer - SDET - LisbonOverview#TEamCandour are seeking a talented and motivated Automation Engineer - SDET - to join our thriving, global enterprise client working out of their expanding Lisbon tech hub. This position is being offered on a hybrid basis and will required 2 days attendance per week at the office in Central Lisbon.As...

  • Data Engineer

    Há 3 dias

    Lisboa, Portugal Optiwisers Tempo inteiro

    Data Engineer (Databricks | PySpark | ADF | Airflow) Location:Lisbon (Hybrid/Remote options depending on profile) Type:Full-time, long-term We are looking for an experiencedData Engineerto join our growing data team and contribute to the design, optimization, and operation of scalable data platforms. You will work with modern data technologies, supporting...

  • Data Engineer

    Há 8 horas

    Lisboa, Lisboa, Portugal Optiwisers Tempo inteiro

    Data Engineer (Databricks | PySpark | ADF | Airflow)Location:Lisbon (Hybrid/Remote options depending on profile)Type:Full-time, long-termWe are looking for an experiencedData Engineerto join our growing data team and contribute to the design, optimization, and operation of scalable data platforms. You will work with modern data technologies, supporting...

  • Junior Data Engineer

    Há 19 horas

    Lisboa, Portugal KWAN Tempo inteiro

    We are looking for a Junior Data Engineer to work in Lisbon who's eager to embark on an exciting new opportunity! Apply here About KWAN We connect IT professionals with projects that match their skills, professional experience, and goals, then we offer a career progression program, delivered by in-house specialists - our People Experience Partners - to guide...

  • Data Engineer

    4 semanas atrás

    Lisboa, Portugal NTT DATA Tempo inteiro

    Overview Job Description We are a multinational Business and Technology consultancy that reinvents and transforms organizations through innovation and have been ranked by Gartner as one of the top 10 IT services companies in the world. At NTTDATA we are Digital Lovers. We love technology, work with passion, with enthusiasm, in a creative and collaborative...

  • Senior Software Engineer

    2 semanas atrás

    Lisboa, Portugal Soda Data Tempo inteiro

    Soda - creators of Soda Core - are looking for a Senior Software Engineer to help improve our Open Source and Cloud products. We're moving in an exciting new direction, and we need your help. We're looking for a Senior Full Stack Engineer (Backend and Frontend) to help us build the platform that catches data problems before they become business problems....

  • Senior Software Engineer

    Há 3 dias

    Lisboa, Portugal Soda Data Tempo inteiro

    Soda - creators of Soda Core - are looking for a Senior Software Engineer to help improve our Open Source and Cloud products. We're moving in an exciting new direction, and we need your help. We're looking for a Senior Full Stack Engineer (Backend and Frontend) to help us build the platform that catches data problems before they become business problems....

  • Senior Software Engineer

    2 semanas atrás

    Lisboa, Portugal Soda Data Tempo inteiro

    Soda - creators of Soda Core - are looking for a Senior Software Engineer to help improve our Open Source and Cloud products. We're moving in an exciting new direction, and we need your help. We're looking for a Senior Backend Engineer to help us build the platform that catches data problems before they become business problems. If you're a backend...