Nous utilisons des cookies techniques et le journal de visites anonymisé de Zorky. Yandex Metrica (données stockées sur des serveurs en Russie) ne fonctionne qu'avec votre consentement. Nous ne vendons jamais de données. En savoir plus sur les cookies et les statistiques.
Zorky est en mode test — tout est gratuit. Les offres et les pages des entreprises sont ouvertes à tous ; les liens vers les annonces et votre sélection personnelle s'ouvrent après inscription. Inscription →
← Toutes les offres

Senior Data Engineer

Senior8 000 SGD · période non indiquéeSingapore, SGil y a 1 sem.
Analyses du marché
📊 Data Engineering: salaires et demande sur le marché
Stack
Data Quality ChecksRecovery ProceduresDistributed ProcessingApache SparkScalaKubernetesComputer ProficiencyMicrosoft SQL ServerData Quality AssuranceData LineageCI/CDApache Kafka
Détails
Expérience
5 ans et plus
Pratiques
CI/CD
Afficher l'entreprise et le lien
Gratuit, après connexion.
Postuler
Ouvrez l'entreprise et le lien ci-dessus — votre candidature arrive directement dans le système de recrutement de l'entreprise, sans intermédiaire.

Description

Senior Data Platform Engineer - Spark / Flink / Kafka

À propos du poste

About the role

Design and deliver large-scale batch and streaming data pipelines. Build reliable processing and storage flows, improve data quality and recovery, and support the operation of distributed data workloads in Kubernetes environments.

Missions

Key responsibilities

Design and develop batch and streaming pipelines using Apache Spark, Apache Flink and Apache Kafka. Implement processing logic using Java or Scala and SQL. Deploy, scale and troubleshoot containerised data workloads on Kubernetes.

Build data-quality checks and manage schema, lineage, checkpointing and recovery. Integrate S3-compatible object storage and support pipeline delivery through GitLab and CI/CD practices.

Profil recherché

Requirements

5-8 years of data engineering experience, including delivery of large-scale data systems. Strong hands-on experience designing pipelines using Apache Spark, Apache Flink and Apache Kafka. Proficiency in Java or Scala for distributed processing, together with SQL.

Experience deploying and scaling data workloads on Kubernetes. Experience with S3-compatible storage, data-quality controls, schema and lineage management, checkpointing, recovery, GitLab and CI/CD. Comparable large-scale processing frameworks may be considered where transferable distributed-data-system capability is demonstrated.

Good to have SAFe and safety-critical or mission-critical data platforms. MinIO, layered bronze/silver/gold processing, metadata preservation and stora

Description complète, entreprise et lien pour postuler : après connexion. Se connecter
Les contacts de l'employeur (e-mail/téléphone/telegram) sont masqués dans l'aperçu public.
Question urgente ? Écrivez à @termdocs