Używamy techniczne pliki cookie i statystyki odwiedzin: Yandex Metrica i zanonimizowany dziennik odwiedzin Zorky. Nigdy nie sprzedajemy danych. Więcej o cookies i statystykach.
Zorky działa w trybie testowym — wszystko jest bezpłatne. Ta strona to tylko demo: nazwy firm, linki i osobiste zestawienie ofert otwierają się po rejestracji. Zarejestruj się →
ZorkyZorky
Polski
@termdocs
← Wszystkie oferty

Data Engineer

8000 SGD · okres nie podanySingapore, SG1 tydz. temu
Analityka rynku
📊 Data Engineering: wynagrodzenia i popyt na rynku
Stack
PySparkTroubleshootingApache SparkArchitectureData Pipelinegovernance requirementsFile DocumentsData Governancerequirements from stakeholdersData Quality AssuranceSQLData Lake
Szczegóły
Praktyki
CI/CD, MLOps
Pokaż firmę i link
Bezpłatnie, po zalogowaniu.
Aplikuj
Prześlij CV — pracodawcy i rekruterzy z różnych krajów, którzy szukają takiego profilu, będą mogli napisać do Ciebie bezpośrednio.
Wyślij CV →
Opis
RoleOverview Weare looking for a hands-on Data Engineer to design, build, and optimizescalable data pipelines on the Databricks Lakehouse platform. The role involvescollaborating with analysts, data scientists, and business teams to deliverreliable, analytics-ready data assets. KeyResponsibilities Build and maintain batch and streaming data pipelines using PySpark and Databricks . Implement medallion architecture (Bronze, Silver, and Gold layers). Optimize Spark jobs for performance and cost efficiency. Ensure data quality, lineage, and governance using Unity Catalog and automated validation. Integrate data from APIs, databases, files, and event streams. Implement CI/CD, version control, and workflow orchestration. Monitor, troubleshoot, and document data pipelines and data models. Collaborate with stakeholders to translate business requirements into technical solutions. RequiredQualifications 3–5 years of hands-on data engineering experience. Strong PySpark skills, including DataFrames, Spark SQL, UDFs, and performance tuning . Proven experience building production pipelines on Databricks. Working knowledge of Delta Lake, including ACID transactions, time travel, merge/upsert, and schema evolution . Advanced SQL and strong Python programming skills . Experience with Azure, AWS, or GCP cloud platforms . Understanding of data modelling, Lakehouse architecture, and ETL/ELT patterns. Familiarity with Git and CI/CD practices. PreferredQualifications Databricks Data Engineer Assoc
Pełny opis, firma i link do aplikacji — po zalogowaniu. Zaloguj się
Kontakty pracodawcy (e-mail/telefon/Telegram) są ukryte w publicznym podglądzie. Wyślij CV — a pracodawcy będą mogli napisać do Ciebie sami.
Pilne pytanie? Napisz @termdocs