Databricks Data Engineer

Data Engineer (Databricks) Wynagrodzenie: do 15 000 zł brutto/mies. | Umowa o pracę | Praca zdalna | Mid O projekcie Dla dużej międzynarodowej firmy produkcyjnej budujemy od zera nową platformę danych. Platforma połączy w jednym miejscu dane z trzech światów: MES: to, co dzieje się na hali produkcyjnej, SCADA: dane z maszyn, ERP: procesy biznesowe.

Na tym fundamencie powstaną modele do wykrywania anomalii, analizy strat i rekomendacji, a w dalszym etapie warstwa GenAI. To projekt greenfield: masz realny wpływ na architekturę i dobre praktyki, a nie utrzymujesz cudzy kod. Dołączysz do zespołu 6–7 osób, który współpracuje z partnerami z Kanady.

Nie ma przy tym pracy w nietypowych godzinach. Czym się zajmiesz Projektowanie, budowa i rozwój pipeline’ów ETL/ELT oraz jobów na Databricks Integracja danych z systemów produkcyjnych i biznesowych Przetwarzanie dużych wolumenów danych w Sparku Dbanie o jakość, monitoring i niezawodność danych Współpraca z Data Scientistami i architektami przy budowie modeli ML Wymagania Ok. 2+ lata komercyjnego doświadczenia z Databricks Python i Spark/PySpark Dobra znajomość SQL Znajomość dobrych praktyk budowy pipeline’ów: modularność, obsługa błędów, monitoring Git Angielski na poziomie swobodnej komunikacji technicznej Mile widziane AWS (obecne środowisko projektu) lub Azure Delta Lake, Unity Catalog Azure DevOps / GitHub (CI/CD) Narzędzia do orkiestracji (np.

Databricks Workflows, Airflow) Doświadczenie z danymi produkcyjnymi lub przemysłowymi Miej