Azure Data Engineer with Databricks

Poszukujemy doświadczonej osoby na stanowisko Azure Data Engineer with Databricks , która dołączy do długoterminowego projektu realizowanego dla klienta z branży Life Sciences. Osoba na tym stanowisku będzie odpowiedzialna za projektowanie, rozwój i utrzymanie skalowalnych rozwiązań przetwarzania danych w środowisku Microsoft Azure, ze szczególnym uwzględnieniem Databricks, Azure Data Factory oraz nowoczesnych architektur Data Lakehouse. Stawka: 110-130 PLN/h Lokalizacja: 100% praca zdalna + 1 wizyta miesięcznie w biurze w Warszawie Długość projektu: Długoterminowy Zakres obowiązków Projektowanie i wdrażanie skalowalnych rozwiązań do przetwarzania, transformacji i oczyszczania dużych zbiorów danych, zarówno strukturalnych, jak i niestrukturalnych.

Projektowanie, budowa i utrzymanie wydajnych potoków danych integrujących informacje z różnych źródeł, w tym baz danych, API oraz platform strumieniowych. Rozwój rozwiązań opartych na Azure Databricks i Azure Data Factory. Współpraca z zespołami Data Engineering, Data Science, architektami chmurowymi oraz innymi interesariuszami w celu dostarczania kompleksowych rozwiązań danych.

Udział w kluczowych etapach realizacji projektu, we współpracy z analitykami biznesowymi, ekspertami systemów źródłowych, architektami danych, inżynierami oraz Product Ownerami. Dokumentowanie rozwiązań technicznych oraz uwzględnianie wydajności, skalowalności i kosztów w podejmowanych decyzjach architektonicznych. Wspieranie procesów CI/CD i wdrażanie dobr