Senior Data Engineer

Kim jesteśmy? Lumicode Sp. z o.o.

jest częścią Grupy Pentacomp, która od blisko 30 lat dostarcza rozwiązania IT i usługi technologiczne dla największych przedsiębiorstw oraz instytucji sektora publicznego. Realizujemy projekty wspierające cyfrową transformację naszych klientów, łącząc doświadczenie z nowoczesnymi technologiami. O projekcie Dołączysz do międzynarodowego projektu realizowanego dla firmy z branży turystycznej, specjalizującej się w organizacji rejsów rzecznych, morskich i oceanicznych oraz wypraw ekspedycyjnych.

Projekt koncentruje się na rozwoju i modernizacji platformy danych opartej na technologiach Microsoft Azure, Azure Databricks i architekturze Lakehouse. Wymagania Praktyczna znajomość Apache Spark, Python oraz SQL Doświadczenie w pracy z platformą Microsoft Azure, w szczególności Azure Databricks, Azure Data Factory i Azure Data Lake Znajomość usług Azure Synapse Analytics oraz Azure Data Explorer Doświadczenie w projektowaniu, rozwijaniu i optymalizacji procesów ETL/ELT Znajomość architektury Data Lakehouse i doświadczenie w pracy z rozwiązaniami Databricks Praktyczna znajomość Delta Live Tables (DLT) oraz Unity Catalog Doświadczenie w implementacji procesów CI/CD z wykorzystaniem Azure DevOps Znajomość zagadnień związanych z automatyzacją infrastruktury, monitoringiem i logowaniem Umiejętność optymalizacji wydajności, zapewniania jakości danych oraz rozwiązywania problemów w środowiskach produkcyjnych. Zdolność do współpracy z zespołami technicznymi i