Data Engineer – Azure Databricks

W Cyclad współpracujemy z czołowymi firmami z branży IT, wspierając je w realizacji nowoczesnych projektów technologicznych. Poszukujemy Data Engineera , który będzie rozwijać skalowalne rozwiązania danych w środowisku Microsoft Azure , wykorzystując Azure Databricks, Python, PySpark i Azure Data Factory . Informacje o roli Praca: 100% zdalna Forma współpracy: B2B Stawka: do 130 PLN netto + VAT/h Poziom: Regular Język angielski: bardzo dobry Start: do ustalenia Twoje zadania budowa i optymalizacja pipeline’ów danych oraz procesów ETL/ELT , przetwarzanie danych przy użyciu Pythona i PySpark , rozwijanie rozwiązań opartych na Azure Databricks, Data Factory i Azure Storage , wdrażanie testów automatycznych, kontroli jakości danych i monitoringu, udział w procesach CI/CD i automatyzacji wdrożeń, rozwiązywanie problemów z wydajnością i skalowalnością, współpraca z zespołami technicznymi i biznesowymi.

Czego oczekujemy? min. 2 lat doświadczenia z Microsoft Azure , praktycznej znajomości Azure Databricks, Azure Data Factory i Azure DevOps , bardzo dobrej znajomości Pythona i PySpark , dobrej znajomości SQL, modelowania danych i procesów ETL/ELT , doświadczenia z CI/CD, testami automatycznymi i TDD , znajomości zagadnień data quality, data governance i data integration , doświadczenia w pracy w środowisku DevOps i Agile/Scrum , bardzo dobrej znajomości języka angielskiego.

Mile widziane Infrastructure as Code, Azure Synapse Analytics, ServiceNow i procesy change/incident management,