Mid Data Engineer

Poszukujemy Data Engineer’a na poziomie Middle do współpracy przy realizacji projektu z obszaru Data Engineering i migracji danych do Google Cloud Platform . Szukamy osoby, która dobrze czuje się w pracy z dużymi zbiorami danych, zna BigQuery i SQL , a także ma praktyczne doświadczenie w budowaniu i rozwijaniu procesów ETL/ELT oraz migracji rozwiązań z środowisk on-premise do chmury. Forma współpracy: Model współpracy: B2B Stawka: 147,20 zł netto/h Lokalizacja: Warszawa, z okresowymi wizytami w siedzibie klienta, średnio raz w tygodniu, zależnie od bieżących potrzeb projektowych.

W ramach współpracy będziesz odpowiadać m.in . za: projektowanie, implementację i rozwój rozwiązań Data Engineering na Google Cloud Platform , przede wszystkim z wykorzystaniem BigQuery, Cloud Storage i Pub/Sub ; migrację i przebudowę procesów przetwarzania oraz zasilania danych z Oracle / środowisk on-premise do GCP ; projektowanie i rozwój procesów batch oraz streaming , wraz z mechanizmami kontroli jakości, obsługi błędów i ponawiania operacji; projektowanie struktur i modeli danych w BigQuery , z uwzględnieniem wydajności, skalowalności oraz optymalizacji kosztów; analizę danych oraz przygotowywanie logicznych i fizycznych modeli danych dla Oracle, PostgreSQL i GCP ; tworzenie, analizę i optymalizację zapytań SQL , w tym analizę planów wykonania i identyfikowanie wąskich gardeł przy dużych wolumenach danych; analizę istniejących procesów Informatica Power

Center oraz ich migrację do rozwiązań doce