Senior Data Engineer – Graph Databases & Knowledge Graphs

Poszukujemy doświadczonego Senior Data Engineera , który dołączy do projektu związanego z budową i rozwojem zaawansowanej platformy zarządzania wiedzą (Enterprise Knowledge Platform) w międzynarodowym środowisku bankowym. To stanowisko o mocno technicznym charakterze (hands-on) , skierowane do osób, które lubią projektować architekturę danych, tworzyć wydajne pipeline’y oraz pracować z grafowymi bazami danych, knowledge graphs i złożonymi modelami danych. Rola nie wymaga doświadczenia w zarządzaniu zespołem – najważniejsze są kompetencje techniczne, samodzielność i umiejętność rozwiązywania złożonych problemów inżynierskich.

Zakres obowiązków Projektowanie, rozwój i utrzymanie skalowalnych pipeline’ów danych obejmujących ingestowanie, transformację, wzbogacanie i przetwarzanie danych ustrukturyzowanych oraz nieustrukturyzowanych. Projektowanie i optymalizacja modeli danych z wykorzystaniem relacyjnych, grafowych oraz NoSQL baz danych. Praca z grafowymi bazami danych i knowledge graphs , w tym modelowanie encji, relacji oraz projektowanie wydajnych mechanizmów ładowania i odpytywania danych.

Tworzenie reużywalnych komponentów do przetwarzania danych oraz integracji z różnymi źródłami danych i API. Implementacja mechanizmów zapewniających jakość danych, walidację, data lineage oraz provenance. Zapewnienie niezawodności i skalowalności pipeline’ów, w tym obsługa przetwarzania przyrostowego, błędów, ponawiania operacji i mechanizmów odzyskiwania danych.

Współpraca z architektami,