Senior Data Engineer (Rust, DataFusion)

Market insights

Stack

Apply

Upload your CV — we will connect you with the employer directly through our pool.

Description

Dla naszego klienta poszukujemy kandydatów na stanowisko: Senior Data Engineer (Rust, DataFusion) Projekt: 🚀 Tworzenie od podstaw nowoczesnego, wysokowydajnego silnika bazodanowego i warstwy przetwarzania zapytań, dedykowanych do skomplikowanych obliczeń finansowych. Stack technologiczny: 💻 Rust, Apache DataFusion, Apache Arrow, PostgreSQL, SQL, Parquet, CSV. Zespół: 👥 Samodzielne stanowisko inżynierskie w obszarze silnika wykonawczego, ściśle współpracujące z ekspertami domenowymi w ramach rozproszonego środowiska. Model współpracy: 🌍 100% zdalnie. Wynagrodzenie: 💰 [phone] PLN netto (B2B, do negocjacji). Start współpracy: ⏳ ASAP / do 1 miesiąca. Zakres obowiązków: 🎯 Optymalizacja i integracja źródeł danych (takich jak PostgreSQL oraz pliki Parquet/CSV), obejmująca mechanizmy pushdownu predykatów i szybkie przetwarzanie wsadowe. Tworzenie oraz wdrażanie zaawansowanych mechanizmów kontrolnych na produkcję, w tym zapewnienie precyzji wyliczeń numerycznych, monitorowanie stanu systemu oraz optymalne zarządzanie pamięcią. Projektowanie transformacji tabelarycznych w środowisku Rust i rozbudowa frameworków Arrow oraz DataFusion o dedykowane komponenty planowania zapytań. Budowa trwałego katalogu na potrzeby definicji danych oraz implementacja widoków semantycznych i nowych rozszerzeń dla języka SQL. Zapewnienie niezawodnego dostępu do danych dla narzędzi BI i klientów JDBC/JOOQ, poprzez budowę interfejsu SQL zachowującego pełną kompatybilność z PostgreSQL. Oczekujemy: 📌 Za

Employer contacts (email/phone/telegram) are hidden from the public preview — send your CV, and we will connect you directly.