Big Data Developer

ALGOTEQUE to firma doradcza IT, która wspiera startupy, średnie i duże przedsiębiorstwa w tworzeniu i wdrażaniu innowacyjnych technologii. Nasz zespół ma udokumentowane sukcesy w projektowaniu, rozwijaniu, wdrażaniu i integracji rozwiązań programistycznych (AI, ML, BI, Web, Automatyzacja) dla branż takich jak telekomunikacja, energetyka, bankowość, ubezpieczenia, farmacja, motoryzacja, przemysł oraz e-commerce. Świadczymy nasze usługi zarówno w modelu fixed-price, jak i time-and-materials, pomagając naszym klientom w osiąganiu ich celów biznesowych i strategii IT.

Poszukujemy Big Data Developera, który wesprze rozwój i utrzymanie platformy Big Data, automatyzację infrastruktury oraz monitoring procesów przetwarzania danych. Zakres projektu: - Rozwój i utrzymanie automatyzacji infrastruktury z wykorzystaniem Ansible oraz CI/CD. - Automatyzacja wdrożeń i konfiguracji w środowiskach DEV, TEST, PREPROD i PROD.

- Monitorowanie i diagnozowanie procesów ETL opartych na Spark oraz przetwarzania strumieniowego Kafka. - Analiza logów i metryk, reagowanie na incydenty oraz wznawianie przerwanych procesów. - Wsparcie rozwoju środowisk Kubernetes i migracji do Snowflake.

- Tworzenie dokumentacji technicznej i runbooków. Wymagania: - Doświadczenie z Infrastructure as Code, Ansible i CI/CD. - Dobra znajomość Linux, Git oraz skryptowania w Bashu lub Pythonie.

- Podstawowa znajomość Kubernetes. - Operacyjna znajomość Spark i Kafka oraz umiejętność analizy logów i rozwiązywania problemów. Mile