Konsultant IT – GCP Data Engineer (K/M)

Market insights

Stack

Free. Sign in with email.

Apply

Upload your CV — we will connect you with the employer directly through our pool.

Description

Обязанности: Analiza wymagań biznesowych i technicznych oraz projektowanie architektury przepływów danych w GCP., Projektowanie, rozwój i utrzymanie procesów ETL/ELT z wykorzystaniem BigQuery, Dataproc, Dataflow i Dataform., Integracja danych z różnych źródeł z wykorzystaniem mechanizmów batch, streaming i CDC., Projektowanie i utrzymanie orkiestracji procesów danych w Cloud Composer / Apache Airflow., Rozwój potoków CI/CD w GitLab oraz automatyzacja wdrożeń z wykorzystaniem Terraform w zakresie zasobów przetwarzania danych., Optymalizacja wydajności i kosztów przetwarzania danych oraz monitorowanie procesów i reagowanie na incydenty., Projektowanie i wdrażanie modelu uprawnień do danych w GCP, w tym IAM, row-level security, column-level security i policy tags., Konfiguracja dostępu do zasobów danych dla grup federowanych z Microsoft Entra ID z wykorzystaniem Workforce Identity Federation., Współpraca z zespołami governance i bezpieczeństwa w zakresie klasyfikacji danych, jakości danych i zgodności z wymaganiami, w tym RODO., Tworzenie i aktualizacja dokumentacji technicznej, przeprowadzanie code review oraz wspieranie pozostałych członków zespołu. Опыт: Minimum 3 lata doświadczenia na stanowisku Data Engineer lub konsultanta GCP., Praktyczna znajomość GCP, w szczególności BigQuery, Cloud Composer / Apache Airflow, Dataproc, Dataflow i Datastream., Bardzo dobra znajomość SQL i Python oraz doświadczenie w tworzeniu i optymalizacji procesów ETL/ELT z wykorzystaniem Dataform lub

Full description, company and the link to apply — after you sign in. Sign in

Employer contacts (email/phone/telegram) are hidden from the public preview — send your CV, and we will connect you directly.