Description
Ищем
2DE и TL в команду внешних данных
Название компании
Вендор Альфа Банка
Удаленка РФ по московскому времени.
Зарплата (440-600) до вычета
График работы 5/2
Требования:
- Опыт разработки ETL/ELT от 2-3 лет, желательно с опытом интеграции внешних (не внутрикорпоративных) источников данных
- Уверенный SQL, опыт оптимизации запросов
- Опыт работы с Big Data стеком: Apache Spark (PySpark), Kafka, S3-совместимое хранилище, Apache Iceberg
- Опыт работы с Apache Airflow (оркестрация ETL)
- Python на уровне обработки данных (pandas/pyspark)
- Понимание архитектуры Data Lake / Lakehouse
- Опыт работы с REST/SOAP API
Будет плюсом:
- Опыт с CDC-инструментами (Debezium), Apache Flink, Talys.SDE
- Опыт работы с внешними API поставщиков данных, включая вопросы SLA, ИБ и защиты каналов передачи
Обязанности:
- Сбор, анализ и формализация требований, разработка и сопровождение интеграционного слоя для приёма и загрузки данных из внешних источников в Big Data платформу (Data Ocean Nova) через ССВД 2.0
- Проектирование ETL/ELT-процессов подключения внешних поставщиков данных (БКИ, ЦБ, ФНС, партнёрские API, скоринговые/AML-сервисы и т.п.)
- Системный анализ внешних источников: форматы, протоколы обмена, SLA, контроль качества данных
- Проектирование потоковой (Kafka/CDC) и батчевой загрузки данных в Lakehouse (S3, Iceberg, Spark)
- Обеспечение соответствия требованиям ИБ при работе с внешними каналами данных
- Оптимизация ETL-пайплайнов, code review, ведение технической документации
- Взаимодействие с бизнес-заказчиками, комплаенс/риск-подразделениями, ИБ
Контакты для связи [handle]
Employer contacts (email/phone/telegram) are hidden from the public preview —
send your CV, and we will connect you directly.