Обязанности: Участие в развертывании продуктов на базе Hadoop, Kafka, NiFi, Greenplum, Clickhouse (предпочтительно стек продуктов Arenadata) - установка, первичная настройка и тестирование, помощь разработчикам и аналитикам в реализации технических решений; Поддержка развернутых на стороне заказчика решений, поиск и устранение неисправностей, реализация интеграционных решений, консультирование по продуктам, работа с вендором; Проведение исследовательских работ, пилотных проектов, нагрузочных тестов совместно с разработчиками и аналитиками; Подготовка пайплайнов, настройка систем мониторинга и ключевых метрик, развертывание централизованного журналирования продуктов; Подготовка документации по настройке продуктов и интеграционных решений.
Опыт установок, эксплуатации, сопровождения, оптимизации и конфигурирования одной или нескольких систем: Hadoop, Hbase, Hive, Kafka, NiFi, Airflow, Spark, Trino, Impala, Ranger; Уверенное понимание распределенных систем, отказоустойчивости и высокой доступности; Имеете хорошие знания Linux - мы используем дистрибутивы Ubuntu/Astra Linux; Имеете опыт работы с российскими облачными платформами Yandex Cloud/Selectel/Cloud.ru; Имеете базовое знание одного из скриптовых языков программирования (Python или Bash); Умение пользования продуктами Ansible, GitLab, ELK, Grafana/Prometheus включая конфигурирование; Знание и опыт развертывания LDAP/Kerberos на основе продуктов AD/FreeIPA и интеграции их со стеком продуктов Bigdata; Умение конст