Data Engineer (SafeHub)

Мы — команда специалистов, создающая сервисы и компоненты для платформы внутренней безопасности, а также разрабатывающая AI-агенты для выявления внутренних угроз и мошенничества. Нам нужен специалист, способный эффективно анализировать табличные и текстовые данные, необходимые для построения AI-агентов. Ищем Data Engineer c уклоном в Data Science, которому предстоит заниматься извлечением, подготовкой и очисткой данных, а также поддержкой моделей машинного обучения. Мы предлагаем карьерный рост как в Data Engineering, так и в Data Science направлениях. Ты станешь частью команды опытных инженеров и аналитиков, работающих над сложными проектами в сфере информационной безопасности. Задачи: анализ структур данных в разных источниках и форматов, оценка их пригодности для конкретных бизнес-задач загрузка, обработка и преобразование больших объемов данных из разнородных хранилищ (Oracle, Teradata, MS SQL, GreenPlum) в рабочие среды (GreenPlum, Hadoop) проектирование и создание аналитических витрин данных подготовка и препроцессинг данных для обучения моделей машинного обучения мониторинг и оптимизация рабочих процессов обработки и загрузки данных контроль качества входных данных и автоматизация проверки качества данных разработка инфраструктуры и внутренних сервисов для эффективной обработки больших объемов данных автоматизация повторяющихся операций с данными создание технической документации и поддержка баз знаний по работе с данными консультация пользователей внутри компании по вопросам использования данных. Требования высшее образование опыт работы от 2х лет в роли Data Engineer, Data Analyst или ETL-разработчика продвинутый уровень владения SQL (аналитические функции, подзапросы, хранимые процедуры, производительность запросов) практический опыт работы с большими объемами данных в реляционных СУБД (Oracle, Teradata, MS SQL, GreenPlum) понимание концепции и принципов организации хранилища данных (DWH) работа с технологическим стеком Hadoop (HDFS, YARN, Hive) и Apache S Trudvsem ID: 3bbf8100-31af-11f1-97cc-5d52cadedeff https://trudvsem.ru/vacancy/card/7226c750-02f1-11eb-8600-bfd13399602c/3bbf8100-31af-11f1-97cc-5d52cadedeff