Дата инженер (Глобальные рынки)

Наша команда создает информационную платформу для решения аналитических и исследовательских задач в области создания продуктов и услуг на мировых финансовых рынках: торговля валютой, ценными бумагами, производными финансовыми инструментами. Этот бизнес потребляет и порождает огромное количество данных, которые должны обрабатываться c целью: разработки витрин данных и моделей машинного обучения поддержки регулярных бизнес-операций проведения Ad hoc анализа подготовки регулярной аналитической и управленческой отчетност Разрабатываемая нами информационная платформа высоконагруженное решение, призванное обеспечить достижение всех этих целей. Обязанности Проектирование и разработка корпоративной аналитической платформы (ПКАП) Системная разработка, поддержка и оптимизация ETL-процессов и ML-моделей (MLOps) на платформах Greenplum и Hadoop R&D, реализация пилотов по выбору технологий и решений Поддержка промышленной эксплуатации разработанных решений Проведение презентаций и обучения процессам в ПКАП членов продуктовых команд Поддержание технической документации в актуальном состоянии Требования опыт промышленной разработки на python (ETL-процессы Airflow) опыт с экосистемой Hadoop (HDFS, Hive, Impala, Spark, Oozie, ...) опыт работы с CI/CD решениями на базе Jenkins и Bitbucket/Git опыт работы с популярными РСУБД (Greenplum, Teradata, Oracle, MSSQL) знание SQL, PL/SQL знание основ администрирования ОС Linux понимание построения хранилищ данных (DWH). Будет плюсом: опыт программирования на Java/Scala создание моделей машинного обучения, прохождение курсов по машинному обучению понимание основ облачных технологий и технологий виртуализации и контейнеризации практический опыт с автоматизацией развертывания ПО опыт администрирования РСУБД. Условия стабильную заработную плату и приятный годовой бонус, который выплачивается в конце декабря работу в офисе, шаговой доступности от ст. Ленинский проспект (метро и МЦК). Корпоративный спортзал, зоны отдыха, бильярд и настольный хоккей расширенный ДМС с первого дня и льготное страхование для близких обучение за счет компании и участие в конференциях дополнительное и приятное: льготная ипотека, корпоративная пенсионная программа, бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров инновационные проекты и амбициозные задачи, возможность использовать новейшие технологии и разрабатывать внутренние решения с нуля мощное железо, дополнительные мониторы и всё, что нужно для продуктивной работы.