Руководитель направления Data Engineer

БКС Финтех ИТ-компания, входящая в БКС Мир Инвестиций, в которой работают более 1300 профессионалов, реализующих актуальные решения для бизнеса. Компания аккредитована Минцифры России как ИТ-компания. БКС Мир инвестиций международная инвестиционно-банковская компания, одна из крупнейших в России. Мы существуем на рынке уже 28 лет и предоставляем клиентам максимально широкий спектр брокерских и инвестиционных услуг. Мы новаторы в области цифровых технологий в финансовой сфере. На единой цифровой платформе холдинга собраны все ключевые решения как для профессиональных инвесторов, так и для новичков. Став частью нашей команды, ты попадешь в современную ИТ-компанию, которая является резидентом Сколково. Центр знаний о клиентах подразделение БКС, решающее бизнес-задачи, которые возникают у бизнесов внутри группы, применяя современные подходы Data Science для улучшения бизнес-показателей ФГ БКС.Решаемые нами задачи моделирования в основном связаны с построением моделей оценки потенциала клиента, склонности к продуктам для ап- и кросс-сейла, построением рекомендательных систем и внедрением персонализации во все каналы коммуникации с клиентом. Наша задача обеспечить в каждой точке касания клиента в каждый момент времени персонализированного контента и предложения для клиента, которые повысят бизнес-метрики компании и удовлетворенность клиента.Мы ищем к себе в команду амбициозных людей, которые готовы решать следующие задачи выстраивание pipeline для обработки данных, подготовка данных для моделей машинного обучения и участие, совместно с командой data science, в выводе их в production в качестве сервисов для бизнес-подразделений. Чем предстоит заниматься: Развивать команду Data Engineer для обеспечения потоков данных для моделей, построения витрин и вывода ML-сервисов на production; Развивать инфраструктуру обработки и анализа данных; Разработка совместно с архитекторами арх. решений, связанных с обработкой данных; Написание скриптов и pipeline по подготовке и очистке данных; Обработка выгрузок из различных внешних источников данных; Анализ собранных данных на предмет их корректности и полноты, наличия отклонений; Разработка алгоритмов трансформации и очистки данных; Организация процесса сбора данных из систем-источников; Разработка модулей для обработки данных в сервисах, поставляемых заказчикам; Разработка сервисов для обеспечения ETL и работы моделей машинного обучения на проде; Проектирование и наполнение витрин данных; Визуализация (для команды) полученных результатов обработки данных. Наши ожидания: Опыт работы в команде промышленной разработки от 4 лет Software Engineer или Data Engineer; Опыт руководства командой; Опыт проектирования архитектур решений; Отличное знание: Python, SQL; Опыт работы с реляционными и не реляционными СУБД; Опыт работы c брокерами сообщений (Kaffka, RabbitMQ); Опыт работы со сторонними API; Умение читать чужой код, проводить рефакторинг; Опыт командной работы со смежными функциями: бизнес-заказчиками, аналитиками, разработчиками; Хорошие коммуникативные навыки: умение понятно описывать свои идеи, способы решения задач и презентовать результаты работы; Опыт работы на OS Linux/MacOS; Интерес к работе с данными; Интерес к аналитической работе; Data-driven мышление; Внимательность и аккуратность, внимание к деталям; Опыт работы с Gitlab и issue tracking-системами (Jira, Confluence, ) или аналогичным ПО; Умение писать техническую документацию по реализованному функционалу. Плюсом будет Опыт веб-скрапинга; Опыт работы с Apache Spark или аналогами; Опыт работы с Kubeflow, Airflow и NiFi; Участие в разработке веб-решений и сервисов; Опыт работы с ELK стеком; Образование в ведущих технических вузах. Что мы предлагаем: Стабильный конкурентный доход; Гибридный режим работы: возможность работать удаленно (частично или полностью); Работу в аккредитованной Минцифры России ИТ-компании, резиденте Сколково; Работу в стабильной и активно развивающейся компании лидере инвестиционного рынка; Современный с