Data Engineer (команда ELK)

На работу требуется data engineer в г. Москва.Мы разрабатываем продукты для сбора и визуализации данных по цифровым следам команд разработки: портал с каталогом дашбордов и метрик; приложение-конструктор дашбордов с библиотекой готовых метрик; сервисы расчета метрик; платформу для сбора и хранения данных. Наши продукты и сервисы помогают анализировать и оценивать процесс разработки продуктов в Сбере и повышать эффективность работы команд, опираясь на данные и метрики. Мы ищем Data Engineerа, которому интересно совершенствовать техническую платформу, и создавать новые метрики и продукты для более чем 3,5 тыс. пользователей. Стек технологий нашей платформы: ELK, Python, Airflow, NodeJS, Kafka, OpenShift, Jenkins, Ansible, PostgreSQL. Обязанности Какие задачи тебя ждут: Разрабатывать пайплайны на Airflow для подключения новых источников данных и расчета метрик; Дорабатывать пайплайны Logstashа для обработки потоковых данных; Развивать сервисы и пайплайны по получению данных; Разрабатывать метрики на JavaScript. Требования Мы ждем, что ты: Уверенно владеешь Python3; Имел опыт промышленной разработки от 2-х лет; Понимаешь цикл разработки - от постановки задачи до выкатки на прод; Умеешь тестировать свой код (например, с помощью PyTest); Разрабатывал распределённые системы и знаком с микросервисной архитектурой; Будешь стремиться погружаться в продукт, а не "просто писать код". Будет плюсом, если ты: Знаком с базовым синтаксисом NodeJS; Уверенно знаешь SQL; Владеешь одним из фреймворков - FastAPI/aiohttp; Знаешь шаблоны проектирования и умеешь их применять; Разбираешься в базах данных NoSQL (вроде ElasticSearch); Знаком со стеком ElasticSearch-Logstash-Kibana; Владеешь техническим английским; Любишь анализировать продуктовые и технические метрики и предлагать, как их улучшить. Условия Что мы предлагаем: Стать частью сплоченной и дружной продуктовой команды, в которой представлены все компетенции аналитики, frontend и backend разработчики, а также devops-инженеры; Место работы - офис высокого класса с зонами отдыха, а также бесплатные печеньки и кофе, пр. Кутузовский, 32к1; График работы смешанный (после прохождения испытательного срока); Мощное железо, дополнительные мониторы и всё, что нужно для продуктивной работы; ДМС, страхование жизни; Корпоративная пенсионная программа; Корпоративное обучение за счет компании, а также участие в отраслевых конференциях; Реферальная программа для сотрудников: можно пригласить в команду знакомых профессионалов и получить вознаграждение до 100 тыс. рублей; Корпоративный спортзал (фитнес, йога) и скидки в спортзалы-партнеры; Приятная годовая премия.