На данный момент мы реализуем масштабный проект. Мы собираем данные в едином корпоративном хранилище и используем их для принятия решений, планирования, оценок и анализа. В связи с этим, мы в поиске инициативного и самостоятельного Lead Data Engineer Задачи, которые предстоит решать: Разработка стратегий загрузки, преобразования и сохранения данных в хранилище Построение хранилища и витрин данных. Проектирование, разработка и поддержка архитектуры для работы с большими данными: ODS, DDS, DM, DM BI, BI Менторство и руководство. Направлять и развивать команду дата инженеров. Помощь в найме новых инженеров и их обучение Настройка сбора данных из разрозненных источников в единое хранилище Обработка сырых данных для дальнейшего анализа Наши ожидания от вас: Опыт работы руководителем команды дата инженеров или кросс функциональных команд от 1 года Опыт работы дата инженером от 2 лет Опыт создания ETL/ELT-процессов с использованием Apache Airflow + Spark или аналогичных. Да-да, Spark пока у нас нет, только Airflow Знания Python, PL/pgSQL и SQL. Сложные запросы, аналитически функции, понимание физической реализации joinов, оптимизация производительности запросов Опыт работы с Greenplum (Arenadata DB), PostgreSQL, Clickhouse. И Clickhouse у нас пока нет, но будет Опыт с Git Будет плюсом: Знание инструментов для захвата/преобразования/автоматизации данных/моделей: dbt, liquibase, logstash, и т. п. Опыт работы с любым BI инструментом. Пока мы используем PowerBI, но всё может измениться Техническое образование Мы предлагаем: работу в команде экспертов официальное трудоустройство в аккредитованной ИТ-компании расширенный соц. пакет ДМС, путевки в санатории и дома отдыха, детские оздоровительные лагеря, скидки от компаний-партнеров, скидки на ГСМ достойный уровень оплаты труда (оклад + премии) профессиональное развитие за счет компании, корпоративная библиотека и база знаний гибрид/удаленная работа после испытательного срока по согласованию с руководителем, на территории РФ. Возможны командировки Сегодня нас уже почти 600, наши проекты растут, и мы хотим увидеть в нашем коллективе новых коллег Возможно, это вы