Data Engineer

В компанию требуется data engineer в г. Москва.Привет, дорогой соискатель, а, возможно, и будущий член нашей команды) Мы - команда СRM.LEADS - прогрессивная компания, занимающаяся лидогенерацией трафика для финансового сектора. У нас есть свой собственный сервис по смс-рассылке и ежемесячно мы шлем десятки миллионов смс. Звучит мощно, не так ли?) Мы активно расширяемся и усиливаем нашу команду, поэтому сейчас ищем талантливого Data engineer для участия в разработке и оптимизации нашей системы хранения данных. Нам требуется Data Engineer, который возьмет на себя почетное звание нашего первого data engineer'a, развернет etl с нуля для нового dwh, а главное - сделает это идеально, базируясь на удобстве, эффективности и целесообразности, а не потому что так исторически сложилось. Дальше - больше, в вопросах и ответах. Чем необходимо будет заниматься? создавать и оптимизировать пайплайны для сбора и обработки данных; переписывать БД и в дальнейшем работать с машинным обучением; контролировать качество данных; проектировать схемы для хранения данных; автоматизировать построения витрин данных; оптимизировать запросы; подготавливать техническую документацию; разрабатывать и оптимизировать витрины данных; проводить интеграцию различных источников данных в DataLake; создавать процессы репликаций в различные СУБД; оптимизировать и поддерживать существующие ETL-процессы; настраивать DQ-мониторинги и алертинги. Какие наши требования к кандидату? опыт работы на позиции Data Engineer - от 2-х лет; навыки работы с SQL на экспертном уровне - аналитические функции, подзапросы, хранимые процедуры, оптимизация запросов под высокие нагрузки (MySQL, PostgreSQL); уверенное владение Python и библиотеками для работы с данными и построения ETL процессов, опыт работы с ETL-инструментами; знание Clickhouse, onETL, Airflow, Spark; опыт работы с Big data стеком (Hadoop, Hive, NiFi, GreenPlum); владение Git. Будет плюсом: опыт работы с доставкой данных (Kafka, Flink). Какие условия сотрудничества: Конкурентная зарплата и прозрачная система бонусов за классную работу. Еще ни разу у нас не было задержек в выплатах заработной платы Стандартная пятидневная рабочая неделя с 10-00 до 18-00 по мск; Все по-честному и в белую: оформление по ТК РФ и вытекающие из этого соц. гарантии; Работа в коллективе профессионалов, дружественная атмосфера без лишних формальностей; Современный оборудованный офис в центре Москвы: M. Ломоносовский проспект, Мосфильмовская 74Б, офис 10 (обращаем внимание, что ищем сотрудника именно на офисный формат работы). Почему стоит работать именно у нас? Интересные проекты с использованием передовых технологий. У нас действительно много сложных и масштабных задач, которые ты сможешь решить Мы открыты к идеям, предложениям и творческим порывам, поэтому у тебя будут отличные возможности для реализации профессиональных амбиций и карьерного роста; Отсутствие формальностей, дресс-кода и лишней бюрократии. Мы ходим в офисе в удобной одежде и домашних тапочках, поэтому у нас ты точно почувствуешь себя как дома Если тебе нравится решать нетривиальные задачи, тебе важно работать над созданием востребованного продукта, решать крупные кейсы, ты именно тот, кого мы ищем