Data engineer( HeadHunter )
08 Января 2026
Город:
Москва
Занятость:
Полная занятость
Компания "HeadHunter"
Мы создаём высоконагруженный сервисный сайт, который занимает 3 место в мире по рейтингу SimilarWeb среди сайтов по поиску работы. Ежедневно к нам приходят около полутора миллионов пользователей, смотрят более 100 миллионов страниц (до 10000 в секунду), и делают около 1 миллиона откликов на вакансии. Мы хотим знать о всех действиях пользователя и понимать их поведение. Поэтому внедряем различные инструменты для сбора и анализа данных, и сейчас ищем человека, который будет развивать наше Data-направление.
Стек:
Apache Hadoop, Hive metastore, Spark, Flink, Airflow, Trino
Инструменты:
Hue, Jupiter, Zeppelin, QueryBook, Jenkins, Forgejo, Jira
Задачи:
- Проектирование и разработка конвейеров обработки данных (Data Pipelines).
- Создание и сопровождение решений для пакетной и потоковой выгрузки данных.
- Выстраивание и развитие процессов обработки данных в компании.
- Организация ELT/ETL-процедур.
- Оптимизация производительности процессов обработки данных и работы хранилища.
Необходимые знания и компетенции:
- Уверенные навыки создания и оптимизации ETL/ELT процессов.
- Уверенное владение SQL и реляционными СУБД (PostgreSQL, MySQL, Oracle и др.).
- Опыт работы с распределенными системами хранения и обработки данных (Hadoop, Spark, Hive и т. п.).
- Владение Python от 1 года.
- Опыт работы с Airflow (написание собственных операторов, сенсоров).
- Опыт работы с различными API.
Мы предлагаем:
- Гибкое начало рабочего дня с 9 до 11.
- Современный технологический стек.
-
Возможность повлиять на выстраивание процессов.
-
Сможешь поучаствовать в проекте формирования семантического слоя данных.
-
ДМС со стоматологией с первого дня оформления.
-
4 day-off в году.
- Корпоративный сервис с поддержкой юриста, психолога и финансового консультанта.
- Промокоды и бонусы от партнеров.
- Электронная корпоративная библиотека.
- Возможность профессионального развития, обучение за счет компании, участие в специализированных конференциях.
- Комфортный большой офис в Москве с тренажерным залом, капсулой сна, свежими овощами/фруктами и бесплатными завтраками.
Зарегистрируйтесь или войдите, чтобы открыть контакты работодателя
Прикрепите резюме для отклика
Уже с нами?
Войдите, чтобы отправить резюме
02 Января
Москва
Компания "РСХБ-Интех" РСХБ-Интех — аккредитованная IT-компания. Мы разрабатываем новые банковские продукты и улучшаем текущие. Наши сервисы...
02 Января
Старший инженер по интеграции / Senior Integration Engineer
Москва
Компания "Mars" В этой роли вы будете обеспечивать быструю и безопасную интеграцию внутренних и внешних информационных систем, увеличивая...
04 Января
Москва
Компания "Myna Labs" Glam AI — международная продуктовая компания, создающая ИИ-приложения в области развлечений и креатива.Мы разрабатываем...
04 Января
Москва
Компания "МТС" CICADA8 занимается разработкой продуктов и услуг, направленных на выявление и управление уязвимостями в кибер-безопасности....
22 Декабря
Старший инженер по интеграции / Senior Integration Engineer( Mars )
Москва
Компания "Mars" В этой роли вы будете обеспечивать быструю и безопасную интеграцию внутренних и внешних информационных систем, увеличивая...
Вакансия размещена в отрасли