Middle Data Engineer на продукт Nuum (Big Data)
18 Октября 2024
Город:
Москва
Занятость:
Полная занятость
Компания "МТС"
Big Data МТС – место, где телеком данные превращаются в реально работающие IT-продукты. Мы создали и протестировали несколько десятков сервисов. Самые успешные из них уже стали частью экосистемы МТС. Например, МТС Маркетолог, рекомендации в KION (МТС ТВ), услуга “Кто звонит?” или Спам blacklist.
Кого мы ищем?
Команда центра Big Data в поиске Data Engineer на продукт Nuum
Nuum — видеосервис, который совмещает в себе функции YouTube, TikTok и Twitch. Платформа уже доступна в браузере и в виде мобильных приложений для Android и iOS
Стек: Python, PostgreSQL, Aerospike, Kafka, Airflow, Clickhouse, Pyspark, Hadoop
Обязательно:
- Опыт разработки ETL/ELT-процессов
- Умение работать с докерами и шедулерами (airflow или опыт с аналогами)
- Отличное знание SQL и Python
- Будет плюсом: опыт работы со стеком технологий Hadoop, Spark, Hive, опыт разработки процессов обработки сложных событий (CEP) во времени, приближенном к реальному, на Kafka Streams, Flink, опыт проектирования хранилищ данных и понимание устройства современных реляционных баз данных
Что предстоит делать?
- Вместе с ML-инженерами проектировать и создавать витрины для унификации пайплайнов обработки данных для рекомендательных систем
- Разрабатывать и поддерживать ETL-процессы
- Реализовывать пайплайны near-realtime обработки данных
- Настраивать DQ мониторинг и алертинг
- Обрабатывать и создавать витрины на основе действий пользователей на платформе
Условия: каждый месяц - аванс и зарплата, дважды в год - премия. ДМС + стоматология, корпоративная связь, специальные предложения от партнеров и друзей МТС, отпуск 31 день в год. Выдаем 16 MacBook Pro или Dell на выбор.
Есть ли обучение?
- Локальные конференции, митапы
- Корпоративный университет МТС и масштабная виртуальная библиотека
- А ещё мы регулярно обмениваемся опытом на совместных синках с лидами экспертизы
Какой график?
Гибкое начало рабочего дня в промежутке с 8 до 11. Есть возможность работать несколько дней вне офиса по договоренности с командой.
Сколько этапов при отборе?
Не более трех:
- HR + первое тех. интервью с лидом направления
- Тестовое задание/второе интервью - по необходимости
- Собеседование с PO и командой, выбор кандидатом проекта
Зарегистрируйтесь или войдите, чтобы открыть контакты работодателя
Прикрепите резюме для отклика
Уже с нами?
Войдите, чтобы отправить резюме
10 Октября
Middle/Senior Flutter Developer
Москва
Компания "Инфотек" Наш проект начался шесть лет назад, а сейчас мы сильная компания, создавшая крутой продукт, который успешно развивается и...
10 Октября
Implementation / deployment engineer (Telecom)( Sifox )
Москва
от 200 000 до 275 000 руб.
Компания "Sifox" О нас: Компания Sifox запускает на телеком-рынке РФ IT-продукты, которые позволяют оператору получать новую выручку. В...
10 Октября
Владелец IT-продукта (Платформа биллинговой системы)
Москва
Компания "Assistance Group" Наш партнер – предприятие, которое является одним из крупнейших работодателей на территории Новосибирской области....
10 Октября
Москва
Компания "TopAssistant" В крупную международную компанию, специализирующуюся на создании современных решений в области финансовых IT-проектов,...
10 Октября
1С разработчик / Программист 1C (middle)
Москва
от 175 000 до 290 000 руб.
Компания "Illan communications" Мы - STORY POINT, аккредитованная IT-компания, входящая в состав ГК "Illan Communications". В связи с...
Вакансия размещена в отрасли