Data Engineer (Hadoop)( МегаФон )
Город:
Москва
Занятость:
Полная занятость
Компания "МегаФон"
Чем предстоит заниматься
- Проектирование и разработка отказоустойчивых ETL/ELT процессов в экосистеме Hadoop и Oracle
- Оптимизация и сопровождение пайплайнов данных (Spark, PySpark, Airflow)
- Интеграция новых источников данных и построение витрин для бизнес-заказчиков
- Обеспечение качества и актуальности данных в продуктивных системах
- Участие в архитектурных решениях по хранению и обработке больших данных
- Ad-hoc аналитика и поддержка команд аналитиков и data scientist
Что для этого нужно
- Высшее техническое образование
- Опыт работы с большими данными от 3 лет
- Хорошее знание Python (pandas, PySpark) и SQL
- Опыт работы с Hadoop/Spark и системами оркестрации (Airflow и др.)
- Понимание принципов построения витрин данных и дата-моделирования
- Опыт оптимизации запросов и пайплайнов обработки данных
- Навыки работы с git и Linux bash
- Ответственность за результат и умение работать в команде
25 Марта
Data Scientist (Deep Learning / RecSys)
Москва
Компания "Lamoda tech" Мы в поиске Data Scientist в команду, занимающуюся применением DL подходов в задачах Lamoda. Наша цель – с помощью...
25 Марта
Senior Data Scientist (Data Management Platform)
Москва
Компания "Lamoda tech" Мы в поиске Senior Data Scientist в команду Advertising DMP (Data Management Platform) , который поможет нам...
25 Марта
Москва
Компания "Lamoda tech" Мы в поиске Senior Data Scientist в команду, занимающуюся применением DL подходов в задачах Lamoda. Наша цель – с...
22 Марта
Full-stack QA Engineer( Альфа Капитал )
Москва
Компания "Альфа Капитал" Привет! Мы работаем на рынке инвестиций и занимаемся доверительным управлением. Входим в ТОП-5, в цифрах это: 1,5...
25 Марта
Москва
Компания "Тинькофф" Т-Банк — это амбициозные ИТ-проекты и высоконагруженные системы: от мобильного банка и облачного колл-центра до...
Вакансия размещена в отрасли