Data Engineer (Hadoop)( МегаФон )
Город:
Москва
Занятость:
Полная занятость
Компания "МегаФон"
Чем предстоит заниматься
- Проектирование и разработка отказоустойчивых ETL/ELT процессов в экосистеме Hadoop и Oracle
- Оптимизация и сопровождение пайплайнов данных (Spark, PySpark, Airflow)
- Интеграция новых источников данных и построение витрин для бизнес-заказчиков
- Обеспечение качества и актуальности данных в продуктивных системах
- Участие в архитектурных решениях по хранению и обработке больших данных
- Ad-hoc аналитика и поддержка команд аналитиков и data scientist
Что для этого нужно
- Высшее техническое образование
- Опыт работы с большими данными от 3 лет
- Хорошее знание Python (pandas, PySpark) и SQL
- Опыт работы с Hadoop/Spark и системами оркестрации (Airflow и др.)
- Понимание принципов построения витрин данных и дата-моделирования
- Опыт оптимизации запросов и пайплайнов обработки данных
- Навыки работы с git и Linux bash
- Ответственность за результат и умение работать в команде
19 Февраля
Инженер по автоматизации тестирования/QA automation engineer
Москва
Компания "LADA Цифра" Привет! LADA Цифра - уникальный микс талантливых людей, которые приняли вызов создать цифровое будущее в...
19 Февраля
Data Engineer( Ак Барс Цифровые Технологии )
Москва
Компания "Ак Барс Цифровые Технологии" Чем нужно будет заниматься: разработка ETL\ELT процессов; разработка витрин данных; написание...
19 Февраля
Customer Success Engineer( Лаборатория Касперского )
Москва
Компания "Лаборатория Касперского" Мы в поиске инженера в отдел премиальной технической поддержки для работы с комплексными техническими...
19 Февраля
DevOps Engineer (Activation)( Лаборатория Касперского )
Москва
Компания "Лаборатория Касперского" О проекте Команда разработки сервиса Активации — распределенной, высоконагруженной системы. Наш сервис...
19 Февраля
Senior QA Automation Engineer( Центр Орбита )
Москва
Компания "Центр Орбита" Группа Компаний Орбита - ведущий разработчик цифровых решений, российская аккредитованная ИТ-компания. Мы реализуем...
Вакансия размещена в отрасли