Data Engineer (BigData)
Город:
Москва
Занятость:
Полная занятость
Компания "МегаФон"
Чем предстоит заниматься
- Проектирование и разработка отказоустойчивых ETL/ELT процессов в экосистеме Hadoop и Oracle
- Оптимизация и сопровождение пайплайнов данных (Spark, PySpark, Airflow)
- Интеграция новых источников данных и построение витрин для бизнес-заказчиков
- Обеспечение качества и актуальности данных в продуктивных системах
- Участие в архитектурных решениях по хранению и обработке больших данных
- Ad-hoc аналитика и поддержка команд аналитиков и data scientist
Что для этого нужно
Высшее техническое образование
Опыт работы с большими данными от 2 лет
Хорошее знание Python (pandas, PySpark) и SQL
Опыт работы с Hadoop/Spark и системами оркестрации (Airflow и др.)
Понимание принципов построения витрин данных и дата-моделирования
Опыт оптимизации запросов и пайплайнов обработки данных
Навыки работы с git и Linux bash
Ответственность за результат и умение работать в команде
09 Ноября
Красногорск
Компания "Велком" Велком: Производственная компания с современной IT-инфраструктурой и масштабными задачами цифровизации. Это не просто...
09 Ноября
Senior QA engineer (Java), ритейл
Москва
Компания "AWG" Мы в поиске QA engineer, на проект для крупного ритейлера. Проект направлен на создание отдельной подкоманды в периметре...
09 Ноября
Data Scientist (Middle+), HR Tech
Москва
Компания "AWG" Мы ищем Data Scientist в команду, которая создаёт передовые AI-решения для сотрудников в команде HR Tech. Продукты компании...
09 Ноября
Мытищи
Компания "АРТИ-М" В крупную торговую компанию, лидера на российском рынке оптовой продажи посуды и подарков, приглашается Data -аналитик (...
09 Ноября
ML-инженер / ML Engineer (с пониманием бэкенда)
Москва
Компания "ВкусВилл" Привет! ВкусВилл развивает внутренние ИИ-сервисы: поиск по базе знаний (RAG), умные ассистенты для сотрудников,...
Вакансия размещена в отрасли