Главный ETL разработчик с Hadoop (Отчетность РБ)
01 Марта 2025
Город:
Москва
Занятость:
Полная занятость
Компания "Иннотехнум, Группа компаний"
Вместе с нами Вам предстоит:
- Проектирование и реализация ETL-потоков, сборка, тестирование, отладка витрин;
- Оптимизация работы БД (создать партиции, изменение структур, уменьшить или увеличить блок хранения своей же витрины и тд);
- Разработка документации и спецификаций к витринам данных;
- Разработка и оптимизация spark tasks, выполняющих etl на Hadoop;
- Разработка и оптимизация airflow dags;
- Оптимизация ad-hoc запросов, работающих на Hadoop.
Мы ждем от Вас:
-
Знания принципов построения систем хранения и обработки данных;
-
Опыт работы с аналитическими хранилищами, знание БД, хорошее знание SQL;
-
Наличие опыта работы с Hadoop/Spark/Airflow/Python - ОБЯЗАТЕЛЬНО;
-
Опыт промышленной разработки ETL Apache AirFlow;
-
Понимание методологий Agile и DevOps;
-
Оконченное высшее либо средне-специальное образование;
Зарегистрируйтесь или войдите, чтобы открыть контакты работодателя
Прикрепите резюме для отклика
Уже с нами?
Войдите, чтобы отправить резюме
26 Февраля
Senior Python Backend-разработчик
Москва
Компания "Сбербанк" Облачная платформа SberInfra.Cloud является фундаментом для всех сервисов группы компании Сбер. Мы помогаем создавать и...
26 Февраля
Frontend разработчик (React)( RedLab )
Москва
Компания "RedLab" RedLab — глобальная ИТ-компания. Мы входим в международный холдинг Litota. Предоставляем экспертизу и ресурсы для...
26 Февраля
Старший инженер-разработчик FPGA/ПЛИС (Центр Квантовых Технологий Сбера)
Москва
Компания "Сбербанк" Сбер - огромная организация, помогающая миллионам людей каждый день. Среди наших приоритетов - качество наших продуктов и...
26 Февраля
Low Code разработчик( Консалтинговая Компания ПРОФЭЛИТ )
Москва
от 110 000 руб.
Компания "Консалтинговая Компания ПРОФЭЛИТ" В компанию по проектированию, разработке и сопровождению геоинформационных систем/на рынке более 25...
27 Февраля
Москва
Компания "Bell Integrator" Проект: Создание современного, высокопроизводительного и удобного решения для брокеров, которое объединяет...
Вакансия размещена в отрасли