Data Engineer( СКИФ-Проект )

до 340 000 руб.

СКИФ-Проект

Город:

Москва

Занятость:

Полная занятость

Компания "СКИФ-Проект"

ITSpace — международная сервисная компания. Мы успешно помогаем бизнесу и талантам встретиться.
Главная ценность нашей компании - это люди, которые в ней работают. Поэтому мы стремимся, чтобы работа у нас была максимально комфортной, а сотрудничество долгим и продуктивным.

Проект: Работа в проекте Коммерческой службы «Ценообразование». Участие в разработке архитектуры, обеспечение доставки, хранения и обработки данных, разработка и поддержка ETL процессов. Реализация бизнес-задач. Организация доставки, хранения и обработки данных с использованием Hadoop по запросам бизнеса, оптимизация хранения данных.

Задачи:

Проектирование и разработка витрин данных.
Мониторинг, поддержка, оптимизация ETL-процессов.
Интеграция данных из различных источников (преимущественно batch-загрузки из SQL баз данных).
Поддержка команды и пользователей по вопросам эффективной работы с данными.

Требования:

Уверенные знания SQL.
Знание Python.
Понимание принципов организации хранилищ данных, ETL/ELT, форматов хранения данных.
Как преимущество: опыт работы с Hadoop, Spark, Airflow

Стек:

Hadoop (HDFS, Hive, YARN, Spark, Kafka), интеграции с БД Oracle, SAP Hana, Clickhouse, Postgres, MySQL, оркестрация Airflow,ETL Spark, Python/Scala, SAP DS, облачные технологии YandexCloud

Условия:

Работа в аккредитованной IT компании.
До 340 000, сумма обговаривается с кандидатом индивидуально
Удаленный формат работы.
Длительный проект, полное погружение в продуктовую разработку.
Стабильность, компания устойчива ко всем изменениям на рынке.
Возможность оформления в штат ТК РФ, ИП.
Ежегодный пересмотр заработной платы, в зависимости от результатов работы.
Профессиональное развитие, обучение за счет компании.
По согласованию за счет компании: ДМС, предоставление оборудования, фитнес, психологическая помощь.