Data Engineer( Северсталь, Москва )

Северсталь, Москва

Город:

Москва

Занятость:

Полная занятость

Компания "Северсталь, Москва"

Чем Вы будете заниматься:

создавать ETL-процессы для данных (NiFi/MiNiFi/Airflow/Flink);

создавать, оптимизировать и сопровождать триггеры и хранимые процедуры в базах данных;
разрабатывать и разворачивать DDL (Postgres/Oracle);
анализировать данные в HDFS;
настраивать мониторинг ETL-процессов.

Мы ожидаем, что Вы:

владеете SQL и PL/pgSQL;
имеете опыт работы с базами данных Oracle, PostgreSQL и Microsoft SQL Server;
умеете настраивать и поддерживать рабочие процессы с использованием Apache Airflow;
имеете опыт интеграции с потоковыми системами типа Kafka, а также создавать ETL-процессы с применением инструментов NiFi и MiNiFi;
обладаете практическими навыками работы в экосистеме Hadoop, включая использование Hive, работу с файловой системой HDFS и обработку больших объемов данных средствами Spark;
свободно ориентируетесь в Linux и уверенно работаете через командную строку.

Будет плюсом:

знание Java;
опыт проектирования ETL-процессов с нуля;
практический опыт работы с Flink.

Мы предлагаем:

стабильность, на которую можем опираться. Официальное оформление в аккредитованной IT-компании, «белая» зарплата и ежегодная индексация, льготная ипотека и отсрочка от армии;
рост без потолка. Оплачиваем курсы, тренинги и сертификации, отправляем на конференции и форумы. Поддерживаем во всём, что помогает расти;
гибкий формат работы. Удалёнка или офис. Вы сами выбираете формат, в котором чувствуете себя продуктивнее — для нас важен результат, а не часы за столом;
прозрачная мотивация. Ежеквартальные или годовые премии за результат — индивидуальный и командный;
здоровье в приоритете. ДМС со стоматологией + доплата по больничному от 50 до 100 %;
опции для родителей. Финансовая помощь при рождении ребёнка и 100 % оплата отпуска по беременности и родам;
допы, которые радуют. Корпоративная мобильная связь, а ещё — скидки от наших партнёров: на технику, спорт, еду, обучение и не только. Маленькие бонусы, которые делают будни приятнее;
атмосфера, которая заряжает. У нас не боятся пробовать новое, идеи обсуждаются на равных, а не спускаются сверху. Жёстких иерархий нет — есть свобода предлагать, менять процессы и влиять на то, что и как вы делаете.