Data Engineer (Senior)

Компания "USETECH"

Юзтех – группа аккредитованных ИТ-компаний полного цикла разработки с многолетней экспертизой в передовых технологиях: DWH, BigData, AI/ML, Blockchain, BI, предиктивная аналитика, цифровые двойники производства и рисков.

ГК Юзтех является технологическим партнером таких компаний, как Mail.ru, 2Gis, НЛМК, Еврохим, Go Invest, Альфа-Банк, Сбер, ВТБ, МКБ, Самолет Девелопмент, Х5 Group, Газпромнефть, Лемана Про, Ситилинк, Ланит, IBS. Также, ГК разрабатывает собственные IT-продукты (Usebus, Octopus, Тил Эйчар) и флагманские проекты, которыми пользуется 70% населения страны.

Мы приглашаем Senior Data инженера присоединиться к нашей команде

Задачи:

• Разработка и поддержка ETL-процессов: извлечение (Extract), трансформация (Transform) и загрузка (Load) данных из различных источников в DWH с использованием инструментов Airflow и Informatica PowerCenter.

• Написание и оптимизация сложных SQL-запросов в GreenPlum и Oracle, включая PL/SQL-скрипты для работы с таблицами объемом в десятки миллиардов записей.

• Анализ и рефакторинг чужого кода ETL, а также проектирование новых пайплайнов на основе теорий СУБД и лучших практик ETL.

• Интеграция Python и PySpark для обработки больших данных, автоматизации задач и повышения производительности процессов.

• Мониторинг, отладка и обеспечение надежности ETL-джобов, включая обработку ошибок, валидацию данных и оптимизацию под высокие нагрузки банка.

• Сотрудничество с аналитиками и бизнес-командами для понимания требований к данным и оперативного устранения проблем в DWH.

Мы ожидаем:

1) Опыт работы разработчиком ETL - не менее 2х лет

2) Отличное знание SQL, продвинутый навык разработки в GreenPlum и Oracle, умение оптимизировать sql-запросы, базовое знание PL/SQL

3) Понимание теорий СУБД и ETL процессов

3) Умение разбираться в чужом коде

4) Опыт работы с ETL инструментами (AirFlow, Informatica IPC)

5) Базовый навык разработки в Airflow,Informatica Power Center

6) Опыт работы с большим объемом данных (таблицы с десятками миллиардов записей)

7) Опыт работы с Python, PySpark;

Мы предлагаем:

• Карьерную и профессиональную возможность в стабильной, аккредитованной ИТ-компании

• Расширенный полис ДМС со стоматологией, корпоративный психолог

• Удаленную работу и гибкий график

• Необходимую технику для комфортной работы

• Обучение, сертификацию, Usetech English Club – онлайн изучение английского

• Доступ к Корпоративной библиотеке и к Корпоративному университету

• Внутрикорпоративные профильные коммьюнити

• Заботу о детях сотрудников: корпоративные скидки, подарки, детские дни

• Геймифицированную программу лояльности: поверь, ты будешь восторге от нашего корпоративного магазина!

• Корпоративную жизнь: мы много работаем и классно отдыхаем .