Data-аналитик (DWH)( Центр Орбита )

Компания "Центр Орбита"

Группа Компаний Орбита - ведущий разработчик цифровых решений, российская аккредитованная ИТ-компания

Масштабный технологический проект с глубокой экспертизой в цифровизации бизнеса. Ключевые отрасли: государственный сектор, FinTech, HR Tech, коммуникации и медиа, услуги, рынок недвижимости, travel.

Нам доверяют крупнейшие компании РФ, среди них: Т1, ВТБ, Иннотех, Альфа Банк, ОИС и другие.

Более 6 лет мы ведем собственную продуктовую и заказную разработку высокоэффективных цифровых решений.

Обязанности:

• Анализ источников данных в легаси БД MSSQL: сбор информации о наполнении, выявление ключевых бизнес-сущностей и зависимостей, регламентных операций; (хорошо, если будут задачи у специалиста с работой по легаси)

• Проектирование и оптимизация потоков переноса данных из MSSQL в новое хранилище;

• Разработка и поддержка моделей данных и трансформаций в dbt для формирования конечных витрин;

• Организация и автоматизация процессов оркестрации с Airflow: запуск, мониторинг, алерты, управление зависимостями тасок и дагов; (хорошо, чтобы было расписано, что делал в airflow)

• Обеспечение качества, тестирование данных и их целостности при миграции и трансформации;

• Внедрение и сопровождение процессов инкрементальной загрузки и оптимизации производительности;

• Работа с потоками данных и интеграция с Kafka для обмена и передачи событий в реальном времени.

Требования:

• Опыт работы с данными не менее 4 лет (middle+), 6 лет (senior);
• Глубокое понимание реляционных БД: структура данных, методы загрузки и управления;
• Навыки разработки и оптимизации сложных SQL-запросов, включая использование оконных функций, CTE и маппингов между БД;
• Умение проектировать и создавать модели данных, ориентированные на аналитические задачи и эффективное функционирование DWH;
• Знание принципов нормализации и денормализации, типов схем (звезда, снежинка) и их правильное применение;
• Способность строить стабильные и масштабируемые модели данных с учётом особенностей источников и целевых систем;
• Владение методологиями Data Vault и другими современными подходами для обеспечения прозрачности, истории изменений и восстановления данных;
• Опыт в документировании моделей и обеспечении их совместимости с процессами ETL/ELT и бизнес-метриками;
• Способность управлять изменениями моделей при росте объёмов данных и корректировках аналитических требований;
• Навыки создания и поддержки ETL/ELT конвейеров;
• Умение разрабатывать модели данных и трансформации с помощью dbt, знание SQL и шаблонизации в dbt;
• Опыт оркестрации процессов средствами Apache Airflow, настройка DAG, автоматизация и мониторинг ETL задач;
• Понимание методологии и практик DataOps для версионирования моделей, тестирования, мониторинга и безопасного разворачивания;
• Владение навыками документирования процессов и работы с технической документацией;

Практический опыт работы с технологиями:
- язык программирования: Python
- объектное хранилище: S3
- стриминг данных: Kafka
- реляционные СУБД: Postgres, MSSQL
- NoSQL: MongoDB
- аналитическая СУБД: Clickhouse;

Будет плюсом:
- Знание систем контроля версий (Git), контейнеризации (Docker);
- Опыт работы на проектах в компаниях финтех.

Условия:

• Удаленный формат работы;
• Белую заработную плату, оформление согласно Трудовому кодексу РФ;
• Комфортный старт: 3 месяца плавного погружения под присмотром HR;
• Поддержку: IT-отсрочку и консультации HR/юристов;
• Прозрачные процессы и открытую коммуникацию;
• Работу на лучшем оборудовании без логирования времени, с фокусом на доверии и результате;
• ДМС: медицинское страхование за счет компании;
• Развитие: индивидуальный план обучения, посещение конференций и митапов, поддержка в развитии карьеры;
• Личный бренд: возможность выступать на конференциях, митапах, публикация статей;
• Бенефиты: ежеквартальное обновление корпоративных скидок;
• Движ: организация вечеринок оффлайн и онлайн, предоставление мерча, проведение конкурсов и челленджей.

Откликайтесь, будем рады познакомиться лично!