Data Engineer/Дата-инженер

• Рефакторинг и организация: Переписывание существующих python-скриптов (cron) в управляемые пайплайны Apache Airflow;
• ETL и интеграция: Разработка скриптов для выгрузки данных из API внешних площадок в БД (MSSQL, Postgres);
• BI-визуализация (DataLens): Создание и поддержка дашбордов для бизнес-показателей, настройка эффективных подключений, оптимизация производительности;
• Работа с OLAP: Поддержка существующих Tabular моделей в SSAS в переходный период, подготовка данных для аналитики;
• Оптимизация: Ускорение медленных SQL-запросов и DAX-выражений, настройка индексов, партиционирование;
• Подготовка витрин данных в БД и OLAP-кубах, настройка и поддержка инфраструктуры Jupyter для быстрого доступа к данным.

• Уверенное знание SQL: Сложные запросы, оконные функции, оптимизация, хранимые процедуры;

• Базы данных и SQL: MSSQL, PostgreSQL, MySQL, MongoDB;

• OLAP и семантический слой: Microsoft Analysis Services (SSAS), разработка Tabular моделей (SSDT/Visual Studio), продвинутый DAX;
• Python: Написание ETL-скриптов (requests, pandas, SQLAlchemy);
• BI и визуализация: Yandex DataLens (подключение к PostgreSQL, ClickHouse, MSSQL, создание датасетов, чартов, дашбордов);
• Интеграция с API маркетплейсов.

Будет плюсом

• Опыт работы с ClickHouse;

• Понимание основ DWH (хранилищ данных);

• Опыт администрирования JupyterHub в Docker;

• Знание MDX.