Data Engineer
30 Марта 2026
до 250 000 руб.
Город:
Москва
Занятость:
Полная занятость
Компания "МФК ВЭББАНКИР"
Обязанности:
- Разработка ETL/ELT пайплайнов на Apache Airflow;
- Проектирование и реализация решений для интеграции источников данных (MongoDB, Kafka, S3, Postgres) в DWH;
- Работа с API различных сервисов для получения данных;
- Оптимизация запросов и архитектуры хранения в колоночных СУБД;
- Разработка сервисов обработки данных на Python (Pandas, Pydantic);
- Участие в проектировании архитектуры хранилища;
- Документирование архитектуры и процессов обработки данных;
Требования:
- Опыт работы Data Engineer от 2-ух лет;
- Уверенное владение Python 3.8+. Понимание принципов ООП, многопоточности, асинхронности и инструментов работы с БД (psycopg2, clickhouse-driver, SQLAlchemy);
- Практический опыт работы с Apache Airflow (2.10+), реляционный СУБД (Postgres), Kafka;
- Знание форматов данных JSON, XML, AVRO, Parquet;
- Опыт работы с GIT;
Будет плюсом:
- Опыт работы с Clickhouse, OpenMetadata, Docker, k8s, Debezium;
- Опыт в развертывании и администрировании Apache Airflow (2.0+).
Зарегистрируйтесь или войдите, чтобы открыть контакты работодателя
Прикрепите резюме для отклика
Уже с нами?
Войдите, чтобы отправить резюме
22 Марта
Full-stack QA Engineer( Альфа Капитал )
Москва
Компания "Альфа Капитал" Привет! Мы работаем на рынке инвестиций и занимаемся доверительным управлением. Входим в ТОП-5, в цифрах это: 1,5...
23 Марта
Москва
Компания "СберЛизинг" СберЛизинг – лизинговая компания экосистемы Сбера, один из лидеров рынка России. Наша команда создаёт технологичные...
24 Марта
Инженер по управляемым базам данных (Managed Database Engineer)
Москва
Компания "Яндекс" Команда Yandex Cloud непрерывно расширяет количество доступных сервисов и совершенствует свои продукты. Одновременно...
24 Марта
Москва
до 575 000 руб.
Компания "iSpring" Senior Full Stack QA Engineer (с потенциалом тимлида) iSpring — международная продуктовая IT‑компания. Мы создаём...
25 Марта
Владелец продукта (Data / BI / DWH)
Москва
Компания "МАГНИТ, Розничная сеть" Мы ищем владельца продукта, который будет отвечать за развитие data-продукта (BI/DWH), формирование его...
Вакансия размещена в отрасли