Data Engineer( МФК ВЭББАНКИР )
28 Января 2026
до 250 000 руб.
Город:
Москва
Занятость:
Полная занятость
Компания "МФК ВЭББАНКИР"
Обязанности:
- Разработка ETL/ELT пайплайнов на Apache Airflow;
- Проектирование и реализация решений для интеграции источников данных (MongoDB, Kafka, S3, Postgres) в DWH;
- Работа с API различных сервисов для получения данных;
- Оптимизация запросов и архитектуры хранения в колоночных СУБД;
- Разработка сервисов обработки данных на Python (Pandas, Pydantic);
- Участие в проектировании архитектуры хранилища;
- Документирование архитектуры и процессов обработки данных;
Требования:
- Опыт работы Data Engineer от 2-ух лет;
- Уверенное владение Python 3.8+. Понимание принципов ООП, многопоточности, асинхронности и инструментов работы с БД (psycopg2, clickhouse-driver, SQLAlchemy);
- Практический опыт работы с Apache Airflow (2.10+), реляционный СУБД (Postgres), Kafka;
- Знание форматов данных JSON, XML, AVRO, Parquet;
- Опыт работы с GIT;
Будет плюсом:
- Опыт работы с Clickhouse, OpenMetadata, Docker, k8s, Debezium;
- Опыт в развертывании и администрировании Apache Airflow (2.0+).
Зарегистрируйтесь или войдите, чтобы открыть контакты работодателя
Прикрепите резюме для отклика
Уже с нами?
Войдите, чтобы отправить резюме
10 Января
Web SRE/Site Reliability Engineer
Москва
Компания "ДДОС ГВАРД" Привет! Мы — DDoS-Guard. С 2011 года защищаем бизнес от DDoS-атак, ускоряем доставку контента и обеспечиваем надежный...
10 Января
Senior Data Engineer( РСХБ-Интех )
Москва
Компания "РСХБ-Интех" В связи с активным расширением команды мы в поисках Senior Data Engineer в Лабораторию искусственного интеллекта. ЧЕМ...
10 Января
Москва
от 300 000 руб.
Компания "UP business" Наш клиент — технологическая компания, создающая масштабируемые системы для крупных корпоративных клиентов в сфере...
10 Января
Москва
Компания "NOVATEST" Всем привет! Мы запускаем стажировку на вакансию "QA-engineer". После ее успешного прохождения, у тебя есть реальная...
10 Января
Москва
от 180 000 руб.
Компания "Осьминожка" OSMI IT — интегратор решений в области искусственного интеллекта и веб-разработки . Мы помогаем среднему и крупному...
Вакансия размещена в отрасли