Python developer (Airflow / dbt)
25 Марта 2026
Город:
Москва
Занятость:
Полная занятость
Опыт:
Более 6 лет
Компания "Аренадата Софтвер"
Обязанности:
- Разработка функциональности продукта на базе Apache Airflow: разработка кастомных операторов, хуков и провайдеров;
- Разработка модулей dbt: создание адаптеров к новым источникам данных, разработка кастомных плагинов;
- Проектирование архитектуры модулей и коннекторов;
- Взаимодействие с архитекторами и продуктовой командой для определения стратегии развития платформы данных;
- Разработка и поддержка тестовой инфраструктуры: unit-тесты, интеграционные тесты;
- Составление архитектурных документов и технических записок по принятым решениям;
- Защита и обоснование архитектурных и технических решений;
- Участие в code review;
- Ревью пользовательской и технической документации по продуктам;
Опыт работы:
- От 5 лет опыта в разработке на Python, из них значительная часть - продуктовая разработка инструментов для работы с данными;
- Практический опыт работы с dbt Core: понимание архитектуры, опыт разработки или доработки адаптеров;
- Знание стека Big Data: экосистема Apache Hadoop (HDFS, YARN, MapReduce), Apache Spark / PySpark, Apache Ozone, Trino, Apache Hive;
- Понимание принципов распределённого хранения и вычислений;
- Опыт работы с различными СУБД от 3 лет;
Профессиональные знания, умения и навыки:
- Знание внутреннего устройства Apache Airflow: архитектура, scheduler, executor-ы (Celery, Kubernetes), plugin-система, API провайдеров;
- Понимание архитектуры dbt Core: жизненный цикл выполнения, система адаптеров, протокол взаимодействия с источниками, Jinja-компиляция, манифест и артефакты;
- Уверенное владение Python 3;
- Опыт разработки коннекторов/драйверов к СУБД: знание DB-API 2.0, SQLAlchemy, ODBC/JDBC;
- Знание принципов устройства и функционирования операционных систем семейства Linux;
- Опыт работы с Git;
- Понимание принципов непрерывной интеграции и непрерывной доставки (CI/CD);
- Опыт контейнеризации: Docker, Docker Compose; понимание Kubernetes;
- Декомпозиция задач разработки и умение оценивать трудозатраты;
Будет плюсом
- Опыт коммитов в open source (Apache Airflow, dbt, dbt-адаптеры);
- Опыт разработки собственных dbt-адаптеров под нестандартные источники.
Зарегистрируйтесь или войдите, чтобы открыть контакты работодателя
Прикрепите резюме для отклика
Уже с нами?
Войдите, чтобы отправить резюме
09 Апреля
Senior Java Developer( Бринго )
Москва
Компания "Бринго" Мы ищем опытного Java-разработчика на проект по разработке системы, которая обеспечивает возможность подключаться к глобальной...
09 Апреля
Москва
Компания "Ланит Омни" В настоящий момент мы формируем экспертизу на свой стороне по разработке мобильного приложения нашего продукта, поэтому...
09 Апреля
Senior Golang developer( Открытая мобильная платформа )
Москва
Компания "Открытая мобильная платформа" Рады предложить вам присоединиться к нашей команде в качестве Golang developer. Продукт —...
09 Апреля
Python разработчик (middle+ / senior)( РТ Лабс )
Москва
Компания "РТ Лабс" РТЛабс создаёт и развивает масштабные цифровые сервисы Госуслуг — портал, мобильные приложения, социально значимые услуги,...
09 Апреля
Senior Java developer( РТ Лабс )
Москва
Компания "РТ Лабс" РТЛабс создаёт и развивает масштабные цифровые сервисы Госуслуг — портал, мобильные приложения, социально значимые услуги,...
Вакансия размещена в отрасли