Программист Python
17 Сентября 2024
Город:
Москва
Занятость:
Полная занятость
Компания "ИК СИБИНТЕК"
Команда инженеров ищет специалистов для разработки верхнеуровневой self-ETL системы.
Чем предстоит заниматься:
- Участие в разработке фреймворков для генерации и регламентации EL/ETL процессов на базе Airflow, ClickHouse и SQLmesh
- Интеграция фреймворков с компонентами платформы
- Разработка коннекторов к источникам данных
- Разработка интерфейсов создания и управления процессами
- Уверенное владение SQL: базовый синтаксис, транзакции, представления, хранимые процедуры
- Владение Python 3: multithreading и multiprocessing, модули pandas, pyodbc/sqlalchemy, boto3, paramiko, requests
- Опыт работы с оркестраторами процессов: Airflow, NiFi, Jenkins
- Опыт интеграции с различными источниками данных: SQL/NoSQL СУБД, API, файловые системы
- Базовые навыки использования Linux
Плюсом будет: - Опыт работы с распределёнными хранилищами данных
- Опыт создания кастомных операторов Airflow
- Навыки асинхронного программирования
- Опыт контейнеризации процессов
Технологический стек: - Собственная SaaS-платформа
- Хранилища данных: ClickHouse, Amazon S3
- Оркестрация процессов: Apache Airflow
- Контейнеризация: Docker
- Среда исполнения: Kubernetes
- Трансформация данных: SQLmesh
- Оформление в штат в соответствии с ТК РФ
- Конкурентоспособная заработная плата (обсуждается по результатам собеседования)
- Возможность расти как вертикально, так и повышать уровень своих профессиональных и деловых компетенций
- Внутреннее обучение: конференции, тренинги, мастер-классы, корпоративный университет. Внешнее обучение по направлению профессиональной деятельности
- Корпоративная электронная библиотека
- Формат работы: гибрид/удалёнка
Зарегистрируйтесь или войдите, чтобы открыть контакты работодателя
Прикрепите резюме для отклика
Уже с нами?
Войдите, чтобы отправить резюме
26 Сентября
Старший программист 1С( Алабуга, ОЭЗ ППТ )
Москва
от 300 000 руб.
Компания "Алабуга, ОЭЗ ППТ" НЕОБХОДИМ ПЕРЕЕЗД В РЕСПУБЛИКУ ТАТАРСТАН Обязанности: Сопровождение отраслевых систем на базе платформы...
26 Сентября
Старший программист 1С( Код-Эксперт )
Москва
Компания "Код-Эксперт" Код-Эксперт — аккредитованная IT-компания с удалённой командой, работающей из разных уголков России. Наша миссия —...
26 Сентября
Ведущий разработчик Python (ML)
Москва
Компания "1С" Проект по развитию программных продуктов "1С: Предприятие 8". Что будем делать: Создавать и развивать сервисы, работающие на...
26 Сентября
Python разработчик (Маркетинг AI)( Сбербанк )
Москва
Компания "Сбербанк" Маркетинг AI - новое подразделение маркетинга Сбера, разрабатывающее инновационную платформу для анализа данных соц.медиа,...
26 Сентября
Москва
Компания "Сбербанк" Мы команда, занимающаяся развитием автоматизации процессов Казначейства. Перед нами стоит амбициозная задача построения...
Вакансия размещена в отрасли