Data Engineer (Spark, NiFi)
09 Июня 2026
Город:
Москва
Занятость:
Полная занятость
Компания "Тера Интегро"
Обязанности:-
Разработка ETL процессов для загрузки и интеграции данных в рамках Аналитической платформы (АП).
-
Разработка кастомных сервисов для контроля качества данных, визуализации и других подсистем АП.
-
Разработка коннекторов к источникам данных (RDBMS, NoSQL), интеграций между подсистемами АП
Требования:
-
Опыт разработки ETL pipelines (пакетные и потоковые) и интеграций для корпоративных хранилищ данных
-
Spark (must have) - опыт написания джобов, понимание принципов оптимизации, настроек
-
Nifi (must have)
-
Kafka - базовый опыт использования, работа с топиками
-
Airflow – базовый опыт
-
Опыт разработки от 3 лет для написания кастомных интеграций (желательно Python и опыт с SQL Alchemy, можно scala, java)
-
Хорошие знания SQL (Spark sql, соединения, оконные функции, оптимизация запросов)
-
Будет плюсом: опыт работы с MPP базами, опыт с Trino
- Оформление по ТК РФ в ИТ-аккредитованную компанию
- Годовой бонус до 15% от годового дохода
- ДМС, включая стоматологию, страхование жизни и здоровья в поездках за рубеж. А еще можно застраховать родственников с корпоративной скидкой;
- Программа корпоративных скидок
- Выстроенная система работы с персоналом: индивидуальный план развития, выделенный бюджет на обучение у сторонних подрядчиков, регулярные 1:1 с руководителем
- Дополнительный оплачиваемый отпуск
- Работа на проектах с крупнейшими Российскими заказчиками
Зарегистрируйтесь или войдите, чтобы открыть контакты работодателя
Прикрепите резюме для отклика
Уже с нами?
Войдите, чтобы отправить резюме
30 Мая
Senior QA Automation Engineer( Simplenight )
Москва
от 150 000 до 300 000 руб.
Компания "Simplenight" Position: QA Automation Engineer Level: Senior Experience: 8+ years (NOT freelancing) Location: Remote...
30 Мая
Стажер data science (ИИ в агростраховании)
Москва
Компания "МАЙНДСЭТ" Вакансия: Стажёр по анализу сельскохозяйственных рисков В компанию требуется стажёр по направлению «машинное обучение в...
30 Мая
Data Scientist (LLM & ML) в команду «История операций» СберБанк Онлайн
Москва
Компания "Сбербанк" О команде и вызове «История операций» — это один из самых высоконагруженных и посещаемых экранов в приложении. Наша цель...
30 Мая
Руководитель проекта (SberData)
Москва
Компания "Сбербанк" SberData – подразделение Сбера, которое занимается разработкой инфраструктуры для поставки, хранения и обработки данных....
30 Мая
DevOps / DevSecOps Engineer (проектная работа)
Москва
Компания "Printum" Компания Printum ищет DevOps / DevSecOps инженера для развития процессов безопасной разработки и автоматизации...
Вакансия размещена в отрасли