Data engineer (MDM)( Excdev )
10 Октября 2024
Город:
Москва
Занятость:
Полная занятость
Компания "Excdev"
Чем предстоит заниматься:
- Разработка и поддержка решений для управления основными данными (MDM).
- Интеграция данных из различных источников и обеспечение их консистентности и целостности.
- Разработка ETL процессов для обработки и нормализации данных.
- Создание и поддержка системы качества данных, управление их дублированием.
- Интеграция с Kafka для обеспечения надежной передачи и синхронизации данных.
- Разработка и поддержка процессов парсинга данных из интернета и их интеграции в MDM.
- Работа с метаданными, управление ими и их обновление.
- Тесное взаимодействие с командами DWH и BI для обеспечения корректного использования
- данных.
Наши ожидания от кандидата:
- Высшее математическое или техническое образование;
- Минимум 3 года опыта работы в управлении данными, инжиниринге данных или анализе данных
- в сфере веб и/или мобильных продуктов;
- Опыт работы с MDM решениями и понимание принципов управления основными данными.
- Опыт разработки ETL процессов и работы с инструментами ETL.
- Глубокие знания SQL и опыт работы с реляционными базами данных.
- Опыт работы с Apache Kafka для интеграции и синхронизации данных.
- Навыки парсинга данных из интернета и их нормализации.
- Опыт работы с инструментами управления качеством данных и их дублированием.
- Опыт работы с метаданными и их управлением.
Будет огромным плюсом:
- Опыт работы с Python и знание его экосистемы для работы с данными.
- Опыт работы в среде DevOps и облачных технологиях (AWS, GCP, Azure).
Условия:
- График 5/2 с 10.00 до 19.00
- Удаленный формат работы
- Возможность работать из любой точки мира
Зарегистрируйтесь или войдите, чтобы открыть контакты работодателя
Прикрепите резюме для отклика
Уже с нами?
Войдите, чтобы отправить резюме
05 Октября
Senior Data Engineer( Вовнянко Олеся Викторовна )
Москва
Компания "Вовнянко Олеся Викторовна" Международная компания в сфере iGaming ищет в свою команду Senior Data Engineer. Основные задачи: •...
05 Октября
Senior/Lead Data Scientist( Вовнянко Олеся Викторовна )
Москва
Компания "Вовнянко Олеся Викторовна" Международная компания в сфере iGaming ищет в свою команду Senior/Lead Data Scientist. Чем предстоит...
04 Октября
Москва
Компания "Postgres Professional" Postgres Professional — разработчик самой популярной российской СУБД Postgres Pro на базе свободно...
05 Октября
Москва
Компания "HuntIT" HuntIT - это передовое международное рекрутинговое агентство, которое специализируется на поиске и подборе...
25 Сентября
Стажер Data engineer в команду ТВ Аналитика (Big Data)( МТС )
Москва
Компания "МТС" Big Data МТС – место, где телеком данные превращаются в реально работающие IT-продукты. Мы создали и протестировали несколько...
Вакансия размещена в отрасли