Дата инженер (удаленно)
15 Октября 2024
от 300 000 до 400 000 руб.
Город:
Москва
Занятость:
Полная занятость
Компания "L’etoile Digital"
Мы ищем в команду группу Дата инженеров - в направление аналитики Летуаль (оформление в аккредитованную ИТ компанию Летуаль)
Чем предстоит заниматься:
- Участвовать в проектировании, создании, развертывании и управлении общей архитектуры платформы данных
- Выстраивать процессы взаимодействия DWH и других компонент экосистемы данных компании
- Проектировать модели данных детального слоя под бизнес требования с оптимальным хранением данных
- Разрабатывать процедуры формирования детального слоя данных и слоя витрин
- Поддерживать текущие автоматизированные регулярные ETL процессы
- Настраивать поток данных с использованием распределенных систем обмена сообщениями, в частности Kafka
- Разрабатывать схемы подключения новых источников, включая получение структурированных и неструктурированных данных из различных источников
- Реализовывать процессы CI/CD и мониторинга разработанных процессов обработки данных
- Создавать и улучшать процессы обработки данных
- Участвовать в проектировании, внедрении и развитии каталога данных
- Участвовать в развитии процессов Data Governance
- Документировать свою работу в JIRA/Confluence
Мы ожидаем:
- опыт от 3-х лет в роли Data Engineer
- знание современных инструментов ETL/ELT, CDC и способов их автоматизации
- умение извлекать данные из различных источников (БД, логи, сторонние системы и т.п.)
- умение осуществлять автоматизированный сбор и структурирование информации с сайтов (parsing) при помощи программы/cервиса
- умение выбирать технологию для хранения данных и их обработки
- опыт проектирования и внедрения архитектуры хранилища данных с применением практик и технологий Data management, DWH/BI, Big Data и Data streaming
- понимание смежных технологических областей (инфраструктура, DevOps, DevSecops, Data Science, Cloud native и др.)
- владение языками программирования (SQL на уровне не ниже Middle, Python, либо другом скриптовом языке программирования)
- опыт работы с планировщиками задач (MS SQL, Airflow)
- опыт работы с ClickHouse, PostgreSQL, Google Analytics, BigQuery, Appsflyer
- опыт работы с микро-сервисной архитектурой
- опыт работы с очередями и брокерами сообщений Kafka/RabbitMQ
- опыт работы с BI инструментами MSOLAP/PowerBI/QlikView/различные российские решения
Мы предлагаем:
Интересные задачи;
Уникальную профессиональную команду;
Достойный уровень вознаграждения;
ДМС после испытательного срока;
Работа гибрид или в офисе класса А с потрясающим видом на Москву.
Рассмотрим варианты полностью удаленной работы при наличии серьезного опыта.
Зарегистрируйтесь или войдите, чтобы открыть контакты работодателя
Прикрепите резюме для отклика
Уже с нами?
Войдите, чтобы отправить резюме
10 Октября
Менеджер по привлечению клиентов УДАЛЕННО
Москва
от 75 000 до 80 000 руб.
Компания "Агентство кадрового аутсорсинга ALL HR" Команда Аll HR – это компетентные специалисты с опытом управления персоналом в разных сферах...
10 Октября
Ведущий аналитик 1С ERP (Фин. контур / Регламентированный учет / Бюджетирование), удаленно( Райтек )
Москва
Компания "Райтек" Райтек ДТГ - один из лидеров в сфере автоматизации промышленного производства Более 10 лет наша компания помогает...
10 Октября
Ведущий аналитик 1С ERP на внедрение (Оперативный контур), удаленно( Райтек )
Москва
от 200 000 руб.
Компания "Райтек" Райтек ДТГ - один из лидеров в сфере автоматизации промышленного производства Более 10 лет наша компания помогает...
10 Октября
Инженер по продажам / Специалист/Менеджер по продвижению строительных технологий
Москва
Компания "СТС" Обязанности: Выявлять потенциальных и перспективных покупателей товаров и услуг, устанавливать с ними деловые контакты;...
10 Октября
Менеджер по оптовым продажам строительных материалов (удаленно)
Москва
от 100 000 до 250 000 руб.
Компания "Альтасеилс" Компания PVA.EXPERT это: - быстрорастущая компания в очень перспективной рыночной нише, с момента основания постоянный...
Вакансия размещена в отрасли