DataOps (DWH/Hadoop) инженер
20 Ноября 2024
Город:
Москва
Занятость:
Полная занятость
Компания "Неофлекс"
СТЕК: Hadoop, Spark, администрирование HDFS + Spark + Iceberg + Airflow кластера, установка Trino, Starrocks.
ПРОЕКТ: Финтех проект. Российский брокер.
ЧЕМ ТЫ БУДЕШЬ ЗАНИМАТЬСЯ:
- Профилированием данных в системах источниках.
- Разработкой ETL/ELT.
- Разработкой слоев данных DWH, витрин DM.
- Описанием разработок в Confluence.
- Оформлением работ в Jira.
- Участием в выборе технологий, компонентов, архитектуры решений.
- Внедрением реализованных решений.
ЕЩЁ БУДЕТ ВОЗМОЖНОСТЬ УЧАСТВОВАТЬ в разработке/развитии решений как на базе современных Open Source решений, так и на базе "фундаментальных" Enterprise продуктов лидирующих в "квадрате" Gartner.
Greenplum - MPP
ClickHouse - Data Mart
Postgree SQL - Data Mart OLTP
Oracle Golden Gate - CDC
Apache Nifi, Apache Kafka, Apache Airflow, Iceberg, Trino, Starrocks IBM DS - ETL
CI/CD, DevOps, DataOps in DWH.
Поддержка текущих решений на базе MPP - SAP IQ, OGG, IBM DS. MS SQL.
СКУЧНО И НЕИНТЕРЕСНО ТОЧНО НЕ БУДЕТ! :)
ТЫ НАШ ИДЕАЛЬНЫЙ КАНДИДАТ, ЕСЛИ У ТЕБЯ ЕСТЬ:- Опыт работы системным инженером/администратором/архитектором от 3-х лет.
- Владение Ansible или другими системами управления конфигурации/автоматизации.
- Опыт работы с Kubernetes/Openshift и интеграция с ArgoCD.
- Знание UNIX, Linux (deb and rpm-based). Высокий навык администрирования Linux.
- Опыт написания bash/python-скриптов (автоматизация задач).
- Опыт работы с системами контроля версий, gitops-подход.
- Опыт написания pipeline и опыт работы с системами непрерывной интеграции (GitLab CI, Jenkins, Tekton, TeamCity, Bamboo) - преимуществом будет умение работать с несколькими из них.
- Умение ясно излагать свои мысли.
- Опыт Apache Kafka, S3 (Minio, Ceph, Ozone), базовый опыт работы с Hadoop (hive, spark, hdfs), Iceberg.
МЫ ПРЕДЛАГАЕМ:
- Официальное трудоустройство по ТК РФ.
- График работы 5/2.
- Гибкое утро.
- Подключение к программе ДМС (включает стоматологию, обследования, лечение заболеваний и т.д.), а также возможность страхования родственников по корпоративной цене.
- Насыщенная корпоративная жизнь: яркие корпоративы, праздники для детей сотрудников, корпоративные спортивные мероприятия; мотивационные награждения.
- Прозрачную системы карьерного развития в компании.
- Персонального наставника с первого дня работы.
- Возможность развития личной экспертизы и экспертизы компании.
- Собственную платформу внутренних и внешних образовательных программ.
- Возможность пройти сертификацию.
МЫ ИЩЕМ КАНДИДАТА БЕЗ ПРИВЯЗКИ К ЛОКАЦИИ КОМПАНИИ.
100% УДАЛЁННЫЙ ФОРМАТ РАБОТЫ НА ТЕРРИТОРИИ РФ.
Офисы компании находятся в городах: МОСКВА, САНКТ-ПЕТЕРБУРГ, НИЖНИЙ НОВГОРОД, САРАТОВ, ВОРОНЕЖ, ПЕНЗА, САМАРА, КРАСНОДАР.
Зарегистрируйтесь или войдите, чтобы открыть контакты работодателя
Прикрепите резюме для отклика
Уже с нами?
Войдите, чтобы отправить резюме
13 Ноября
Инженер по тестированию АБС ЦФТ-Банк
Москва
Компания "РСХБ-Интех" РСХБ-Интех - российская IT-компания и digital-сердце Россельхозбанка. Мы разрабатываем новые банковские продукты и...
13 Ноября
Москва
Компания "РСХБ-Интех" РСХБ-ИНТЕХ — молодая, драйвовая IT-компания и digital-сердце Россельхозбанка. Мы разрабатываем новые банковские продукты...
13 Ноября
Разработчик ETL / Инженер Данных
Москва
Компания "РСХБ-Интех" ЧЕМ ПРЕДСТОИТ ЗАНИМАТЬСЯ: Построение витрин данных для работы АСРМ, оптимизация и развитие на уровне данных в...
13 Ноября
Инженер-технолог очистных сооружений( ТД, Инженерное оборудование )
Москва
от 160 000 руб.
Компания "ТД, Инженерное оборудование" Компания ООО «ТД «Инженерное оборудование»- производитель лучших отечественных установок для очистки...
13 Ноября
Сервисный инженер( BMC Engineering )
Подольск (Московская область)
до 100 000 руб.
Компания "BMC Engineering" В стабильную компанию, занимающуюся проектированием и производством шкафов автоматики и НКУ, в сфере автоматизации...
Вакансия размещена в отрасли