13 вакансий data engineer spark в Москве

Senior Spark Data Engineer (Iceberg)

Москва

Компания "Неофлекс" ОДИН ИЗ ЛУЧШИХ РАБОТОДАТЕЛЕЙ РОССИИ Мы – Neoflex. Аккредитованная IT компания. За 20 лет работы мы создали 12+ готовых решений для бизнеса, так же занимаемся заказной разработкой программного обеспечения. Приветствуем на странице нашей компании и благодарим за интерес к вакансии. Будем рады оказаться полезны друг другу. СТЕК проекта: Apache Spark (Pyspark), SQL, Iceberg, S3....

Data Engineer( Лига Цифровой Экономики )

Москва

Компания "Лига Цифровой Экономики" Наша команда предоставляет для Банка ТОП-3 сервис обеспечения бизнес-процессов агрегированными и структурированными внешними данными. Разрабатываем дата-продукт внешнего профиля клиента, так же создаем решения под Hadoop+Scala+Spark, осваиваем разработку API на OpenShift+Postgres и участвуем в разработке ИИ решений.Сейчас мы ищем коллегу на роль Data инженера...

Data Engineer( Ventra )

Москва

Компания "Ventra" Привет! Мы ищем Data Engineer на проекты крупной FMCG-компании. Основные задачи: Разработка витрин данных в рамках развития дата-платформы; Интеграция источников данных на платформу; Разработка дата-пайплайнов для обработки потоковых и пакетных данных; Контроль качества данных; Участие в код-ревью; Выполнение оптимизации, рефакторинг и поддержка решений. Наши ожидания: Опыт...

Data Engineer( ARK )

Москва

от 300 000  руб.

Компания "ARK" Наши партнеры - крупнейшая компания FMCG в поиске Data Engineer Требования: Опыт от 4-х лет в роли Data Engineer; Отличное знание SQL, python, PySpark/Scala ; 2+ года опыта работы с облачными платформами Yandex Cloud Platform/ Azure/ AWS; Опыт работы в проектах с использованием Kafka, CDC-решений S3, Airflow, Apache Spark, Clickhouse, Postgres Опыт работы с Docker,...

Data engineer( WILDBERRIES )

Москва

Компания "WILDBERRIES" Объединённая компания Wildberries и Russ — это международная технологическая компания, образованная в результате слияния двух лидеров рынка — IT-компании Wildberries и оператора наружной рекламы Russ. Ищем дата инженера в направление Data Platform! Вам предстоит: Обеспечиватьстабильную, производительную и безопасную работу Data Platfrorm на базе Trino, Spark, S3 и Apache...

Data Engineer/ Middle

Москва

Компания "Альфа-Банк" Чем предстоит заниматься: Анализ существующих решений, документаций Системный анализ, разработка и тестирование интеграционных решений на указанном стеке Создание документаций по разработанным решениям Оптимизация процессов Наши ожидания от кандидата: SQL, Python. Знание Scala\Java будет плюсом Технологический стек: Apache Spark, S3\Minio, Apache Iceberg,...

Data engineer (Индустрия образования)

Москва

Компания "Сбербанк" Сейчас находимся на стадии формирования большой команды переформатирования образования в стране на базе ИИ Обязанности разработка ETL-процессов построение витрин данных и доработка существующих витрин данных оптимизация запросов конфигурация и оптимизация работы кластера. Требования высшее образования опыт от 3 лет уверенные знания SQL опыт работы и знание экосистемы...

Data Engineer (Риски розничного бизнеса)

Москва

Компания "Сбербанк" Ищем специалиста на позицию Data Engineer для участия в создании и поддержке инфраструктуры данных крупного банка. Будете отвечать за разработку, оптимизацию и поддержку витрин данных, работу с источниками данных и создание эффективных процессов обработки больших объемов информации. Обязанности анализировать источники и метаданные хранилищ Hadoop и Greenplum для...

Senior Data Engineer в VK Видео( Mail.ru Group )

Москва

Компания "Mail.ru Group" Ищем DWH Engineer для команды VK Видео — одного из крупнейших и самых популярных видеосервисов в России! Задачи Разрабатывать и поддерживать процессы обработки и доставки данных для аналитических и ML-команд Собирать витрины, оптимизировать Писать адхоки и выгрузки, раздебаги Собирать требования Требования Понимание работы параллельных вычислений на кластере Опыт с...

Data Scientist / Machine Learning Engineer (специалист по машинному обучению и большим данным)

Москва

Компания "РНГ" Требования: глубокое понимание теоретических основ машинного обучения, математической статистики и методов оптимизации; свободное владение Python и основными библиотеками для data science: * ML-фреймворки: Scikit-Learn, XGBoost/LightGBM/CatBoost * Глубокое обучение: PyTorch и/или TensorFlow * Обработка данных: Pandas, NumPy, Polars; опыт работы с большими данными (BigData): *...

Data Engineer( МАГНИТ, Розничная сеть )

Москва

Компания "МАГНИТ, Розничная сеть" чем ты будешь заниматься Участвовать в миграции Хранилища данных на новые технологии, используя наш фреймворк. Создавать новые и развивать старые интеграции по загрузке сырых данных в DataLake. Разрабатывать pipline'ов доставки и обработки данных формирования витрин данных. Писать и оптимизировать сложные скрипты обработки данных. чем мы пользуемся S3,...

DevOps Engineer( Сбербанк )

Москва

Компания "Сбербанк" В SberData мы создаем платформу данных для всего Сбера. Это более 350 источников данных и 100+ Пб информации, заказ и получение данных за 15 минут и современный технологический стек работы с данными. Наша команда развивает инструменты и внедряет технологию разделенного Compute & Storage в рамках концепции Lakehouse. Наша задача – спроектировать и внедрить надежное,...