Инженер данных( Ростелеком )
Город:
Москва
Занятость:
Полная занятость
Компания "Ростелеком"
RDP - ведущий российский производитель сетевых решений.
Мы специализируемся на разработке инновационного программного обеспечения и программно-аппаратных комплексов для высокопроизводительной обработки сетевого трафика. Продукция компании широко востребована в сетях операторского класса, крупных предприятиях и Госсекторе.
Одна из ключевых особенностей нашей компании – поставка масштабируемых решений на базе нашего оборудования, интеграция с системами Заказчика и доработка продуктов под поставляемые решения.
Сейчас мы находимся в поиске Инженера данных в команду, которая занимается разработкой платформы обработки больших данных, а именно сетевого трафика.
Этот продукт будет использоваться для предотвращения сетевых атак, поиска аномалий в трафике и др.
Обязанности:
- Разработка, оптимизация и масштабирование ETL/ELT-процессов, включая автоматизацию сбора, трансформации и загрузки данных из разнородных источников;
- Участие в проектировании и развитии архитектуры хранилищ данных (DWH) и озёр данных (Data Lake);
- Разработка и поддержка витрин данных для аналитики и бизнес-отчетности;
- Оптимизация производительности и надежности процессов обработки данных (SQL, Spark, Airflow);
- Обеспечение качества данных через внедрение автоматизированных проверок, систем мониторинга и механизмов оповещения;
- Взаимодействие с аналитиками, специалистами Data Science и бизнес-заказчиками;
- Ведение и актуализация технической документации (архитектура, процессы, API, SLA).
- Отличные знания Python, включая использование библиотек для работы с данными (например, Pandas, PySpark), автоматизацию задач и реализацию логики ETL;
- Свободное владение SQL, включая оптимизацию запросов и работу с большими объемами данных;
- Опыт работы с основными инструментами и технологиями: Airflow, Spark, dbt, ClickHouse, S3, Kafka;
- Понимание принципов построения ETL/ELT-процессов и архитектуры DWH/Data Lake;
- Практический опыт работы с системами контроля версий (Git) и понимание CI/CD процессов, знание принципов тестирования кода;
- Опыт использования Terraform или Ansible для управления инфраструктурой;
- Понимание принципов Data Governance, управления качеством данных и метаданными;
- Опыт работы с Hadoop-экосистемой (HDFS, Hive и др.).
- Работа в аккредитованной IT компании;
- Трудоустройство в соответствии с ТК РФ;
- Белая заработная плата (оклад обсуждаем с успешным кандидатом после прохождения технического интервью);
- График работы: 5/2, гибкое начало рабочего дня (с 8:00 до 12:00);
- Возможность работать удаленно в рамках РФ;
- ДМС (со стоматологией), частичная компенсация обедов (для тех кто ходит в офис), внутреннее и внешнее обучение за счет компании, корпоративный фитнес и изучение английского языка;
- Офис находится в БЦ "Трио" на метро Динамо (или мцд Гражданская).
14 Мая
Инженер / техник по эксплуатации зданий ООО "КТО"
Москва
от 80 000 до 180 000 руб.
Вакансия компании ООО "КТО" Компания занимается комплексно техническим обслуживанием инженерных систем. Обязанности: - Осуществление...
21 Мая
Технический PM / Инженер-координатор проектов (Дмитровская)
Москва, м. Дмитровская
от 180 000 до 230 000 руб.
Мы — инженерная компания ВИАНТЕК. Разрабатываем сложные программно-аппаратные комплексы, системы автоматизации измерений, ПО для работы с...
22 Мая
Павловский Посад
от 100 000 руб.
Вакансия компании ОБЩЕСТВО С ОГРАНИЧЕННОЙ ОТВЕТСТВЕННОСТЬЮ "КОМБИНАТ ПОЖАРНЫХ РУКАВОВ" Наше предприятие занимается изготовлением пожарного...
27 Мая
Инженер по эксплуатации здания ООО "ЛИГА УПРАВЛЕНИЯ"
Химки
от 63 000 руб.
Вакансия компании ООО "ЛИГА УПРАВЛЕНИЯ" Управляющая компания Торгового центра "ЛИГА" г. Химки. Наша деятельность успешно охватывает техническую...
29 Мая
Инженер-конструктор схемотехники (Энергетическая)
Жуковский
от 160 000 руб.
Мы - современное опытное конструкторское бюро. С 2022 года разрабатываем отечественные программно-аппаратные комплексы в сфере FPV, VR/AR/MR, а...
Вакансия размещена в отрасли