Эксперт по администрированию Hadoop

МегаФон

Город:

Москва

Занятость:

Полная занятость

Опыт:

Более 6 лет

Компания "МегаФон"

Чем предстоит заниматься

Поддерживать, развивать и мониторить существующие Hadoop кластера (у нас их несколько)
Автоматизировать процедуры развертывания/обслуживания кластера
Анализировать и устранять проблемы производительности различных компонент Hadoop кластера
Планировать горизонтальный и вертикальный роста кластера
Развивать инфраструктуру хранилища, экспериментировать с новыми системами сбора, хранения и анализа данных
Помогать аналитикам и разработчикам в их ежедневной работе с Hadoop

Что для этого нужно

Практические навыки администрирования Hadoop (Hive, HDFS, YARN, Kerberos + Sentry)Cloudera, Hortonworks, Apache Hadoop
Глубокие знания Linux
Любовь к автоматизации задач на скриптовых языках (shell/awk/sed, python)
Опыт работы с системами мониторинга (Zabbix)
Приветствуется знание Spark, Airflow, Kafka и инструментов аналитики

Похожие вакансии

05 Декабря

Москва

Компания "ANCOR" Одна из самых успешных косметических компаний в мире в области прямых продаж с оборотом $9 млрд., с более чем 6 миллионами...

Отправить резюме

подробнее

05 Декабря

Москва

Компания "Неофлекс" СТЕК: Hadoop, Hive, Spark, Hue, Jupyter. ЧЕМ ТЫ БУДЕШЬ ЗАНИМАТЬСЯ: Определение источников, выявление проблем с...

Отправить резюме