Senior DevOps Engineer (Big Data) (в архиве)

14 Ноября

Партнерские Вакансии

Компания "Advantage Solutions"

Мы ищем DevOps Engineer (Data Focus) для усиления нашей Data Engineering команды. Эта роль связана с построением и поддержкой надёжной и масштабируемой data-инфраструктуры.

Обязанности:

• Проектировать, внедрять и поддерживать DevOps tooling для data pipelines и data platforms.
• Поддерживать и автоматизировать ETL workflows (Airflow).
• Создавать и управлять мониторингом и observability для data quality (DBT), пайплайнов и систем хранения.
• Реализовывать и поддерживать инфраструктуру хранения данных на AWS (S3, EC2, networking).
• Тесно сотрудничать с Data инженерами, чтобы обеспечить стабильное развертывание, версионирование и масштабирование data jobs и пайплайнов.
• Автоматизировать deployment и CI/CD процессы с помощью GitLab CI/CD.
• Обеспечивать лучшие практики безопасности при работе с чувствительными данными.
• Интегрировать и поддерживать Project Nessie как транзакционный каталог для Data Lakes с Git-подобной семантикой.
• Писать скрипты для автоматизации инфраструктуры на Python/Bash/Ansible.
• Документировать системы, пайплайны и DevOps-процессы.

Требования:

• 5+ лет опыта в роли DevOps / IT Ops / DataOps, с практическим опытом работы с data-related инфраструктурой.
• Коммерческий опыт с Apache Airflow и ClickHouse.
• Глубокие знания Linux (networking, kernel tuning, performance optimization).
• Отличное знание облачных сервисов (AWS/Azure/GCP).
• Владение скриптингом и автоматизацией (Python, Bash, Ansible).
• Опыт работы с CI/CD pipelines (GitLab).
• Опыт работы со стеком мониторинга (Prometheus, Grafana, ELK).
• Знание контейнеризации и оркестрации (Docker, Kubernetes).
• Понимание концепций data governance.
• Развитые коммуникативные навыки и проактивный, ориентированный на ownership подход.
• Владение английским языком на уровне B2 или выше.

Будет плюсом:

• Опыт работы с real-time data streaming, DBT, Project Nessie.
• Отличное знание AWS сервисов (S3, EC2, IAM, networking).
• Навыки работы с Infrastructure as a Code (Terraform).
• Понимание безопасности в data engineering (IAM, encryption, access control).
• Опыт работы с высокопроизводительными системами или в трейдинговых средах.

Что предлагаем:

• Работу в современной международной компании без бюрократии, устаревших систем и технического долга.

• Отличные возможности для профессионального роста и самореализации.

• Удалённый формат работы из любой точки мира.

• Компенсацию медицинской страховки, спортивных активностей и профессионального обучения.