Дата-инженер( ФБУН НИИ СБМ Роспотребнадзора )

от 100 000 до 140 000 руб.

Компания "ФБУН НИИ СБМ Роспотребнадзора"

Лаборатория цифрового мониторинга здоровья человека НИИ Системной Биологии и Медицины Роспотребнадзора ищет инженера данных. Мы создаем сервис для анализа и визуализации больших объемов биомедицинских данных в режиме реального времени. Проект находится на пересечении биологии, медицины и современных IT-технологий. В данный момент уже функционирует прототип системы, который вызывает большой интерес у заказчиков. Ваша задача — улучшить процессы интеграции данных и расширить функционал системы.

Основные задачи:

• Разработка, обновление и поддержка пайплайнов для очистки, стандартизации и интеграции данных от партнеров.
• Мониторинг и поддержка процесса интеграции данных, исправление ошибок и взаимодействие с партнерами для решения проблем.
• Поиск и интеграция данных из открытых источников, связанных с экологией, демографией и здравоохранением.
• Моделирование баз данных для эффективного хранения и обработки больших данных.

Наш стек:

Python, Pandas, Polars, PostgreSQL, Clickhouse, Django, Celery, Redis, Docker, SQLAlchemy

Требования:

• Уверенное владение Python и опыт работы с библиотеками для обработки данных (Pandas). Опыт с Polars будет преимуществом.
• Опыт работы с большими и разнородными данными: интеграция, стандартизация и подготовка данных.
• Навыки моделирования данных и оптимизации схем баз данных.
• Опыт с ETL-процессами и мониторингом интеграционных пайплайнов.
• Минимум 2 года опыта в аналогичной роли.
• Умение работать в команде, эффективно коммуницировать и вести документацию.

Что мы предлагаем:

• Участие в важном проекте, связанном с охраной здоровья населения.
• Интересные задачи на стыке биологии, медицины и технологий.
• Возможности для профессионального роста.
• Дружелюбная атмосфера в команде профессионалов.
• Конкурентная заработная плата.