Senior DL/GenAI Research Engineer (Diffusion Video Generation & World Model Development)

28 Января

Партнерские Вакансии

Компания "Сбербанк"

Разрабатываем на базе видео генерации Kandinsky первую России Модель Мира. На входе описание, кадр, сценарий или набор действий или инструкций, на выходе интерактивная сцена. Фокус — разработка новых архитектрур и трюков, обучение больших моделей (десятки/сотни миллиардов параметров), оптимизация инференса.

Обязанности

• исследование и разработка в области видео генерации и моделей мира (исследование существующих архитектур и разработка новых)
• работа над различными аспектами проектной деятельности: чтение статей и построение гипотез, планирование и постановка экспериментов, включая сбор и подготовку данных (если потребуется), обработка и анализ результатов, защита пруф оф консепта, представление результатов на отчетных мероприятиях, написание статей и технической литературы
• работа над такими тематиками, как улучшение физичности генерации, измерение и улучшение пространственно-временной консистентности, внедрение контекста управления в генерацию, всякого рода оптимизация нацеленная на усиление стабильности авторегрессии и ускорение генерации, и другими модулями моделей мира
• совместная работа как в команде над построением Модели Мира, так и с другими командами отвечающими за сбор и подготовку данных, подготовку претрейна, пост-трейна, оптимизацию, опенсорс, прод и др.
• взаимодействие с командами партнеров для адаптации и внедрения модели (беспилотный транспорт, роботехника, видеоигровая индустрия).

Требования

• экспертный уровень Python, PyTorch
• глубокое понимание ML/DL/CV и visual GenAI
• опыт в классических задачах обработки изображений и видео
• опыт процессинга больших видеоданных
• опыт работы с диффузионными моделями
• понимание методов обучения/распределенного обучения
• понимание архитектур современных LLM и Diffusion-моделей
• понимание метрик измерения качества видео.

БОНУС:

• понимание 3D и его связи с изображением/видео (облака точек, карты глубины, воксели, mesh, NeRF, Gaussian splats и тд.)
• понимание принципов RL
• понимание цифровой обработки сигналов, компрессии и каких-то улучшайзеров
• понимание концепции беспилотного авто или роботостроения
• умение объяснять сложные вещи простым языком.

Условия

• комфортный современный офис рядом с м. Кутузовская
• формат работы гибрид
• ежегодный пересмотр зарплаты, квартальная и годовая премия
• корпоративный спортзал и зоны отдыха
• более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
• программа адаптации и помощь руководителя на старте
• расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
• ипотека выгоднее до 7% для каждого сотрудника
• бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров
• вознаграждение за рекомендацию друзей в команду Сбера