Senior DL/GenAI Research Engineer (Diffusion Video Generation)

Разрабатываем на базе видео генерации Kandinsky первую в России Модель Мира. На входе описание, кадр, сценарий или набор действий или инструкций, на выходе интерактивная сцена. Фокус — разработка новых архитектрур и трюков, обучение больших моделей (десятки/сотни миллиардов параметров), оптимизация инференса.

Обязанности

• исследование и разработка в области видео генерации и моделей мира (исследование существующих архитектур и разработка новых)
• работа над различными аспектами проектной деятельности: чтение статей и построение гипотез, планирование и постановка экспериментов, включая сбор и подготовку данных (если потребуется), обработка и анализ результатов, защита пруф оф консепта, представление результатов на отчетных мероприятиях, написание статей и технической литературы
• работа над такими тематиками, как улучшение физичности генерации, измерение и улучшение пространственно-временной консистентности, внедрение контекста управления в генерацию, всякого рода оптимизация нацеленная на усиление стабильности авторегрессии и ускорение генерации, и другими модулями моделей мира
• совместная работа как в команде над построением Модели Мира, так и с другими командами отвечающими за сбор и подготовку данных, подготовку претрейна, пост-трейна, оптимизацию, опенсорс, прод и др.
• взаимодействие с командами партнеров для адаптации и внедрения модели (беспилотный транспорт, роботехника, видеоигровая индустрия).

Требования

• экспертный уровень Python, PyTorch
• глубокое понимание ML/DL/CV и visual GenAI
• опыт в классических задачах обработки изображений и видео
• опыт процессинга больших видеоданных
• опыт работы с диффузионными моделями
• понимание методов обучения/распределенного обучения
• понимание архитектур современных LLM и Diffusion-моделей
• понимание метрик измерения качества видео.

Будет плюсом:

• понимание 3D и его связи с изображением/видео (облака точек, карты глубины, воксели, mesh, NeRF, Gaussian splats и тд.)
• понимание принципов RL
• понимание цифровой обработки сигналов, компрессии и каких-то улучшайзеров
• понимание концепции беспилотного авто или роботостроения
• умение объяснять сложные вещи простым языком.

Условия

• комфортный современный офис рядом с м. Кутузовская
• формат работы гибрид
• ежегодный пересмотр зарплаты, квартальная и годовая премия
• корпоративный спортзал и зоны отдыха
• более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
• программа адаптации и помощь руководителя на старте
• расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
• ипотека выгоднее до 7% для каждого сотрудника
• бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров
• вознаграждение за рекомендацию друзей в команду Сбер.