Институт компьютерных наук, искусственного интеллекта и технологий (INSAIT) при Софийском университете “Св. Климент Охридский” и „Нетфликс“ (Netflix) разработали новую AI модель - VOID, которая удаляет объекты из видео и воссоздает реалистичные изменения в сцене.
VOID понимает, как объекты взаимодействуют, симулируя падение или движение после удаления объекта. Используется специальный подход с quadmask для разграничения объектов, зон взаимодействия и фона, сохраняя логику кадра.
Для тренировки используются симулированные сцены, сгенерированные через Blender. VOID достигает лучшей визуальной последовательности и реалистичного поведения объектов. Модель имеет открытый код.
INSAIT является партнером с ETH Zurich и EPFL и является частью Софийского университета. Идеологом является проф. Мартин Вечев.