Институт компьютерных наук, искусственного интеллекта и технологий (INSAIT) при Софийском университете “Св. Климент Охридский” и „Нетфликс“ (Netflix) разработали новую AI модель - VOID, которая удаляет объекты из видео и воссоздает реалистичные изменения в сцене.
VOID понимает, как объекты взаимодействуют, симулируя падение или движение после удаления объекта. Используется специальный подход с quadmask для разграничения объектов, зон взаимодействия и фона, сохраняя логику кадра.
Для тренировки используются симулированные сцены, сгенерированные через Blender. VOID достигает лучшей визуальной последовательности и реалистичного поведения объектов. Модель имеет открытый код.
INSAIT является партнером с ETH Zurich и EPFL и является частью Софийского университета. Идеологом является проф. Мартин Вечев.
Комментарии (15)
Абе, наистина ли го могат тия хора? Дали ще докараме някакви инвести
А? Добре, ама трябва ли ни още един AI? Да видим дали ще работи наистина
Абе тва с AI-а стана малко преекспонирано напоследък... ама пък, ако наистина го могат тия от INSAIT, добре за нас. Да видим дали ще се окаже нещо полез
Абе, пичове, вие да сте видели тая новина?! INSAIT и Netflix заедно – майтап са! Честно казано, малко съм шкембе на тия AI истории, ама пък... като прочетох за премахване на обекти от видео - чак ми се усмихна. Представете си колко време ще спестят на монтажистите – нема повече да се мъчат с маски и ключове! 😂
Абе, харесва ми, че е open source. Дано не се окаже някой трик за медиите и после