The Institute for Computer Science, Artificial Intelligence and Technology (INSAIT) at Sofia University "St. Kliment Ohridski" and "Netflix" have developed a new AI model - VOID, which removes objects from videos and realistically recreates the changes in the scene.
VOID understands how objects interact, simulating falling or movement after an object is removed. It uses a special quadmask approach to distinguish objects, interaction zones, and the background, preserving the logic of the frame.
Simulated scenes generated through Blender are used for training. VOID achieves better visual consistency and realistic object behavior. The model is open source.
INSAIT is a partner with ETH Zurich and EPFL and is part of Sofia University. The ideologist is Prof. Martin Vechev.
Comments (15)
Абе, наистина ли го могат тия хора? Дали ще докараме някакви инвести
А? Добре, ама трябва ли ни още един AI? Да видим дали ще работи наистина
Абе тва с AI-а стана малко преекспонирано напоследък... ама пък, ако наистина го могат тия от INSAIT, добре за нас. Да видим дали ще се окаже нещо полез
Абе, пичове, вие да сте видели тая новина?! INSAIT и Netflix заедно – майтап са! Честно казано, малко съм шкембе на тия AI истории, ама пък... като прочетох за премахване на обекти от видео - чак ми се усмихна. Представете си колко време ще спестят на монтажистите – нема повече да се мъчат с маски и ключове! 😂
Абе, харесва ми, че е open source. Дано не се окаже някой трик за медиите и после