OpenMixer: Нов подход за откриване на действия с отворен речник

OpenMixer е нов метод за откриване на действия с отворен речник, който използва семантиката и възможността за локализиране на широкомащабни визуални езикови модели (VLM), комбинирани с дизайна на трансформатори за откриване, базирани на заявки (DETR), за успешно решаване на откриване на действия в отворения свят. въпрос. Експериментите показват, че OpenMixer превъзхожда базовите методи при откриване както на видими, така и на невидими действия.