OpenMixer: новый подход к обнаружению действий открытого словаря

OpenMixer — это новый метод обнаружения действий с открытым словарем, который использует семантику и локализуемость больших моделей визуального языка (VLM) в сочетании с разработкой преобразователей обнаружения на основе запросов (DETR) для успешного решения вопросов обнаружения действий в открытом мире. Эксперименты показывают, что OpenMixer превосходит базовые методы в обнаружении как видимых, так и невидимых действий.