OpenMixer: Nový přístup k detekci akcí otevřeného slovníku

OpenMixer je nová metoda detekce akcí s otevřenou slovní zásobou, která využívá sémantiku a lokalizovatelnost velkých modelů vizuálního jazyka (VLM) v kombinaci s návrhem transformátorů detekce založených na dotazech (DETR), aby úspěšně řešila otázku detekce akcí v otevřeném světě. Experimenty ukazují, že OpenMixer překonává základní metody v detekci viditelných i neviditelných akcí.