OpenMixer: un nuovo approccio al rilevamento delle azioni del vocabolario aperto

OpenMixer è un nuovo metodo di rilevamento delle azioni con vocabolario aperto che sfrutta la semantica e la localizzabilità di grandi modelli di linguaggio visivo (VLM), combinati con la progettazione di trasformatori di rilevamento basati su query (DETR), per risolvere con successo il rilevamento delle azioni nel mondo aperto. Gli esperimenti dimostrano che OpenMixer supera i metodi di base nel rilevamento di azioni visibili e invisibili.