OpenMixer: Uusi lähestymistapa avoimen sanaston toimintojen havaitsemiseen

OpenMixer on uusi avoimen sanaston toimintotunnistusmenetelmä, joka hyödyntää suurten visuaalisten kielimallien (VLM) semantiikkaa ja lokalisoitavuutta yhdistettynä kyselypohjaisten tunnistusmuuntajien (DETR) suunnitteluun, jotta se ratkaisee menestyksekkäästi toiminnan havaitsemisen avoimessa maailmassa. Kokeet osoittavat, että OpenMixer ylittää perusmenetelmät sekä havaittujen että näkymättömien toimintojen havaitsemisessa.