OpenMixer: новы падыход да выяўлення дзеянняў з адкрытым слоўнікам

2024-12-24 16:54
 0
OpenMixer - гэта новы адкрыты метад выяўлення дзеянняў, які выкарыстоўвае семантыку і магчымасць лакалізацыі вялікіх візуальных мадэляў мовы (VLM) у спалучэнні з распрацоўкай трансфарматараў выяўлення на аснове запытаў (DETR) для паспяховага выяўлення дзеянняў у адкрытым свеце. Эксперыменты паказваюць, што OpenMixer пераўзыходзіць базавыя метады ў выяўленні як бачных, так і нябачных дзеянняў.