xid32 /NAACL_2025_TWM
我们介绍了时间工作记忆(TWM),旨在增强多模态基础模型(MFM)的时间建模能力。该即插即用模块可以轻松集成到现有MFM。通过我们的TWM,九个最先进的模型在质量保证、字幕和检索任务中展现出显著的性能提升。
Python317
multimodal-foundation-model 话题在 GitHub 上没有填写简介,这里按 Star 数汇总最相关的热门仓库。
我们介绍了时间工作记忆(TWM),旨在增强多模态基础模型(MFM)的时间建模能力。该即插即用模块可以轻松集成到现有MFM。通过我们的TWM,九个最先进的模型在质量保证、字幕和检索任务中展现出显著的性能提升。
[NIPS2023] Code and Model for VAST: A Vision-Audio-Subtitle-Text Omni-Modality Foundation Model and Dataset
MADELEINE: multi-stain slide representation learning (ECCV'24)
(NeurIPS 2025) Official implementation for "MJ-Bench: Is Your Multimodal Reward Model Really a Good Judge for Text-to-Image Generation?"
[ICCV 2025] The official implementation for EgoM2P: Egocentric Multimodal Multitask Pretraining.