MultiBench 是一个系统性的且统一的大规模多模态学习基准，涵盖 15 个数据集，10 个模态，20 个预测任务，6 个研究领域。 MultiBench 提供自动化的端到端机器学习管道，可简化和标准化数据加载、实验设置和模型评估。为了实现整体评估，MultiBench 提供评估方法来研究 (1) 泛化；(2) 时间和空间复杂性，以及 (3) 模态稳健性。