多模态大模型能力测评：Bard 是你需要的吗？

?最新资讯?
为了对多模态大模型的能力进行全面、系统的测评，研究者们提出了全面评估框架LVLM-eHub和Tiny LVLM-eHub。OpenAI展示了GPT-4的多模态能力，但视觉输入尚未开放使用。学术界和工业界也开始关注多模态大模型，如LLaMA-Adapter、MiniGPT-4和Bard。然而，学术界的模型评估有限，缺乏真实用户体验的性能对比。LVLM-eHub提供了综合评估框架，并发布了多模态大模型竞技场，供用户提问和投票。此外，还推出了精简版的Tiny LVLM-eHub，以便快速评估和迭代。综合考虑各种多模态能力和数据集，包括视觉感知、视觉推理、视觉常识等。多模态大模型竞技场是一个模型能力对比的用户评测平台。评估方法包括词匹配和多提示次投票评估。详情请参考论文和项目网址。
来源：https://www.jiqizhixin.com/