跳到正文
Hugging Face Daily Papers·· 22 天前AI 评分43

IntReal:多模态交错生成数据集与评测基准发布

IntReal: A Real-World Dataset and Benchmark for Multimodal Interleaved Generation

AI 导读

IntReal 提出包含 IntReal-100K 真实世界数据集及评测套件,填补了多模态交错生成任务缺失与细粒度评估协议空白。该套件在七维能力上实现低指标冗余(最大成对 Spearman ρ≤0.42)且与人类判断高度一致(83.3% 准确率)。基准测试四大类统一多模态模型并验证了后训练策略的有效性,支持模态特定优化而非全程联合训练。

来源:Hugging Face Daily Papers · arxiv.org