跳到正文
arXiv · 机器人与计算机视觉· Siddharth Ravi, Anders R. Bargum, Hugo Anselme, Patrizio Cugia di Sant'Orsola, Alberto Cardaci, Flora Kincso Parragi, Vincent Borowiec, Line H. Clemmensen·· 13 小时前AI 评分53

Social Signal Bench:视频音频共现社会信号的证据加权评估

Social Signal Bench: Evidence-Weighted Evaluation of Co-occurring Social Signals in Video and Audio

AI 导读

该论文介绍 Social Signal Bench,包含 25 小时视频和 22 小时音频的密集标注数据集,涵盖十种社会信号与六种信号。基准提供公开训练集(含专家标注与伪标签)及私有测试集,并推出 Evidence-Weighted F1 (EW-F1) 指标以区分语义相关错误。实验显示基于该基准微调的 7B 开源模型在视频任务上超越通用前沿模型,音频任务表现相当。

来源:arXiv · 机器人与计算机视觉 · arxiv.org