跳到正文
arXiv AI· Siddharth Ravi, Anders R. Bargum, Hugo Anselme, Patrizio Cugia di Sant'Orsola, Alberto Cardaci, Flora Kincso Parragi, Vincent Borowiec, Line H. Clemmensen·· 21 小时前评分49

Social Signal Bench: Evidence-Weighted Evaluation of Co-occurring Social Signals in Video and Audio

摘要

我们引入社交信号基准(Social Signal Bench),一个47小时的密集标注基准,用于评估社交信号识别与参与,包含两个数据集:社交信号基准视频(25小时),涵盖十种音频视觉记录中的社交信号;社交信号基准音频(22小时),涵盖音频仅记录中的六种信号。每个数据集配对一个公开的在线对话视频训练集,其中10小时由专家标注,其余为伪标注,与一个私有的专家标注测试集(覆盖四个对话领域)。我们还提出证据加权F1(EW-F1),通过标注者证据加权参考标签,并通过最优逐帧匹配赋予语义相关预测分级信用。

推荐理由

请对照arXiv AI原文,核对完整说明及适用条件。

本站只提供摘要与原文入口。完整内容请阅读原文。

来源:arXiv AI · arxiv.org