arXiv cs.HC· 自如教育观察·· 3 天前精选
员工只说一次的顾虑，摘要有86%会漏掉
AI 导读
一家公司2,586条员工意见经大语言模型摘要后，研究团队发现：批评内容总体能保留下来，但只被一人提到的具体担忧，有86%会从领导摘要中消失。问题主要在于按出现频率筛选，不是简单的正负情绪偏差。
推荐理由
Reviewed Edu@AI import
正文
作者提出声音保留比率审计大语言模型员工意见摘要中的代表性偏差，并分析一家全球服务公司的2,586条英德双语回应及45份领导摘要。摘要保留了批评主题，但单次出现的担忧有86%被遗漏，短文本及仅德语内容也较易丢失。频率控制后情绪没有独立影响。结果来自单一组织的摘要流程，不能直接推广到所有总结模型。
来源：arXiv cs.HC · arxiv.org