Standardizing the Measurement of Text Diversity: A Tool and a Comparative Analysis of Scores
标准化文本多样性测量:一种工具和评分的比较分析
机构 * Northeastern University(东北大学) ; Adobe Research(Adobe研究) ; Pattern Data(Pattern Data公司) ; Ithaca College(伊特纳学院)
AI总结 本文提出了一种标准化文本多样性测量工具,通过开源包和交互平台分析文本重复,发现压缩算法与n-gram同质性评分相似,且多种指标组合能有效报告文本多样性。
Comments AACL 2025