在计算类型标记率(TTR)和Hapax丰富度(以及类似的度量)时,您是否首先对语料库进行了分类?
发布于 2021-08-30 14:52:35
据我所知,没有使用词汇密度测度的标准方法,比如类型令牌比率( Type-Token Ratio,TTR)。
将TTR应用于原始标记化文本是很常见的,特别是如果没有合适的狐猴,或者柠檬化有引入错误的风险。否则,据我所知,就我所知,没有强有力的理由。当然,保持一致是很重要的:如果要比较不同文本之间的TTR,那么TTR的计算方法应该是相同的。
https://datascience.stackexchange.com/questions/100628
复制相似问题