代码 | 如何用Python计算知识宽度(赫芬达尔—赫希曼指数)
赫芬达尔-赫希曼指数(Herfindahl-Hirschman Index)作为一种衡量市场集中度的经济指标,通常用于分析产业或市场中企业份额的分布情况。近年来有学者使用HHI算法测量专利的所涉领域的集中程度,反应专利的知识宽度。我们是否可能利用HHI来量化某个语料库中不同词汇的使用频率分布,以此来分析个人、群体或时代的语言风格、词汇丰富度、或是语言标准化与变化的趋势。如果词汇分布非常均匀,表明语言使用中的词汇多样性高,HHI值就会较低;反之,如果少数词汇占据了大部分文本空间,表明词汇使用集中,HHI值则较高。...