什么是词频?请简述统计词频的基本操作步骤。

发布网友发布时间：2022-04-24 22:28

共2个回答

热心网友时间：2023-10-13 08:40

词频，是一种用于情报检索与文本挖掘的常用加权技术，用以评估一个词对于一个文件或者一个语料库中的一个领域文件集的重复程度。词频统计为学术研究提供了新的方法和视野。

操作如下：

1、选择要统计词频的文本。

2、打开文本并读取文本open("文件名.txt","r")，这里是txt=open("命运.txt","r").read()()。

3、使用循环依次读取文本中的每个字符，并且替换掉文本中的换行符。

4、创建字典类型，对字符出现的次数进行累加。

5、字典中出现的字符按照【值】的大小进行排序。

6、输出需要统计的词频的数目即可。

热心网友时间：2023-10-13 08:41

TF-IDF（termfrequency–inverse document frequency）词频--反转文件频率，是一种用于情报检索与文本挖掘的常用加权技术，用以评估一个词对于一个文件或者一个语料库中的一个领域文件集的重复程度。词频统计为学术研究提供了新的方法和视野。