技术
TF-IDF(词频-逆文档频率)
TF-IDF是一种统计方法,用于评估词语对文档的重要程度,常用于信息检索和文本挖掘。
详细解释
TF-IDF由词频(TF)和逆文档频率(IDF)相乘得到。TF衡量词在文档中出现的频率,IDF衡量词的稀有程度。该方法能过滤常见词,突出重要词。尽管在深度学习中不再流行,但仍是文本分类、搜索引擎等任务的基线方法。
别名与相关写法
tf-idf
TF-IDF是一种统计方法,用于评估词语对文档的重要程度,常用于信息检索和文本挖掘。
TF-IDF由词频(TF)和逆文档频率(IDF)相乘得到。TF衡量词在文档中出现的频率,IDF衡量词的稀有程度。该方法能过滤常见词,突出重要词。尽管在深度学习中不再流行,但仍是文本分类、搜索引擎等任务的基线方法。