开发者:上海品职教育科技有限公司 隐私政策详情

应用版本:4.2.11(IOS)|3.2.5(安卓)APP下载

Celestine · 2020年02月01日

关于feature selection中TFIDF指标的疑惑

请教一下老师:

1、TF指标分为collection level和sentence level,在TFIDF中,对应的是sentence level对吗?

2、为何TF越大说明单词 越重要,而DF越大,却说明单词是个noise呢?


1 个答案

星星_品职助教 · 2020年02月04日

同学你好,

TF-IDF主要说的是TF in sentence level。


其实无论哪种衡量方法,最终都需要结合题干的具体描述才能得出结论。因为词频大,既有可能是无用的停止词,也有可能就是因为这个词重要所以才出现的多,所以需要结合其他信息才能给出最终的结果

  • 1

    回答
  • 0

    关注
  • 460

    浏览
相关问题