哪些地方不宜使用 IDF?
在什么情况下逆文档频率在信息检索中没有用?
What are the cases where Inverse Document Frequency is not useful in information retrieval?
如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。
绑定邮箱获取回复消息
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
在什么情况下逆文档频率在信息检索中没有用?
What are the cases where Inverse Document Frequency is not useful in information retrieval?
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
接受
或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
发布评论
评论(1)
如果在您的系统中,您不想比频繁出现的术语更重视罕见术语,则您可能不想使用 IDF。此外,计算 idf 是一项成本高昂的操作。从最常用的评分方案(即 lnc.ltc)中我们不计算文档中出现的术语的 idf 分数这一事实可以明显看出这一点。
此外,如果您的搜索引擎仅处理一个单词查询,则使用 idf 是没有用的,因为每个文档都相同。希望有帮助
You may not want to use IDF if in your system, you do not want to weigh rare terms more heavily than the frequently occurring terms. Moreover, computing idf is a costly operation. This is evident from the fact that in the most commonly used scoring scheme i.e lnc.ltc we do not compute the idf scores for terms occurring in the document.
Moreover, if your search engine only processes one word queries, using idf is useless as if will be the same for each document. Hope it helps