tf-idf

tf-idf

文章 0 浏览 4

哪个更省时?文件存储或 SQLite

我正在开发一个 Firefox 扩展,用作用户分析和 Web 个性化引擎。需要存储网页的TF-IDF相关数据。我的问题是,哪个会产生更快的简单搜索结果? 一个。…

雄赳赳气昂昂 2024-12-21 10:14:40 0 0

如何在 MySQL 中标记字符串?

我的项目正在从平面 Excel 文件导入超过 50 万行数据的大量数据,这些文件是由团队手动创建的。现在的问题是,这一切都需要标准化,以便客户搜索。例…

独行侠 2024-12-21 06:04:45 0 0

Lucene 中查询和文档之间的余弦相似度

我想获得长查询和集合中的文档之间的余弦相似度。我使用 Lucence 来索引集合并提交查询来检索文档。 但是,对于某些查询,我收到以下错误。 "Caused b…

偷得浮生 2024-12-02 03:28:57 3 0

Python和tfidf算法,让它更快吗?

我正在使用 Python 在 Web 应用程序中实现 tf-idf 算法,但是它运行速度非常慢。我基本上做的是: 1)创建2个字典: 第一个字典:键(文档ID),值(…

梦幻的味道 2024-12-01 11:45:11 0 0

如何使用 TF-IDF 权重对相关性进行排名?

我有一组关键术语,并计算了 TF-IDF 权重以及每个术语的标签频率和术语计数,并保存在数据库中。 给定一个单数术语,如何使用这些 DB 值生成一组相关…

新人笑 2024-11-17 19:39:35 5 0

返回向量空间模型中表示的相似文档的算法

我有一个包含大约 30,000 个文档的 tf-idf 向量的数据库。 我想为给定的文档返回一组类似的文档 - 大约 4 个左右。 我考虑过在数据上实现 K-Means(聚…

可可 2024-11-16 14:53:23 6 0

如何使用朴素贝叶斯实现 TF_IDF 特征加权

我正在尝试实现朴素贝叶斯分类器进行情感分析。我打算使用 TF-IDF 加权度量。我现在有点卡住了。 NB一般使用词(特征)频率来寻找最大似然。那么如何…

有木有妳兜一样 2024-11-14 09:34:27 4 0

如何从文本语料库中提取语义相关性

目标是评估大型文本语料库中术语之间的语义相关性,例如“警察”和“犯罪”应该比“警察”和“山地”具有更强的语义相关性,因为它们倾向于共同使用。…

时光病人 2024-11-09 11:58:12 7 0

Lucene 自定义数字字段评分

除了在文本内容字段上使用 tf-idf 相似性进行标准术语搜索之外,我还希望根据数字字段的“相似性”进行评分。这种相似性将取决于查询中的值和文档中的…

分分钟 2024-11-05 20:48:34 4 0

如何计算文档字段中特殊术语的频率?

我只是想知道Lucene如何做到这一点,从源代码中我知道它在使用IndexReader初始化搜索器时打开并加载段文件,但是有没有好心人告诉我Lucene如何计算文…

じ违心 2024-11-02 05:21:01 6 0

矩阵 TFIDF 的降维

我计算了 TFIdf(术语频率,逆文档频率),我发现在这一步之后,有必要使用 LSI、卡方检验等方法来减少我的矩阵的维数..., 我不知道我如何在java中实…

忘羡 2024-10-28 07:15:23 6 0

使用java程序计算余弦相似度

我在计算相似性度量来为我的最终项目开发搜索引擎时遇到问题。 我必须在java中使用tf idf + cosine相似度,但我不知道如何计算它。 供您参考,我有自…

写给空气的情书 2024-10-27 02:38:58 3 0

在 Lucene 中,我可以搜索一个索引但使用另一个索引中的 IDF 吗?

我正在构建一个系统,我只想显示过去几天索引的结果。 此外,如果我只想返回几天的结果(数千个文档),我不想维护包含一百万个文档的巨型索引。 另一…

菊凝晚露 2024-10-21 01:20:37 6 0

Java API:下载并计算给定网页的 tf-idf

我是红外技术的新手。 我正在寻找一个基于 Java 的 API 或工具来执行以下操作。 下载给定的一组 URL 提取标记 删除停用词 执行词干分析 创建倒排索引 …

赠意 2024-10-17 10:28:13 10 0

多个文档的 IDF 如何不同?

我正在使用 LETOR 制作一个信息检索系统。他们使用特遣部队和以色列国防军。 我确信 TF 是依赖于查询的。但 IDF 应该是,但是: “请注意,IDF 是独立…

小耗子 2024-10-14 15:10:25 7 0
更多

推荐作者

⊕婉儿

文章 0 评论 0

ydss

文章 0 评论 0

我纯我任性

文章 0 评论 0

夏末

文章 0 评论 0

来日方长

文章 0 评论 0

mb_AmI35Sdf

文章 0 评论 0

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文