问题：
以今日头条为例的搜索场景，推荐的 Query 相关词 Box 出现大量重复，降低有效曝光
思路：
字面匹配：simhash 编辑距离 海明距离
语义匹配：WE相似 BERT
Google 广泛使用在页面去重的 Simhash 是首先想到的方法
simhash 的简单实现：https://www.jianshu.com/p/8007c5aaef21
Google 在 2018 年推出了刷新 11 项 NLP 指标的 BERT
BERT 可以将短语进行向量化，从而比较相似度，并且其提供的 pre-trained 模型十分方便
BERT 的问题是依赖较为麻烦，难以处理
资料：
https://www.cnblogs.com/huilixieqi/p/6493089.html
问题： 以今日头条为例的搜索场景，推荐的 Query 相关词 Box 出现大量重复，降低有效曝光 思路： 字面匹配...
背景：计算短文本与长文本的相似度，如在搜索场景中，计算query和doc的相似度，用于排序。 经过调研，找到百度的...
聚类分析、判别分析 聚类分析和判别分析有相似的作用，都是起到分类的作用。但是，判别分析是已知分类然后总结出判别规则...
7.1快速评分及排序 思想：把查询向量看成是1,<1,1,1,..>，这样的话，计算query和文档d的余弦相似度...
有时候你会遇到和自己某方面很像的人，可是并不一定会喜欢对方，甚至会有些不耐烦和暴燥。后来，我发现：或许这是不喜欢自...
https://blog.csdn.net/lipengcn/article/details/85313971[h...
余弦相似度欧氏距离杰卡德相似度皮尔逊相似度
（一）余弦相似度、向量空间模型 1、相似度 • 相似度度量：计算个体间相似程度• 相似度值越小，距离越大，相似度值...
狭义Jaccard相似度: 计算两个集合之间的相似程度，元素的“取值”为0或1对集合A和B，Jaccard相似度计...
线性判别式分析（linear discriminant analysis , LDA）跟PCA非常相似、唯一不同的...
本文标题：Query 相似度判别
本文链接：https://www.haomeiwen.com/subject/lbkvkqtx.html
网友评论