美文网首页
同义词扩展

同义词扩展

作者: 乌鲁木齐001号程序员 | 来源:发表于2020-06-12 21:54 被阅读0次

导论

有些时候,需要给一些词配置同义词,比如用户搜“累了”,什么结果都搜不到,如果给“累了”配置了同义词“酒店”,其搜索结果和搜索“酒店”的结果一样。


创建 synomyms.txt

  • 创建目录为:/home/lixinlei/application/elasticsearch/7.3.0/elasticsearch-node1/plugins/ik/config
  • 把互为同义词的一组词写在一行里;
凯悦,锡箔,红桃

拷贝 synomyms.txt 到其他节点

  • cp synomyms.txt /home/lixinlei/application/elasticsearch/7.3.0/elasticsearch-node2/plugins/ik/config
  • cp synomyms.txt /home/lixinlei/application/elasticsearch/7.3.0/elasticsearch-node2/plugins/ik/config

重新定义索引 shop

  • 要先删除 shop,再创建 shop,再索引数据到 shop;
  • 注意 synonyms_path 后面跟的路径是相对路径,相对于 ES_HOME/config;
# 删除索引 shop
DELETE /shop

# 重建索引 shop,使用自定义的,使用同义词过滤器的分词器
PUT /shop
{
  "settings": {
    "number_of_shards": 1,
    "number_of_replicas": 1,
    "analysis": {
      "filter": {
        "my_synonym_filter": {
          "type": "synonym",
          "synonyms_path": "../plugins/ik/config/synomyms.txt"
        }
      },
      "analyzer": {
        "ik_syno":{
          "type":"custom",
          "tokenizer":"ik_smart",
          "filter":["my_synonym_filter"]
        },
        "ik_syno_max":{
          "type":"custom",
          "tokenizer":"ik_max_word",
          "filter":["my_synonym_filter"]
        }
      }
    }
  },
  "mappings": {
    "properties": {
      "id":{"type": "integer"},
      "name":{"type": "text", "analyzer": "ik_syno_max", "search_analyzer": "ik_syno"},
      "tags":{"type": "text", "analyzer": "whitespace", "fielddata": true},
      "location":{"type": "geo_point"},
      "remark_score":{"type": "double"},
      "price_per_man":{"type": "integer"},
      "category_id":{"type": "integer"},
      "category_name":{"type":"keyword"},
      "seller_id":{"type": "integer"},
      "seller_remark_score":{"type":"double"},
      "seller_disabled_flag":{"type":"integer"}
    }
  }
}

重新分词 “凯悦”

  • 得到“凯悦”是因为自定义词库中有这个词;
  • 剩下俩词是因为它们和凯悦一起写进了 synomyms.txt 中;
GET /shop/_analyze
{
  "field": "name",
  "text": "凯悦"
}

---

{
  "tokens" : [
    {
      "token" : "凯悦",
      "start_offset" : 0,
      "end_offset" : 2,
      "type" : "CN_WORD",
      "position" : 0
    },
    {
      "token" : "锡箔",
      "start_offset" : 0,
      "end_offset" : 2,
      "type" : "SYNONYM",
      "position" : 0
    },
    {
      "token" : "红桃",
      "start_offset" : 0,
      "end_offset" : 2,
      "type" : "SYNONYM",
      "position" : 0
    }
  ]
}

使用“凯悦”的同义词搜索,得到和搜“凯悦”一样的结果

  • BINGO!
GET /shop/_search
{
  "query": {
    "match": {
      "name": "锡箔"
    }
  }
}

相关文章

  • 信息检索复习(5)——相关反馈及查询扩展

    查询优化 全局方法 基于同义词词典或wordnet的查询扩展或重构方法 自动构造同义词词典并基于它进行查询扩展 类...

  • 同义词扩展

    导论 有些时候,需要给一些词配置同义词,比如用户搜“累了”,什么结果都搜不到,如果给“累了”配置了同义词“酒店”,...

  • 2018-7-28 托福基础写作

    同义词字典 collinsdictionary.com 同义词积累 时间,名词/形容词/动词,词义,同义词 词汇选...

  • 2019-06-09

    ****go  ➡ SYNONYMS 同义词辨析  ➡ SYNONYMS 同义词辨析  ➡ SYNONYMS 同义...

  • Oracle 重建同义词

    Oracle synonym docss64dbstar检查同义词是否有效 重建同义词

  • Oracle批量建立同义词

    Oracle批量建立同义词 建立表同义词 1.查询建立语句 2.将sql运行结果复制,然后运行,比如: 给表同义词...

  • 同义词替换

    基于同义词表,进行同义词替换 同义词词表如下,词与词之间用 \t 隔开: 代码如下: 输出: 并行处理还有点小问题...

  • Power Thesaurus--查找同义词的chrome扩展

    Power Thesaurus - Chrome 网上应用店 这个还比较全平台,设置后可以选词后即刻显示浮动窗口。...

  • 2018-7-29 托福强化写作

    语料积累 同义词字典 collinsdictionary.com 同义词积累 时间,名词/形容词/动词,词义,同义...

  • (Oracle)Synonym同义词

    天行健,君子自强不息Synonym:同义词(其实就是一个别名)创建同义词

网友评论

      本文标题:同义词扩展

      本文链接:https://www.haomeiwen.com/subject/eavntktx.html