美文网首页
意图识别思路

意图识别思路

作者: brandon_wang | 来源:发表于2017-09-02 18:10 被阅读924次

由于要做一个对话系统,必然要涉及到意图识别模块,所以想梳理一个意图识别的思路:

由于本人做的是一个特定领域的事情,假设以教育场景为切入点:

我们设想用户的输入语句:

比如:1.你好! (拟人话语句)

           2.浙江语文教材是什么版本的?(问答) 

           3.我女儿想报一个数学辅导班,有什么推荐的么?(推荐类)

因为我们现在要做语意识别:

目前我的思路是这样做的:

1.搜索常用对话库,如果匹配直接输出,不做分类

2.规则过滤,比较明显的先做一层过滤,直接把通过规则能分类的直接走规则

3.无法通过规则过滤的走机器学习,模型分类

因为拟人语料和问答推荐差异较大,可以定义为两类

所以先把拟人话语句和问答推荐类分开

用的是一个CNN的文本分类方法,代码如下:

https://github.com/dennybritz/cnn-text-classification-tf

4.再把归入问答和推荐类的,分类为问答 或 推荐 两类

首先,我觉得可以先做一个句子相似度的判断,即判断输入句子和已有的句子做一个相似度,

        如果相似度在某一阈值之上,则认为用户问题就是语料库中某一问题,直接输出结果。句子相似度是tf-idf和语义相似度的一个加权平均。

         如果相似度在某一阈值之下,则二度采用CNN实现的分本分类

相关文章

  • 意图识别思路

    由于要做一个对话系统,必然要涉及到意图识别模块,所以想梳理一个意图识别的思路: 由于本人做的是一个特定领域的事情,...

  • 意图识别

    1.意图识别各种模型比较 2.基于fastText的意图识别框架

  • 意图识别

    1.使用fastText对文本进行分类--小插曲 2.对话系统原理和实践 3.新闻上的文本分类:机器学习大乱斗

  • Pytext上手——Intent-Slot 模型实战

    1 意图分类任务简介 对话系统里,首先要对用户的输入进行领域、意图识别和槽抽取。深度学习发展以后,意图识别的方法多...

  • 搜索-意图识别

    outline 近段时间在研究搜索的相关技术,在工作中主要涉及到资讯搜索功能的实现。我们采用了elasticsea...

  • 每日一觉

    每时一觉: 如果想理解自己, 从观察识别到自己的意图开始…… 如果想理解别人, 从观察识别到别人的意图开始…… 如...

  • 芒果TV商品意图识别top3思路分享

    比赛简介 主办方提供了商品名称和用户query数据供选手进行模型训练,希望选手能够设计出一套高效、精准的商品意图识...

  • TalkingData 锐眼看世界 2017-06-29

    锐眼视点: Salesforce 推出新版Einstein,增加情绪感知、意图识别和对象识别功能; Nest迄今最...

  • 意图识别预处理一

    在上一章里面,我讲的是一个意图识别的思路或者说流程,但是并没有给出具体实现方案。 在本章,我们给出一些细节信息。 ...

  • 信说红月 01 情境与意图

    本文思路摘要: 什么是情境? 什么是意图? 意图跟情境什么关系? 意图清晰的作用? 有了意图后然后又怎么做呢?怎么...

网友评论

      本文标题:意图识别思路

      本文链接:https://www.haomeiwen.com/subject/ndjrjxtx.html