美文网首页
任务1:词向量分布

任务1:词向量分布

作者: 高斯纯牛奶 | 来源:发表于2020-04-28 11:44 被阅读0次

要点一:提问:词向量是学习得来的吗?

答:是的。段落+模型->词向量

image

要点二:什么是语言模型

image

?训练语言模型是要让他判断“语法通顺”的这个能力更强

?语言模型的意义在于定义一个目标函数,语言模型的使用方式是计算联合概率:

语言模型训练时要最大化样本集的概率

image

要点三:模型总览

image

如何判断是否是基于语言模型的训练:w1、w2、w3按顺序训练就是语言模型。目标函数是基于语言模型的

image

相关文章

网友评论

      本文标题:任务1:词向量分布

      本文链接:https://www.haomeiwen.com/subject/qmkvwhtx.html