美文网首页
doc特征结构化—query特征结构化

doc特征结构化—query特征结构化

作者: 活着活法 | 来源:发表于2016-08-04 19:16 被阅读0次

项目需求

结构化的目的:由于文档、query中的信息都是参数化是人可读,但机器不方便机器自动化处理,所以需要结构化。——结构化,为特征工程提供输入。经过特工程,就可以喂给模型进行训练了。

所谓结构化,是将原本不规整的数据,转换成规整的数据。例如:10万公里->10;1_2->102;parameter110:13->13;

需求分析:

1. 结构化的数据源,有HBASE ;OlineDB 。——数据内容分:doc数据;类目表、地域表等数据。

2.满足分布式;与多线程 两种场景

3.多个类目,三端app pc m 

4. 复用;解耦;方便测试——分布式场景,一般不方便测试

5.类似业务,架构统一,方便维护

6.配置简单

方案设计:

目录结构设计:

架构图:

类图:

时序图:

相关文章

  • doc特征结构化—query特征结构化

    项目需求: 结构化的目的:由于文档、query中的信息都是参数化是人可读,但机器不方便机器自动化处理,所以需要结构...

  • 简单的查询语句

    一、结构化查询语言 结构化查询语言(Structured Query Language)简称SQL结构化查询语言是...

  • 简单查询

    一、结构化查询语言 结构化查询语言简介 结构化查询语言(Structured Query Language)简称S...

  • MYSQL学习——简单查询

    一.结构化查询语言 1.结构化查询语言简介 结构化查询语言(Structured Query Language)简...

  • SQL 和 SQLite

    一.SQL Structured Query Language 结构化查询语言 结构化查询语言(Structure...

  • TensorFlow2 特征列 feature_column

    特征列通常用于对结构化数据实施特征工程时候使用,图像或者文本数据一般不会用到特征列。 tf.feature_col...

  • 各种英文缩写含义

    SQL:结构化查询语言(Structured Query Language)

  • 2018-11-12 SQL简单查询

    结构化查询语言: 结构化查询语言(Structured Query Language)简称SQL, 是操作和检索关...

  • 基于sklearn的文本特征抽取

    理论 机器学习的样本一般都是特征向量,但是除了特征向量以外经常有非特征化的数据,最常见的就是文本 结构化数据 当某...

  • 大脑的喜好

    今天21天结构化思维训练营开课了, 课程中首先讲了大脑的思维习惯,以及结构化思维的特征。 复盘: 要点: 思维习惯...

网友评论

      本文标题:doc特征结构化—query特征结构化

      本文链接:https://www.haomeiwen.com/subject/jrthsttx.html