美文网首页
如何把odps上的表同步到es并将结果修改

如何把odps上的表同步到es并将结果修改

作者: 起个什么呢称呢 | 来源:发表于2017-11-23 17:02 被阅读33次

    首先,需要三个脚本

    1.cleaner.js

    2.schema.json

    3.manual.sh

    Cleaner.js  上图

    如图

    1.有些表需要timestamp这个字段。但是对于一些维表。这个字段是不存在的。,所以依赖自身的dt。但dt是依赖父类的。所以在这里添加

    2.这里是和4处对应的。

    3.设置id

    4.处理映射

    schema.json就是结构体

    如图

    manual.sh

    相关文章

      网友评论

          本文标题:如何把odps上的表同步到es并将结果修改

          本文链接:https://www.haomeiwen.com/subject/vzgzvxtx.html