美文网首页数仓ETL工具之Kettle
Kettle07:Kettle查询控件

Kettle07:Kettle查询控件

作者: 勇于自信 | 来源:发表于2021-05-12 14:55 被阅读0次

本章讲解Kettle如下四个查询控件的使用案例:
01 HTTP client
02 数据库查询
03 数据库连接
04 流查询

查询

查询是转换里面的第七个分类。
查询是用来查询数据源里的数据并合并到主数据流中。



1.HTTP client

HTTP client是使用GET的方式提交请求,获取返回的页面内容。


自定义常量数据

自定义常量数据是用来生成一些不变的数据。



案例:
从网络上获取xml,解析出ProductID、ProductName、SupplierID、CategoryID,保存到Excel中
地址:http://services.odata.org/V3/Northwind/Northwind.svc/Products/
分析:
输入:Excel输入
查询:HTTP client
输入:Get data from XML
输出:Microsoft Excel输出

2.数据库查询

数据库查询就是数据库里面的左连接。
左连接就是两张表执行左关联查询,把左边的表数据全部查询出来。





案例:
从employees表中读取数据,根据dep_id从departments表获取dep_name,保存到Excel中
分析:
输入:表输入
查询:数据库查询
输出:Microsoft Excel输出


3.数据库连接

数据库连接可以执行两个数据库的查询,和单参数的表输入。




案例:
从departments表中读取数据,连接到另外一个数据库的employees,把数据保存到Excel
分析:
输入:表输入
查询:HTTP client
输出:Microsoft Excel输出


4.流查询

流查询在查询前把数据都加载到内存中,并且只能进行等值查询。





案例:
从Excel读取employess和departments的数据,根据dep_id来查询dep_name,把数据保存到Excel
分析:
输入:Excel输入
查询:流查询
输出:Microsoft Excel输出


相关文章

  • Kettle07:Kettle查询控件

    本章讲解Kettle如下四个查询控件的使用案例:01 HTTP client02 数据库查询03 数据库连接04 ...

  • Kettle常用控件

    Spoon.bat:图形界面方式启动作业和转换设计器 Pan.bat:命令行方式执行转换 Kitchen.bat:...

  • Kettle03:Kettle输出控件

    本章讲的kettle输出组件,以下几种类型的案例01 Excel输出02 文本文件输出03 SQL文件输出04 表...

  • Kettle04:Kettle转换控件

    本章讲解如下几种转换组件案例:01 Concat fields02 值映射03 增加常量04 增加序列05 字段选...

  • Kettle05:Kettle应用控件

    本章讲如下应用控件的案例:01 替换NULL值02 写日志03 发送邮件 应用 应用是转换里面的第五个分类。应用都...

  • Kettle02:Kettle输入控件

    本章介绍以下输入控件的使用案例:01 CSV文件输入02 文本文件输入03 Excel输入04 多文件合并05 X...

  • Kettle09:Kettle统计控件

    统计 1.统计是转换里面的第十三个分类。2.统计是提供数据的采样和统计功能。 分组 分组是按照某一个或某几个进行分...

  • Kettle10:Kettle映射控件

    映射 1.映射是转换里面的第十八个分类。2.映射是用来定义子转换,便于封装和重用。 映射(子转换) 映射(子转换)...

  • Kettle08:Kettle连接控件

    本章讲解一下连接控件的案例:01 合并记录02 记录关联(笛卡尔积)03 记录集连接 连接 1.连接是转换里面的第...

  • Kettle11:Kettle脚本控件

    本章讲解以下三种脚本的案例01 javascript脚本02 java脚本03 执行SQL脚本 脚本 1.脚本是转...

网友评论

    本文标题:Kettle07:Kettle查询控件

    本文链接:https://www.haomeiwen.com/subject/dkqadltx.html