首页 KETTLE组件介绍及使用

KETTLE组件介绍及使用

举报
开通vip

KETTLE组件介绍及使用-.--.可修编-.KETTLE组件介绍与使用4.1Kettle使用Kettle提供了资源库的方式来整合所有的工作,;1〕创立一个新的transformation,点击保存到本地路径,例如保存到D:/etltest下,保存文件名为Trans,kettle默认transformation文件保存后后缀名为ktr;2〕创立一个新的job,点击保存到本地路径,例如保存到D:/etltest下,保存文件名为Job,kettle默认job文件保存后后缀名为k;4.2组件树介绍4.2.1Transformation的主对象树和...

KETTLE组件介绍及使用
-.--.可修编-.KETTLE组件介绍与使用4.1Kettle使用Kettle提供了资源库的方式来整合所有的工作,;1〕创立一个新的transformation,点击保存到本地路径,例如保存到D:/etltest下,保存文件名为Trans,kettle默认transformation文件保存后后缀名为ktr;2〕创立一个新的job,点击保存到本地路径,例如保存到D:/etltest下,保存文件名为Job,kettle默认job文件保存后后缀名为k;4.2组件树介绍4.2.1Transformation的主对象树和核心对象分别如下列图:Transformation中的节点介绍如下:MainTree:菜单列出的是一个transformation中根本的属性,可以通过各个节点来查看。DB连接:显示当前transformation中的数据库连接,每一个transformation的数据库连接都需要单独配置。Steps:一个transformation中应用到的环节列 关于同志近三年现实表现材料材料类招标技术评分表图表与交易pdf视力表打印pdf用图表说话 pdf Hops:一个transformation中应用到的节点连接列表核心对象菜单列出的是transformation中可以调用的环节列表,可以通过鼠标拖动的方式对环节进展添加:Input:输入环节Output:输出环节Lookup:查询环节Transform:转化环节Joins:连接环节Scripting:脚本环节4.2.2Job的主对象树和核心对象分别如下列图:MainTree菜单列出的是一个Job中根本的属性,可以通过各个节点来查看。DB连接:显示当前Job中的数据库连接,每一个Job的数据库连接都需要单独配置。Jobentries/作业工程:一个Job中引用的环节列表核心对象菜单列出的是Job中可以调用的环节列表,可以通过鼠标拖动的方式对环节进展添加。每一个环节可以通过鼠标拖动来将环节添加到主窗口中。并可通过shift+鼠标拖动,实现环节之间的连接。4.3使用举例14.3.1建立转换选中列表中的的“表输入〞、“表输出〞、“插入/更新〞,拖拽到右侧工作区。鼠标选中节点键盘按shift键,拖拽即可连线。下列图是一个转换,有两个动作,一是直接从数据源表同步数据到目标表,一是检查源表的插入和更新,同步到目标表。黑色线为生效,灰色线为失效,节点和连接可双击进展编辑。可预览数据是否正确。双击编辑表输出动作。操作的数据库名要获取的字段设置如下所示:点击“Enterfieldmapping/输入字段映射〞进展字段选择。选择要用的字段后点确定,注意字段的约束条件。编辑好后点击上面的执行即可。左侧参数暂不说明,执行完成后可以观看下方的日志。双击编辑“插入/更新〞动作。然后点击运行。执行前,在源库里加条新纪录。确定作业执行正常后可以保存作业,如保存路径到本地磁盘地址C:\etl2.ktr。4.3.2建立执行的JOB/作业建立JOB的前提是有可以完整执行的作业,上面步骤定制的作业进展保存。从左侧列表拖拽“START〞,“Success〞,“转换〞,“发送〞到工作区并连接,如下列图。然后双击“START〞动作进展编辑。然后双击编辑“Transformation〞活动。转换文件名选择上一步编辑好的.ktr文件双击发送,参数设置如下:编辑完成后直接点击运行即可。运行后查看日志。当任务执行以后可以查看相对应的日志,也可自行配置日志。4.4使用举例2本例是完成读取目录下的.log文件,找出其中包含错误代码的行,并统计个数4.4.1新建Transformation本例所用到的步骤和组件如下列图所示:连接图如下所示:a)获取文件名设置如下:其中已选择的文件名称的变量都需要手写输入,可以点击显示文件名和预览记录检查是否配置正确。b)文本文件输入设置如下:文本文件输入选项中选择从上一步骤获取文件名,其中在输入里的字段被当做文件名一栏输入uri,步骤读取的文件名来自填写获取文件名2容选项卡的设置如下:文件类型选择CSV,分隔符自己定义,格式为mixed,编码方式选择UTF-8字段选项可设置如下:需要手写输入str名称,设置类型为Stringc)获取字符串设置如下:d)测试脚本设置如下其中可以点击获取变量和测试脚本来测试脚本的正确性点击测试脚本界面如下:脚本代码由JavaScript编写e)聚合记录聚合记录就是将上一步的结果进展聚合,这里的名称字段是点击获取字段获取的,而不是自己输入的,newname一列是制定新名字,可以自己输入填写,f)文本文件输出文本文件的输出设置如下,其中字段属性的设置名称字段是点击获取字段自动获取的,不是输入的,设置如下g)运行日志显示如下:4.4.2建立JobJob的建立于4.3中方法一样,用到的组件如下所示转换组件设置如下:将上一步保存的*.ktr添加到转换名文件路径中点击运行按钮:生成日志如下所示:
本文档为【KETTLE组件介绍及使用】,请使用软件OFFICE或WPS软件打开。作品中的文字与图均可以修改和编辑, 图片更改请在作品中右键图片并更换,文字修改请直接点击文字进行修改,也可以新增和删除文档中的内容。
该文档来自用户分享,如有侵权行为请发邮件ishare@vip.sina.com联系网站客服,我们会及时删除。
[版权声明] 本站所有资料为用户分享产生,若发现您的权利被侵害,请联系客服邮件isharekefu@iask.cn,我们尽快处理。
本作品所展示的图片、画像、字体、音乐的版权可能需版权方额外授权,请谨慎使用。
网站提供的党政主题相关内容(国旗、国徽、党徽..)目的在于配合国家政策宣传,仅限个人学习分享使用,禁止用于任何广告和商用目的。
下载需要: 免费 已有0 人下载
最新资料
资料动态
专题动态
个人认证用户
ysdg83
从事建筑公司质量、技术
格式:doc
大小:2MB
软件:Word
页数:0
分类:教育学
上传时间:2021-10-24
浏览量:7