KETTLE-转换-映射组件

最新推荐文章于 2024-04-09 09:31:28 发布
原创 最新推荐文章于 2024-04-09 09:31:28 发布 · 置顶 · 1.4k 阅读 · 1
标签
#KETTLE
这篇博客详细介绍了Kettle中的Mapping组件，包括Mapping (sub-transformation)和Simple Mapping (sub-transformation)。Mapping组件允许使用文件选择嵌套转换，并可配置多个输入和输出。在Input和Output选项卡中，可以指定Mapping input specification和Mapping output specification。文章指出，当使用多个Output映射到不同的组件时，最后一个Output需指定Output target step names以避免结果混乱。此外，还提供了相关资料链接。

KETTLE-转换-映射组件

映射组件

Mapping (sub-transformation)

Mapping (sub-transformation)-主页面
Mapping (sub-transformation)-输入
Mapping (sub-transformation)-输出
Mapping (sub-transformation)-多输出

  • Use a file for mapping transformation为选择嵌套的转换
  • Allow multiple ‘Mapping Input’ steps in the sub-transformation和Allow multiple ‘Mapping Output’ steps in the sub-transformation为是否允许多输入和多输出
  • Input-tab页签为指定嵌套转换的Mapping input specification组件
  • Output-tab页签为指定嵌套转换的Mapping output specification组件
最低0.47元/天 解锁文章
《kettle子转换即映射》博客示例代码
10-05
《kettle子转换即映射》博客示例代码; http://blog.csdn.net/neweastsun/article/details/39804383
Kettle8.2转换组件之值映射
聚焦大数据、AI、数据库三大核心领域，分享 Flink/Spark 实时计算、数仓架构设计、AI 模型落地、数据库性能调优的实战干货，附可直接运行的源码与方案。提供企业技术内训、项目咨询与定制化服务，助力开发者与企业高效搞定数智技术难题。
03-31 1001
Kettle8.2转换组件之值映射一、相关说明二、设计转换三、转换配置四、运行转换五、结果分析 一、相关说明 需求说明： 从Excel中获取FirstName和LastName并把FirstName和LastName连接起来，输出到Excel。 值映射组件说明： 值映射就是把字段的一个值 映射成其他的值。在数据质量规范上使用非常多，比如很多系统对应性别gender字段的定义不同。 系统1：1 男、2女 系统2：f 男、m 女 数据仓库统一为：female 男、male女 实验要求： 从Excel中读取数
kettle子转换即映射
neweastsun的专栏
10-05 7706
kettle的子转换，及映射类的步骤详细介绍。是重用转换的一种有用的方式，让一些公共算法重构成子转换，供其它转换调用。
Kettle 创建 Transformation
码者人生的技术博客
01-02 4426
1.第一步，先准备数据和工具 安装好mysql以及客户端工具 数据： /*!40101 SET NAMES utf8 */; /*!40101 SET SQL_MODE=''*/; /*!40014 SET @OLD_UNIQUE_CHECKS=@@UNIQUE_CHECKS, UNIQUE_CHECKS=0 */; /*!40014 SET @OLD_FOREIG
Kettle系列: kettle标准化trans模板
weixin_34313182的博客
05-12 1494
=============================主控trans + sub trans 模式=============================针对一个具体的处理任务(比如增量加载一个表), 我认为应该最好是使用两个trans来完成这个任务,分别是主控trans 和sub trans, 其中主控trans负责流程控制(包括依赖检查+增量区间设定+异常报警), sub trans仅负...
kettle 使用基础
m0_65651209的博客
05-21 1658
文章目录一、kettle介绍什么是 Kettle运行 Spoon二、数据库连接(Database Connections)资源库配置环境变量创建资源库三、抽取数据 一、kettle介绍 什么是 Kettle Kettle 是“Kettle E.T.T.L. Envirnonment”的缩写。 用来实现：抽取、转换、装入和加载数据。 = ODS层同步传输 Spoon 是 Kettle 的图形设计用户界面，允许你运行转换或者任务 其中转换是用Pan 工具来运行，任务是用 Kitchen 来运行。Pan 是一个
Kettle8.2映射组件
聚焦大数据、AI、数据库三大核心领域，分享 Flink/Spark 实时计算、数仓架构设计、AI 模型落地、数据库性能调优的实战干货，附可直接运行的源码与方案。提供企业技术内训、项目咨询与定制化服务，助力开发者与企业高效搞定数智技术难题。
04-18 1122
Kettle8.2映射组件一、相关说明二、设计转换三、转换配置四、运行转换五、结果查看 一、相关说明 映射组件说明： 映射是用来定义子转换，便于封装和重用。主要组件有映射（子转换）、映射输入规则、映射输出规则等。 映射（子转换）组件说明： 映射（子转换）是用来配置子转换，对子转换进行调用的一个步骤。 映射输入规则组件说明： 映射输入规范是输入字段，由调用的转换输入。 映射输出规则组件说明： 映射输出规范是向调用的转换输出所有列，不做任何处理。 需求说明： 从数据库中的edu_cours
kettle的转换组件
HiterCoder
02-17 901
1、转换是转换里面的第四个分类。转换属于ETL的T，T就是Transform清洗、转换。ETL三个部分中，T花费时间最长,是一般情况下这部分工作量是整个ETL的2/3。 2、Concat fields，就是多个字段连接起来形成一个新的字段。 3、 值映射，就是把字段的一个值映射成其他的值。在数据质量规范上使用非常多，比如很多系统对应性别gender字段的定义不同。 4、增加常量就是在本身...
kettle的应用组件 、流程组件、查询组件、连接组件、统计组件、映射组件、脚本组件...
HiterCoder
02-18 354
1、应用是转换里面的第五个分类。应用都是一些工具类。 1.1、替换NULL值就是把null转换为其它的值。NULL值不好进行数据分析 1.2、写日志主要是在调试的时候使用，把日志信息打印到日志窗口。 2、流程是转换里面的第六个分类。流程主要用来控制数据流程和数据流向。 2.1、Switch/case让数据流从一路到多路。 2.2、过滤记录让数据流从一路到两路。 2.3、空操作一般作为...
kettle从入门到精通 第十五课 kettle 映射 (子转换)01
zhangjin1222的博客
01-27 864
5）更多细节参考官网https://help.hitachivantara.com/Documentation/Pentaho/9.2/Products/Simple_Mapping_(sub-transformation)1、kettle 里面的映射和java代码里面的封装是一个概念，就是将一个可复用的模块单独抽离为公共模块供其他模块引用，用到的步骤或者组件如下。2、构建子映射，子映射需要用到映射输入规范和映射输出规范两个组件，相当于输入和输出参数，如下图所示。4）输出：输出参数设置。
kettle介绍-Step之Value Mapper
weixin_43398232的博客
04-09 799
值映射步骤是将字符串值从一个值映射为另一个值。值映射步骤提供了一个简单的替代方法，在输入流中选中一个字段，通过字段值设置源值和目标值，再将映射值输出给后续步骤使用。如：值映射步骤可以和表输入步骤、表输出步骤一起使用，对表输入步骤中的字段值进行映射后，输出给表输出步骤插入到目标字段Step name：步骤的名称，在单一的转换中，名称必须唯一：下拉框选择输入步骤中需要值映射的字段名称，此项为必填。
kettle入门教程
qq_40068304的博客
11-29 1381
对input的值进行筛选，重命名等操作6.11.2.增加常量（Add constants)主要是添加常量到流中。
kettle各组件说明
cxu123321的博客
09-27 2815
kettle各组件说明 Posted on 文本文件输入(text input)：读取大量不同的文本文件。大多是通过工具生成的CSV文件。 表输入(table Input)：常用来利用连接和SQL，从数据中读取信息，自动生成基本的SQL语句。 获取系统信息(get system info):这个步骤从 Kettle 环境中获取信息。 生成行（Generate Rows ）：这个步骤输出一定数量的行，缺省为空。可选包括一定数量的静态字段。 Cube输入(文件反序列化)(De-serialize f
【数据整合与处理ETL】kettle值映射具体操作步骤
qq_56912124的博客
03-21 2777
提示：本篇文章讲解很详细哈，欢迎大家互相学习~ 文章目录 前言 一、pandas是什么？ 二、使用步骤 1.引入库 2.读入数据 总结 前言 提示：这里可以添加本文要记录的大概内容： 例如：随着人工智能的不断发展，机器学习这门技术也越来越重要，很多人都开启了学习机器学习，本文就介绍了机器学习的基础内容。 提示：以下是本篇文章正文内容，下面案例可供参考 一、pandas是什么？ 示例：pandas 是基于NumPy 的一种工具，该工具是为了解决.
Kettle中的值映射的使用
AnameJL的博客
11-23 8133
KETTLE中的值映射的使用 用法一：生成新的一列，并且根据自己的需求，将对应值进行更改 在整个转换流程中添加一个”值映射” 双击”值映射”,在”值映射”配置窗口中进行配置 进行参数配置，配置讲解如下： ”使用字段选择”：选择好自己需要更改值的字段名(color)； ”目标字段名”：就是所要生成新的一列的字段名(new_color)； “不匹配时的默认值”：就是所选择的”使用字段名”的列中的值在没有匹配到的时候的默认值(紫色)； “字段值”：可以看到在”字段值”的下方有一个表格状的输入框，有”源值”
ETL——kettle初识
weixin_43835659的博客
12-31 1285
Kettle是一款国外开源的ETL工具。kettle中文网 Kettle家族目前包括4个产品：Spoon、Pan、CHEF、Kitchen。 SPOON 允许你通过图形界面来设计ETL转换过程（Transformation）。 PAN 允许你批量运行由Spoon设计的ETL转换 (例如使用一个时间调度器)。Pan是一个后台执行的程序，没有图形界面。 CHEF 允许你创建任务（Job）。 任务通过允...
kettle 映射（子转换）控件的 定义 和 使用
闲言
10-11 1226
Kettle 映射（子转换）控件的 定义 和 使用
Kettle基本使用（三） —— 转换的使用
qq_52421831的博客
10-25 4815
Kettle基本使用之转换的使用
PAT-1050 String Subtraction
Eric的博客
08-23 308
1050 String Subtraction（20 分） Given two strings S​1​​ and S​2​​, S=S​1​​−S​2​​ is defined to be the remaining string after taking all the characters in S​2​​ from S​1​​. Your task is simply to calcul...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值