当前位置： 首页 > news >正文

快速上手kettle

news 2026/2/9 4:26:33

一、前言

最近由于工作需要，需要用到kettle工具进行数据迁移转换。特意找资料学习了一下，kettle基本操作算是学会了。

所学的也结合实际工作进行了验证。为了防止以后用到忘记了，便写了几篇文章记录一下。

二 、ETL简介

ETL ( Extract-Transform-Load的缩写,即数据抽取、转换、装载的过程) 。在企业种我们经常会遇到各种数据的处理,转换,迁移,所以了解并掌握一种etl工具的使用，对开发人员来说必不可少,这里我要学习的ETL工具是Kettle ! 。

三、Kettle 简介

3.1 kettle是什么？

Kettle 是一款国外的开源ETL工具，纯java编写，可以在Windows、Linux、Unix上运行，绿色无需安装，数据抽取高效稳定。

顾名思义，Kettle 翻译为中文是水壶,寓意着把所有乱七八糟的数据放到一个壶里，最终以一种指定格式流出

3.2 kettle两种设计

  • Kettle中有两种脚本文件，transformation和job，transformation完成数据基本转换，job完成整个工作流程的控制
  • 转换是数据流，作业是步骤流
  • 作业的每一个步骤，必须等待前面的步骤执行完，后面的步骤才会执行。
  • 转换会一次性把所有控件都启动（一个控件对应一个线程）
  • 数据流会从第一个控件开始，一条记录一条记录的流向最后控件

3.3 kettle核心组件

外国人起名字挺有意思的，kettle的核心组件就是一套烹饪厨具。kettle的作者应该是一位吃货 (●'◡'●)

3.4 kettle 优点

四、Kettle安装

4.1 下载地址

① 官网地址

Home - Hitachi Vantara

官网地址国内下载可能很慢很慢，小伙伴们可以通过以下国内镜像地址下载

②国内镜像地址
http://mirror.bit.edu.cn/pentaho/Pentaho 8.2/client-tools/

4.2 kettle目录及文件介绍

4.3 kettle 安装

Kettle是java开发的，所以需要安装jdk,我们这里安装经典的jdk8

至于jdk怎么安装，这里就不细说了，如果不知道的小伙伴百度即可

jdk安装完成后，我们将4.1 下载的安装包解压到自己想放置的路径即可

4.4 kettle界面介绍

双击Spoon.bat 即可打开如下界面

相关文章：

快速上手kettle

一、前言 最近由于工作需要，需要用到kettle工具进行数据迁移转换。特意找资料学习了一下，kettle基本操作算是学会了。 所学的也结合实际工作进行了验证。为了防止以后用到忘记了，便写了几篇文章记录一下。 二 、ETL简介 ETL ( Extract-Tran…...

编程日记 2023/6/1 4:34:25

Leetcode 399. 除法求值

Leetcode 399. 除法求值题目 给你一个变量对数组 equations 和一个实数值数组 values 作为已知条件，其中 equations[i] [Ai, Bi] 和 values[i] 共同表示等式 Ai / Bi values[i] 。每个Ai 或 Bi 是一个表示单个变量的字符串。另有一些以数组 queries 表示的问题&am…...

编程日记 2023/6/1 4:29:24

kotlin协程并发/并行与串行互相切换，CoroutineScope与await

kotlin协程并发/并行与串行互相切换，CoroutineScope与await import kotlinx.coroutines.CoroutineScope import kotlinx.coroutines.Dispatchers import kotlinx.coroutines.delay import kotlinx.coroutines.launch import java.time.LocalTimefun main(args: Arra…...

编程日记 2023/6/1 4:24:22

初识linux之简单了解TCP协议与UDP协议

目录 一、理解源IP地址和目的IP地址 二、端口号 1. 为什么要有端口号 2. 理解端口号 3. 源端口号和目的端口号 三、初步了解TCP协议和UDP协议 1. 初步认识TCP协议 2. 初步认识UDP协议 3. 可靠传输与不可靠传输 四、网络字节序 1. 网络字节序的概念 2. 如何形成网络…...

编程日记 2023/6/1 4:19:21

【String——简单使用】

文章目录 String1. 字符串定义和初始化2. 字符串基本操作2.1 访问单个字符2.2 修改字符串内容2.3 字符串查找和比较 3. 常用字符串函数3.1 length() 和 size()3.2 empty()3.3 substr()3.4 c_str() 4.字符与整形之间相互转换4.1 char 类型转 int 类型4.2 int 类型转 char 类型4.…...

编程日记 2023/6/1 4:14:20

Python下Taobao封装API接口的优势

Python是一门面向对象编程的语言，封装是面向对象编程中的一种重要概念，它把数据和方法包装在一起，实现了对数据的保护和控制。Python封装接口的优势如下： 1.安全性 封装可以保证数据的安全性，禁止外部对数据的直接访…...

编程日记 2023/6/1 4:09:18

LeetCode 49 字母异位词分组

LeetCode 49 字母异位词分组 来源：力扣（LeetCode） 链接：https://leetcode.cn/problems/group-anagrams/description/ 博主Github：https://github.com/GDUT-Rp/LeetCode 题目： 给你一个字符串数组&#x…...

编程日记 2023/6/1 4:04:18

( 链表) 142. 环形链表 II——【Leetcode每日一题】

❓142. 环形链表 II 难度：中等 给定一个链表的头节点 head ，返回链表开始入环的第一个节点。 如果链表无环，则返回 null。 如果链表中有某个节点，可以通过连续跟踪 next 指针再次到达，则链表中存在环。 为了表示给定…...

编程日记 2023/6/1 3:59:17

论文解读 | 基于改进点对特征的点云6D姿态估计

原创 | 文 BFT机器人 01 摘要 点对特征(PPF)方法已被证明是一种有效的杂波和遮挡下的姿态估计方法。 文章的改进方法主要包括: (1)一种基于奇偶规则求解封闭几何的法向的方法; (2)通过将体素网格划分为等效角度单元的有效降采样方法; (3)基于拟合点的验证步骤。在真实杂波数据集…...

编程日记 2023/6/1 3:54:16

Shell脚本while循环语句应用

记录：433 场景：Shell脚本while循环语句应用。Shell脚本while循环语句应用。while do done、while : do done、while true do done。 版本：CentOS Linux release 7.9.2009。 1.while常用格式 1.1格式一：while do done while c…...

编程日记 2023/6/1 3:49:15

Kubernetes Dashboard + Ingress 及其 yaml 文件分析

概述 记录部署Dashboard Ingress的具体过程及其 yaml 文件分析 Dashboard Yaml # Copyright 2017 The Kubernetes Authors. # # Licensed under the Apache License, Version 2.0 (the "License"); # you may not use this file except in compliance with the Li…...

编程日记 2023/6/1 3:44:14

【SpringCloud组件——Nacos】

前置准备： 分别提供订单系统（OrderService）和用户系统（UserService）。订单系统主要负责订单相关信息的处理，用户系统主要负责用户相关信息的处理。 一、服务注册与发现 1.1、在父工程当中引入Nacos依赖 …...

编程日记 2023/6/1 3:39:13

pinia状态管理 用法

Pinia是一个用于vue的状态管理库，类似于vuex,是vue的另一种状态管理工具。 Pinia 是 Vue 的存储库，它允许跨组件/页面共享状态。实际上，Pinia就是Vuex的升级版，官网也说过，为了尊重原作者，所以取名pinia&am…...

编程日记 2023/6/1 3:34:12

Oracle客户端版本安装

一、版本准备 Oracle版本下载官网：Instant Client for Linux x86-64 (64-bit) | Oracle 中国 进入网站下载对应的oracle版本，通常环境所用的包有：basic、sdk、sdkplus三个包。包的类型分为rpm和zip包，均可以下载，当前…...

编程日记 2023/6/1 3:29:11

基于Android studio二手车交易系统app

客户端： 用户注册：通过输入用户名，密码，所在地，联系地址以及电话和电子邮件等信息进行用户信息的注册。 二手车查看：用户注册登录系统后，可以查看二手车的基本信息，通过二手车的品牌…...

编程日记 2023/6/1 3:24:10

【LCD应用编程】绘制点、线、矩形框

之前获取LCD屏幕参数信息时了解到，LCD屏是 FrameBuffer 设备，操作 FrameBuffer 设备 其实就是在读写 /dev/fb0 文件。除此之外，LCD屏上包含多个像素点，绘制点、线、矩形框本质是在修改这些像素点的颜色。 目录 1、定义 lcd_color…...

编程日记 2023/6/1 3:19:09

第八篇、基于Arduino uno，获取MAX30102心率传感器的心率信息——结果导向

0、结果 说明：先来看看串口调试助手显示的结果，第一个值是原始的IR值，第二个值是实时的心跳，第三个值是平均心跳，如果是你想要的，可以接着往下看。 1、外观 说明：MAX30102心率传感器的外观如下…...

编程日记 2023/6/1 3:14:02

【MySQL】MySQL主从同步延迟原因与解决方案

文章目录 一、MySQL数据库主从同步延迟产生的原因二、关于DDL和DML三、主从延时排查方法四、解决方案3.1 解决从库复制延迟的问题：3.2 MySql数据库从库同步其他问题及解决方案 一、MySQL数据库主从同步延迟产生的原因 MySQL的主从复制都是单线程的操作，…...

编程日记 2023/6/1 3:09:01

学C的第二十二天【深度剖析数据在内存中的存储：1. 数据类型介绍；2. 整型在内存中的存储】

相关代码gitee自取：C语言学习日记: 加油努力 (gitee.com) 接上期：学C的第二十一天【初阶测评讲解：1. 计算递归了几次；2. 判断 do while 循环执行了几次；3. 求输入的两个数的最小公倍数；4. 将一句话的单词进…...

编程日记 2023/6/1 3:04:00

测试计划模板一

测试计划 修订历史记录 版本　　　　　　　 日期　　　　　　 AMD　　　　　　 修订者　　　　　 说明　　　　　 1.0 XXXX年XX月XX （A-添加，M-修改，D-删除） 目录 1． 简介.. 4 1. 1目的... 4 1. 2背景... 4...

编程日记 2023/6/1 2:58:58

循环冗余码校验CRC码 算法步骤+详细实例计算

通信过程：（白话解释） 我们将原始待发送的消息称为 M M M，依据发送接收消息双方约定的生成多项式 G ( x ) G(x) G(x)（意思就是 G （ x ) G（x) G（x) 是已知的）&#xff0…...

编程新知 2026/2/8 8:16:14

Java多线程实现之Callable接口深度解析

Java多线程实现之Callable接口深度解析 一、Callable接口概述1.1 接口定义1.2 与Runnable接口的对比1.3 Future接口与FutureTask类 二、Callable接口的基本使用方法2.1 传统方式实现Callable接口2.2 使用Lambda表达式简化Callable实现2.3 使用FutureTask类执行Callable任务 三、…...

编程新知 2026/1/25 6:36:06

C# SqlSugar：依赖注入与仓储模式实践

C# SqlSugar：依赖注入与仓储模式实践 在 C# 的应用开发中，数据库操作是必不可少的环节。为了让数据访问层更加简洁、高效且易于维护，许多开发者会选择成熟的 ORM（对象关系映射）框架，SqlSugar 就是其中备受…...

编程新知 2025/11/25 6:49:02

Device Mapper 机制

Device Mapper 机制详解 Device Mapper（简称 DM）是 Linux 内核中的一套通用块设备映射框架，为 LVM、加密磁盘、RAID 等提供底层支持。本文将详细介绍 Device Mapper 的原理、实现、内核配置、常用工具、操作测试流程，并配以详细的…...

编程新知 2025/12/14 13:11:33

html-＜abbr＞ 缩写或首字母缩略词

定义与作用 <abbr> 标签用于表示缩写或首字母缩略词&#xff0c;它可以帮助用户更好地理解缩写的含义&#xff0c;尤其是对于那些不熟悉该缩写的用户。 title 属性的内容提供了缩写的详细说明。当用户将鼠标悬停在缩写上时&#xff0c;会显示一个提示框。 示例&#x…...

编程新知 2026/1/24 19:22:03

AI病理诊断七剑下天山，医疗未来触手可及

一、病理诊断困局&#xff1a;刀尖上的医学艺术 1.1 金标准背后的隐痛 病理诊断被誉为"诊断的诊断"&#xff0c;医生需通过显微镜观察组织切片&#xff0c;在细胞迷宫中捕捉癌变信号。某省病理质控报告显示&#xff0c;基层医院误诊率达12%-15%&#xff0c;专家会诊…...

编程新知 2026/2/6 20:53:34

七、数据库的完整性

七、数据库的完整性 主要内容 7.1 数据库的完整性概述 7.2 实体完整性 7.3 参照完整性 7.4 用户定义的完整性 7.5 触发器 7.6 SQL Server中数据库完整性的实现 7.7 小结 7.1 数据库的完整性概述 数据库完整性的含义 正确性 指数据的合法性 有效性 指数据是否属于所定…...

编程新知 2026/2/4 10:28:25

20个超级好用的 CSS 动画库

分享 20 个最佳 CSS 动画库。 它们中的大多数将生成纯 CSS 代码&#xff0c;而不需要任何外部库。 1.Animate.css 一个开箱即用型的跨浏览器动画库&#xff0c;可供你在项目中使用。 2.Magic Animations CSS3 一组简单的动画&#xff0c;可以包含在你的网页或应用项目中。 3.An…...

编程新知 2026/1/25 11:46:42

绕过 Xcode？使用 Appuploader和主流工具实现 iOS 上架自动化

iOS 应用的发布流程一直是开发链路中最“苹果味”的环节&#xff1a;强依赖 Xcode、必须使用 macOS、各种证书和描述文件配置……对很多跨平台开发者来说&#xff0c;这一套流程并不友好。 特别是当你的项目主要在 Windows 或 Linux 下开发&#xff08;例如 Flutter、React Na…...

编程新知 2026/1/10 11:35:24

文件上传漏洞防御全攻略

要全面防范文件上传漏洞&#xff0c;需构建多层防御体系&#xff0c;结合技术验证、存储隔离与权限控制&#xff1a; &#x1f512; 一、基础防护层 前端校验&#xff08;仅辅助&#xff09; 通过JavaScript限制文件后缀名&#xff08;白名单&#xff09;和大小&#xff0c;提…...

编程新知 2025/8/18 19:05:00