码农知识堂 - 1000bd
  •   Python
  •   PHP
  •   JS/TS
  •   JAVA
  •   C/C++
  •   C#
  •   GO
  •   Kotlin
  •   Swift
  • 快速上手kettle(一)壶之简介


    合集 - 快速上手kettle(2)
    1.快速上手kettle(一)壶之简介05-25
    2.快速上手kettle(二)小试牛刀05-29
    收起

    快速上手kettle系列文章目录

    快速上手kettle(一):壶之简介
    快速上手kettle(二):Kettle初体验
    快速上手kettle(三):Kettle转换(博主正在玩命更新中)
    快速上手kettle(四):Kettle作业(博主正在玩命更新中)
    快速上手kettle(五):Kettle实际使用(博主正在玩命更新中)
    快速上手kettle(六):Kettle资源库(博主正在玩命更新中)
    快速上手kettle(七):Kettle调优(博主正在玩命更新中)

    目录
    • 一、前言
    • 二 、ETL简介
    • 三、Kettle 简介
      • 3.1 kettle是什么?
      • 3.2 kettle两种设计
      • 3.3 kettle核心组件
      • 3.4 kettle 优点
    • 四、Kettle安装
      • 4.1 下载地址
      • 4.2 kettle目录及文件介绍
      • 4.3 kettle 安装
      • 4.4 kettle界面介绍

    一、前言

    最近由于工作需要,需要用到kettle工具进行数据迁移转换。特意找资料学习了一下,kettle基本操作算是学会了。

    所学的也结合实际工作进行了验证。为了防止以后用到忘记了,便写了几篇文章记录一下。

    快速上手kettle

    二 、ETL简介

    ETL ( Extract-Transform-Load的缩写,即数据抽取、转换、装载的过程) 。在企业种我们经常会遇到各种数据的处理,转换,迁移,所以了解并掌握一种etl工具的使用,对开发人员来说必不可少,这里我要学习的ETL工具是Kettle ! 。

    三、Kettle 简介

    3.1 kettle是什么?

    Kettle 是一款国外的开源ETL工具,纯java编写,可以在Windows、Linux、Unix上运行,绿色无需安装,数据抽取高效稳定。

    顾名思义,Kettle 翻译为中文是水壶,寓意着把所有乱七八糟的数据放到一个壶里,最终以一种指定格式流出

    水壶

    3.2 kettle两种设计

    kettle两种设计

    转换和作业

    • Kettle中有两种脚本文件,transformation和job,transformation完成数据基本转换,job完成整个工作流程的控制
    • 转换是数据流,作业是步骤流
    • 作业的每一个步骤,必须等待前面的步骤执行完,后面的步骤才会执行。
    • 转换会一次性把所有控件都启动(一个控件对应一个线程)
    • 数据流会从第一个控件开始,一条记录一条记录的流向最后控件

    3.3 kettle核心组件

    外国人起名字挺有意思的,kettle的核心组件就是一套烹饪厨具。kettle的作者应该是一位吃货 (●'◡'●)

    kettle核心组件

    3.4 kettle 优点

    kettle 优点

    四、Kettle安装

    4.1 下载地址

    ① 官网地址

    https://community.hitachivantara.com/docs/DOC-1009855

    官网地址国内下载可能很慢很慢,小伙伴们可以通过以下国内镜像地址下载

    ②国内镜像地址
    http://mirror.bit.edu.cn/pentaho/Pentaho 8.2/client-tools/

    4.2 kettle目录及文件介绍

    目录结构
    image-20230525221340766

    4.3 kettle 安装

    Kettle是java开发的,所以需要安装jdk,我们这里安装经典的jdk8

    至于jdk怎么安装,这里就不细说了,如果不知道的小伙伴百度即可

    jdk安装完成后,我们将4.1 下载的安装包解压到自己想放置的路径即可

    4.4 kettle界面介绍

    双击Spoon.bat 即可打开如下界面

    首页

    转换组件

    作业组件

    本期内容到此就结束了 (●'◡'●)

    下一篇:快速上手kettle(二):kettle初体验

  • 相关阅读:
    运维面试必问的中间件高频面试题
    Hbuilder本地调试微信H5项目(二)--添加UView框架插件
    Duchefa丨S0188盐酸大观霉素五水合物中英文说明书
    关于js实现斐波那契数列的一些思考(递归、循环、尾递归优化)
    使用ArcGIS-SDK显示海图
    学信息系统项目管理师第4版系列35_补遗
    【Linux C | 网络编程】入门知识:UDP协议、一个最简单的UDP客户端、一个最简单的UDP服务端
    基于微信小程序的音乐播放平台
    Win11提示Windows无法访问指定设备路径或文件的三种解决方法
    【Oracle篇】rman全库异机恢复:从RAC环境到单机测试环境的转移(第四篇,总共八篇)
  • 原文地址:https://www.cnblogs.com/xiezhr/p/17433313.html
  • 最新文章
  • 攻防演习之三天拿下官网站群
    数据安全治理学习——前期安全规划和安全管理体系建设
    企业安全 | 企业内一次钓鱼演练准备过程
    内网渗透测试 | Kerberos协议及其部分攻击手法
    0day的产生 | 不懂代码的"代码审计"
    安装scrcpy-client模块av模块异常,环境问题解决方案
    leetcode hot100【LeetCode 279. 完全平方数】java实现
    OpenWrt下安装Mosquitto
    AnatoMask论文汇总
    【AI日记】24.11.01 LangChain、openai api和github copilot
  • 热门文章
  • 十款代码表白小特效 一个比一个浪漫 赶紧收藏起来吧!!!
    奉劝各位学弟学妹们,该打造你的技术影响力了!
    五年了,我在 CSDN 的两个一百万。
    Java俄罗斯方块,老程序员花了一个周末,连接中学年代!
    面试官都震惊,你这网络基础可以啊!
    你真的会用百度吗?我不信 — 那些不为人知的搜索引擎语法
    心情不好的时候,用 Python 画棵樱花树送给自己吧
    通宵一晚做出来的一款类似CS的第一人称射击游戏Demo!原来做游戏也不是很难,连憨憨学妹都学会了!
    13 万字 C 语言从入门到精通保姆级教程2021 年版
    10行代码集2000张美女图,Python爬虫120例,再上征途
Copyright © 2022 侵权请联系2656653265@qq.com    京ICP备2022015340号-1
正则表达式工具 cron表达式工具 密码生成工具

京公网安备 11010502049817号