首页技术文章正文

数据集成工具kettle实现集成Mysql数据到HDFS[黑马大数据培训]

更新时间:2022年12月22日 15时12分11秒 来源:黑马程序员

1. 环境信息

Kettle: pdi-ce-8.2.0.0-342.zip

大数据: CDH-5.14.0

JDK: jdk-8u181-*-x64

MySQL: 5.7.26

2. 应用场景

基于数据集成工具kettle实现将Mysql的数据抽取到HDFS中。

3. 操作步骤

3.1. 下载HDFS配置文件

1566535442870_kettle1.jpg

3.2将HDFS配置文件放到kettle中

1566535453654_kettle2.jpg

3.3 启动kettle
1566535464339_kettle3.jpg

3.4  创建转换mysqlToHDFS文件

1566535475825_kettle4.jpg

3.5 建立MYSQL连接

1566535487304_kettle5.jpg

3.6 创建MySQL的表输入-Hadoop file output表输出

1566535529490_kettle6.jpg

3.7执行转换
1566532908019_kettle7.jpg



黑马中级程序员课程


推荐了解热门学科

java培训Python人工智能Web前端培训PHP培训
智能机器人软件开发影视制作培训C++培训产品经理培训
UI设计培训新媒体培训产品经理培训Linux运维
大数据培训



以下是黑马程序员热门视频教程,欢迎学习关注!


Python入门教程完整版(懂中文就能学会)【点击】

零起点打开Java世界的大门【点击】
C++| 匠心之作 从0到1入门学编程【点击】

PHP|零基础入门开发者编程核心技术【点击】
Web前端入门教程_Web前端html+css+JavaScript【点击】

软件测试入门到精通【点击】
分享到:
在线咨询 我要报名
和我们在线交谈!