没有合适的资源?快使用搜索试试~ 我知道了~
首页data-integration_7.1使用手册
data-integration_7.1使用手册

data-integration_7.1使用手册,待目录标签。欢迎使用!
资源详情
资源评论
资源推荐

Pentaho
Data Integration
完全自学手册
(孟菲斯著)

文档目录
文档目录 ........................................................................................................................................... 2
更新记录 ......................................................................................................................................... 17
第一章 . KETTLE 基础介绍 ........................................................................................................ 18
1.1. 核心组件 ............................................................................................................................... 18
1.2. 组成部分 ............................................................................................................................... 18
1.3. 概念模型 ............................................................................................................................... 19
1.3.1. Transformation
(转换)
.............................................................................................. 19
1.3.2. Steps
(步骤)
............................................................................................................... 20
1.3.3. Hops (节点连接) ....................................................................................................... 20
1.3.4. Jobs
(工作)
................................................................................................................ 20
1.3.5. Variable (变量) ......................................................................................................... 21
1.3.5.1. 设置环境变量 ......................................................................................................................... 21
1.3.5.2. 设置变量 ................................................................................................................................. 21
1.4. 查看版本 ............................................................................................................................... 22
1.5. 选项设置 ............................................................................................................................... 23
第二章 . KETTLE 环境搭建 ........................................................................................................ 25
2.1. 单机部署 ............................................................................................................................... 25
2.1.1.
下载
kettle ..................................................................................................................... 25
2.1.2. 安装 kettle ..................................................................................................................... 25
2.1.3.
运行
Spoon .................................................................................................................... 25
2.2. 集群部署 ............................................................................................................................... 26
1. Carte 简介 .................................................................................................................................. 26
2. Carte 部署配置 .......................................................................................................................... 26
2.1 启动方法 ............................................................................................................................................ 26
2.2 启动配置 ............................................................................................................................................ 26
2.3 Carte xml 文件配置详解 ..................................................................................................................... 27
2.3.1 slaveserver 节点 ........................................................................................................................... 28
2.3.2 masters 节点 ................................................................................................................................ 28
2.3.3 report_to_masters 节点 ............................................................................................................... 28
2.3.4 max_log_lines 节点 ...................................................................................................................... 28
2.3.5 max_log_timeout_minutes 节点 .................................................................................................. 28
2.3.6 object_timeout_minutes 节点 ..................................................................................................... 29
2.3.7 (*) repository 节点 ....................................................................................................................... 29
3. Carte
集群
.................................................................................................................................. 29
3.1 普通集群 ............................................................................................................................................ 30
3.2 动态集群 ............................................................................................................................................ 30
2.3. 运行方式 ............................................................................................................................... 30
2.3.1.
转换执行器
Pan........................................................................................................... 30

2.3.1.1. Pan 参数介绍 ......................................................................................................................... 30
2.3.1.2. Pan 实例讲解: Windows ...................................................................................................... 31
2.3.1.3. Pan 实例讲解: Linux ............................................................................................................. 31
2.3.2.
任务执行器
Kitchen ..................................................................................................... 32
2.3.2.1. Kitchen 参数介绍 ................................................................................................................... 32
2.3.2.2. Kitchen 实例讲解: Windows ................................................................................................ 33
2.3.2.3. Kitchen 实例讲解: Linux ....................................................................................................... 34
2.4. 定时任务 ............................................................................................................................... 35
2.4.1. Windows ........................................................................................................................ 35
2.4.2. Linux .............................................................................................................................. 35
第三章 . KETTLE 基本功能 ........................................................................................................ 40
3.1. 新建转换 ............................................................................................................................... 40
3.1.1. 方法 1............................................................................................................................ 40
3.1.2.
方法
2............................................................................................................................ 40
3.1.3. 方法 3............................................................................................................................ 41
3.1.4.
主对象树
....................................................................................................................... 41
3.1.5.
核心对象
....................................................................................................................... 42
3.1.6. 新建数据库连接 ........................................................................................................... 42
3.2. 转换实例 ............................................................................................................................... 43
3.2.1. 转换实例 1 .................................................................................................................... 43
3.2.2.
转换实例
2 .................................................................................................................... 43
3.3. 新建作业 ............................................................................................................................... 44
3.3.1. 方法 1............................................................................................................................ 44
3.3.2.
方法
2............................................................................................................................ 44
3.3.3. 方法 3............................................................................................................................ 45
3.3.4.
主对象树
....................................................................................................................... 45
3.3.5.
核心对象
....................................................................................................................... 46
3.4. 作业实例 ............................................................................................................................... 46
3.4.1.
作业实例
1 .................................................................................................................... 46
3.4.2. 作业实例 2 .................................................................................................................... 46
第四章 . KETTLE 设计环境 ........................................................................................................ 46
4.1. T
RANSFORMATION
:转换步骤 (24-228)..................................................................................... 46
4.1.1. Input :输入 (38) ............................................................................................................ 46
4.1.1.1. Csv file input ............................................................................................................................ 46
4.1.1.1.1. 功能描述 ........................................................................................................................... 47
4.1.1.1.2. 操作步骤 ........................................................................................................................... 47
4.1.1.1.3. 实例讲解 ........................................................................................................................... 48
4.1.1.2. DataGrid .................................................................................................................................. 48
4.1.1.3. De-serialize from file :文件反序列化 .................................................................................... 48
4.1.1.4. ESRI Shapefile Reader .............................................................................................................. 48
4.1.1.5. Email messages input .............................................................................................................. 48
4.1.1.6. Fixed file input ......................................................................................................................... 48
4.1.1.7. GZIP CSV Input ......................................................................................................................... 48

4.1.1.8. Generate Rows......................................................................................................................... 48
4.1.1.9. Generate random credit card numbers ................................................................................... 48
4.1.1.10. Generate random value ...................................................................................................... 49
4.1.1.11. Get File Names .................................................................................................................... 49
4.1.1.12. Get Files Rows Count ........................................................................................................... 49
4.1.1.13. Get SubFolder names .......................................................................................................... 49
4.1.1.14. Get System Info:获取系统信息 ....................................................................................... 49
4.1.1.14.1. 功能描述 ......................................................................................................................... 50
4.1.1.14.2. 操作步骤 ......................................................................................................................... 51
4.1.1.14.3. 实例讲解 ......................................................................................................................... 52
4.1.1.15. Get data from XML .............................................................................................................. 53
4.1.1.16. Get repository names .......................................................................................................... 53
4.1.1.17. Get table names .................................................................................................................. 53
4.1.1.18. Google Analytics.................................................................................................................. 53
4.1.1.19. HL7 Input ............................................................................................................................. 53
4.1.1.20. JSON Input........................................................................................................................... 53
4.1.1.21. LDAP Input .......................................................................................................................... 53
4.1.1.22. LDIF Input ............................................................................................................................ 54
4.1.1.23. Load file content in memory ............................................................................................... 54
4.1.1.24. Microsoft Access input ........................................................................................................ 54
4.1.1.25. Microsoft Excel Input .......................................................................................................... 54
4.1.1.25.1. 功能描述 ......................................................................................................................... 54
4.1.1.25.2. 操作步骤 ......................................................................................................................... 54
4.1.1.25.2.1. 指定文件名 .............................................................................................................. 55
4.1.1.25.2.2. 指定内容 .................................................................................................................. 55
4.1.1.25.2.3. 字段 .......................................................................................................................... 55
4.1.1.25.2.4. 错误处理 .................................................................................................................. 55
4.1.1.25.2.5. 其他输出字段 .......................................................................................................... 55
4.1.1.25.3. 实例讲解 ......................................................................................................................... 55
4.1.1.26. Mondrian Input ................................................................................................................... 55
4.1.1.27. OLAP Input .......................................................................................................................... 56
4.1.1.28. Property Input ..................................................................................................................... 56
4.1.1.29. RSS Input ............................................................................................................................. 56
4.1.1.30. S3 CSV Input ........................................................................................................................ 56
4.1.1.31. SAP Input ............................................................................................................................. 56
4.1.1.32. SAS Input ............................................................................................................................. 56
4.1.1.33. SalesForce Input .................................................................................................................. 56
4.1.1.34. Table input:表输入 ............................................................................................................... 56
4.1.1.34.1. 功能描述 ......................................................................................................................... 56
4.1.1.34.2. 操作步骤 ......................................................................................................................... 57
4.1.1.34.3. 实例讲解 ......................................................................................................................... 58
4.1.1.35. Text file input :文本文件输入 ............................................................................................... 58
4.1.1.35.1. 功能描述 ......................................................................................................................... 58
4.1.1.35.2. 操作步骤 ......................................................................................................................... 58

4.1.1.35.2.1. 文件名称指定 .......................................................................................................... 58
4.1.1.35.2.2. 从先前的步骤中接受文件名 .................................................................................. 59
4.1.1.35.2.3. 内容指定 .................................................................................................................. 59
4.1.1.35.2.4. 错误处理 .................................................................................................................. 62
4.1.1.35.2.5. 过滤 .......................................................................................................................... 63
4.1.1.35.2.6. 字段 .......................................................................................................................... 64
4.1.1.35.2.7. 其他输出字段 .......................................................................................................... 65
4.1.1.35.3. 格式化 ............................................................................................................................. 65
4.1.1.35.3.1. Number 格式化 ....................................................................................................... 65
4.1.1.35.3.2. Date 格式化 ............................................................................................................. 66
4.1.1.35.3.3. 其它 .......................................................................................................................... 66
4.1.1.35.4. 实例讲解 ......................................................................................................................... 67
4.1.1.36. XBase input: XBase输入 ................................................................................................... 67
4.1.1.36.1. 功能描述 ......................................................................................................................... 67
4.1.1.37. XML Input Stream(StAX) ..................................................................................................... 67
4.1.1.37.1. 功能描述 ......................................................................................................................... 67
4.1.1.38. Yaml Input ................................................................................................................................ 69
4.1.2. Output :输出 (22) ......................................................................................................... 69
4.1.2.1. Automatic Documentation Output .......................................................................................... 69
4.1.2.2. Delete:删除 .......................................................................................................................... 69
4.1.2.2.1. 功能描述 ........................................................................................................................... 69
4.1.2.2.2. 操作步骤 ........................................................................................................................... 69
4.1.2.3. Insert / Update :插入 / 更新 ................................................................................................... 70
4.1.2.3.1. 功能描述 ........................................................................................................................... 70
4.1.2.3.2. 操作步骤 ........................................................................................................................... 71
4.1.2.4. JSON Output ............................................................................................................................ 72
4.1.2.5. LDAP Output ............................................................................................................................ 72
4.1.2.6. Mircosoft Access Output ......................................................................................................... 72
4.1.2.7. Mircosoft Excel Output :Excel 输出 ....................................................................................... 72
4.1.2.7.1. 功能描述 ........................................................................................................................... 72
4.1.2.7.2. 操作步骤 ........................................................................................................................... 72
4.1.2.8. Pentaho Reporting Output....................................................................................................... 75
4.1.2.9. Properties Output .................................................................................................................... 75
4.1.2.10. RSS Output .......................................................................................................................... 75
4.1.2.11. S3 File Output...................................................................................................................... 75
4.1.2.12. SQL File Output ................................................................................................................... 75
4.1.2.13. Saleforce Delete .................................................................................................................. 75
4.1.2.14. Saleforce Insert ................................................................................................................... 75
4.1.2.15. Saleforce Update ................................................................................................................. 75
4.1.2.16. Saleforce Upsert .................................................................................................................. 75
4.1.2.17. Serialize to file ..................................................................................................................... 75
4.1.2.18. Synchronize after merge ..................................................................................................... 76
4.1.2.19. Table output ............................................................................................................................ 76
4.1.2.19.1. 功能描述 ......................................................................................................................... 76
剩余201页未读,继续阅读



















安全验证
文档复制为VIP权益,开通VIP直接复制

评论4