没有合适的资源？快使用搜索试试~ 我知道了~
首页华为大数据平台ELk组件产品文档
华为大数据平台ELk组件产品文档
需积分: 50 1.5k 浏览量
更新于2023-03-16
评论 1
收藏 23.71MB PDF 举报
华为 FusionInsight C80版本 ELk的官方产品文档 ，新特性已经更新
资源详情
资源评论
资源推荐
FusionInsight Elk
V100R002C80SPC200
产品文档
文档版本 01
发布日期 2018-05-19
华为技术有限公司
版权所有 © 华为技术有限公司 2018。 保留一切权利。
非经本公司书面许可，任何单位和个人不得擅自摘抄、复制本文档内容的部分或全部，并不得以任何形式传
播。
商标声明
和其他华为商标均为华为技术有限公司的商标。
本文档提及的其他所有商标或注册商标，由各自的所有人拥有。
注意
您购买的产品、服务或特性等应受华为公司商业合同和条款的约束，本文档中描述的全部或部分产品、服务或
特性可能不在您的购买或使用范围之内。除非合同另有约定，华为公司对本文档内容不做任何明示或默示的声
明或保证。
由于产品版本升级或其他原因，本文档内容会不定期进行更新。除非另有约定，本文档仅作为使用指导，本文
档中的所有陈述、信息和建议不构成任何明示或暗示的担保。
华为技术有限公司
地址： 深圳市龙岗区坂田华为总部办公楼 邮编：518129
网址： http://e.huawei.com
文档版本 01 (2018-05-19) 华为专有和保密信息
版权所有 © 华为技术有限公司
i
目 录
1 文档包信息....................................................................................................................................... 1
1.1 修订记录........................................................................................................................................................................ 1
1.2 文档包导读.................................................................................................................................................................... 1
1.3 文档阅读约定................................................................................................................................................................ 2
1.4 获取和更新文档包........................................................................................................................................................ 5
1.5 意见反馈........................................................................................................................................................................ 5
2 产品描述........................................................................................................................................... 6
2.1 概述................................................................................................................................................................................ 6
2.2 结构原理........................................................................................................................................................................ 6
2.3 关键特性...................................................................................................................................................................... 10
2.3.1 全并行的数据查询处理........................................................................................................................................... 10
2.3.2 数据分布式存储....................................................................................................................................................... 12
2.3.3 数据并行导入........................................................................................................................................................... 12
2.3.4 工作负载管理........................................................................................................................................................... 14
2.3.5 高可靠事务处理....................................................................................................................................................... 15
2.3.6 SQL on Anywhere..................................................................................................................................................... 16
2.3.6.1 SQL on Hadoop...................................................................................................................................................... 16
2.3.6.2 SQL on Spark......................................................................................................................................................... 18
3 软件安装......................................................................................................................................... 19
3.1 安装简介...................................................................................................................................................................... 19
3.2 安装前准备.................................................................................................................................................................. 21
3.2.1 准备工具和软件....................................................................................................................................................... 22
3.2.2 准备数据................................................................................................................................................................... 24
3.2.3 安装 FusionInsight HD 集群.................................................................................................................................... 24
3.3 安装过程...................................................................................................................................................................... 25
3.3.1 上传软件包............................................................................................................................................................... 25
3.3.2 安装 Elk 服务............................................................................................................................................................26
3.4 安装后检查.................................................................................................................................................................. 28
3.5 软件卸载...................................................................................................................................................................... 29
4 管理员指南..................................................................................................................................... 30
4.1 配置运行参数.............................................................................................................................................................. 30
4.1.1 查看参数当前取值................................................................................................................................................... 30
FusionInsight Elk
产品文档 目 录
文档版本 01 (2018-05-19) 华为专有和保密信息
版权所有 © 华为技术有限公司
ii
4.1.2 重设参数................................................................................................................................................................... 31
4.2 状态查询...................................................................................................................................................................... 38
4.3 DN 主备切换............................................................................................................................................................... 41
4.4 重置实例状态.............................................................................................................................................................. 43
4.5 配置虚拟 IP..................................................................................................................................................................44
4.6 修改 IP 地址.................................................................................................................................................................47
4.7 自动 Deltamerge 功能..................................................................................................................................................54
4.8 Elk 使用 HDFS 副本迁移功能................................................................................................................................... 55
4.9 用户自定义命令集群级执行...................................................................................................................................... 57
4.10 多租户管理................................................................................................................................................................ 57
4.10.1 多租户介绍............................................................................................................................................................. 57
4.10.1.1 相关模型.............................................................................................................................................................. 58
4.10.1.2 资源介绍.............................................................................................................................................................. 60
4.10.2 多租户使用............................................................................................................................................................. 61
4.10.2.1 使用说明.............................................................................................................................................................. 61
4.10.2.2 增加租户.............................................................................................................................................................. 61
4.10.2.2.1 创建父租户....................................................................................................................................................... 61
4.10.2.2.2 创建子租户....................................................................................................................................................... 63
4.10.2.3 查看租户.............................................................................................................................................................. 67
4.10.2.3.1 查看租户概述................................................................................................................................................... 67
4.10.2.3.2 查看租户资源................................................................................................................................................... 68
4.10.2.3.3 查看租户服务关联........................................................................................................................................... 68
4.10.2.3.4 查看租户用户................................................................................................................................................... 69
4.10.2.4 修改租户.............................................................................................................................................................. 69
4.10.2.4.1 关联 Elk 服务....................................................................................................................................................69
4.10.2.4.2 删除 Elk 服务....................................................................................................................................................71
4.10.2.4.3 修改租户资源................................................................................................................................................... 71
4.10.2.5 删除租户.............................................................................................................................................................. 75
4.11 角色管理.................................................................................................................................................................... 75
4.11.1 使用说明................................................................................................................................................................. 76
4.11.2 添加角色................................................................................................................................................................. 77
4.11.3 查看角色................................................................................................................................................................. 78
4.11.3.1 查看角色详情...................................................................................................................................................... 78
4.11.3.2 导出指定角色信息.............................................................................................................................................. 78
4.11.3.3 导出全部角色信息.............................................................................................................................................. 79
4.11.4 修改角色信息......................................................................................................................................................... 80
4.11.5 删除角色................................................................................................................................................................. 80
4.11.5.1 删除单个角色...................................................................................................................................................... 81
4.11.5.2 删除批量角色...................................................................................................................................................... 81
4.12 用户管理.................................................................................................................................................................... 82
4.12.1 使用说明................................................................................................................................................................. 83
4.12.2 用户信息一览表..................................................................................................................................................... 84
FusionInsight Elk
产品文档 目 录
文档版本 01 (2018-05-19) 华为专有和保密信息
版权所有 © 华为技术有限公司
iii
4.12.3 添加用户................................................................................................................................................................. 85
4.12.4 查看用户................................................................................................................................................................. 88
4.12.4.1 查看用户详情...................................................................................................................................................... 88
4.12.4.2 导出指定用户信息.............................................................................................................................................. 88
4.12.4.3 导出全部用户信息.............................................................................................................................................. 89
4.12.5 修改用户................................................................................................................................................................. 89
4.12.5.1 初始化密码.......................................................................................................................................................... 89
4.12.5.2 修改用户信息...................................................................................................................................................... 90
4.12.5.3 修改操作用户密码.............................................................................................................................................. 91
4.12.6 删除用户................................................................................................................................................................. 92
4.12.6.1 删除单个用户...................................................................................................................................................... 92
4.12.6.2 删除批量用户...................................................................................................................................................... 93
4.12.7 老用户兼容............................................................................................................................................................. 93
4.13 日常监控.................................................................................................................................................................... 94
4.13.1 监控资源使用率..................................................................................................................................................... 94
4.13.2 监控集群状态......................................................................................................................................................... 98
4.14 例行维护.................................................................................................................................................................... 99
4.14.1 日维护检查项......................................................................................................................................................... 99
4.14.2 检查操作系统参数............................................................................................................................................... 101
4.14.2.1 检查办法............................................................................................................................................................ 101
4.14.2.2 异常处理............................................................................................................................................................ 102
4.14.3 检查集群健康状态............................................................................................................................................... 102
4.14.3.1 检查办法............................................................................................................................................................ 103
4.14.3.2 异常处理............................................................................................................................................................ 105
4.14.4 检查数据库性能................................................................................................................................................... 109
4.14.4.1 检查办法............................................................................................................................................................ 109
4.14.4.2 异常处理............................................................................................................................................................ 109
4.14.5 检查和清理日志....................................................................................................................................................111
4.14.5.1 检查操作系统日志.............................................................................................................................................111
4.14.5.2 检查集群运行日志.............................................................................................................................................111
4.14.5.3 清理运行日志.................................................................................................................................................... 112
4.14.6 检查时间一致性................................................................................................................................................... 113
4.14.7 检查应用连接数................................................................................................................................................... 113
4.14.8 例行维护表........................................................................................................................................................... 115
4.14.9 例行重建索引....................................................................................................................................................... 118
4.14.10 数据安全维护建议............................................................................................................................................. 118
4.15 备份与恢复.............................................................................................................................................................. 119
4.15.1 逻辑备份与恢复................................................................................................................................................... 119
4.15.1.1 备份与恢复数据库对象.................................................................................................................................... 121
4.15.1.1.1 数据库对象定义............................................................................................................................................. 124
4.15.1.1.2 数据库............................................................................................................................................................. 126
4.15.1.1.3 表..................................................................................................................................................................... 128
FusionInsight Elk
产品文档 目 录
文档版本 01 (2018-05-19) 华为专有和保密信息
版权所有 © 华为技术有限公司
iv
剩余2159页未读，继续阅读
安全验证
文档复制为VIP权益，开通VIP直接复制
信息提交成功
评论0