HP_Vertica数据库从入门到精通

Vertica

5星 · 超过95%的资源需积分: 1 69 浏览量更新于2023-03-16 评论 11 收藏 3.3MB PDF 举报

身份认证购VIP最低享 7 折!

领优惠券(最高得80元）

资源详情

资源评论

资源推荐

第 1 页共 182 页

Vertica 数据库从入门到精通

作者: 李中原

创作日期: 2014 年 07 月 24 日

最近修改日期: 2015 年 01 月 08 日

文档控制号:

版本: 1.3

第 3 页共 182 页

文档控制 ........................................................................................................................................................................................ 2

作者简介--李中原 ...................................................................................................................................................................... 7

1. VERTICA 数据库安装准备 .............................................................................................................................................. 7

1.1 安装模式选择 ................................................................................................................................................................... 7

1.2 硬件要求 ........................................................................................................................................................................... 7

1.3 操作系统版本 ................................................................................................................................................................... 8

1.3.1 Vertica7.X

版本

................................................................................................................................................................. 8

1.4 配置 YUM 本地源 ............................................................................................................................................................. 8

1.5 操作系统时区 ................................................................................................................................................................... 9

1.6 REDHAT 6.4 操作系统的包、补丁和其它组件 ................................................................................................................. 9

1.6.1

安装必要的工具包

........................................................................................................................................................... 9

1.6.2

文件系统配置

................................................................................................................................................................... 9

1.6.3

网络参数与端口

............................................................................................................................................................. 10

1.6.4 Vertica

安装脚本可以修复的系统参数

........................................................................................................................ 10

1.6.5 Vertica

安装脚本无法修复的系统参数

........................................................................................................................ 11

1.6.6

关闭

IPTABLES ................................................................................................................................................................. 11

1.7 增加开机启动的设置 ..................................................................................................................................................... 12

1.8 调整 NTP 协议 ................................................................................................................................................................ 12

1.9 关闭 SELINUX .................................................................................................................................................................... 13

1.10 新建用户 DBADMIN UID 是 601 .......................................................................................................................................... 14

1.11 创建软件安装目录 ......................................................................................................................................................... 14

1.12 DBADMIN 用户环境变量 ................................................................................................................................................... 15

1.13 DBADMIN 用户配置 SSH 信任关系 .................................................................................................................................... 15

1.14 配置 SSH LOGINGRACETIME 参数 ....................................................................................................................................... 15

2. VERTICA 集群的安装配置 ................................................................................................................................................ 16

2.1 VERTICA7.0.1 集群安装 .................................................................................................................................................... 16

2.2 集群增加节点 ................................................................................................................................................................. 19

2.3 集群删除节点 ................................................................................................................................................................. 21

2.4 集群升级 ......................................................................................................................................................................... 21

2.5 集群的 ACTIVE STANDBY 节点 ...................................................................................................................................... 24

2.5.1

创建

active standby

节点

............................................................................................................................................... 24

2.5.2

替换

active standby

节点

............................................................................................................................................... 24

2.5.3

反转

active standby

节点

............................................................................................................................................... 25

第 4 页共 182 页

3. VERTICA 的管理和维护.................................................................................................................................................... 25

3.1 增加磁盘 ......................................................................................................................................................................... 25

3.2 替换坏盘 ......................................................................................................................................................................... 28

3.3 回收磁盘空间 ................................................................................................................................................................. 29

3.3.1

重建表的过程

........................................................................................................................................................ 29

3.4 存储位置 ......................................................................................................................................................................... 29

3.5 存储策略 ......................................................................................................................................................................... 31

4. VERTICA 数据库备份恢复 ................................................................................................................................................ 33

4.1 VERTICA 备份 ................................................................................................................................................................. 33

4.1.1 Vertica

备份环境准备

.................................................................................................................................................... 33

4.1.2 Vertica

备份配置文件

.................................................................................................................................................... 33

4.1.3 Vertica

全备份

................................................................................................................................................................ 35

4.1.4 Vertica

增量备份

............................................................................................................................................................ 36

4.1.5 Vertica

对象级备份

........................................................................................................................................................ 42

4.1.6 Vertica HardLinkLocal

备份

............................................................................................................................................ 43

4.1.7 Vertica

备份查询

............................................................................................................................................................ 45

4.2 VERTICA 恢复 ................................................................................................................................................................. 46

4.2.1 Vertica

全量恢复

............................................................................................................................................................ 47

4.2.2 Vertica

对象恢复

............................................................................................................................................................ 48

4.2.3 Vertica

灾难恢复

............................................................................................................................................................ 50

4.2.4

灾难恢复最佳实践

......................................................................................................................................................... 51

4.3 VERTICA 集群拷贝 ......................................................................................................................................................... 51

5. PROJECTIONS ................................................................................................................................................................... 53

5.1 创建 PORJECTION ............................................................................................................................................................... 53

5.2 创建自定义 PORJECTION ................................................................................................................................................... 54

5.3 REPLICATED PROJECTIONS ...................................................................................................................................................... 57

5.4 分段的 PROJECTIONS .......................................................................................................................................................... 57

5.5 选择 ENCODING 和 COMPRESSION ........................................................................................................................................ 59

5.5.1 Encoding .......................................................................................................................................................................... 59

5.5.2 Compression .................................................................................................................................................................... 60

5.6 选择列的 SORT ORDER ...................................................................................................................................................... 60

5.7 程序中进行 PROJECTION 设计 ..................................................................................................................................... 61

5.7.1

何时进行设计

................................................................................................................................................................. 61

5.7.2

设计相关函数

................................................................................................................................................................. 62

5.7.3

设计案例

......................................................................................................................................................................... 66

6. 负载均衡.......................................................................................................................................................................... 71

6.1 自带的负载均衡- NATIVE CONNECTION LOAD BALANCING .................................................................................................... 71

6.1.1

启用了自带负载均衡之后的连接过程：

..................................................................................................................... 72

6.1.2

负载均衡策略和实现

..................................................................................................................................................... 72

6.2 IPVS 负载均衡- INTERNET PROTOCOL VIRTUAL SERVER ........................................................................................................... 73

7. 数据加载.......................................................................................................................................................................... 73

7.1 TUPLE MOVER 原理 ............................................................................................................................................................ 73

7.1.1 TM moveout .................................................................................................................................................................... 74

第 5 页共 182 页

7.1.2 TM mergeout .................................................................................................................................................................. 75

7.1.3 TM

性能优化

.................................................................................................................................................................. 75

7.2 从文本文件 COPY 加载 .................................................................................................................................................... 77

8. VERTICA 监控 ................................................................................................................................................................... 78

8.1 系统日志 ......................................................................................................................................................................... 78

8.2 事件监控 ......................................................................................................................................................................... 79

8.3 数据收集器 ..................................................................................................................................................................... 82

8.4 工作负载分析器（WLA） ............................................................................................................................................ 83

8.5 诊断工具 - SCRUTINIZE ................................................................................................................................................. 85

8.6 诊断工具 - DIAGNOSTICS .............................................................................................................................................. 88

8.7 诊断工具 - COLLECT_DIAG_DUMP.SH .......................................................................................................................... 89

9. 权限和安全 ...................................................................................................................................................................... 89

9.1 普通操作权限 ................................................................................................................................................................. 90

9.1.1 SCHEMA

权限

.................................................................................................................................................................. 90

9.1.2

创建表权限

..................................................................................................................................................................... 91

9.1.3

创建视图权限

................................................................................................................................................................. 96

9.1.4

创建

Projection

权限

...................................................................................................................................................... 96

9.1.5

创建序列的权限

............................................................................................................................................................. 97

9.1.6 IO

操作权限

.................................................................................................................................................................... 98

9.1.7

过程和函数权限

............................................................................................................................................................. 98

9.2 角色权限 ......................................................................................................................................................................... 99

9.3 权限的管理 ................................................................................................................................................................... 101

9.3.1

用户权限管理

............................................................................................................................................................... 101

9.3.2

存储位置权限管理

....................................................................................................................................................... 105

9.4 安全管理 ....................................................................................................................................................................... 106

9.4.1

客户端身份验证

........................................................................................................................................................... 106

9.4.2

管理客户端身份验证

................................................................................................................................................... 108

9.4.3

客户端身份验证优先级

............................................................................................................................................... 110

9.4.5

授权和撤销身份认证

................................................................................................................................................... 111

9.4.6

修改身份认证方法

....................................................................................................................................................... 111

9.4.7

获得身份认证记录

....................................................................................................................................................... 112

9.4.8

密码认证方法

............................................................................................................................................................... 112

9.4.9 LDAP

认证方法

............................................................................................................................................................. 113

10. 性能优化 ................................................................................................................................................................... 113

10.1 资源管理器 - RESOURCE MANAGER ................................................................................................................................... 113

10.1.1

理解资源池的架构

..................................................................................................................................................... 114

10.1.2

管理资源池

................................................................................................................................................................. 115

10.1.3

资源负载管理最佳实践

............................................................................................................................................. 117

10.2 统计信息收集 ............................................................................................................................................................... 124

10.2.1

如何收集统计信息

..................................................................................................................................................... 125

10.2.2

统计信息收集最佳实践

............................................................................................................................................. 127

10.2.3

导出

profile

数据

........................................................................................................................................................ 128

10.3 理解执行计划 ............................................................................................................................................................... 128