Greenplum详细使用手册（新手必备）_游标withhold

Greenplum

使用手册

1星需积分: 41 54 浏览量更新于2023-05-29 评论收藏 253KB DOCX 举报

身份认证购VIP最低享 7 折!

领优惠券(最高得80元）

资源详情

资源评论

资源推荐

管理员指南

本书基于 版本



管理员指南

第一章架构简介

是一个分布式数据库软件

其可以管理和处理分布在多个不同主机上的海量数据。

对于 来说一个 实例实际上是由多个独立的 实例组成的它们分

布在不同的物理主机上协同工作呈现给用户的是一个 的效果。是 

系统的访问入口 其负责处理客户端的连接及 命令、协调系统中的

其他

 !工作负责管理和处理用户数据。

这一章节阐述组成 系统的组件及如何协同工作

管理节点 

计算节点 

网络

冗余与故障切换

并行数据装载

管理与监控

管理节点 

作为 系统的访问入口其处理客户端连接的访问以及用户提交的 语句。

是基于 发展而来终端用户可以像 那样与 进行交互。

并同样可以通过客户端程序如 #!和应用程序接口 $ 如 %&、'&!!连接 。

上存储着全局系统表 ()&! 包含 系统自身元数据的系统

表!但不存储任何用户数据用户数据只存储在 上。 负责客户端认证、

处理 命令入口、在 之间分配工作负载、整合 处理结果、将最终



管理员指南

结果呈现给客户端程序。

计算节点 

在 系统中才真正是数据存储和查询处理的地方。用户 *(和相应的

+,都分布在 系统中各 上每个 存储着一部分不同的数据。

实例 !才是真正的数据处理进程。用户不能够直接跳过 访问

而只能通过 来访问整个系统。

在 推荐的硬件配置环境下每个有效的 &-核对应一个 比如

一个 主机配备了 个双核的 &-那么可以选择每个 主机 配置个

主实例 .)!。

网络

网络层是 系统的重要组件在用户执行查询时每个 都需要执行相应的

处理网络层涉及到 之间的通信网络层可以使用标准的以太网络协议。

在默认情况下网络层使用 -协议。自己会为 -协议做数据包校验其可

靠性与 *&协议相同但其性能和扩展性远好于 *&协议。在使用 *&协议的情况下

的 数量被限制在 个。为了去除这个限制-协议被作为默认的网

络层协议。

冗余与故障切换

提供了避免单点故障的部署选项。本节阐述 的冗余组件。

镜像

镜像

网络层冗余

镜像

在部署 系统时可以选择配置 .。.使得数据库查

询在 .)不可用时切换到备份的 上。为了配置 .

系统需要有足够多的 /

从而可以保证冗余的 总是在与 .)

不同的 /主机上。下图展示了在配置了 .的情况下数据如何分布

在不同的 /节点上。.总是位于不同于 .)的 /主

机上。



0管理员指南

故障切换与恢复

在 系统 .启用的置情况下当 .)不可访问时系统会自

动切换到其对应的 .上此时.取代 .)

的作用。只要剩余的可用 能够保证数据完整性在 

或者 /主机宕机时系统仍可保持可用状态。

每当 无法连接到 .)时其都会在 的系统日志表中被标

记为失败状态并激活1唤醒对应的 .取代原有的 .)。

在采取相应的措施将其恢复到联机 '.!状态之前失败的 .)一直

保持未运行状态。失败的 .)可以在系统处于运行状态下被恢复回来。

恢复进程仅仅复制失败期间发生变化的那部分数据。

在未启用 .的情况下任何的 失败都会导致系统自动停止服

务。在继续使用系统之前必须恢复所有失败的 。

镜像

同样可以为 部署一个备份1镜像到一个不同于 节点的主机上。在

不可用时+()就成为了热备 。+()与 之间保持事务

日志的同步其保证 +()与 之间的一致性。

在 失效时复制进程会自动停止同时+()可以被激活。在 +()

上冗余的日志被用来将状态恢复到最后成功提交 .!的状态。激活的 +()

实际上会成为 的 通过  该端口需要设置和 的相同!

接受客户端的链接访问。

由于 不存储用户数据在 和 +()之间仅仅是系统信息表需要被

同步。这些表很少发生变化一旦发生变化就会自动同步到 +()从而保证与

的一致性。



管理员指南

网络层冗余

网络层关系到 之间的通信其依靠基础网络设施高可用网络层

可以通过部署双重以太网络实现。不过如果在配置 .的情况下通过不同网

段间的 .)与 .之间的对应关系也可以达到网络保障的效果。

并行数据装载

海量数据仓库的一个重大挑战就是在一个给定的时间窗口内完成大量数据的装载。

通过外部表 2,*(!支持高速并行数据装载。外部表可以使用‘单条记录出错隔

离’模式从而允许管理员在装载数据时将出错的数据记录剥离到一个单独的错误记录

表中。管理员还可以控制错误容忍阀值以实现对数据装载质量的控制。

结合使用外部表和 的并行文件服务 3+.!管理员可以实现最大化利用网络带

宽资源以实现高速并行装载。



4管理员指南

管理与监控

对 系统的管理通过一系列的命令行来实现它们都放置在5/'21(.目录下。

提供的命令可以实现如下的管理任务

批量安装 软件

初始化 系统

启动关闭 系统

添加或移除 /主机

扩展 以及在新节点间重新分布 *(

监控和恢复失败的 

监控和恢复失败的 

备份和恢复数据库并行!

并行装载数据

系统状态报告

还提供了一个可选的监控管理工具管理员可以选择与 一起安装和启用。

&& &+&!使用数据收集代理程序 $!在各个 /

收集数据库的指标。$会定期比如 4秒!主动将 上收集的数据发

送给 。用户可以直接查询 &&数据库查看系统指标。&&还有一个基于 62的

图形化用户交互界面服务其可以独立于 安装。



7管理员指南

第二章分布式数据库概念

是一个分布式数据库系统。这就意味着在物理上数据是存储在多个数据库服务上

的在 中称为 !。这些独立的数据库服务通过网络进行通信在 中

称为网络层!。分布式数据库的一个基本特征是用户和客户端程序如同访问一个单机

数据库在 这个入口数据库称为 !。数据库分布在不同的机器上但对于用

户来说如同使用一个单机数据库一样。

数据是如何存储的

要理解 是如何在不同的 之间存储数据如下图所示的简单逻辑

数据库主键 .)8)!被使用黑体标记外键 9.8)!关系通过连线标明。

用数据仓库的术语来说这种数据模型称为星型模型。在这种数据库模型下表通

常被称为事实表 9*(!其他表 &、:+、+!被成为维表 ..

*(!。

系统中所有的用户表都是分布的这意味着数据被拆分成无重叠的记录集合。每

部分存储在一个 中。数据通过复杂的 /$/算法分布到所有 

。/$/82; 一个或者多个!由管理员在定义 *(时指定。

从底层上来说

通过一系列相关的独立 (实现——个 

和数个 。

不存储用户数据。



存储每张表无重叠的部分数据记录集合1&<'3=>!。



?管理员指南

解读 分布策略

在 中创建 &!或者修改 $!表时有一个额外的 *=-*2子句用以

定义表的分布策略 ..(<.)!。分布策略决定了表中的数据记录如何被打散

到 的 。提供了 种分布策略

/$/分布

使用 /$/分布时个或数个 *(&被用作 ..(<8) 简称 8!。8

被 /$/算法用来决定每行记录对应特定的 。相同 8)值的记录

会 /$/到相同的 。选择一个唯一键 .#@)!作为 8比如主

键 .)8)!可以确保尽可能的平坦分布数据。

随机 =+!分布

使用随机分布数据记录被循环的分布到 。相同值的记录可能会

落在不同的 。随机分布可以确保数据分布的平坦性但为了确保

性能优势应该尽可能的使用 /$/分布。



A管理员指南

第三章特性摘要

本章概述 的系统要求及相关特征。包含以下论题

标准一致性

与 兼容性

标准一致性

语言在 BA7年首次由美国国家标准协会 $C!标准化。随后的版本由 $C发布并

由国际标准化机构 '!标准化BABBB07及目前的标准

A。官方标准化名称为 '12&B?4A。通常新版的标准会增加一些特性

偶尔也会有特性被建议废弃或者剔除。

值得一提的是目前还没有一款商业数据库系统完全符合 标准。是几乎完全

符合 BB标准符合大部分的 BBB标准。数个来自 0标准的特性被实

现尤其是大部分的 '$特性!。

本章重点阐述 与 标准间的关系。对 标准一对一的特性支持列表可参

见相关附录DA标准可选特性支持”。

核心 一致性

由于 采用的是无共享 E+CE.!架构

的查询优化器对于一些 

结构目前还没有实现。下面这些 结构是不被支持的

一些在 2F*或 C'*2F*子句中有返回值的子查询其无法被 的查询优

化器重写为 %'C。

表 %'C且有子查询时的 -C'C$语法。

0在 9='作用的子查询中有记录集返回的 9-C&*'C。

反向滚动游标 &-='=!包括 92*&/='=、92*&/9=*、92*&/$'-*2、

和 92*&/=2$*:2。

4在使用 &=2$*2*$2语句时-C'C或者 =$=;82;子句必须包含所有 8

列若有 8!。出于这个限制仅有一个 -C'C或者 =$=;82;子句可被使

用在 &=2$*2*$2语句中。而对于 *=-*2=$C';的表来说不允许

使用 -C'C和 =$=;82;子句。

7&=2$*2-C-2C2F子句未包含全部 8列。 &=2$*2-C-2C2F不可用在

*=-*2=$C';表。

?:'$*2或者 *$2的 9-C&*'C不能在 得到执行因此只

能将字面值作为参数传递给这些函数。

A触发器 *.!不被支持虽然其依赖于 :'$*29-C&*'C。

B外键 9.8)!的参考约束在 中不生效。用户仍可以定义外键并且

这些信息也会保存在系统信息表中。

序列 #!操作函数 &-==:$和 $*:$。

22*26/2=2&-==2C*'9和 -$*26/2=2&-==2C*'9 指定游标删除和更

新操作!。



B管理员指南

BB一致性

剩余63页未读，继续阅读

wu19941222

2018-11-22

差评,挂羊头卖狗肉.

草芥茶

粉丝: 5
资源: 10

会员权益专享

Greenplum详细使用手册（新手必备）

评论2

会员权益专享

最新资源

Greenplum详细使用手册（新手必备）

评论2

Greenplum官方学习手册

greenplum6.1官方文档

greenplum的运维使用手册.docx

Greenplum管理工具使用指南

greenplum怎么使用datax的读插件

greenplum 初始化数据库 详细步骤

greenplum官方中文文档

greenplum数据库 docker 单机安装 详细过程

GreenPlum集群搭建安装超详细步骤

greenplum nullif函数使用

greenplum建表语句详细解析

完整的greenplum数据库学习资料

greenplum扩展uuid-ossp

greenplum驱动jar包

greenplum怎么groupby

flink sql 写 greenplum

greenplum 单节点部署

linux在线安装greenplum

greenplum数据库文档(中文版)

GREENPLUM部署

会员权益专享

最新资源

greenplum 初始化数据库详细步骤

greenplum数据库 docker 单机安装详细过程