2018 PostgreSQL中国技术大会Greenplum智能运维实践与展望
"PostgresChina2018王昊Greenplum5智能运维管理实例及展望.pdf" 在2018年的PostgreSQL中国技术大会上,王昊分享了关于Greenplum 5数据库的智能运维管理和实践案例。Greenplum是一个基于PostgreSQL的分布式并行数据库系统,特别适用于大数据分析场景。此报告主要探讨了Greenplum在执行SQL查询时的性能优化和分布式架构的运用。 首先,演讲中提到了一个SQL查询示例,即在一个JOIN操作中计算两个表`t1`和`t2`的交集。可以看到,这个简单的`INNER JOIN`查询在执行时花费了27166.716毫秒,这在处理大规模数据时可能成为一个性能瓶颈。这种查询通常会在Master节点上进行,所有计算都在单个节点上完成,可能会导致较高的延迟。 接着,报告介绍了Greenplum的分布式架构,由Master节点和多个Segment节点组成。每个Segment可以进一步划分为多个分区(A、B、C、D等),这样的设计允许数据并行处理,提高查询效率。通过将数据分片到不同的Segment,负载可以被均衡分布,从而实现更高效的计算。 然后,王昊展示了一个更复杂的查询,该查询不仅涉及JOIN操作,还包括了子查询。这个查询的执行时间显著增加到了192084.732毫秒。这表明对于包含复杂逻辑的查询,性能优化至关重要。 为了提升查询效率,演讲者提出了设置`gp_segments_for_planner`参数。通过将其值设置为1,可以指示优化器在计划查询时仅考虑单个Segment,这可能会降低查询的复杂度并提高执行速度。在调整参数后,同样的查询只花了27901.955毫秒,性能有了显著提升。 这个分享强调了在Greenplum中,理解和优化SQL查询执行计划的重要性,特别是对于大数据环境中的复杂查询。此外,合理配置系统参数也是提升系统性能的关键。通过对查询计划的调整和分布式架构的有效利用,可以显著提高Greenplum在处理大数据时的响应时间和整体性能。 2018年的PostgreSQL中国技术大会不仅展示了Greenplum在实际应用中的智能运维管理,也提供了对数据库优化和性能调优的深入洞察,对于理解如何利用PostgreSQL的分支如Greenplum来处理大数据问题具有很高的参考价值。
![rar](https://img-home.csdnimg.cn/images/20210720083606.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![zip](https://img-home.csdnimg.cn/images/20210720083736.png)
![zip](https://img-home.csdnimg.cn/images/20210720083736.png)
![zip](https://img-home.csdnimg.cn/images/20210720083736.png)
![zip](https://img-home.csdnimg.cn/images/20210720083736.png)
![zip](https://img-home.csdnimg.cn/images/20210720083736.png)
![zip](https://img-home.csdnimg.cn/images/20210720083736.png)
![](https://profile-avatar.csdnimg.cn/default.jpg!1)
- 粉丝: 327
- 资源: 2万+
我的内容管理 展开
我的资源 快来上传第一个资源
我的收益
登录查看自己的收益我的积分 登录查看自己的积分
我的C币 登录后查看C币余额
我的收藏
我的下载
下载帮助
![](https://csdnimg.cn/release/wenkucmsfe/public/img/voice.245cc511.png)
最新资源
- 计算机人脸表情动画技术发展综述
- 关系数据库的关键字搜索技术综述:模型、架构与未来趋势
- 迭代自适应逆滤波在语音情感识别中的应用
- 概念知识树在旅游领域智能分析中的应用
- 构建is-a层次与OWL本体集成:理论与算法
- 基于语义元的相似度计算方法研究:改进与有效性验证
- 网格梯度多密度聚类算法:去噪与高效聚类
- 网格服务工作流动态调度算法PGSWA研究
- 突发事件连锁反应网络模型与应急预警分析
- BA网络上的病毒营销与网站推广仿真研究
- 离散HSMM故障预测模型:有效提升系统状态预测
- 煤矿安全评价:信息融合与可拓理论的应用
- 多维度Petri网工作流模型MD_WFN:统一建模与应用研究
- 面向过程追踪的知识安全描述方法
- 基于收益的软件过程资源调度优化策略
- 多核环境下基于数据流Java的Web服务器优化实现提升性能
![](https://img-home.csdnimg.cn/images/20220527035711.png)
![](https://img-home.csdnimg.cn/images/20220527035111.png)
![](https://csdnimg.cn/release/wenkucmsfe/public/img/green-success.6a4acb44.png)