大数据集群规划和配置文档:系统架构版本V1.0,物理环境架构和PAAS层需求。
189 浏览量
更新于2024-01-25
2
收藏 5.26MB DOCX 举报
大数据集群规划和配置文档:大数据平台集群整体规划
1. 系统架构版本V1.0
- 系统架构版本V1.0的规划和配置文档由王侨负责编写,时间为2023年8月14日。
2. 物理环境架构
2.1 安装部署图
- 在物理环境架构中,根据安装部署图进行配置和布局。确保各个组件可以正常运行在集群中。
2.2 硬件资源需求
- 根据大数据集群的要求,需要使用高配服务器虚拟化4台节点来组建集群。
- 每台服务器的硬件信息如下:
- 类型: 物理机
- 数量: 4台
- CPU: 64核
- 内存: 128G
- 系统盘: 2T
- 数据盘: 32T
2.3 PAAS 层需求
2.3.1 Linux 操作系统要求
- 要求使用Centos7.1及以上版本的Linux操作系统。
2.3.2 组件要求
- 确保各个组件的环境和软件版本符合要求,详情如下:
- Node1:
- JDK: JDK1.8.0
- 环境描述: jdk-8u371-linux-x64.tar.gz
- Node2:
- JDK: JDK1.8.0
- 环境描述: jdk-8u371-linux-x64.tar.gz
- Node3:
- JDK: JDK1.8.0
- 环境描述: jdk-8u371-linux-x64.tar.gz
- Node4:
- JDK: JDK1.8.0
- 环境描述: jdk-8u371-linux-x64.tar.gz
- Base 环境: gcc4.8.5
- 命令:yum install -y gcc
- 软件安装后需增加的依赖的包如下:
- k8s: 1.27.4
- 命令:yum install -y kubectl kubeadm kubelet
- MySQL: 5.7.41
- 命令:yum install -y commonlibsclientserver
- 计算Node: Dinky0.7.3
- 环境描述: dlink-release-0.7.3.tar.gz
- Doris-FE: 1.2.4
- 环境描述: apache-doris-fe-1.2.4.1-bin-x86_64.tar.gz
以上是大数据集群规划和配置文档中关于系统架构版本、物理环境架构和PAAS层需求的详细内容。通过严格按照这些规划和配置进行部署和配置,可以构建一个稳定高效的大数据平台集群。
点击了解资源详情
点击了解资源详情
点击了解资源详情
2018-07-09 上传
2023-10-09 上传
2024-11-01 上传
2022-11-24 上传
2017-07-20 上传
潇锐killer
- 粉丝: 1044
- 资源: 8
最新资源
- 深入浅出:自定义 Grunt 任务的实践指南
- 网络物理突变工具的多点路径规划实现与分析
- multifeed: 实现多作者间的超核心共享与同步技术
- C++商品交易系统实习项目详细要求
- macOS系统Python模块whl包安装教程
- 掌握fullstackJS:构建React框架与快速开发应用
- React-Purify: 实现React组件纯净方法的工具介绍
- deck.js:构建现代HTML演示的JavaScript库
- nunn:现代C++17实现的机器学习库开源项目
- Python安装包 Acquisition-4.12-cp35-cp35m-win_amd64.whl.zip 使用说明
- Amaranthus-tuberculatus基因组分析脚本集
- Ubuntu 12.04下Realtek RTL8821AE驱动的向后移植指南
- 掌握Jest环境下的最新jsdom功能
- CAGI Toolkit:开源Asterisk PBX的AGI应用开发
- MyDropDemo: 体验QGraphicsView的拖放功能
- 远程FPGA平台上的Quartus II17.1 LCD色块闪烁现象解析