大数据集群规划和配置文档:系统架构版本V1.0,物理环境架构和PAAS层需求。

0 下载量 189 浏览量 更新于2024-01-25 2 收藏 5.26MB DOCX 举报
大数据集群规划和配置文档:大数据平台集群整体规划 1. 系统架构版本V1.0 - 系统架构版本V1.0的规划和配置文档由王侨负责编写,时间为2023年8月14日。 2. 物理环境架构 2.1 安装部署图 - 在物理环境架构中,根据安装部署图进行配置和布局。确保各个组件可以正常运行在集群中。 2.2 硬件资源需求 - 根据大数据集群的要求,需要使用高配服务器虚拟化4台节点来组建集群。 - 每台服务器的硬件信息如下: - 类型: 物理机 - 数量: 4台 - CPU: 64核 - 内存: 128G - 系统盘: 2T - 数据盘: 32T 2.3 PAAS 层需求 2.3.1 Linux 操作系统要求 - 要求使用Centos7.1及以上版本的Linux操作系统。 2.3.2 组件要求 - 确保各个组件的环境和软件版本符合要求,详情如下: - Node1: - JDK: JDK1.8.0 - 环境描述: jdk-8u371-linux-x64.tar.gz - Node2: - JDK: JDK1.8.0 - 环境描述: jdk-8u371-linux-x64.tar.gz - Node3: - JDK: JDK1.8.0 - 环境描述: jdk-8u371-linux-x64.tar.gz - Node4: - JDK: JDK1.8.0 - 环境描述: jdk-8u371-linux-x64.tar.gz - Base 环境: gcc4.8.5 - 命令:yum install -y gcc - 软件安装后需增加的依赖的包如下: - k8s: 1.27.4 - 命令:yum install -y kubectl kubeadm kubelet - MySQL: 5.7.41 - 命令:yum install -y commonlibsclientserver - 计算Node: Dinky0.7.3 - 环境描述: dlink-release-0.7.3.tar.gz - Doris-FE: 1.2.4 - 环境描述: apache-doris-fe-1.2.4.1-bin-x86_64.tar.gz 以上是大数据集群规划和配置文档中关于系统架构版本、物理环境架构和PAAS层需求的详细内容。通过严格按照这些规划和配置进行部署和配置,可以构建一个稳定高效的大数据平台集群。