CentOS7离线安装CDH15实战教程:三步快速部署
版权申诉
132 浏览量
更新于2024-07-20
收藏 1.58MB DOCX 举报
本文档详细介绍了在 CentOS 7 系统上进行离线安装 CDH15(Cloudera Hadoop Distribution)的简易版本,作者通过个人实战经验分享了一个实用的安装步骤。以下是安装过程中涉及的关键知识点:
1. **准备工作**:
- 需要三台虚拟机,分别为服务器(192.168.198.201)、两个代理节点(192.168.198.202 和 192.168.198.203),以及 Cloudera Manager (cdhmanager) 和 CDH 包(如 cloudera-manager-centos7-cm5.15.1_x86_64.tar.gz 和 CDH-5.15.1-1.cdh5.15.1.p0.4-el7.parcel及相关文件)。
2. **系统环境设置**:
- 开机时保持命令行模式:使用 `systemctl set-default multi-user.target` 设置默认启动模式。
- 关闭防火墙服务以确保无阻碍:`systemctl stop firewalld.service` 和 `systemctldisablefirewalld.service`。
- 禁用 selinux,以简化安装过程:
- 使用 `setenforce 0`临时禁用 selinux。
- 修改 `/etc/selinux/config` 文件,将 `SELINUX=enforcing` 更改为 `SELINUX=disabled`,并确保 `SELINUXTYPE` 设置为 `targeted`,以便后续重启使更改生效。
3. **网络配置**:
- 配置静态 IP 地址、网关和路由,但具体步骤未在文中详述,这通常是基础网络设置,包括在 `/etc/sysconfig/network-scripts` 下编辑 `ifcfg-eth0` 等配置文件。
4. **安装流程**:
- 将 CDH 包解压到适当目录,如 `/opt`。
- 使用 `manifest.json` 文件来指导安装过程,这是一个脚本或配置文件,用于定义安装组件和顺序。
- 安装过程中可能涉及到安装 CDH 代理(agent)、服务器组件(如 HDFS、YARN、Hive 等)、以及 Cloudera Manager。
- 安装完成后,cdhmanager 通常会提供 web 界面,可用于管理和监控整个 Hadoop 集群。
5. **后续维护与优化**:
- 安装完成后,可能需要根据实际需求调整 selinux 安全策略,以及配置其他高级选项。
- 验证集群的正常运行,检查日志,确保各个服务已经成功启动和同步。
通过这个文档,读者可以了解到离线安装 CDH15 在 CentOS 7 环境中的具体实践步骤,对于希望在没有互联网连接的情况下部署 Hadoop 集群的用户来说,这是一个宝贵的经验分享。
点击了解资源详情
点击了解资源详情
点击了解资源详情
2021-04-29 上传
2022-05-19 上传
2021-05-19 上传
2018-05-05 上传
2015-10-29 上传
2019-06-21 上传
fangwei1234
- 粉丝: 3
- 资源: 26
最新资源
- 正整数数组验证库:确保值符合正整数规则
- 系统移植工具集:镜像、工具链及其他必备软件包
- 掌握JavaScript加密技术:客户端加密核心要点
- AWS环境下Java应用的构建与优化指南
- Grav插件动态调整上传图像大小提高性能
- InversifyJS示例应用:演示OOP与依赖注入
- Laravel与Workerman构建PHP WebSocket即时通讯解决方案
- 前端开发利器:SPRjs快速粘合JavaScript文件脚本
- Windows平台RNNoise演示及编译方法说明
- GitHub Action实现站点自动化部署到网格环境
- Delphi实现磁盘容量检测与柱状图展示
- 亲测可用的简易微信抽奖小程序源码分享
- 如何利用JD抢单助手提升秒杀成功率
- 快速部署WordPress:使用Docker和generator-docker-wordpress
- 探索多功能计算器:日志记录与数据转换能力
- WearableSensing: 使用Java连接Zephyr Bioharness数据到服务器