CDH离线安装步骤详解

"该文档详细介绍了在离线环境下安装CDH (Cloudera Data Hub) 的步骤，包括环境变量配置、Hadoop、Hive、HBase的安装。文档适用于CentOS 6操作系统，并指定使用JDK 1.7.0_80版本。" 在CDH离线安装过程中，首先需要进行系统环境的准备。以下是一些关键步骤： 1. **网络配置**：确保所有节点的网络设置正确，以便它们之间能够通信。 2. **SSH免密码登录**：配置所有节点之间的SSH免密码登录，简化后续的远程操作。 3. **关闭防火墙**：关闭服务器的防火墙，以允许集群内的服务自由通信。 4. **关闭SELINUX**：关闭SELinux以避免它对安装过程造成干扰。 5. **安装JDK**：安装指定版本的JDK，这里是1.7.0_80，因为CDH需要特定版本的Java环境。 6. **设置NTP**：同步所有节点的时间，确保时间一致性对于分布式系统的正常运行至关重要。 7. **安装配置MySQL**：安装MySQL并配置为Cloudera Manager的数据库，用于存储集群配置信息。 8. **下载依赖包**：提前下载好所有必要的依赖包，包括CDH和Cloudera Manager的安装文件，存放在主节点的Parcel目录中。 接下来是安装Cloudera Manager (CM) 和其Agent： 1. **安装Cloudera Manager Server & Agent**：在所有节点上安装CM Server和Agent。 2. **创建用户cloudera-scm**：在所有节点上创建并配置用于CM的用户账户。 3. **配置CMAgent**：根据CM Server的指示配置Agent，确保其能与Server通信。 4. **配置CMServer的数据库**：将之前安装的MySQL配置为CM Server的数据库。 5. **创建Parcel目录**：创建Parcel目录以存放CDH的Parcel文件。 6. **启动CMManager & Agent服务**：启动CM Server和Agent服务，开始管理集群。 然后是CDH5的安装： 1. **CDH5安装**：通过Cloudera Manager在线界面，选择已上传到Parcel目录的CDH5 parcel文件进行离线安装，包括Hadoop、Hive和HBase等组件。 在实际操作中，可能还需要编写和使用一些脚本来辅助安装，例如MySQL数据库的创建和删除脚本，以自动化部分流程。务必注意，离线安装需要预先下载所有必需的文件，避免在没有网络的情况下无法获取文件。对于在线安装，应参考Cloudera官方文档。 离线安装CDH适用于那些网络条件有限或者不允许直接访问互联网的环境，通过这种方式可以确保整个集群的安装过程在一个封闭且可控的网络环境中进行。在实际操作中，每个步骤都需要细心执行，以确保CDH的稳定运行和组件之间的协调配合。