CDH5.12.1 CentOS 6.5虚拟机大数据搭建与SSH秘钥配置详解

本文档详细介绍了在CentOS 6.5虚拟机环境下搭建CDH 5.12.1集群的过程，包括MySQL数据库的安装与配置、SSH密钥对的生成与验证、以及Oracle Java的安装和环境配置。以下是主要步骤的详细说明： 1. **虚拟机安装**：在CentOS 6.5上安装CDH5.12.1，用户选择桌面版安装，因为这包含了部分内置工具，可以省去额外下载。安装过程中设置了主机名，master40作为主节点，而datanode节点为slave41-44。 2. **网络配置**：修改`/etc/hosts`文件，添加主机名和IP对应关系，并在`ifcfg-eth0`文件中配置网络参数以确保内部网络连通。重启网络服务后，通过ping检查网络状态并修改主机名。 3. **SSH密钥管理**：使用`ssh-keygen`生成RSA密钥对，公钥分别添加到各节点的`~/.ssh/authorized_keys`中。通过循环复制公钥的方式，实现了节点之间的无密码SSH登录，确保安全连接。 4. **Java环境安装**：首先卸载原有的OpenJDK，使用`rpm`命令进行卸载，然后下载Oracle JDK 7u80的rpm包，将其上传到`/opt`目录，并使用`rpm`安装。配置环境变量`JAVA_HOME`指向新安装的JDK，确保所有节点都安装了JDK7。 5. **MySQL安装**：在系统的特定目录`/data/software`下下载MySQL安装文件，然后进行安装。配置MySQL系统目录，添加环境变量，以便系统能够识别MySQL。 6. **安装过程中的常见问题**：文档可能还涉及了一些常见问题的解决策略，比如安装过程中可能遇到的错误处理、权限设置、依赖项确认等，这部分内容对于成功搭建至关重要。 在整个过程中，作者提供了详细的步骤和截图，帮助读者理解每个环节的操作，确保CDH 5.12.1集群的顺利搭建。这些步骤不仅适用于初学者，也是高级用户在面临类似场景时参考的重要资料。