CDH5.11.1集群配置指南：使用Cloudera Manager

"CDH5.11.1的安装配置文档主要介绍了如何使用Cloudera Manager进行集群的搭建和管理。Cloudera Manager是针对CDH（Cloudera Distribution Including Apache Hadoop）的管理平台，提供对CDH组件的精细控制和可视化管理，旨在优化集群性能、保证服务质量、确保合规性并降低运维成本。" 在配置CDH5.11.1集群的过程中，有几个关键步骤需要注意： 1. **初始化Cloudera Manager**：首先，需要启动Cloudera Manager Server和Agent。Server的地址（例如`192.168.96.141:7180`）可以在浏览器中访问，使用默认的管理员账号（admin/admin）登录。 2. **接受许可协议**：登录后，用户需同意许可条款才能继续。 3. **选择安装版本**：在免费版选项中选择继续，以便安装CDH。 4. **软件包列表**：此步骤通常无需特殊操作，直接继续即可。 5. **选择集群和Parcel**：这里的关键是确保所有待管理的主机都已启动cloudera-scm-agent，并且Parcel（CDH的软件包）已准备就绪。如果出现Parcel下载错误，可能需要手动配置本地Parcel仓库，并确认SHA1校验文件名正确。如果误删集群，需要重新添加主机并重新开始安装流程。 6. **安装Parcel**：在选择Parcel后，系统会检查配置，然后开始分发到各个节点并激活。确保Parcel目录配置正确，以便CM能正确找到并分发软件包。 7. **主机正确性检查**：CM会进行一系列的主机环境检查，包括Java的安装。如果遇到"JAVA_HOME is not set and could not be found"的错误，可能是因为系统无法识别到正确的Java路径。此时，需要检查 `/opt/cloudera-manager/cm-5.7.2/lib64/cmf/service/common/cloudera-config.sh` 文件中的JAVA8_HOME设置，确保其指向已安装的Java 8安装路径，通常应包含`/usr/lib`。 8. **解决检查器错误**：如果在“检查主机正确性”步骤遇到问题，如“检查器在所有主机上运行失败”或“未安装Java”，则需要根据日志提供的错误信息进行相应修复，如设置JAVA_HOME环境变量。 整个CDH的安装配置过程涉及到多个环节，每一步都需要细心操作，尤其是对于Java环境的配置和Parcel的管理。正确配置这些步骤是确保CDH集群正常运行的基础，同时也对后续的数据处理和分析工作至关重要。