CDH安装与配置指南:Cloudera Manager与Mysql

需积分: 0 0 下载量 96 浏览量 更新于2024-09-07 收藏 360KB DOCX 举报
"该文档详细记录了CDH (Cloudera Distribution Including Apache Hadoop) 的安装过程,包括Cloudera Manager组件的配置、相关软件包的管理,以及在配置过程中可能遇到的问题及其解决方案。其中提到了Linux系统下依赖包的安装与卸载,特别是MySQL的正确安装和管理,以及如何设置MySQL的root密码和开机自启动。此外,还强调了特定文件位置的作用,如MySQL连接器的存放路径和初始化数据库脚本的执行。" 在安装CDH的过程中,首先需要配置Cloudera Manager,这是一个用于管理和监控Hadoop生态系统的工具,它包含了一系列组件,如HDFS、YARN、HBase等。安装Cloudera Manager涉及的步骤包括下载相应版本的CM软件包,配置服务器列表,以及安装过程中对服务器硬件和网络的要求。 在Linux环境中,管理软件包通常使用`yum`命令,例如`yum install`用于安装包,而`yum remove`用于卸载包。对于MySQL,这是CDH中常用的数据存储服务,确保正确安装并创建完整的目录结构至关重要,如`/var/lib/mysql`。启动、停止和重启MySQL服务可以使用`/usr/share/mysql/mysql.server start|stop|restart`或`systemctl start|stop|restart mysqld.service`命令。 设置MySQL的root用户密码是安全配置的重要部分,可以通过SQL语句`UPDATE users SET password=PASSWORD('123456') WHERE user='root';`来完成。为了确保MySQL在系统启动时自动运行,可以在`/etc/rc.local`文件中添加`service mysqld start`命令。 在CDH的部署中,MySQL的连接器(如`mysql-connector-java`)需要复制到指定目录,以供Java应用程序访问。文档中提到的特定位置`/opt/soft/mysql-connector-java-5.1.41/mysql-connector-java-5.1.41-bin.jar`应当被替换为实际的安装路径。 初始化数据库的脚本`scm_prepare_database.sh`用于创建Cloudera Manager所需的数据库,例如`/opt/cloudera-manager/cm-5.7.2/share/cmf/schema/scm_prepare_database.sh mysql SCM scm cm-h localhost -u root -p 123456`,这会创建一个名为`SCM`的数据库,用于存储Cloudera Manager的数据,用户名和密码分别为`scm`和`123456`。 最后,确保Cloudera Manager Server的配置文件`/opt/cloudera-manager/cm-5.7.2/etc/cloudera-scm-agent/config.ini`正确设置,并通过`/opt/cloudera-manager/cm-5.7.2/etc/init.d/cloudera-scm-server start`命令在主节点上启动服务。这些步骤是CDH安装过程中的关键环节,每个环节都需谨慎操作,以确保集群的稳定运行。