一键搭建大数据平台：脚本安装OS与HDP服务

"该资源提供了一种通过脚本自动化搭建大数据平台的方法，主要涉及服务端和客户端操作系统的安装，以及HDP服务的部署。搭建流程包括安装系统、配置本地YUM源、设置HTTP源、安装NTP服务、密钥配置、安装JDK、安装MySQL、以及编译安装Ambari平台。提供的脚本包括create_local_yum.sh用于创建本地YUM源，update_master.sh则用于安装HTTP源、配置主节点和NTP服务。" 在大数据平台的搭建过程中，首先需要准备相应的镜像包，如os1.1.iso用于服务端和客户端的操作系统安装，而hdp.iso则用于Hadoop分布式平台（HDP）服务的安装。搭建流程分为几个关键步骤： 1. **安装系统**：这是整个流程的基础，需要将指定的ISO镜像文件加载到服务器上进行安装。 2. **安装本地YUM源**：使用create_local_yum.sh脚本，将ISO镜像挂载到/mnt/vrv/目录，并更新/etc/yum.repos.d/vrv.repo文件，设置本地YUM源，以便后续安装软件包。 3. **安装HTTP源**：update_master.sh脚本中可能包含了这一步，通常是为了加速软件包的下载，通过配置HTTP服务器提供软件仓库。 4. **安装并配置NTP服务**：确保所有节点的时钟同步，这对于分布式系统来说至关重要。 5. **配置秘钥**：可能涉及到SSH密钥对的生成与分发，以实现无密码SSH登录，简化管理操作。 6. **安装JDK**：Java开发工具包是运行许多大数据组件所必需的环境。 7. **安装MySQL**：MySQL或类似的数据库系统常作为大数据平台的元数据存储。 8. **编译安装Ambari平台**：Ambari是一个用于管理和监控Hadoop集群的工具，它的安装简化了集群的配置和管理。 脚本create_local_yum.sh中，通过`mkdir -p /mnt/vrv/`创建挂载目录，`mount /dev/sr0 /mnt/vrv/`挂载ISO，然后更新YUM源，添加到`/etc/yum.repos.d/`目录下。此外，脚本还会更新主机名（host_ip）到`/usr/bin/os/hosts`，虽然没有显示完整脚本，但通常也会将其添加到`/etc/hosts`以进行网络通信。 update_master.sh脚本可能负责在主节点上安装HTTP源，并配置NTP服务，确保集群内的时钟同步。脚本中还包含了获取主机IP地址的命令，并可能用于更新`/etc/hosts`文件，以便集群内的节点可以互相识别。 这个搭建流程旨在通过自动化脚本减少手动操作，提高部署效率，并确保大数据平台的稳定运行。在实际环境中，还需要根据具体需求调整脚本，例如添加防火墙规则、配置安全策略、优化性能参数等。