8.Hadoop入门进阶课程_第8周_Hive介绍和安装部署.pdf - CSDN文库

需积分: 10 130 浏览量更新于2023-03-16 评论收藏 1.06MB PDF 举报

身份认证购VIP最低享 7 折!

领优惠券(最高得80元）

资源详情

资源评论

资源推荐

第 1 页共 18 页出自石山园，博客地址：http://www.cnblogs.com/shishanyuan

Hive 介绍和安装部署

本文版权归作者和博客园共有，欢迎转载，但未经作者同意必须保留此段声明，且在文章页面明

显位置给出原文连接，博主为石山园，博客地址为 http://www.cnblogs.com/shishanyuan 。

该系列课程是应邀实验楼整理编写的，这里需要赞一下实验楼提供了学习的新方式，可以边看博

客边上机实验，课程地址为

【注】该系列所使用到安装包、测试数据和代码均可在百度网盘下载，具体地址为

http://pan.baidu.com/s/10PnDs，下载该

https://www.shiyanlou.com/courses/237

PDF 文件

1 搭建环境

部署节点操作系统为 CentOS，防火墙和 SElinux 禁用，创建了一个 shiyanlou 用户并在系

统根目录下创建/app 目录，用于存放 Hadoop 等组件运行包。因为该目录用于安装 hadoop

等组件程序，用户对 shiyanlou 必须赋予 rwx 权限（一般做法是 root 用户在根目录下创建/app

目录，并修改该目录拥有者为 shiyanlou(chown –R shiyanlou:shiyanlou /app）。

Hadoop 搭建环境：

 虚拟机操作系统： CentOS6.6 64 位，单核，1G 内存

 JDK：1.7.0_55 64 位

 Hadoop：1.1.2

2 Hive 介绍

Hive 是 Facebook 开发的构建于 Hadoop 集群之上的数据仓库应用，它提供了类似于 SQL

语法的 HQL 语句作为数据访问接口，这使得普通分析人员的应用 Hadoop 的学习曲线变小，

Hive 有如下特性：

 Hive 是基于 Hadoop 的一个数据仓库工具，可以将结构化的数据文件映射为一张数据

库表，并使用 sql 语句转换为 MapReduce 任务进行运行。其优点是学习成本低，可以

通过类 SQL 语句快速实现简单的 MapReduce 统计，不必开发专门的 MapReduce 应

用，十分适合数据仓库的统计分析；

 Hive 是建立在 Hadoop 上的数据仓库基础构架。它提供了一系列的工具，可以用来进

行数据提取转化加载（ETL），这是一种可以存储、查询和分析存储在 Hadoop 中的大

剩余17页未读，继续阅读

评论0

ansoncloud

粉丝: 5
资源: 31

会员权益专享

图片转文字

全年可省5，000元立即开通

最新资源

资源上传下载、课程学习等过程中有任何疑问或建议，欢迎提出宝贵意见哦~我们会及时处理！点击此处反馈