（1）启动Hadoop，在HDFS中创建用户目录“/user/你的名字的拼音”。以张三同学为例，创建 /user/zhangsan ,下同；

在Hadoop中，启动HDFS（Hadoop Distributed File System）服务通常需要先启动NameNode和DataNodes，通常是通过命令行操作。对于基于Hadoop 2.x或更高版本的集群，你可以按照以下步骤进行：

1. **启动Hadoop**: 进入Hadoop的安装目录，例如`hadoop-3.3.0`，然后运行启动脚本，如在Linux上：

   cd hadoop-3.3.0
   ./bin/hdfs namenode -format (格式化NameNode)
   ./sbin/start-dfs.sh (启动HDFS服务)

如果是 yarn模式下的集群，还需要启动YARN服务：

   ./sbin/start-yarn.sh

2. **创建用户目录**: 使用HDFS的客户端工具`hadoop fs`，在NameNode上创建用户目录。以张三为例，运行以下命令：

   hdfs dfs -mkdir -p /user/zhangsan

`-p` 参数用于递归地创建路径。

请注意，以上步骤需要管理员权限，并且实际操作前请确保已经配置了Hadoop环境变量，如JAVA_HOME、HADOOP_HOME等。

相关问题

基于sqoop实现学生信息的迁移: 1、准备数据库info,创建学生信息表,包含字段(id,name,age),插入记录。截图 2、搭建sqoop,截图 3、将学生信息表中记录迁移到hdfs的/hb 4、查看hdfs的/hb中的数据

### 基于 Sqoop 实现学生信息的迁移步骤

#### 1. 准备数据库 `info` 和创建学生信息表

1. **登录 MySQL 并创建数据库 `info`：**

   mysql -uroot -p123123 -h127.0.0.1
   create database info;

2. **创建用户并授予权限：**

   create user 'bee'@'%' identified by '123123';
   grant all privileges on info.* to 'bee'@'%' identified by '123123';
   flush privileges;

3. **选择数据库 `info` 并创建学生信息表 `stu`：**

   use info;
   create table stu (id int, name varchar(20), age int);

4. **插入记录：**

   insert into stu values (1, '张三', 20);
   insert into stu values (2, '李四', 22);

**截图：** 完成上述操作后，截图保存。

#### 2. 搭建 Sqoop

1. **下载并解压 Sqoop：**

   cd /opt/software
   wget http://example.com/sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz -C /opt/modules
   cd /opt/modules
   mv sqoop-1.4.7.bin__hadoop-2.6.0 sqoop

2. **配置环境变量：**

   vi /etc/profile

添加以下内容：

   SQOOP_HOME=/opt/modules/sqoop
   export PATH=$PATH:$SQOOP_HOME/bin

保存并退出，然后使配置生效：

   source /etc/profile

3. **将数据库驱动拷贝到 Sqoop 的 lib 目录下：**

   cp /opt/software/mysql-connector-java-8.0.19-bin.jar /opt/modules/sqoop/lib

4. **配置 `sqoop-env.sh`：**

   cd /opt/modules/sqoop/conf
   cp sqoop-env-template.sh sqoop-env.sh
   vi sqoop-env.sh

添加以下内容：

   export HADOOP_COMMON_HOME=/opt/modules/hadoop
   export HADOOP_MAPRED_HOME=/opt/modules/hadoop

保存并退出。

**截图：** 完成上述操作后，截图保存。

#### 3. 将学生信息表中记录迁移到 HDFS 的 `/hb`

1. **列出数据库中的所有表：**

   sqoop list-databases --connect jdbc:mysql://localhost:3306/info --username bee --password 123123

2. **导入学生信息表 `stu` 到 HDFS 的 `/hb` 目录：**

   sqoop import --connect jdbc:mysql://localhost:3306/info --username bee --password 123123 --table stu --columns="id,name,age" --target-dir '/hb' -m 1

**截图：** 完成上述操作后，截图保存。

#### 4. 查看 HDFS 的 `/hb` 中的数据

1. **进入 HDFS 并查看 `/hb` 目录下的数据：**

   hdfs dfs -cat /hb/part-m-00000

**截图：** 完成上述操作后，截图保存。

以上步骤完成后，您应该能够成功地将学生信息表从 MySQL 迁移到 HDFS，并验证数据的正确性。

Hadoop Shell基本操作 -上传以你学号、姓名命名的文件。 - 查看 hadoop上已上传文件的内容。

Hadoop Shell是Hadoop生态系统中的命令行工具，用于管理和操作Hadoop分布式文件系统(HDFS)。以下是进行基本操作的步骤：

1. **上传文件**:
- 首先，你需要将包含你学号和姓名的文件保存到本地计算机上。假设你的学号是001，姓名是张三，文件名为`001_张三.txt`。
- 使用`hdfs dfs -put [本地文件路径] [HDFS路径]`命令上传文件。例如：

   hdfs dfs -put /path/to/001_张三.txt /user/your_username/001_张三.txt

确保替换`/path/to/`为实际的本地文件路径，`your_username`为你在Hadoop集群中的用户名。

2. **查看文件内容**:
- 要查看已经上传到HDFS的文件内容，你可以使用`hdfs dfs -cat`命令，加上文件的HDFS路径：

   hdfs dfs -cat /user/your_username/001_张三.txt

如果你是超级用户，也可以直接使用`hdfs dfs -ls /user/your_username`列出目录下的所有文件，并找到你的文件进一步查看。

记得在操作前确认Hadoop集群的状态和权限设置是否允许你完成这些操作。