sqoop全量导入多张表到hive

### 使用 Sqoop 进行多张表的全量导入至 Hive

#### 配置环境与准备
为了成功执行 Sqoop 命令，确保已经安装并配置好 Sqoop 环境[^1]。

#### 执行导入操作
对于将 MySQL 数据库中的多个表格一次性全部导入到 Hive 中的操作，可以利用 `import-all-tables` 参数来简化这一过程。此参数允许用户指定要连接的目标 MySQL 数据库以及必要的认证信息，并可以选择性地覆盖已存在的 Hive 表格或排除某些特定表格不参与此次迁移工作[^4]。

具体命令如下所示：

sudo -u hdfs \
sqoop import-all-tables \
--connect jdbc:mysql://<MySQL服务器地址>:<端口号>/<数据库名>?tinyInt1isBit=false \
--username <用户名> \
--password <密码> \
--hive-import \
--hive-overwrite \
--exclude-tables table1,table2,... \
-m 1

上述命令中：
- `<MySQL服务器地址>` 替换为实际 MySQL 主机 IP 地址；
- `<端口号>` 修改为目标 MySQL 实例监听的服务端口，默认情况下为 3306；
- `<数据库名>` 更改为待同步的数据源名称；
- `<用户名>` 和 `<密码>` 分别设置成具有相应权限访问该 MySQL 数据库账户凭证；
- 如果不需要排除任何表格，则省略 `--exclude-tables` 及其后的列表项；反之，在这里列举想要忽略掉不做处理的关系型数据表的名字，各名字间用英文状态下的逗号分隔开来；
- `-m 1` 设置并发度为单线程模式运行作业流程，可根据实际情况调整这个数值大小以优化性能表现。

完成以上步骤之后，即可启动任务让 Sqoop 自动抓取来自远程关系型数据库管理系统内的结构化资料集并且按照既定规则映射存储于分布式文件系统之上供后续分析挖掘所用。

#### 创建目标 Hive 数据库 (如果尚未存在)
在正式开始之前，还需确认目的位置是否存在名为 `sqoop_test` 的 Hive 数据库实例。如果没有的话可以通过下面这条 SQL 语句来进行初始化创建动作[^2]:

CREATE DATABASE IF NOT EXISTS sqoop_test;

随后可通过以下查询指令检验是否正确建立了新的 schema 对象及其内部对象概况情况:

SHOW DATABASES;

SHOW TABLES IN sqoop_test;

最后，当所有准备工作都完成后就可以放心大胆地去尝试批量转移业务逻辑所需的各种维度事实型实体记录啦！