hadoop fs -put 增量上传shell脚本

以下是使用Shell脚本实现Hadoop增量上传的示例代码：

#!/bin/bash

# 本地文件或目录的路径
LOCAL_PATH="/path/to/local/file"

# HDFS中的目标路径
HDFS_PATH="/path/to/hdfs/directory"

# 获取Hadoop命令路径
HADOOP_CMD=$(which hadoop)

# 判断本地路径是文件还是目录
if [ -f $LOCAL_PATH ]; then
  # 上传单个文件
  $HADOOP_CMD fs -put -f $LOCAL_PATH $HDFS_PATH/$(basename $LOCAL_PATH)
else
  # 上传整个目录
  $HADOOP_CMD fs -put -f $LOCAL_PATH/* $HDFS_PATH/
fi

这段代码可以将本地文件或目录上传到HDFS中，并且只会上传新增或修改的文件。其中，`-f`参数表示强制上传，即覆盖已有文件。如果不加`-f`参数，则不会覆盖已有文件。