1.spark-shell 交互式编程 2.编写独立应用程序实现数据去重 3.编写独立应用程序实现求平均值问题

1. Spark Shell 是Apache Spark的一个交互式环境，它提供了一个命令行界面，让用户可以实时地在Spark集群上运行SQL查询、DataFrame操作以及Spark Streaming任务等。通过`spark-shell`，开发者可以直接查看计算结果，这对于快速迭代和调试Spark程序非常方便。

2. 要编写一个独立的Java应用程序实现数据去重，你可以按照以下步骤：
- 导入必要的库，如Java 8的Stream API或使用Apache Commons Lang的`CollectionUtils#deduplicate()`

   List<String> uniqueElements = originalList.stream()
       .distinct()
       .collect(Collectors.toList());

或者使用Map来存储已见元素，避免重复：

   Map<String, Boolean> seen = new HashMap<>();
   List<String> unique = originalList.stream()
       .filter(element -> !seen.put(element, true) || seen.get(element))
       .collect(Collectors.toList());

3. 编写一个独立的Java程序来求平均值，假设有一个整数数组：

public double calculateAverage(int[] numbers) {
    if (numbers == null || numbers.length == 0) {
        return 0;
    }
    int sum = Arrays.stream(numbers).sum();
    return (double) sum / numbers.length;
}

用户可以创建这样的数组并调用这个函数获取平均值，示例：

int[] data = {1, 2, 3, 4, 5};
double average = calculateAverage(data);
System.out.println("Average: " + average);