利用spark-shell编程实现：下面给出一个child-parent的数据，要求挖掘其中的父子辈关系，给出祖孙关系的结果，输出格式为（grandchild，grandparent）。在scala下编写代码

假设我们有一个名为"child_parent.txt"的文件，每行都有两个名字，第一个名字是孩子，第二个名字是父亲。

首先，我们需要将数据加载到Spark中，并创建一个RDD来表示数据集。然后，我们可以使用map函数将每一行分割成孩子和父亲的名字。

接下来，我们可以使用reduceByKey函数将所有父亲和孩子的关系组合在一起。然后，我们可以使用flatMap函数来生成祖孙关系对。最后，我们可以使用collect函数来收集结果并将其输出到控制台。

以下是实现代码：

val spark = SparkSession.builder().appName("GrandparentRelation").getOrCreate()

val sc = spark.sparkContext

// 加载数据并创建RDD
val data = sc.textFile("child_parent.txt")

// 将每一行分割成孩子和父亲的名字
val child_parent = data.map(line => line.split(" ")).map(words => (words(0), words(1)))

// 使用reduceByKey函数将所有父亲和孩子的关系组合在一起
val parent_child = child_parent.map(x => (x._2, x._1)).reduceByKey((x,y) => x + "," + y)

// 使用flatMap函数生成祖孙关系对
val grandparent_grandchild = parent_child.flatMap{ case(parent, children) =>
  val grandchildren = child_parent.filter(x => children.contains(x._1)).map(x => x._2)
  grandchildren.map(child => (child, parent))
}

// 输出结果
grandparent_grandchild.collect().foreach(println)

这段代码将会输出所有的祖孙关系对，格式为(grandchild, grandparent)。