mysql collect_set_hive：数据库“行专列”操作---使用collect_set/collect_list/collect_all & row_number()over(partit...

collect_set和collect_list是MySQL和Hive中的聚合函数，用于对某个字段进行分组并将同一组中的值合并成一个集合或列表。

例如，假设我们有一个表orders，其中包含以下列：order_id，customer_id，order_date和product_name。我们想要按照customer_id分组，并将每个组中的所有product_name合并成一个列表。可以使用如下语句：

SELECT customer_id, COLLECT_LIST(product_name)
FROM orders
GROUP BY customer_id;

这将返回一个结果集，其中每行包含一个唯一的customer_id和一个包含该客户所有订单中的product_name的列表。

collect_all是MySQL中的一个自定义聚合函数，用于将一个列中的所有值合并成一个列表或集合。与collect_set和collect_list不同，collect_all不需要进行分组操作。

row_number() over(partition by ...)是MySQL和Hive中的窗口函数，用于为每个分组中的行分配一个唯一的行号。例如，假设我们要为orders表中的每个customer_id分配一个唯一的行号。可以使用如下语句：

SELECT order_id, customer_id, ROW_NUMBER() OVER(PARTITION BY customer_id ORDER BY order_date) as row_num
FROM orders;

这将返回一个结果集，其中每行包含一个唯一的order_id，一个customer_id和一个在该customer_id分组中为该行分配的唯一行号。