hive with as中的子查询被执行了两次

在Hive中，使用WITH子句定义的子查询被认为是一个临时表，它可以在查询中被引用多次。如果在同一个查询中多次引用同一个WITH子句中的子查询，那么该子查询将被执行多次。

这种行为通常是由于查询优化器所造成的，它试图通过重复执行子查询来优化查询计划。如果你需要避免这种情况，可以尝试将子查询放到一个单独的临时表中，并在查询中引用该临时表。

例如，你可以使用以下语句将子查询放到一个临时表中：

CREATE TEMPORARY TABLE temp_table AS
WITH subquery AS (
  SELECT ...
)
SELECT * FROM subquery;

然后，你可以在查询中引用该临时表，而不是使用WITH子句中的子查询：

SELECT * FROM temp_table WHERE ...

相关问题

hive中可以先with as建临时表a，然后create tabale as select a吗

在Hive中，你可以使用`WITH`关键字来创建一个临时视图（也称为子查询结果集），类似于SQL的`AS`关键字。但是，Hive并不直接支持在创建新表时基于已存在的临时视图`a`执行`CREATE TABLE AS SELECT a`操作，因为Hive语法更倾向于直接从数据源或者查询结果生成表，而不是依赖于中间视图。

如果你想先创建一个临时视图，然后再基于此视图创建新表，通常的做法是两个步骤分开完成：

1. 首先，使用`WITH`声明创建临时视图：

   WITH a AS (SELECT ... FROM ... WHERE ...)

这里`...`代表你的查询语句。

2. 然后，你可以使用这个临时视图来创建新表：

   CREATE TABLE new_table_name
   AS SELECT * FROM a;

这会将`a`视图的内容复制到新的`new_table_name`表中。

请注意，在实际操作中，如果数据量非常大，频繁地创建和删除视图可能会对性能造成影响，因为它涉及到多次的磁盘I/O操作。所以，这种做法更适合在小规模或者测试环境中。

有一张表有日期，用户，年龄，求所有用户和活跃用户的总数已经平均年龄（活跃用户是指两天都有访问记录的用户），用户可以多次访问，hive语法用wtihas

可以用以下Hive语法实现：

WITH 
  active_users AS (
    SELECT 
      user, 
      COUNT(DISTINCT date) AS days_active 
    FROM 
      table 
    GROUP BY 
      user 
    HAVING 
      days_active >= 2
  )

SELECT 
  COUNT(DISTINCT user) AS total_users, 
  COUNT(DISTINCT active_users.user) AS active_users, 
  AVG(age) AS avg_age 
FROM 
  table 
  LEFT JOIN active_users ON table.user = active_users.user

这个查询使用了Common Table Expression (CTE)，其中定义了一个名为active_users的子查询，用于计算活跃用户。然后，主查询使用LEFT JOIN将活跃用户与原始表连接起来，以便计算所有用户的总数和平均年龄，并且COUNT DISTINCT函数用于计算唯一用户的数量。