sql left join之后数据量增加了_8种最坑的SQL错误用法，第一个就很坑

好的，你的第一个问题是关于SQL left join的数据量增加的问题。left join是一种关联查询的方式，它可以将左表中的所有行和右表中符合条件的行组合在一起。如果你使用left join查询时，右表中有重复的数据，那么查询结果中会出现重复的记录，导致数据量增加。

解决这个问题的方法是使用distinct关键字去重，或者在查询语句中加入条件过滤掉重复数据。例如：

SELECT DISTINCT t1.id, t1.name, t2.salary
FROM table1 t1
LEFT JOIN table2 t2 ON t1.id = t2.id
WHERE t2.salary IS NOT NULL;

这个查询语句会去除查询结果中的重复记录，并且过滤掉右表中salary为空的记录。希望能够解答你的问题。

相关问题

优化sql：SELECT we.organization_id ,we.wip_entity_id ,case when wl.line_id is null then we.wip_entity_name else '' end wip_entity_name ,we.primary_item_id ,mtt.transaction_type_name ,mmt.transaction_date ,bd.department_code ,mmt.inventory_item_id ,mmt.subinventory_code ,mta.reference_account ,br.resource_code ,lu2.meaning as line_type_name ,mta.base_transaction_value ,mta.cost_element_id ,flv.meaning as cost_element ,wdj.class_code job_type_code ,ml.meaning job_type_name FROM (select * from gerp.mtl_material_transactions where substr(transaction_date,1,7) >= '2023-06' and transaction_source_type_id = 5) mmt inner join gerp.wip_entities we on mmt.organization_id = we.organization_id inner join gerp.mtl_transaction_accounts mta on mta.transaction_source_id = we.wip_entity_id and mta.transaction_id = mmt.transaction_id and mta.transaction_source_type_id = 5 inner join gerp.mtl_transaction_types mtt on mtt.transaction_type_id = mmt.transaction_type_id inner join mfg_lookups lu2 on lu2.lookup_code = mta.accounting_line_type and lu2.lookup_type = 'CST_ACCOUNTING_LINE_TYPE' inner join gerp.mtl_system_items_b msi on msi.inventory_item_id = mmt.inventory_item_id and msi.organization_id = mta.organization_id left join gerp.bom_departments bd on bd.department_id = mmt.department_id left join gerp.bom_resources br on br.resource_id = mta.resource_id left join gerp.wip_lines wl on wl.line_id = mmt.repetitive_line_id left join gerp.wip_discrete_jobs wdj on wdj.wip_entity_id = mta.transaction_source_id left join gerp.fnd_lookup_values_vl flv on cast(mta.cost_element_id as string) = flv.lookup_code and flv.lookup_type = 'CST_COST_CODE_TYPE' left join mfg_lookups ml on ml.lookup_code = wdj.job_type and ml.lookup_type = 'WIP_DISCRETE_JOB' 。其中mmt,we,mta,msi,wdj数据量很大

针对这个SQL语句，可以优化的地方有：

1. 使用JOIN语句时，可以根据数据量大小，将数据量大的表放在后面，这样可以避免在连接时出现性能问题。

2. 使用子查询时，可以在子查询中添加条件筛选，减少返回的数据量。

3. 可以对查询中的日期条件进行优化，例如使用日期范围查询时，可以使用BETWEEN关键字代替大于等于和小于等于的运算符。

4. 可以对大表进行分区或分片，以加快查询速度。

5. 可以对JOIN语句中的字段添加索引，以提高查询效率。

下面是对原SQL语句的优化：

SELECT 
    we.organization_id, 
    we.wip_entity_id, 
    CASE WHEN wl.line_id is null THEN we.wip_entity_name ELSE '' END wip_entity_name,
    we.primary_item_id, 
    mtt.transaction_type_name, 
    mmt.transaction_date, 
    bd.department_code, 
    mmt.inventory_item_id, 
    mmt.subinventory_code, 
    mta.reference_account, 
    br.resource_code, 
    lu2.meaning as line_type_name,
    mta.base_transaction_value, 
    mta.cost_element_id, 
    flv.meaning as cost_element, 
    wdj.class_code job_type_code, 
    ml.meaning job_type_name 
FROM 
    gerp.wip_entities we 
    INNER JOIN (
        SELECT 
            * 
        FROM 
            gerp.mtl_material_transactions 
        WHERE 
            transaction_date BETWEEN '2023-06-01' AND '2023-06-30' 
            AND transaction_source_type_id = 5
    ) mmt ON mmt.organization_id = we.organization_id 
    INNER JOIN gerp.mtl_transaction_accounts mta ON mta.transaction_source_id = we.wip_entity_id 
        AND mta.transaction_id = mmt.transaction_id 
        AND mta.transaction_source_type_id = 5 
    INNER JOIN gerp.mtl_transaction_types mtt ON mtt.transaction_type_id = mmt.transaction_type_id 
    INNER JOIN mfg_lookups lu2 ON lu2.lookup_code = mta.accounting_line_type AND lu2.lookup_type = 'CST_ACCOUNTING_LINE_TYPE' 
    INNER JOIN gerp.mtl_system_items_b msi ON msi.inventory_item_id = mmt.inventory_item_id 
        AND msi.organization_id = mta.organization_id 
    LEFT JOIN gerp.bom_departments bd ON bd.department_id = mmt.department_id 
    LEFT JOIN gerp.bom_resources br ON br.resource_id = mta.resource_id 
    LEFT JOIN gerp.wip_lines wl ON wl.line_id = mmt.repetitive_line_id 
    LEFT JOIN gerp.wip_discrete_jobs wdj ON wdj.wip_entity_id = mta.transaction_source_id 
    LEFT JOIN gerp.fnd_lookup_values_vl flv ON cast(mta.cost_element_id as string) = flv.lookup_code 
        AND flv.lookup_type = 'CST_COST_CODE_TYPE' 
    LEFT JOIN mfg_lookups ml ON ml.lookup_code = wdj.job_type AND ml.lookup_type = 'WIP_DISCRETE_JOB';

在优化后的SQL语句中，将子查询中的日期范围查询放在了WHERE语句中，将数据量较大的表放在了后面，左连接的表也放在了后面。同时，可以根据具体情况对需要添加索引的字段进行索引优化。

SQL left join太慢

如果您的 SQL left join 太慢，可以尝试以下几种方法来优化它：

1. 索引优化：确保连接所使用的列都有索引，这将显著提高查询速度。

2. 分区表：如果您的表非常大，可以使用分区表来提高查询速度。这样可以将表分成较小的部分，每个部分都可以单独查询。

3. 限制查询结果：如果您只需要部分数据，可以使用 LIMIT 子句来限制查询结果的数量。这将减少查询返回的数据量，从而提高查询速度。

4. 使用子查询：如果您需要连接多个表，可以使用子查询来代替 LEFT JOIN。子查询可以更有效地处理多个表之间的关系，从而提高查询速度。

5. 数据库优化：确保您的数据库服务器已经进行了优化，并且正在运行最新版本的数据库软件。这将确保您的查询能够以最快的速度运行。