深度迁移学习:使用DenseNet121预训练模型

需积分: 50 15 下载量 158 浏览量 更新于2024-10-15 收藏 28.93MB ZIP 举报
资源摘要信息:"densenet121-a639ec97.zip" 知识点详细说明: 1. 模型名称:DenseNet121 DenseNet121是一种深度学习网络架构,它是Dense Convolutional Network(DenseNet)家族中的一员。DenseNet的特点是它使用了密集连接的方式来连接每一层,使得网络中的每一层都与前面所有层相连。这种密集连接方式带来了几个好处,包括改善了梯度流,鼓励特征重用,减小了参数数量,并且提高了网络的表达能力。 2. 预训练模型 预训练模型指的是在大量数据集上预先训练好的模型。这种模型可以用于迁移学习,即在一个任务上训练好的模型,可以将学到的特征或知识迁移到其他相关任务上。预训练模型通过减少训练时间、提高训练效率和性能,以及解决小数据集问题而变得流行。 3. 迁移学习 迁移学习(Transfer Learning)是机器学习和深度学习中的一种技术,它允许从一个或多个源任务学习到的知识应用到新的目标任务中。在深度学习中,通常意味着使用预训练的神经网络模型作为新任务的起点。迁移学习在数据受限或计算资源有限的情况下非常有用,可以大幅提升新任务的学习效率和最终性能。 4. 应用场景 预训练模型DenseNet121可以在多种计算机视觉任务中应用,例如图像分类、目标检测、语义分割等。由于其高效的特征提取能力,它在医疗图像分析、物体识别、场景理解等领域尤为受到青睐。 5. 标签说明 - 迁移学习:在给定的标签中,迁移学习是DenseNet121模型的主要应用场景。 - 人工智能(AI):DenseNet121属于人工智能领域,特别是在深度学习分支下的一个重要模型。 - 机器学习(ML):DenseNet121模型的训练和使用涉及机器学习技术。 - PyTorch:PyTorch是一个开源的机器学习库,用于计算机视觉和自然语言处理等多个领域。它由Facebook的人工智能研究小组开发。DenseNet121模型通常可以使用PyTorch库加载和运行。 6. 文件说明 - densenet121-a639ec97.zip:这是一个包含了预训练的DenseNet121模型的压缩包文件。它将模型的权重文件压缩成了zip格式,以便于存储和传输。 - densenet121-a639ec97.pth:这是一个PyTorch模型权重文件(以.pth结尾),通常包含了在ImageNet这样的大型数据集上训练得到的模型权重。这个文件名中的“a639ec97”可能是模型版本或者是生成模型权重的哈希值。此类文件在使用PyTorch加载预训练模型时会被用到。 在实际应用中,数据科学家或工程师会使用这些预训练模型作为起点,通过迁移学习对网络进行微调(fine-tuning),以适应特定的任务或数据集。例如,他们可能会将DenseNet121模型的最后一层替换为适合特定任务的层(如改变输出类别数量),然后在自己的数据集上重新训练模型,以便模型可以学习到更具体的数据特征和模式。通过这种方式,可以大幅度减少训练时间和所需的标注数据量,同时通常也能获得更好的性能。

我的javaSpringBoot程序线程dump中有大量线程阻塞到这里:"http-nio2-0.0.0.0-9798-exec-158" #3079 daemon prio=5 os_prio=0 tid=0x0000fff9d4001800 nid=0xabad9 waiting for monitor entry [0x0000fff9c07fc000] java.lang.Thread.State: BLOCKED (on object monitor) at sun.security.provider.SecureRandom.engineNextBytes(SecureRandom.java:215) - waiting to lock <0x00000001c9a639a8> (a sun.security.provider.SecureRandom) at java.security.SecureRandom.nextBytes(SecureRandom.java:468) at java.util.UUID.randomUUID(UUID.java:145) at com.jiuqi.common.base.util.UUIDUtils.newUUIDStr(UUIDUtils.java:34) at com.jiuqi.common.web.context.filter.BusinessContextDataFilter.getTraceId(BusinessContextDataFilter.java:59) at com.jiuqi.common.web.context.filter.BusinessContextDataFilter.doFilter(BusinessContextDataFilter.java:44) at com.tongweb.catalina.core.ApplicationFilterChain.internalDoFilter(ApplicationFilterChain.java:192) at com.tongweb.catalina.core.ApplicationFilterChain.doFilter(ApplicationFilterChain.java:165) at com.jiuqi.nvwa.sf.adapter.spring.SFFilter.doFilter(SFFilter.java:75) at com.tongweb.catalina.core.ApplicationFilterChain.internalDoFilter(ApplicationFilterChain.java:192) at com.tongweb.catalina.core.ApplicationFilterChain.doFilter(ApplicationFilterChain.java:165) at com.jiuqi.nvwa.sf.adapter.spring.MDCFilter.doFilter(MDCFilter.java:35) at com.tongweb.catalina.core.ApplicationFilterChain.internalDoFilter(ApplicationFilterChain.java:192);持有锁的完整线程dump:"http-nio2-0.0.0.0-9798-exec-1" #24 daemon prio=5 os_prio=0 tid=0x0000fffc58df3000 nid=0xa9f4c runnable [0x0000fffc2c5cc000] java.lang.Thread.State: RUNNABLE at java.security.MessageDigest$Delegate.engineDigest(MessageDigest.java:592) at java.security.MessageDigest.digest(MessageDigest.java:365) at sun.security.provider.SecureRandom.engineNextBytes(SecureRandom.java:244) - locked <0x00000001c9a639a8> (a sun.security.provider.SecureRandom) at java.security.SecureRandom.nextBytes(SecureRandom.java:468) at java.util.UUID.randomUUID(UUID.java:145) at com.jiuqi.common.base.util.UUIDUtils.newUUIDStr(UUIDUtils.java:34) at com.jiuqi.common.web.context.filter.BusinessContextDataFilter.getTraceId(BusinessContextDataFilter.java:59) at com.jiuqi.common.web.context.filter.BusinessContextDataFilter.doFilter(BusinessContextDataFilter.java:44) at com.tongweb.catalina.core.ApplicationFilterChain.internalDoFilter(ApplicationFilterChain.java:192) 可以帮我分析下吗?

2023-07-13 上传

SELECT d.areaCode, d.areaName, d.bciStreetName, d.wasteTypeCode, d.wasteTypeName, d.wasteTrashCode, d.wasteTrashName, d.wasteName, sum( p.produceNumTotal ) AS produceNumTotal, sum( IFNULL(t.disposalNumTotal, 0 ),decimal(10,2) ) AS disposalNumTotal, sum( p.cityTransferNum ) AS cityTransferNum, sum( p.transferCityOutNum ) AS transferCityOutNum, sum( p.transferProvinceOutNum ) AS transferProvinceOutNum, sum( IFNULL( p.transferCityOutNum, 0 ) + IFNULL( p.transferProvinceOutNum, 0 ) ) AS transferCityAndProInNum, sum( t.transferCityInNum ) AS transferCityInNum, sum( t.transferProvinceInNum ) AS transferProvinceInNum, sum( IFNULL( t.transferCityInNum, 0 ) + IFNULL( t.transferProvinceInNum, 0 ) ) AS transferCityAndProInNum, sum( d.disposalAmount ) AS disposalAmount, sum( d.zhlyAmount ) AS zhlyAmount, sum( d.czAmount ) AS czAmount, sum( d.zcAmount ) AS zcAmount, sum( d.tmAmount ) AS tmAmount, sum( d.fsAmount ) AS fsAmount, sum( d.qtAmount ) AS qtAmount, CONVERT ( sum( zhlyAmount ) / sum( d.disposalAmount ) * 100, DECIMAL ( 10, 2 ) ) AS zhlyProportion, CONVERT ( sum( tmAmount ) / sum( d.disposalAmount ) * 100, DECIMAL ( 10, 2 ) ) AS tmProportion, CONVERT ( sum( fsAmount ) / sum( d.disposalAmount ) * 100, DECIMAL ( 10, 2 ) ) AS fsProportion, CONVERT ( sum( qtAmount ) / sum( d.disposalAmount ) * 100, DECIMAL ( 10, 2 ) ) AS qtProportion FROM wfcs_disposal_account_day_report d LEFT OUTER JOIN wfcs_transfer_sheet_disposal_day_summary t ON d.cityCode = t.disposalCityCode AND t.tenantId = d.tenantId LEFT OUTER JOIN wfcs_transfer_sheet_produce_day_summary p ON d.cityCode = p.produceCityCode AND d.tenantId = p.tenantId WHERE d.solidWasteType ='ybgygf' AND d.tenantId = '779ca469251e4a639fd39a7ab57e6859' AND d.recordDate >= '2023-06-01 00:00:00.0' AND d.recordDate <= '2023-06-04 00:00:00.0' AND d.cityCode = 'dacef933e39740349e6fb89fac792aae' GROUP BY areaCode ORDER BY produceNumTotal DESC 怎么优化这个sql

2023-06-06 上传