for img_a, att_a in progressbar(train_dataloader): attgan.train() img_a = img_a.cuda() if args.gpu else img_a att_a = att_a.cuda() if args.gpu else att_a idx = torch.randperm(len(att_a)) att_b = att_a[idx].contiguous() att_a = att_a.type(torch.float) att_b = att_b.type(torch.float) att_a_ = (att_a * 2 - 1) * args.thres_int

时间: 2024-04-17 12:23:08 浏览: 113
这段代码是一个训练循环,用于在每个训练批次中训练 `attgan` 模型。 首先,使用 `progressbar(train_dataloader)` 创建了一个进度条对象,用于在训练过程中显示进度。 然后,通过迭代 `train_dataloader` 获取每个批次的图像 `img_a` 和属性 `att_a`。在循环中,调用 `attgan.train()` 将 `attgan` 设置为训练模式。 接下来,将图像和属性数据移动到 GPU 上(如果 `args.gpu` 为真)或者保持在 CPU 上。使用 `torch.randperm(len(att_a))` 生成一个随机排列的索引,用于对属性数据进行乱序操作。然后,通过索引将 `att_a` 中的属性值重新排序得到 `att_b`。 之后,使用 `.type(torch.float)` 将属性数据的类型转换为浮点型。 最后,将属性数据经过一系列数学计算进行归一化处理。`att_a` 的值乘以2,并减去1,然后再乘以命令行参数 `args.thres_int` 的值。这个过程将属性数据缩放到 -1 到 1 的范围内。 总结起来,这段代码通过迭代训练数据加载器获取每个批次的图像和属性数据。然后,对属性数据进行一系列的预处理操作,包括属性值的随机乱序和归一化处理。这些数据将被用于训练 `attgan` 模型。
相关问题

attgan = AttGAN(args) progressbar = Progressbar() writer = SummaryWriter(join('output', args.experiment_name, 'summary')) fixed_img_a, fixed_att_a = next(iter(valid_dataloader)) fixed_img_a = fixed_img_a.cuda() if args.gpu else fixed_img_a fixed_att_a = fixed_att_a.cuda() if args.gpu else fixed_att_a fixed_att_a = fixed_att_a.type(torch.float) sample_att_b_list = [fixed_att_a]

这段代码创建了 `AttGAN` 类的实例 `attgan`,以及 `Progressbar` 类的实例 `progressbar` 和 `SummaryWriter` 类的实例 `writer`。 首先,使用 `AttGAN(args)` 创建了一个名为 `attgan` 的 `AttGAN` 类的实例。这里将之前解析的命令行参数 `args` 作为参数传递给 `AttGAN` 的构造函数,用于初始化模型。 然后,创建了一个名为 `progressbar` 的 `Progressbar` 类的实例,用于在训练过程中显示进度条。 接下来,使用 `SummaryWriter(join('output', args.experiment_name, 'summary'))` 创建了一个名为 `writer` 的 `SummaryWriter` 类的实例。`join()` 函数用于构建路径,将目录名与路径名连接起来。这个实例将用于记录训练过程中的摘要信息,例如损失值和准确率等。 接下来,代码通过 `next(iter(valid_dataloader))` 从验证集数据加载器中获取了一个批次的图像和属性数据。这个数据将被用作固定的图像和属性,在训练过程中用于生成样本。图像和属性数据通过调用 `.cuda()` 方法将其移到 GPU 上(如果 `args.gpu` 为真),否则保持在 CPU 上。`.type(torch.float)` 用于将属性数据的类型转换为浮点型。 最后,创建了一个名为 `sample_att_b_list` 的列表,并将固定的属性数据 `fixed_att_a` 添加到列表中。这个列表将在后续的代码中用于生成样本。 总结起来,这段代码创建了 `AttGAN` 类的实例,并初始化了 `Progressbar` 类和 `SummaryWriter` 类的实例。然后,从验证集数据加载器中获取了固定的图像和属性数据,并创建了一个用于存储属性数据的列表。这些实例和数据将在训练过程中使用。

if args.b_distribution == 'none': att_b_ = (att_b * 2 - 1) * args.thres_int if args.b_distribution == 'uniform': att_b_ = (att_b * 2 - 1) * \ torch.rand_like(att_b) * \ (2 * args.thres_int) if args.b_distribution == 'truncated_normal': att_b_ = (att_b * 2 - 1) * \ (torch.fmod(torch.randn_like(att_b), 2) + 2) / 4.0 * \ (2 * args.thres_int) if (it+1) % (args.n_d+1) != 0: errD = attgan.trainD(img_a, att_a, att_a_, att_b, att_b_) add_scalar_dict(writer, errD, it+1, 'D') else: errG = attgan.trainG(img_a, att_a, att_a_, att_b, att_b_) add_scalar_dict(writer, errG, it+1, 'G') progressbar.say(epoch=epoch, iter=it+1, d_loss=errD['d_loss'], g_loss=errG['g_loss'])

这段代码包含了两个条件语句块。 第一个条件语句块根据命令行参数 `args.b_distribution` 的值选择不同的属性 B 分布。如果 `args.b_distribution` 的值为 `'none'`,则执行第一个条件分支。在该分支中,通过 `(att_b * 2 - 1) * args.thres_int` 对属性 B 进行归一化处理,将其缩放到 -`args.thres_int` 到 `args.thres_int` 的范围内。 如果 `args.b_distribution` 的值为 `'uniform'`,则执行第二个条件分支。在该分支中,先通过 `(att_b * 2 - 1)` 对属性 B 进行归一化处理,然后使用 `torch.rand_like(att_b)` 生成与属性 B 相同形状的随机张量,并且每个元素的值在 [0, 1) 的范围内。最后,通过 `(2 * args.thres_int)` 将随机张量缩放到 -`args.thres_int` 到 `args.thres_int` 的范围内。 如果 `args.b_distribution` 的值为 `'truncated_normal'`,则执行第三个条件分支。在该分支中,先通过 `(att_b * 2 - 1)` 对属性 B 进行归一化处理,然后使用 `torch.fmod(torch.randn_like(att_b), 2) + 2` 生成一个符合截断正态分布的随机张量,然后除以 4.0 进行归一化处理。最后,通过 `(2 * args.thres_int)` 将随机张量缩放到 -`args.thres_int` 到 `args.thres_int` 的范围内。 接下来,根据 `(it+1) % (args.n_d+1) != 0` 的条件判断选择执行训练判别器或者生成器的代码块。 如果条件为真,则执行训练判别器的代码块。调用 `attgan.trainD()` 对判别器进行训练,传入图像数据 `img_a`、属性数据 `att_a`、处理后的属性数据 `att_a_`、属性数据 `att_b` 和处理后的属性数据 `att_b_`。将得到的误差值 `errD` 通过 `add_scalar_dict()` 添加到摘要信息中,并指定摘要信息的名称为 `'D'`。 如果条件为假,则执行训练生成器的代码块。调用 `attgan.trainG()` 对生成器进行训练,传入相同的参数。将得到的误差值 `errG` 通过 `add_scalar_dict()` 添加到摘要信息中,并指定摘要信息的名称为 `'G'`。然后,通过 `progressbar.say()` 打印出当前 epoch、迭代次数、判别器损失和生成器损失。 总结起来,这段代码根据命令行参数选择不同的属性 B 分布,并对属性数据进行归一化处理。然后,根据迭代次数的奇偶性选择训练判别器或者生成器,并将得到的误差值记录到摘要信息中。最后,打印出当前的训练进度和损失值。
阅读全文

相关推荐

import requestsfrom html.parser import HTMLParserimport argparsefrom concurrent.futures import ThreadPoolExecutor, ProcessPoolExecutor, as_completedimport multiprocessingprefix = "save/"readed_path = multiprocessing.Manager().Queue()cur_path = multiprocessing.Manager().Queue()new_path = multiprocessing.Manager().Queue()lock = multiprocessing.Lock()class MyHttpParser(HTMLParser): def __init__(self): super().__init__() self.tag = [] self.href = "" self.txt = "" def handle_starttag(self, tag, attrs): self.tag.append(tag) if tag == "a": for att in attrs: if att[0] == 'href': self.href = att[1] def handle_endtag(self, tag): if tag == "a" and len(self.tag) > 2 and self.tag[-2] == "div": print("in div, link txt is %s ." % self.txt) print("in div, link url is %s ." % self.href) if not self.href in readed_path.queue: readed_path.put(self.href) new_path.put(self.href) self.tag.pop(-1) def handle_data(self, data): if len(self.tag) >= 1 and self.tag[-1] == "a": self.txt = datadef LoadHtml(path, file_path): if len(file_path) == 0: file_path = "/" url = f"http://{path}{file_path}" try: response = requests.get(url) print(response.status_code, response.reason, response.raw.version) data = response.content.decode("utf-8") if response.status_code == 301: data = response.headers["Location"] if not data in readed_path.queue: new_path.put(data) data = "" return data except Exception as e: print(e.args)def ParseArgs(): parser = argparse.ArgumentParser() parser.add_argument("-p", "--path", help="domain name") parser.add_argument("-d", "--deep", type=int, help="recursion depth") args = parser.parse_args() return argsdef formatPath(path): path = path.removeprefix("https://") path = path.removeprefix("http://") path = path.removeprefix("//") return pathdef doWork(path): path = formatPath(path) m = path.find("/") if m == -1: m = len(path) data = LoadHtml(path[:m], path[m:]) with open(prefix + path[:m] + ".html", "w+", encoding="utf-8") as f: f.write(data) parse.feed(data)def work(maxdeep): args = ParseArgs() cur_path.put(formatPath(args.path)) readed_path.put(formatPath(args.path)) parse = MyHttpParser() with ProcessPoolExecutor(max_workers=4) as executor: for i in range(args.deep): size = cur_path.qsize() futures = [executor.submit(doWork, cur_path.get()) for _ in range(size)] for future in as_completed(futures): try: future.result() except Exception as e: print(e) cur_path.queue.clear() while not new_path.empty(): cur_path.put(new_path.get()) print(i)if __name__ == '__main__': work(5)此代码出现Unresolved reference 'parse'

最新推荐

recommend-type

RTL8761ATT-CG_Datasheet_1.0.pdf

RTL8761ATT-CG是一款由Realtek Semiconductor Corp.生产的单芯片蓝牙控制器,支持蓝牙2.1、3.0、4.0、4.1和4.2版本。这款控制器设计用于提供高效的无线连接解决方案,它通过UART(通用异步收发传输器)接口与主机...
recommend-type

AN_19071701-C1_Telink 8232 BLE SDK Developer Handbook

PHY层负责无线传输,LL层处理连接和数据传输,L2CAP层提供了复用和分片功能,ATT层定义了服务和属性,GATT层构建了服务的结构。开发者可以通过SDK提供的API来操作这些层次,实现BLE设备的功能。 版本历史: 该文档...
recommend-type

上市公司企业澄清公告数据(2001-2023年) .xlsx

详细介绍及样例数据:https://blog.csdn.net/li514006030/article/details/143896457
recommend-type

深入浅出:自定义 Grunt 任务的实践指南

资源摘要信息:"Grunt 是一个基于 Node.js 的自动化任务运行器,它极大地简化了重复性任务的管理。在前端开发中,Grunt 经常用于压缩文件、运行测试、编译 LESS/SASS、优化图片等。本文档提供了自定义 Grunt 任务的示例,对于希望深入掌握 Grunt 或者已经开始使用 Grunt 但需要扩展其功能的开发者来说,这些示例非常有帮助。" ### 知识点详细说明 #### 1. 创建和加载任务 在 Grunt 中,任务是由 JavaScript 对象表示的配置块,可以包含任务名称、操作和选项。每个任务可以通过 `grunt.registerTask(taskName, [description, ] fn)` 来注册。例如,一个简单的任务可以这样定义: ```javascript grunt.registerTask('example', function() { grunt.log.writeln('This is an example task.'); }); ``` 加载外部任务,可以通过 `grunt.loadNpmTasks('grunt-contrib-jshint')` 来实现,这通常用在安装了新的插件后。 #### 2. 访问 CLI 选项 Grunt 支持命令行接口(CLI)选项。在任务中,可以通过 `grunt.option('option')` 来访问命令行传递的选项。 ```javascript grunt.registerTask('printOptions', function() { grunt.log.writeln('The watch option is ' + grunt.option('watch')); }); ``` #### 3. 访问和修改配置选项 Grunt 的配置存储在 `grunt.config` 对象中。可以通过 `grunt.config.get('configName')` 获取配置值,通过 `grunt.config.set('configName', value)` 设置配置值。 ```javascript grunt.registerTask('printConfig', function() { grunt.log.writeln('The banner config is ' + grunt.config.get('banner')); }); ``` #### 4. 使用 Grunt 日志 Grunt 提供了一套日志系统,可以输出不同级别的信息。`grunt.log` 提供了 `writeln`、`write`、`ok`、`error`、`warn` 等方法。 ```javascript grunt.registerTask('logExample', function() { grunt.log.writeln('This is a log example.'); grunt.log.ok('This is OK.'); }); ``` #### 5. 使用目标 Grunt 的配置可以包含多个目标(targets),这样可以为不同的环境或文件设置不同的任务配置。在任务函数中,可以通过 `this.args` 获取当前目标的名称。 ```javascript grunt.initConfig({ jshint: { options: { curly: true, }, files: ['Gruntfile.js'], my_target: { options: { eqeqeq: true, }, }, }, }); grunt.registerTask('showTarget', function() { grunt.log.writeln('Current target is: ' + this.args[0]); }); ``` #### 6. 异步任务 Grunt 支持异步任务,这对于处理文件读写或网络请求等异步操作非常重要。异步任务可以通过传递一个回调函数给任务函数来实现。若任务是一个异步操作,必须调用回调函数以告知 Grunt 任务何时完成。 ```javascript grunt.registerTask('asyncTask', function() { var done = this.async(); // 必须调用 this.async() 以允许异步任务。 setTimeout(function() { grunt.log.writeln('This is an async task.'); done(); // 任务完成时调用 done()。 }, 1000); }); ``` ### Grunt插件和Gruntfile配置 Grunt 的强大之处在于其插件生态系统。通过 `npm` 安装插件后,需要在 `Gruntfile.js` 中配置这些插件,才能在任务中使用它们。Gruntfile 通常包括任务注册、任务配置、加载外部任务三大部分。 - 任务注册:使用 `grunt.registerTask` 方法。 - 任务配置:使用 `grunt.initConfig` 方法。 - 加载外部任务:使用 `grunt.loadNpmTasks` 方法。 ### 结论 通过上述的示例和说明,我们可以了解到创建一个自定义的 Grunt 任务需要哪些步骤以及需要掌握哪些基础概念。自定义任务的创建对于利用 Grunt 来自动化项目中的各种操作是非常重要的,它可以帮助开发者提高工作效率并保持代码的一致性和标准化。在掌握这些基础知识后,开发者可以更进一步地探索 Grunt 的高级特性,例如子任务、组合任务等,从而实现更加复杂和强大的自动化流程。
recommend-type

管理建模和仿真的文件

管理Boualem Benatallah引用此版本:布阿利姆·贝纳塔拉。管理建模和仿真。约瑟夫-傅立叶大学-格勒诺布尔第一大学,1996年。法语。NNT:电话:00345357HAL ID:电话:00345357https://theses.hal.science/tel-003453572008年12月9日提交HAL是一个多学科的开放存取档案馆,用于存放和传播科学研究论文,无论它们是否被公开。论文可以来自法国或国外的教学和研究机构,也可以来自公共或私人研究中心。L’archive ouverte pluridisciplinaire
recommend-type

数据可视化在缺失数据识别中的作用

![缺失值处理(Missing Value Imputation)](https://img-blog.csdnimg.cn/20190521154527414.PNG?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3l1bmxpbnpp,size_16,color_FFFFFF,t_70) # 1. 数据可视化基础与重要性 在数据科学的世界里,数据可视化是将数据转化为图形和图表的实践过程,使得复杂的数据集可以通过直观的视觉形式来传达信息。它
recommend-type

ABB机器人在自动化生产线中是如何进行路径规划和任务执行的?请结合实际应用案例分析。

ABB机器人在自动化生产线中的应用广泛,其核心在于精确的路径规划和任务执行。路径规划是指机器人根据预定的目标位置和工作要求,计算出最优的移动轨迹。任务执行则涉及根据路径规划结果,控制机器人关节和运动部件精确地按照轨迹移动,完成诸如焊接、装配、搬运等任务。 参考资源链接:[ABB-机器人介绍.ppt](https://wenku.csdn.net/doc/7xfddv60ge?spm=1055.2569.3001.10343) ABB机器人能够通过其先进的控制器和编程软件进行精确的路径规划。控制器通常使用专门的算法,如A*算法或者基于时间最优的轨迹规划技术,以确保机器人运动的平滑性和效率。此
recommend-type

网络物理突变工具的多点路径规划实现与分析

资源摘要信息:"多点路径规划matlab代码-mutationdocker:变异码头工人" ### 知识点概述 #### 多点路径规划与网络物理突变工具 多点路径规划指的是在网络环境下,对多个路径点进行规划的算法或工具。该工具可能被应用于物流、运输、通信等领域,以优化路径和提升效率。网络物理系统(CPS,Cyber-Physical System)结合了计算机网络和物理过程,其中网络物理突变工具是指能够修改或影响网络物理系统中的软件代码的功能,特别是在自动驾驶、智能电网、工业自动化等应用中。 #### 变异与Mutator软件工具 变异(Mutation)在软件测试领域是指故意对程序代码进行小的改动,以此来检测程序测试用例的有效性。mutator软件工具是一种自动化的工具,它能够在编程文件上执行这些变异操作。在代码质量保证和测试覆盖率的评估中,变异分析是提高软件可靠性的有效方法。 #### Mutationdocker Mutationdocker是一个配置为运行mutator的虚拟机环境。虚拟机环境允许用户在隔离的环境中运行软件,无需对现有系统进行改变,从而保证了系统的稳定性和安全性。Mutationdocker的使用为开发者提供了一个安全的测试平台,可以在不影响主系统的情况下进行变异测试。 #### 工具的五个阶段 网络物理突变工具按照以下五个阶段进行操作: 1. **安装工具**:用户需要下载并构建工具,具体操作步骤可能包括解压文件、安装依赖库等。 2. **生成突变体**:使用`./mutator`命令,顺序执行`./runconfiguration`(如果存在更改的config.txt文件)、`make`和工具执行。这个阶段涉及到对原始程序代码的变异生成。 3. **突变编译**:该步骤可能需要编译运行环境的配置,依赖于项目具体情况,可能需要执行`compilerun.bash`脚本。 4. **突变执行**:通过`runsave.bash`脚本执行变异后的代码。这个脚本的路径可能需要根据项目进行相应的调整。 5. **结果分析**:利用MATLAB脚本对变异过程中的结果进行分析,可能需要参考文档中的文件夹结构部分,以正确引用和处理数据。 #### 系统开源 标签“系统开源”表明该项目是一个开放源代码的系统,意味着它被设计为可供任何人自由使用、修改和分发。开源项目通常可以促进协作、透明性以及通过社区反馈来提高代码质量。 #### 文件名称列表 文件名称列表中提到的`mutationdocker-master`可能是指项目源代码的仓库名,表明这是一个主分支,用户可以从中获取最新的项目代码和文件。 ### 详细知识点 1. **多点路径规划**是网络物理系统中的一项重要技术,它需要考虑多个节点或路径点在物理网络中的分布,以及如何高效地规划它们之间的路径,以满足例如时间、成本、距离等优化目标。 2. **突变测试**是软件测试的一种技术,通过改变程序中的一小部分来生成变异体,这些变异体用于测试软件的测试用例集是否能够检测到这些人为的错误。如果测试用例集能够正确地识别出大多数或全部的变异体,那么可以认为测试用例集是有效的。 3. **Mutator软件工具**的使用可以自动化变异测试的过程,包括变异体的生成、编译、执行和结果分析。使用此类工具可以显著提高测试效率,尤其是在大型项目中。 4. **Mutationdocker的使用**提供了一个简化的环境,允许开发者无需复杂的配置就可以进行变异测试。它可能包括了必要的依赖项和工具链,以便快速开始变异测试。 5. **软件的五个操作阶段**为用户提供了清晰的指导,从安装到结果分析,每个步骤都有详细的说明,这有助于减少用户在使用过程中的困惑,并确保操作的正确性。 6. **开源系统的特性**鼓励了代码共享、共同开发和创新,同时也意味着用户可以通过社区的力量不断改进软件工具,这也是开源项目可持续发展的核心。 通过以上描述和知识点的展开,我们可以了解到多点路径规划matlab代码-mutationdocker:变异码头工人是一个涵盖了网络物理系统、变异测试、自动化软件工具以及开源精神的综合性项目。它通过一系列操作流程为用户提供了一个高效和稳定的代码测试环境,并且以开源的形式促进了软件测试技术的共享和创新。
recommend-type

"互动学习:行动中的多样性与论文攻读经历"

多样性她- 事实上SCI NCES你的时间表ECOLEDO C Tora SC和NCESPOUR l’Ingén学习互动,互动学习以行动为中心的强化学习学会互动,互动学习,以行动为中心的强化学习计算机科学博士论文于2021年9月28日在Villeneuve d'Asq公开支持马修·瑟林评审团主席法布里斯·勒菲弗尔阿维尼翁大学教授论文指导奥利维尔·皮耶昆谷歌研究教授:智囊团论文联合主任菲利普·普雷教授,大学。里尔/CRISTAL/因里亚报告员奥利维耶·西格德索邦大学报告员卢多维奇·德诺耶教授,Facebook /索邦大学审查员越南圣迈IMT Atlantic高级讲师邀请弗洛里安·斯特鲁布博士,Deepmind对于那些及时看到自己错误的人...3谢谢你首先,我要感谢我的两位博士生导师Olivier和Philippe。奥利维尔,"站在巨人的肩膀上"这句话对你来说完全有意义了。从科学上讲,你知道在这篇论文的(许多)错误中,你是我可以依
recommend-type

自动化缺失值处理脚本编写

![缺失值处理(Missing Value Imputation)](https://img-blog.csdnimg.cn/20190521154527414.PNG?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3l1bmxpbnpp,size_16,color_FFFFFF,t_70) # 1. 自动化缺失值处理概览 在数据科学的实践中,数据分析和建模的一个常见挑战是处理含有缺失值的数据集。缺失值不仅会降低数据的质量,而且可能会导致不准