BenchCouncil交易基准，标准和评估2（2022）100072会议信息2022 BenchCouncil国际标杆管理、测量和优化研讨会（Bench 2022）征文1. 介绍基准、数据、标准、度量和优化基本上是人类活动和资产。Bench会议有两个基本职责：促进基于数据或基准的定量方法，以应对多学科和跨学科的挑战;连接架构，系统，数据管理，算法和应用程序社区，以实现更好的软件和硬件协同设计。Bench会议提供了一个高质量的单轨论坛，用于展示结果和讨论想法，以进一步了解和理解基准，数据，标准，测量和优化社区。这是一个多学科和跨学科的会议，包括邀请和贡献的会议。 过去的会议吸引了来自相关社区的研究人员和从业人员。定 期 ， Bench 会 议 将 颁 发 BenchCouncil 成 就 奖 （ 3000 美 元 ） ，BenchCouncil新星奖（1000美元），BenchCouncil最佳论文奖（1000美元 ） 和 BenchCouncil 杰 出 博 士 论 文 奖 （ 1000 美 元 ） 。 今 年 ，BenchCouncil杰出博士论文奖包括两个方面：计算机体系结构和其他领域。每一曲目的参赛作品中，将有四名候选人入围决赛。将应邀在Bench 2022会议上发表30分钟的演讲，并为BenchCouncil Transactionson Bench- marks，Standards and Evaluations撰写研究文章。最后，对于每一条赛道，四个人中的一个将获得每一条赛道的奖项，奖金为1,000美元。2. 征稿Bench会议涵盖了基准、测量、评估方法和工具方面的广泛领域和主题。我们征集描述原始和以前未发表的工作的论文。感兴趣的领域和主题包括但不限于以下方面：* 架构：架构和硬件的基准测试，例如，用于CPU、GPU、内存和HPC的基准套件。* 数据管理：数据管理和存储的评估，例如，数据库的基准规范和工具。* 算法：算法的评估，例如，机器学习、深度学习、强化学习中的评估规则和数据集。* 数据集：评估数据质量，优化数据的算法，以及用于研究和基准测试的数据集https://doi.org/10.1016/j.tbench.2022.1000722022年7月3日上线2772-4859/* 系统：软件系统的测试，例如，操作系统、分布式系统、Web服务器的测试。* 网络：通信网络的测量，例如，数据中心、无线、移动、ad-hoc和传感器网络中的网络测量* 可靠性和安全性：可靠性和安全性的度量。* 用途：用于医疗、金融、教育等行业的测量.主题：* 基准和标准规范、实施和验证：大数据、人工智能（AI）、高性能计算（HPC）、机器学习、仓库规模计算、移动机器人、边缘和雾计算、物联网（IoT）、区块链、数据管理和存储、金融、教育、医疗或其他应用领域。* 数据集生成和分析：研究或行业数据集，包括用于收集数据的方法和支持测量质量的技术分析;分析或荟萃分析现有数据和关于系统，技术和技术的原始文章，促进数据共享和重用，以支持可重复研究;评估用于生成数据的实验的严格性和质量以及数据描述的完整性;生成大规模数据的工具。* 计算机表征，定量测量，设计和评估研究：计算机和通信网络，协议和算法的表征和评估;无线，移动，ad-hoc和传感器网络，物联网应用;计算机架构，硬件加速器，多核处理器，内存系统和存储网络; HPC系统;操作系统，文件系统和数据库;虚拟化、数据中心、分布式和云计算、雾和边缘计算;移动和个人计算系统;节能计算系统;实时和容错系统;计算和网络系统的安全性和隐私性;软件系统和服务，以及企业应用;社交网络，多媒体系统，网络服务;网络物理系统。* 方法论、抽象、度量、算法和工具：分析建模技术和模型验证;工作负载表征和基准测试;性能、可扩展性、功率和可靠性分析;可持续性分析和可在ScienceDirect上获得目录列表标准和评价期刊主页：www.keaipublishing.com/en/journals/benchcouncil-transactions-on-benchmarks-standards-and-evaluations/BenchCouncil交易基准，C. Luo和W.高BenchCouncil交易基准，标准和评估2（2022）1000722电源管理;系统测量、性能监控和预测;异常检测、问题诊断和故障排除;容量规划、资源分配、运行时管理和调度;实验设计、统计分析和仿真。* 测量和评估：评估方法和指标;测试平台方法和系统;大规模、真实世界应用和系统的仪器、采样、跟踪和分析;产生新见解的测量数据的收集和分析;基于测量的建模（例如，工作负载、缩放行为、性能瓶颈的评估）;监视和可视化测量和评估数据的方法和工具;建立在基于测量的发现上的系统和算法;数据收集、分析和存储方面的进展（例如，匿名化，查询，共享）;重新评估以前的经验测量和基于测量的结论;描述测量和评估社区应该追求的挑战和未来方向。3. 论文提交论文必须以PDF格式提交。对于一篇完整的论文，LNCS格式的15页，不包括参考文献。对于一篇简短的论文，LNCS格式的页数限制为8页，不包括参考文献。对提交作品的评判将基于想法的价值，而不是长度。会议结束后，由Springer LNCS出版（EI索引）。请注意，LNCS格式（LaTexTemplate）是发布的最终格式至少有一位作者必须预先注册参加研讨会，至少有一位作者必须参加研讨会以提交论文。 没有作者预先注册的论文将从程序中删除。请确保您的提交符合以下所有要求：* 论文必须以可打印的PDF格式提交* 请为您提交的文件编号* 提交的文件必须为黑白打印机格式化。请确保你的数字是可读的，当打印在黑白。* 提交的作品必须描述目前未在任何其他会议或期刊上审查提交 网址：https://bench2022.hotcrp.com/胶乳 Template：https://www.benchcouncil.org/file/llncs2e.zip4. 奖每年BenchCouncil都会在Bench Conference上颁发以下奖项有关奖项评选规则的详细信息见[1]。* BenchCouncil成就奖（$3，000）该奖项旨在表彰在基准测试、测量和优化方面做出长期贡献的高级成员。获奖者有资格获得BenchCouncil Fellow的地位* BenchCouncil Rising Star Award（1,000美元）该奖项旨在表彰在基准测试、测量和优化方面表现出杰出的研究和实践潜力的初级成员。* BenchCouncil最佳论文奖（$1，000）该奖项旨在表彰在Bench会议上发表的论文，该论文展示了对基准测试，测量和优化方面的研究和实践的潜在影响。* BenchCouncil杰出博士论文奖（2000美元）该奖项表彰并鼓励博士生在基准、数据、标准、评估和优化社区的广泛领域进行卓越的研究和写作。今年，该奖项包括两个方面：计算机体系结构的BenchCouncil杰出博士论文奖（1000美元）和其他领域的BenchCouncil杰出博士论文奖（1000美元）。5. 以往的法官座谈会和会议记录Bench会议已成功举办了四个系列，从2018年到2021年。其网站和程序如下。* Bench 2021研讨会网址：https://www.benchcouncil.org/bench2021/[2]第二部分：第一部分：sceiencedirect.com/journal/benchconcil-transactions-on-benchmarks-standards-and-evaluations/vol/1/isue/1* Bench 2020研讨会网址：https://www.benchcouncil.org/bench2020/程序【3】： https://link.springer.com/book/10.1007/978-3-030-71058-3* Bench 2019研讨会网址：https://www.benchcouncil.org/bench2019/程序【4】： https://link.springer.com/book/10.1007/978-3-030-49556-5* Bench 2018研讨会网址：https://www.benchcouncil.org/bench2018/程序【5】： https://link.springer.com/book/10.1007/978-3-030-32813-96. 审核规则为了公平起见，我们将按照相同的规则处理每一件物品。这套审查伦理源自并基于MICRO 2020 [6]，ASPLOS 2020详情如下：1. 网上的讨论是盲目的。当审稿人讨论论文时，他们不知道审稿人A、B以外的其他人的身份。因此，一个单独的评论者不能轻易地宣称自己的资历，压制其他声音，或影响他们超越他们的论点的力量。2. 当审稿人指出与先前工作的接近程度，从而决定降低论文的新颖性和一致性时3. 当审稿人要求作者与并发工作进行比较时（例如，在论文提交截止日期之后在线发表或出现的作品）或具有初步作品的作品（例如，非存档的海报或摘要），这种比较不应告知审稿人较低的分数4. 向作者提供有用和建设性的反馈。在你的评论中要尊重、专业和积极，并为作者提供改进他们工作的5. 对试卷进行绝对评分和相对于该组试卷的评分 你在复习。绝对的整体价值-有四个等级，你可以给每一篇论文的绝对整体价值;前2个评级意味着你认为该论文是可接受的会议和底部- tom 2评级意味着在你看来，该文件是低于阈值的会议。请思考这些值，无论论文是高于会议的阈值还是低于阈值。C. Luo和W.高BenchCouncil交易基准，标准和评估2（2022）1000723相对整体价值-是基于你正在审查的文件。你可以把你的文件排序，然后把文件分组到四个箱子里。除了分数错误，你应该把你的论文平均分为四类。6. 评审员必须对所有提交的文件严格保密，并在技术方案定稿后销毁所有文件7. 评审员必须联系PC主席或EIC，如果他们认为任何种类的道德违反（例如，寻求支持的作者一篇论文，作者试图确定谁是审稿人）。8. 不要主动寻找作者身份。 审稿人应该只根据论文的优点来判断。9. 如果你知道作者，不要公开作者。如果您想回避审查任务，请联系PC主席。10. 审查员应审查当前提交的资料。如果您已经审阅了以前的提交，请确保您的审阅基于当前提交。11. 审稿人不得与学生/同事分享论文12. 评论者必须自己撰写评论，并提供公正的评论。13. 在未咨询PC主席的情况下，不得征求外部审查 或EIC。如果你经常让你的学生参与复习过程，作为他们博士学位的一部分，培训，请联系PC椅。你仍然对评论负责。您可以在不超过一个评论中这样做。14. 评审员必须对评审讨论（包括您评审的论文）保密。15. 在在线讨论期间或PC会议期间（从现在起直到在任何地点发表论文），请勿与提交管理系统（如HotCRP或EasyChair）上的正式人员以外的任何人讨论提交论文/综述的内容。16. 不要透露论文作者的姓名，以防审稿人碰巧知道作者的身份。（被录取论文的作者姓名将在PC会议后公布;被拒绝论文的作者姓名将永远不会公布。17. 在未通知作者论文被接受或拒绝之前，不要披露论文的结果。18. 不要从评论网站下载或获取您不需要访问的材料。19. 不要透露评论的内容，包括评论者7. 委员会一般性联合主席Emmanuel Jeannot，INRIA，法国Peter Mattson，Google，美国Wanling Gao，中国科学院大学，中国项目联合主席Chunjie Luo，ICT，中国科学院，中国张策，瑞士Ana Gainaru，橡树岭国家实验室，美国研讨会和共同主席Kai Shu，伊利诺伊理工学院，美国RezaZafarani，锡拉丘兹大学，美国宣传联合主席David Kanter，MLCommonsRui Ren，北京开源芯片研究院Zhen Jia，亚马逊网络联合主席戴家辉，BenchCouncil钱和，北京开源芯片研究所奖励委员会BenchCouncil杰出博士论文奖委员会在其他领域：Jack Dongarra教授，田纳西Jeyan Thiyagalingam博士，STFC-RAL王磊博士，中国科学院信息与通信技术研究所博士Spyros Blanas，俄亥俄州立大学BenchCouncil计算机体系结构杰出博士论文奖委员会：Peter Mattson博士，Google博士Vijay Janapa Reddi，哈佛大学博士高万玲，中国科学院法官指导委员会Jack Dongarra教授，田纳西大学教授。博士杰弗里·福克斯，印第安纳大学D教授博士K.熊猫，俄亥俄州立大学教授。博士达姆施塔特工业大学，沃尔夫，费利克斯卢晓毅教授，加州大学默塞德分校教授。博士ResitSendag，罗德岛大学，美国高万玲博士，中国科学院信息与通信技术研究所UCAS詹剑峰教授，BenchCouncil技术计划委员会Murali KrishnaEmani，ANL Shin-ying Lee，AMDSteve Farrell，NERSCKrishnakumar Nair，Meta Greg Diamos，Landing.AI Fei Sun，阿里巴巴Narayanan Sundaram，Facebook Zhen Jia，Amazon沈根燕，SenseTimeGang Lu，腾讯任锐，北京开源集成电路研究院胡斌，中国科学院信息通信技术研究所Khaled Ibrahim，劳伦斯伯克利国家实验室SaschaHunold，TU WienWoongki Baek，UNISTMario Marino，利兹贝克特大学BinRen，William MaryGwangsun Kim，POSTECHVladimir Getov，威斯敏斯特大学李广力，中国科学院信息通信技术研究所谢碧伟，ICT，中国科学院Nicolas Rougier，INRIA致谢我 们 感 谢 所 有 其 他 Bench 2022 普 通 联 合 主 席 （ 来 自 INRIA 的Emmanuel Jeannot和来自Google的Peter Mattson）和项目联合主席（来自 苏 黎 世 联 邦 理 工 学 院 的 Ce Zhang 和 来 自 橡 树 岭 国 家 实 验 室 的AnaGainaru引用[1]T. Zhan ， S. Chen ， Stars shine ： The report of 2021 benchcouncil awards ，BenchCouncil Transactions on Benchmarks ， Standards and Evaluations ，Elsevier，2021，100013.[2] J. Zhan，BenchCouncil Transactions on Benchmarks，Standards andC. Luo和W.高BenchCouncil交易基准，标准和评估2（2022）1000724Evaluations：Vol. 1，no. 1，Elsevier，2021。[3]F. 沃 尔 夫 ， W 。 Gao ， Benchmarking ， Measuring ， and Optimizing ： ThirdBenchCouncilInternational Symposium ， Bench 2020 ， Virtual Event ，November 15-16，2020，RevisedSelectedPapers，vol.12614，Springer，2021.C. Luo和W.高BenchCouncil交易基准，标准和评估2（2022）1000725[4]W. Gao，J. Zhan，G.福克斯，X。Lu，L. Stanzione，基准，测量和优化：第二届BenchCouncil国际研讨会，Bench 2019，丹佛，CO，美国，2019年11月14日至16日，修订后的论文选集，卷。12093，Springer，2020.[5]C. 郑，J. 詹，基准，测量和优化：第一届BenchCouncil国际研讨会，Bench2018，西雅图，华盛顿州，美国，2018年12月10日至13日，修订的 论文选集，卷。11459，Springer，2019.[6]在线，Micro2020，2020，URL：https://www.microarch.org/micro53/。[7]在线，Asplos2020，2020，URL：https://asplos-conference.org/2020/index.html。[8]在线，Asplos2021，2021，URL：https://asplos-conference.org/2021/index.html。[9]在线，Isca2020，2020，URL：https://iscaconf.org/isca2020/。[10] 在线，Isca2021，2021，URL：https://iscaconf.org/isca2021/。中国科学院计算技术研究所，北京市海淀区万灵谷2号. 海淀区科学园南路6号，北京，中国电子邮件地址：luochunjie@ict.ac.cn（C.罗）、gaowanling@ict.ac.cn（W.Gao）。*通讯作者。1 Bench 2022计划联合主席。2 2022年，任总经理。
我的内容管理
展开
