众包设计营销包：年轻人推广世卫组织数字心理健康干预

互联网干预25（2021）100397众包设计营销包，在中国年轻人中推广世卫组织数字化心理健康干预RuiLing a，b，Hao Fong Sit a，Suvasini Balaji a，c，Agnes I.F. Lam d，Carl A. 拉特金·f，Joseph D. 塔克e，f，布莱恩J。 a、g、* 厅a全球和社区精神卫生研究小组，纽约大学（上海），中华b美国马里兰州巴尔的摩约翰霍普金斯大学彭博公共卫生学院国际卫生系c美国马里兰州巴尔的摩约翰霍普金斯大学公共卫生研究方案d澳门大学澳门研究中心美国北卡罗来纳大学教堂山分校中国项目f英国伦敦卫生和热带医学学院传染病和热带病系g美国马里兰州巴尔的摩市约翰霍普金斯大学布隆伯格公共卫生学院卫生、行为和社会系A R T I C L EI N FO保留字：数字化心理健康设计师众包谁华人社区A B S T R A C T数字心理健康是一个新兴领域，可以利用技术和移动应用程序为心理健康服务有限地区的人群提供心理健康治疗。尽管这些应用程序广泛可用，但使用率仍然很低。加强营销是提高公众参与度的必要条件越来越多的人认识到，心理健康干预的受益者应该参与治疗开发、适应和提供的所有阶段。众包-目的：本项目旨在让潜在的干预受益者参与数字化心理健康传播，为中国澳门特别行政区的中国大学生实施数字化心理健康众包设计竞赛，并评估竞赛和产品的可行性。该竞赛要求参与者为Step-by-Step设计营销包，Step-by-Step是一项可扩展的世卫组织数字心理健康干预措施，重点关注抑郁症。方法：从全球健康课程中招募的设计参与者被分成具有平衡专业领域的团队。两个评审团– 设计师们在四天的时间里亲自进行了设计，包括汇报、研讨会、竞赛和颁奖典礼。一个平行的混合方法的方法，包括定性的反馈，从法官和参与者以及参与者的满意度和抑郁症状的定量数据，以丰富我们的理解的事件。此外，根据评委给参与者的反馈，对比赛的通信包进行了排名。结果：49名参与者（8个团队，每个团队6-7名成员）参与了设计。使用的截止分数为在患者健康问卷-9（PHQ-9）中，11.4%的参与者有中度或重度抑郁症状。所有团队都成功制作了完整的数字心理健康营销包。四个决赛选手的包被定量选择与法官的分数和最高决赛选手的包被描述为简单，周到，和吸引力，虽然没有足够的信息。与会者对设计方案总体上感到满意，但有些人提到时间不够，组织/指导的清晰度可以提高。结论：该设计是一种新颖的，可行的策略，收集人群输入的心理健康干预的传播。与传统的传播策略相比，这种自下而上的方法包括并吸引了潜在的干预受益者在创建数字心理健康营销传播中发挥积极作用。未来的比赛应该给参赛者更多的时间，重新考虑活动组织的各个方面。* 通讯作者：纽约大学（上海）全球与社区心理健康研究组，上海市浦东新区世纪大道1555号，邮编：200122，中华人民共和国。电子邮件地址：brianhall@nyu.edu（B.J.Hall）。https://doi.org/10.1016/j.invent.2021.100397接收日期：2020年7月21日;接收日期：2021年3月9日;接受日期：2021年4月26日2021年5月5日网上发售2214-7829/©2021的作者。发表通过ElsevierB.V.这是一个开放接入文章下的CCby-NC-ND许 可 证（http://creativecommons.org/licenses/by-nc-nd/4.0/）中找到。可在ScienceDirect上获得目录列表互联网干预期刊主页：www.elsevier.com/locate/inventR. Ling等互联网干预25（2021）10039721. 介绍在全球精神卫生领域，需要提供精神卫生治疗的替代方法，以覆盖大量有需要的人群，这些人群无法获得精神卫生服务（Patel等人，2018年）。随着数字设备和智能手机在全球的普及（从2013年到2014年到2017-18年，低收入和中等收入国家的智能手机拥有量增加了75%该领域现在正在开发和评估数字方法来大规模地提供心理健康干预（Carswell 等人， 2018; Garabiles 等人， 2019; Hall 等人， 2018年）。截至2017年，心理健康应用程序约占市场上约325，000个移动健康应用程序的三分之一（IMS医疗保健信息学研究所，2015）。然而，尽管数字化心理健康水平有所提高，但在-创新仍然是可变的（ IMS Institute for Healthcare Informatics ， 2015; Fleming et al. ，2018年）。数字心理健康实施科学的一个主要挑战是定制营销，以有效地接触目标用户（MunPleozet al.， 2016; O 'Connor等人，2016年）。需要开展工作来提高公众对数字健康产品的认识，但围绕参与、传播和营销策略的文献存在空白 是 最 有效 在 促进 摄取 的 数字 健康-对不同用户群体的干预（O'Connor等人，2016; Claborn例如，2018年）。一个拟议的框架表明，“利益相关者驱动的方法”可能是将技术付诸实践的新途径（Nijland等人，2011年）。一个这样的想法是众包设计（Tucker etal.， 2017年）。众包-挑战，黑客马拉松或其他活动，然后与公众分享解决方案- 例如，2017;Tucker等人，2019; DePasse等人，2014年）的报告。作为一种基于社区的 参与性办法， 众包邀请目标受众用户参与干预措施的制定和（Burdine等人，2010年）。它可以采取竞赛的形式，目的是解决健康问题（Brabham等人，2014年）的报告。虽然它是一种相对较新的工具，特别是在医疗保健领域，但在几项研究中被认为是可行和成功的（Tucker等人，2017;Tucker 等 人 ， 2019; DePasse 等 人 ， 2014; Burdine 等 人 ， 2010;Brabham等人，2014; Zhang等人，2015; Ong等人，2017年）。DePasse及其同事提出了众包活动的三个核心原则：基于问题的方法，来自不同学科的参与，以及挑战现有的范式（DePasse等人，2014年）的报告。以用户/目标受众为中心，众包活动侧重于本地化和文化背景化[14]。Zhang和他的同事介绍了他们使用众包竞赛进行性行为的经验。健康干预设计（Zhang等人，2015年）。与仅涉及专家和专业人员的传统“自上而下“的方法相比，它被认为是一种具有成本效益的“自下而上“的方法来收集群众的意见[16]。众包竞赛也显示出积极的一面社区参与的结 果（Ong等人， 2017年）。众包设计大赛就是这样一个竞赛。这是一个将参与者聚集在一起设计媒体活动以解决特定挑战或目的的活动;它可以利用面对面的研讨会和团队合作来创建整体的沟通包（Tucker等人，2017年）。Tucker和他的同事们使用众包设计工具在中国开发了一个社区级的HIV检测项目[12]。没有研究应用这种方法来改善获得心理健康或数字心理健康干预的机会。全球精神卫生领域日益认识到，干预受益人应参与治疗开发、适应和交付的所有阶段，这表明众包方法可能是实施和扩大规模的一种新颖而公平的方法（Ryan等人，2019; Semrau等人， 2016年）。最近， 的 世界 健康 组织 具有 接合 在可扩展的心理健康干预的开发、适应和测试（Carswell等人，2018;Garabiles等人，2019年）。逐步是一个引导自助干预推广，[3，4]旨在主要通过行为激活减少抑郁症状，但它也有可能是transdiagnosis，解决焦虑，创伤后应激障碍，其他压力反应，和客户定义的心理社会问题。该干预措施旨在填补治疗需求与精神卫生服务之间的差距，在这种情况下，有很少的精神卫生服务提供者。针对中华人民共和国澳门特别行政区（SAR）的大学生，开发了一个中文版的逐步干预。为了更好地向目标用户宣传干预措施，我们与澳门的大学生实施了一项众包设计方案，为干预措施开发营销方案，他们本身就是目标用户。与应用专业营销公司的传统营销产品不同，在这项工作中使用设计师的目的是让干预措施的最终用户参与并授权他们创建一个受众知情的营销策略，将基于证据的全球心理健康干预措施与目标用户联系起来，以增加干预措施的吸收，重点是文化本地化。本文介绍了新颖的众包设计过程用于开发心理健康跨部门预防。为了帮助为组织活动的过程提供信息，采用了世卫组织/贸易和发展报告《众包实用指南》中列出的步骤， 设计方案的基础（世界卫生组织，2018年）。2. 方法2.1. 指导委员会成立了一个社区指导委员会，其中包括来自相关背景的五个部门，包括公共卫生，心理学和人类学，具有不同的学位水平。凭借在全球和社区心理健康方面的知识以及组织众包竞赛的经验（Tucker等人，2017年），指导委员会构建了设计框架并制定了评估标准。该委员会还负责编写和向参与者介绍准则，并在整个设计过程中向参与者提供反馈。2.2. 参与者逐步干预的目标人群是中国年轻人。本着营销方案的目标受众成员将最好地确定如何为他们的社区营销干预措施的精神，我们招募了澳门大学全球健康通识教育课程的参与者，他们是中文版逐步的目标用户。该设计已作为全球健康课程内容的一部分根据班级名册中的人口统计资料，根据学习领域、原籍地（本地或非本地华人）和大学年份，组成了8个小组，每组6至7人，以提高观点的多样性和平衡每个小组的专业领域。由于认识到讲广东话的澳门本地华人和讲普通话的非本地华人是澳门的主要学生群体，因此优先考虑原籍地的多样性2.3. 评审团两组评委，一个专家小组和一个学生小组，被邀请在半天的演示活动中评估交流包。为了从专业的公共卫生角度、心理学角度和传播学角度对产品进行评估，我们邀请了来自大学和当地社区的R. Ling等互联网干预25（2021）1003973提供心理健康服务的组织组成一个专家小组。学生小组的成员是通过大学和澳门的学生社团以及他们的社交网络招募的。学生评审团由澳门不同大学不同专业的学生组成，旨在透过目标人群的视角对产品进行评判，以评估其文化适切性及接受度。2.4. 设计流程是次活动为期四天，并与澳门大学的全球健康通识教育课程结合。第一天是指导委员会向参与者介绍重要概念的方向，包括关于健康传播的简要概述，可扩展的数字心理健康计划，分步计划，包括指导自助的过程，比赛规则/指南（多媒体指南X1），以及裁判员评分的规则（多媒体指南X2）。这些概念和材料通过课堂演示和课堂资源网站上的文档（多媒体教程X3）与全班分享。参与者获得当地企业赞助商捐赠的奖品（娱乐活动的门票或优惠券）。设计的第2天和第3天是研讨会日，要求每个团队制作一个完整的沟通包，启动分步计划。每个通信包都需要以下组成部分：一个名称为“逐步“程序的标题， 一 健康 消息 参与者 旨在 到 传达 与包装，一个标志，一个口号，和两个组件来传播的想法（海报和15-30-s长的视频）。参与者可以自由选择将何种语文纳入一揽子计划，希望他们选择适当的语文以满足目标受众的需要。参与者还被告知要用他们的第一语言进行陈述，他们的表达方式或想法最适合他们。在第4天，每个团队的代表需要做一个8分钟的PowerPoint演示文稿，向评委介绍他们的包，然后在大学的旁听席上进行5分钟的问答。事先安排了记录员、主持人和负责计时和计算分数的助手。午休后，计算和讨论了结果，然后举行了颁奖仪式。所有参与者都收到了获奖证书，获奖者也收到了获奖证书。2.5. 评审过程在演讲之前，评委们听取了关于循序渐进计划的目的、比赛的目的和规则的汇报。他们得到了一个模板来记录他们的分数和定性反馈，包括优点，缺点，改进建议和每个包的问题，以及一个评判每个营销的量规3. 措施3.1. 人口统计学变量在设计之前，使用调查工具Qualtrics从参与者获得以下人口统计学信息：性别、年龄、专业、年级和原籍地3.2. 抑郁症状患者健康问卷9（PHQ-9，Multimedia Questionnaire X 5）是评估抑郁症最常用的工具之一，在本研究中用于评估临床特征（Kroenke etal.，2001年）。它由9个自我报告项目组成。中文版PHQ-9在中国人群中表现出良好的可靠性和有效性（Wang et al.， 2014; Yu等人， 2012年）。对于每个项目，受访者表示，他们被症状困扰的频率从0（根本没有）到3（几乎每天）。一个例子是“对做事没有兴趣或乐趣”。抑郁发作的严重程度可以通过以下方式评估：9项的总分范围为0 - 27，分为5个严重程度组：轻微（0-4）、轻度（5-9）、中度（10-14）、中度严重（15-19）和严重（20-27）。分数大于10表示临床抑郁症。量表的内部一致性信度（Cronbach’sα= 0.77）可以接受。3.3. 参与者满意度参与者的满意度是根据澳门社会工作局（社会工作局，2019年）对培训课程和活动的官方评估而制定的过程评估反馈措施（多媒体反馈X6）进行评估。调查的前9个项目要求参与者对每个项目的程度进行评分， 项目 描述 如何 他们 觉得 关于 的 设计 月1（非常不同意）到5（非常同意）。一个示例项目是“设计的持续时间是否适当”。”我会推荐朋友参与设计，并提供额外的空间供书面评论或反馈。 在-该量表前9个条目的内部一致性信度为优（Cronbach’sα= 0.91）。3.4. 数据分析本研究采用平行混合方法，包括评委和参与者的定性反馈以及参与者满意度和抑郁症状的定量数据。我们选择这项研究设计，是为了提供更丰富的体验描述，以及一些关于创意质量的初步数据。在评审过程中和设计竞赛结束后，分别收集了评委的文本反馈和参赛者的满意度反馈。评委们对营销方案的优缺点的反馈是由以下因素综合而成的：包装（EscudiX表2）。 包装组件主要两名编码员从评论中提取主要思想（表3&评估的内容包括创意、全面性和简洁性、针对目标受众的适当基调以及视觉吸引力。为了评分的目的，专家小组的分数在决定设计奖获奖者时得到了更多的重视，以确保评审过程中了解心理健康和健康沟通的全面知识。第一、二、三等奖完全由专家评审团的分数决定，最受欢迎奖由学生评审团决定，奖金奖（最佳视频、最佳海报、最佳徽标、最佳口号和最佳标题）由两个评审团的分数按相等比例合并。结果由记分员计算，他们在比赛期间将裁判的分数输入预先准备的EX cel公式。裁判有机会讨论分数决定的结果，并在必要时否决它们，以确定获胜者。表1）。参与者的反馈由两名编码员同时独立编码。所有的反馈被分为积极的，消极的，和中性的类别与句子编码和5个主题出现在这个过程中，这是用来作为第二个周期编码工作的预设代码。编码员重新编码了参与者的反馈用Excel中的5个预设代码，包括时间、组织、判断过程、一般反馈和“其他”方面的反馈，对于定量数据，使用StataMP 14生成参与者人口统计学、自我报告的抑郁、对设计的定量满意度反馈的描述性统计，并估计每个面板的平均评分的组内相关系数。R. Ling等互联网干预25（2021）1003974==表1参与者的人口统计学特征（n=49）。年龄4. 结果4.1. 参与者表1概述了所有参与者的人口统计信息（表1）。在参与该活动的49名参与者中，14名（28.6%）为男性，35名（71.4%）为女性。年龄19~ 23岁，平均20.55岁 1.14）。四十- 1名（83.7%）受访者自认为是澳门本地学生，8名（16.3%）受访者自认为是非本地学生（7名中国内地学生及1名马来西亚华人）。43名（87.8%）参与者是研究生课程的第一年或第二年，6名（12.2%）参与者是第三年或第四年。研究领域是多样化的，如计算机科学，通信，葡萄牙研究，教育和政治学。没有一个有心理学背景的学生参加了这门课，这对比赛来说是理想的，因为心理学学生可能不能最好地代表一般学生。表2显示了PHQ-9量表的结果（表2）。之间44名参与者完成了设计前调查。PHQ-9的平均评分为5.73（SD 4.03），范围为0 - 17。使用 以10分为界，11.4%的受试者有中度以上的抑郁症状。4.2. 最终产品所有八个团队在为期4天的设计过程中制定了一个全面的一揽子计划。第四组、第一组和第七组被多学科专家评审团评为前三名。学生评审团评分最高的决赛选手是第五组，被选为最受欢迎的套餐。每个评委小组的平均评分之间的相关性为0.84表2PHQ-9评分（n=44）。比例SE 95% CI最小值（0轻度（5中等（10严重（15（0.19-0.98）。表3提供了获奖者的包的描述和评委的反馈（表3）。其他四个小组的说明和反馈可在Multimedia PullerdiX 4中查阅。第四组获得一等奖。他们用中英文设计了标题和口号。他们保留了干预措施的英文名称“Step by Step”，并另外开发了一个具有类似含义的中文名称。他们的英文口号是：Step by Step，everything will be ok！他们的标志（图1-a）是两个足迹设置略高于/低于对方，代表一步一步地向前迈进。海报（图2- a）是绿色和白色的，用树叶作为装饰。一个二维码下载应用程序包括在内。该视频描述了一名青少年，他最初看起来很伤心，但在使用该应用程序后微笑，似乎感觉更好，这表明该应用程序有助于年轻人克服他的抑郁症状。第四组在演讲期间向观众和评委分发了印刷的邀请函;这些邀请函的设计在元素和颜色方面与海报和徽标保持一致。第一组获得二等奖。 他们还设计了标题，中英文标语。他们的标题是“Stay with You”（中英文），暗示用户可以在需要的时候使用这款应用程序。他们的标志（图1-b）包括几个元素作为视觉隐喻：一颗心，暗示对有精神问题的人的照顾;齿轮，旨在代表一步一步和社交网络;心电图，暗示情绪波动。他们的口号是闪耀你的生活在英语和中文。海报（图2-b）是蓝色的，上面有专业、方便和电子助手（数字节目指南）等关键词，以展示干预措施的特点。该视频通过展示指导和基于应用程序的心理健康支持的重要性来强调Stay with You第七组的冠军是M. Y。健康，可以理解为确保你的健康。名字中的M代表澳门，Y代表青年。他们的标志（图1-c）是一只蜜蜂在一个绿色背景的气泡中飞行。泡泡是用来象征情感陷阱，绿色是用来让人们感到平静。他们的口号是：自信一步一步，拥抱新生活一步一步。他们的海报（图 2-c ） 是粉 红色 的， 展示 了不 同社 交媒 体渠 道（ Instagram，WeChat，Facebook）的标题，口号和QR码，以及阳光，手和梯子的图像。视频的关键信息是，不好也没关系，心理健康问题可以通过帮助和支持来解决此外，第五组被学生评委会选为最受欢迎的套餐（表3）。他们的题目是《伸出援助之手》（作者翻译），暗示人们在遇到困难时可以得到别人的帮助。他们的口号是“敢于尝试，面对挑战，克服问题，找到解决方案”（作者翻译），这表明人们可以通过与eHelpers合作来克服困难。他们的标志（图1-d）包括几个元素：一扇暗示负面情绪的灰色门，底部的手暗示支持和鼓励，两个为用户开门的人（代表eHelpers），以及打开的门内的地球图像暗示新生活海报（图2-d）是黄色的，上面有四个字母H，代表“帮助者“、“快乐“、“健康“和“希望”。”以下是奖金的获奖者：第八组获得最佳标题;第七组获得最佳口号;第一组获得最佳标志;第四组获得最佳海报;第三组获得最佳录像。第八组的标题是“抱抱”，这是中文的双关语。在书面形式上，它意味着在指导下提高心理健康素养。在广东话里，它的意思是拥抱。第三组的视频一开始就提到了学生们普遍存在的问题，比如学校的工作量太大。然后，解说员建议观众在视频显示应用程序的图像之前深呼吸放松人口统计学特征频率(n)百分比（%）性男人1428.6妇女3571.42336.122714.3211326.5201734.719918.4学籍当地4183.7非本地816.3第一学年1224.523163.33510.2412.0主要艺术与人文学院（FAH）1224.5社会科学学院（FSS）510.2科学技术学院（FST）816.3工商管理学院（FBA）1428.6教育学院（FED）1020.4R. Ling等互联网干预25（2021）1003975表3获奖者的包装和评委在设计过程中的反馈说明。团体名称口号优点缺点• 设计很简单，有思想有吸引力表3（续）团体名称口号优点缺点• 包装设计精良，吸引人，包括积极第四组（第一）一步一步慢慢來一步一步来，一切都会好的！你并不孤单，我们都在这里慢慢來，一I'm sorry.I'm sorry.海报中包含潜在的入选标准和入组QR码分发给观众的实物邀请卡是有思想和创意的。邀请函上强调了保密性和隐私性使用世卫组织标志和绿色也有帮助。• 总体设计适合年轻人。• Logo很有意义，• 信息不充分，目的也不够明确。健康信息不够清晰或强烈，受众无法理解产品的目的。目标人群没有明确说明。• 包裹中的措辞是不合适。第五组（最受欢迎）Give aHand（作者翻译）敢嘗試 齊面對 跨難題 無問題敢于尝试，面对挑战，克服问题，找到解决方案（作者翻译）思维元素• 4H的想法是信息丰富的，容易理解和理解。• 的想法“peer减少耻辱感。对轻度心理健康问题有吸引力。在设计中加入了电子助手的角色.这个名字看起来很自然。热线提供。• 标题不是用广东话容易发音。• 虽然设计是有意义的，它过于复杂，在行动上没有明确的指导。措辞不当。的关键信息“seek a doctor“越快越好有严重问题的人。第一组（第二）组七（第三）和你在與你同在M.年健康闪耀你的生活你好，在你手上步步走出自我 漸漸擁抱新生自信一步一步，拥抱新生活一步一步（作者译）有趣，新颖，其他部分也很吸引人。设计中的WHO标志使其看起来专业可靠。• 设计一般都很好，容易理解。• 包装是有系统的而且很厚在演示文稿中加入市场调查是很好的背景很清楚。• 积极思想是包含在一揽子计划中的。设计有利于心理健康问题的正常化。• 英文的slogan不是清楚海报太复杂，健康信息不清楚。海报/视频中没有• Logo可以修改。它与职称名称不符视频太短，无法说明明确的信息，也没有包含下载应用程序的信息指导。4.3. 参与者满意度反馈参与者的满意度反馈结果见表4（表4）。40名受访者（88.9%）表示他们会推荐其他学生加入设计团队。从问卷最后一个问题的定性数据来看，14名参与者对设计方案总体满意，18名参与者提出了改进建议。13名与会者提到，充分制定其一揽子营销计划的时间有限。四名与会者说，设计师的组织工作本可通过提供更多信息和修改一揽子要求加以改进。三名参与者对评审过程不满意。5. 讨论本文旨在介绍众包设计作为一种可行的策略，使心理健康干预受益者参与干预传播的过程。在这项研究中，大学生，数字化干预的目标人群，通过创建健康传播包，由两个评审团（学生评委和专家评委）仔细评估，提供了精神健康治疗传播的思路和方法。49名参与者设计了8个健康沟通包，旨在增加参与者对世卫组织开发的数字心理健康干预措施的了解。入围者创建的软件包将被修改，并用作数字心理健康干预有效性试验的健康促进和招募材料。众包允许干预目标受众的成员R. Ling等互联网干预25（2021）1003976Fig. 1. 由四、一、七、五组设计的标志（从左到右）。直接参与制作健康传播材料。这与专家或设计师主导的传统自上而下的促销活动方法相反。众包作为一种策略还被用来获取信息，以扩大对公众心理优势和症状的了解，以及公众对心理健康主题的看法（Palmer等人，2018; Krieke等人，2016年）。据我们所知，它还没有被用来增加心理健康干预措施的吸收，这项研究是全球第一个促进心理健康的健康传播设计活动。社区参与数字心理健康应用是实现服务利用的关键第一步，因此，制定营销策略以扩大覆盖范围和促进参与至关重要。本研究提出了一种方法，利用来自目标受众的想法和设计，使传播更适合文化和更容易被受众接受。采用满意度评价法对某医院后勤服务质量进行的设计。很大一部分与会者对这次活动提出了积极的反馈意见。虽然这个问题的平均值“Duration13名与会者说，他们需要更多的时间来编写宣传材料。时间不足是最受关注的问题，其次是活动组织以及向与会者和法官澄清信息。未来的健康传播设计马拉松应该在活动规划中考虑这些参与者的经验，以提高过程和产品的质量。在实际的设计阶段之前，应该给设计人员更多的时间来集思广益.由于参与者依靠自己的足智多谋来确定开发资源（创建媒体的网站），未来的迭代还可以提供一套标准的资源和网站，以帮助他们的设计工作。总体而言，营销产品和参与者的反馈支持设计是一种有用的方法，可以让学生参与营销材料的创作，并实现与全球心理健康相关的学术学习目标。虽然11.4%的参与者有中度或重度抑郁症状，但所有组都及时完成了他们的设计，并有创意。我们相信，让持份者参与，为社区的精神健康服务贡献意见和努力，是一个有前途的方法。设立由目标受众组成的第二个评审小组，而不是仅仅依靠专家评审，是一项创新，可在随后的众包活动中采用。ICC评分员间一致性的结果显示，ICC为0.84，表明使用设计的评分标准，两个评委小组之间的一致性为良好至极好（Koo和Li，2016;Cicchetti，1994）。与此同时，两个小组得出了不同的最高分决赛选手（获得一等奖的团体和最受欢迎的套餐是不同的），这表明学生的选择可能与专家不同。在学生评审团的参与下，我们能够确定两支球队。虽然这种办法是一种公平和可能有用的方法，在设计中有几个限制。一个是开发的营销方案的有效性尚未进行经验评估，这将在未来进行。第二，效率和成本-需要对众包材料的效率进行评估，以提供证据证明这种方法的适当性。先前的研究已经确定了用于HIV的众包方案的成本效益，这表明众包可能是一种有效的方法，具有更广泛的覆盖范围和更低的成本（Tang等人，2019; Tang等人，2016年）。第三，参与者可能不能最好地代表干预的目标受众，因为学生是从同一课程招募的，只有11.4%的参与者有中度或重度抑郁症状。然而，目前对营销包装设计的研究主要集中在可能影响大学生接受的文化和社会因素，而不是临床特征。此外，我们还担心只纳入有抑郁症状的参与者的可行性，因为抑郁可能会影响他们的认知、行为和社会功能。我们发现，混合样本的合作并没有对他们的产品创造产生不利影响。未来的研究可以考虑在适用时平衡参与者的临床特征。参与这项研究的人参加了一个课程，并获得奖励，以尽最大努力设计方案。虽然在设计马拉松中包括激励措施是典型的做法，但在今后的研究中，将没有参加课程的参与者包括在内将是有益的。我们还承认，市场营销专家可以帮助判断过程，这在目前的研究中缺失然而，尽管如此，督导委员会由多位专家组成，他们擅长利用众包方法发展健康计划。最后但并非最不重要的一点是，法官对交流包的反馈是用纸和笔收集的，这使得法官由于时间有限而无法详细书写，并模糊了评论的易读性。由于易读性问题，研究小组有必要采取后续行动，澄清反馈意见，这很耗时。为了解决这些问题，未来的活动可以在设备上应用数字文本输入和调查（例如，手机、iPad或笔记本电脑）。6. 结论众包设计是一种可行的方法，可以收集想法，设计沟通计划，以促进为年轻人量身定制的数字全球心理健康产品。此外，它还让社区参与者了解更多关于精神健康的话题，并为不同的社区持份者提供沟通平台。 虽然这不是作者的主要目标，但我们确实认为这是一种新颖的教学方法，可以让学生在课堂上参与全球和社区卫生实践。这项研究提供了证据的可行性和可接受性的众包设计方案，以促进一个可扩展的数字心理健康计划。未来的研究可以利用这种方法来吸引不同的利益相关者，包括更广泛的社区成员，或有心理健康问题生活经验的人，他们也是潜在的干预受益者。需要进一步的研究来检查众包材料的有效性和成本，以提高数字心理健康的吸收。作为营销数字心理健康干预措施的可行策略，众包也可能是解决依从性和保留性的可能解决方案R. Ling等互联网干预25（2021）1003977图二、四、一、七、五组 设 计 的 海 报 （从左至右）。R. Ling等互联网干预25（2021）1003978表4参与者的满意度反馈（n=45）。项目平均值SD最小值最大值1.设计的内容与学习目标相匹配。2. 提供信息和技术支持。3.93 0.69 2 5Cicchetti，D.V.，1994.心理学中评价规范化和标准化评估工具心理学。评估。 6（4），284-290。https://doi.org/10.1037/1040-3590.6.4.284。Claborn ， K.R. ， Meier ， E. ， Miller ， M.B. ， Leavens ， E.L. ， 布 雷 特 ， E. I. ，Leffingwell，T.，2018年3月提高艾滋病毒疾病数字卫生干预措施的采用率和可接受性管理：一项定性研究。Transl. 行为举止。Med. 1;8（2），268-279. PMID：29385547DePasse，J.，卡罗尔河，Ippolito，A.，Yost，A.，Santorino，D.，Chu，Z.，Olson，K.，2014. 少3.设计的内容很容易理解和遵循。3.78 0.85 2 5噪音，更多的黑客：如何部署麻省理工学院黑客医学的原则，以加速医疗保健。Int. J. Technol. 评估。 Health Care 30（3），260-264. 网址：//4. 设计的持续时间是适当的。doi.org/10.1017/S0266462314000324。5.理论和实践的时间分配是适当的。3.78 0.79 2 5弗莱明，T.，巴温湖Lucassen，M.，Stasiak，K.，霍普金斯，S.，梅里，S.，2018年6月 超越试验：对现实世界的吸收和数字自我参与的系统性综述6. 比赛过程是否适当3.93 0.62 3 57. 多样化分组是适当的3.78 0.77 2 5帮助干预抑郁、情绪低落或焦虑。 J. Med. 因特网资源6;20（6），199. PMID：29875089。8.在设计期间，3.64 0.91 1 5Garabiles，M.R.，Harper Shehadeh，M.，霍尔，B.J.，2019年3月29日可扩展的世界卫生组织海外菲律宾人电子精神卫生计划的文化适应9. 总的来说，设计很棒。3.82 0.61 2 5注. N=45。数字化干预措施。未来的研究需要看看这种方法是否可以用来改善长期参与。本 文 的 补 充 数 据 可 在 https ： //doi 网 站 上 找 到 。org/10.1016/j.invent.2021.100397。缩写澳门特别行政区澳门特别行政区中华竞争利益作者声明无利益冲突确认我们感谢澳门银河高级副总裁林博士赞助奖项，并感谢澳门大学全球健康暑期课程的所有49名参与者对设计的贡献。我们亦感谢所有专家评审（澳门大学澳门研究中心的Agnes博士、林乐芳女士、上海纽约大学全球及社区精神健康研究小组的BrianJ.Hall博士、澳门大学学生事务处的苏快龙先生、澳门妇女联合总会的劳灿芳先生、澳门大学文春纪念中学的洪玲慧女士、澳门大学心理健康研究所的刘慧玲女士、澳门大学心理健康研究所的刘慧玲女士、澳门大学心理健康研究所的刘慧玲女士、澳门大学心理健康研究所的刘慧玲女士）。出席典礼的嘉宾包括澳门扶康会的卢文珊女士、上海纽约大学全球及社区精神健康研究组的薛浩芳女士及上海纽约大学全球及社区精神健康研究组的施薇女士）及所有学生评委（区惠琪、陈宝喜、廖思敏、梁永忠、梁敏仪及赖亮海）。最后，我们感谢上海纽约大学全球和社区心理健康研究小组的所有成员，他们帮助准备了设计方案并组织了比赛。资金这项工作得到了澳门特区政府、澳门大学RSKTO的支持，MYRG2018 -00241-FSS授予BJH。引用布拉汉姆特区Ribisl，K.M.，Kircher，T. R.，Bernhardt，J.M.，2014.众包应用于公共卫生。Am. J.Prev. 2月;46（2），179-187。PMID：24439353。Burdine，J.N.，McLeroy，K.，Blakely，C.，例如，2010.以社区为基础的参与性研究和社区卫生发展。 J. 小樱Prev. 31，1-7。网址：//doi.org/10.1007/s10935-010-0205-9。卡斯韦尔，K.，Harper-Shehadeh，M.，Watts，S.，Van't Hof，E.，Abi Ramia，J.，Heim，E.， 例如，2018年8月循序渐进：世卫组织针对抑郁症的新的数字化心理健康干预。Mhealth 13;4，34. PMID：30225240。工人JMIR表格3（1），e11600。PMID：30924784。霍尔，B.J.，施伟，Garabiles，M.R.，陈，E.W.W.，2018年10月15日。在中国的菲律宾家政工人预期的eMental健康干预的相关性。全球心理健康（剑桥）5，e33。PMID：30455968。IMS Institute for Healthcare Informatics，2015年。患者采用mHealth。https：www.iqvia.com/-/media/iqvia/pdfs/institute-reports/patient-adoption-of-mhealth.pdf。（2019年8月1日查阅）。古铁基，Li，M.Y.，2016年6月。选择和报告组内的指南可靠性研究的相关系数。 J. 切罗普Med. 15（2），155-163。PMID：27330520。Krieke，L.V.，Jeronimus，B.F.，Blaauw，F.J.，Wanders，R.B.，Emerencia，A.C.，Schenk，H. M.，例如，2016年。HowNutsAreTheDutch（HoeGekIsNL）：精神症状和力量。Int. J. 方法精神科医师。Res. Jun;25（2），123-144.PMID：26395198。Kroenke，K.，Spitzer，R.L.，Williams，J.B.，2001年PHQ-9：简短抑郁症严重程度测量的有效性J.Gen. Intern. 16（9），606-613。https://doi.org/10.1046/j.1525-1497.2001.016009606. X.穆恩诺兹，R.F.，Bunge，E. L.，Chen，K.，Schueller，S. M.，Bravin，J.I.，肖内西，E.A.， 例如，2016.大规模开放式在线干预：一种在全球提供行为健康服务的新模式。临床精神病学4（2），194-205。https://doi.org/10.1177/2167702615583840.van Gemert-Pijnen，J.E.，Nijland，N.，van Limburg，M.，Ossbaard，H.C.，Kelders，S. M.，艾森巴赫，G.，例如，2011年12月，一个全面的框架，以提高电子卫生技术的吸收和影响。J.Med. Internet Res. 5;13（4），e111。PMID：22155738。O’Connor,Hanlon，P.， 加西亚，S.，Glanville，J.，Mair，F.S.，2016年9月了解影响患者和公众参与以及数字健康干预措施招募的因素：定性研究的系统综述。BMC医学通知。德西斯麦15;16（1），120.https://doi.org/10.1186/s12911-016-0359-3网站。Ong，J.J.，Bilardi，J.E.，塔克，J. D.，2017年10月群众的智慧：以群众为基础利用众包竞赛为一次会议设计徽标。性变速箱Dis.44（10），630-636。https://doi.org/10.1097/OLQ.0000000000000658网站。帕尔默，E. C.，道格拉斯，A.R.，史密斯，T.，Fuente