"D3TW:判别可微动态时间规整解决弱监督动作对齐和分割"
需积分: 0 54 浏览量
更新于2023-12-20
收藏 1.6MB DOCX 举报
本文介绍了一种判别可微动态时间规整(D3TW)方法,用于解决视频中的弱监督动作对齐和分割问题。在这种情况下,训练过程中只有动作顺序的信息可用,对齐和分割的准确标签是不可用的。通过提出D3TW模型,本文显著提高了弱监督动作对齐和分割任务的性能。该模型通过判别建模和端到端训练,创新地解决了序列对齐问题,并能够绕过以前工作中通常遇到的问题。研究结果表明,D3TW模型在两个具有挑战性的数据集中的三个评估指标上优于当前最先进的模型。
在本文中,我们从弱监督动作对齐和分割的定义开始,并讨论了弱监督动作对齐以及我们解决基于对齐的动态时间规整(DTW)的方法。在这种情况下,训练数据中只有动作的顺序信息可用,而准确的对齐和分割标签是不可用的。针对这一问题,我们提出了判别可微动态时间规整(D3TW)模型,这是第一个使用弱排序监督的判别模型。D3TW模型的关键技术挑战在于排序监督的损失函数通常使用动态规划制定,因此是不可微的。为了解决这一挑战,我们通过在动态规划中不断放宽最小算子来将对齐损失扩展为可微分。通过判别建模和端到端训练,D3TW模型显著提高了弱监督动作对齐和分割任务的性能。
此外,我们在论文中介绍了实验结果,证明了我们的模型在两个具有挑战性的数据集中的三个评估指标上优于当前最先进的模型。在这些实验中,D3TW模型能够绕过以前工作中通常遇到的问题,并表现出更好的性能。通过使用弱监督的训练数据,我们的模型能够解决视频中的动作对齐和分割问题,并在动作理解任务中取得了显著的进展。在研究过程中,我们证明了D3TW模型的有效性和创新性,为解决视频动作理解问题提供了一个重要的工具和方法。
总的来说,本文提出了一种判别可微动态时间规整(D3TW)模型,用于解决视频中的弱监督动作对齐和分割问题。该模型通过判别建模和端到端训练,创新地解决了序列对齐问题,并能够绕过以前工作中通常遇到的问题。实验结果表明,D3TW模型在两个具有挑战性的数据集中的评估指标上优于当前最先进的模型,为解决视频动作理解问题提供了一个重要的工具和方法。我们相信,D3TW模型将在未来的视频动作理解研究中发挥重要作用,为实际应用提供有力支持。
2019-10-20 上传
2023-09-29 上传
2023-05-24 上传
2023-06-10 上传
2023-04-11 上传
2023-05-24 上传
2023-04-06 上传
2023-03-16 上传
2023-05-27 上传
![](https://profile-avatar.csdnimg.cn/ea99bf9e44bf49e1bd95905b946efbd3_weixin_35809747.jpg!1)
马李灵珊
- 粉丝: 40
- 资源: 297
最新资源
- 计算机人脸表情动画技术发展综述
- 关系数据库的关键字搜索技术综述:模型、架构与未来趋势
- 迭代自适应逆滤波在语音情感识别中的应用
- 概念知识树在旅游领域智能分析中的应用
- 构建is-a层次与OWL本体集成:理论与算法
- 基于语义元的相似度计算方法研究:改进与有效性验证
- 网格梯度多密度聚类算法:去噪与高效聚类
- 网格服务工作流动态调度算法PGSWA研究
- 突发事件连锁反应网络模型与应急预警分析
- BA网络上的病毒营销与网站推广仿真研究
- 离散HSMM故障预测模型:有效提升系统状态预测
- 煤矿安全评价:信息融合与可拓理论的应用
- 多维度Petri网工作流模型MD_WFN:统一建模与应用研究
- 面向过程追踪的知识安全描述方法
- 基于收益的软件过程资源调度优化策略
- 多核环境下基于数据流Java的Web服务器优化实现提升性能