国内刊号:51-1307/TP
国际刊号:1001-9081
发布日期:
作者:姜斯浩, 宋慧慧, 张开华, 汤润发
单位:江苏省大数据分析技术重点实验室(南京信息工程大学), 南京 210044
关键词:视频目标分割,特征金字塔,卷积神经网络,深度学习,多尺度融合
基金:国家自然科学基金资助项目(61872189,61876088);江苏省自然科学基金资助项目(BK20170040)。
针对复杂视频场景中难以分割特定目标的问题,提出一种基于双重金字塔网络(DPN)的视频目标分割方法。首先,通过调制网络的单向传递让分割模型适应特定目标的外观。具体而言,从给定目标的视觉和空间信息中学习一种调制器,并通过调制器调节分割网络的中间层以适应特定目标的外观变化。然后,通过基于不同区域的上下文聚合的方法,在分割网络的最后一层中聚合全局上下文信息。最后,通过横向连接的自左而右结构,在所有尺度中构建高阶语义特征图。所提出的视频目标分割方法是一个可以端到端训练的分割网络。大量实验结果表明,所提方法在DAVIS2016数据集上的性能与较先进的使用在线微调的方法相比,可达到相竞争的结果,且在DAVIS2017数据集上性能较优。
来源:2019年第8期
《计算机应用》期刊编辑部