所有文章 > 正文

Predicting Future Instance Segmentation by Forecasting Convolutional Features

作者: AMiner

时间: 2019-01-04 12:05

关键词: 智能行为,视频预测,未来帧,Mask R-CNN

周末也不要忘记学习噢

论文名:

Predicting Future Instance Segmentation by Forecasting Convolutional Features

作者:

Pauline Luc, Camille Couprie, Yann LeCun, Jakob Verbeek

Abstract


Anticipating future events is an important prerequisite towards intelligent behavior. Video forecasting has been studied as a proxy task towards this goal. Recent work has shown that to predict semantic segmentation of future frames, forecasting at the semantic level is more effective than forecasting RGB frames and then segmenting these. In this paper we consider the more challenging problem of future instance segmentation, which additionally segments out individual objects. To deal with a varying number of output labels per image, we develop a predictive model in the space of fixed-sized convolutional features of the Mask R-CNN instance segmentation model. We apply the “detection head” of Mask R-CNN on the predicted features to produce the instance segmentation of future frames. Experiments show that this approach significantly improves over strong baselines based on optical flow and repurposed instance segmentation architectures.

中文摘要


预测未来事件是智能行为的重要先决条件。视频预测已被研究作为实现这一目标的代理任务。最近的工作表明,为了预测未来帧的语义分割,在语义级别进行预测比预测RGB帧然后对这些帧进行分段更有效。在本文中,我们考虑未来实例分割的更具挑战性的问题,其另外分割出单个对象。为了处理每个图像的不同数量的输出标签,我们在Mask R-CNN实例分割模型的固定大小的卷积特征的空间中开发了预测模型。我们将Mask R-CNN的“检测头”应用于预测的特征,以产生未来帧的实例分割。

[关于转载]:本文为AMiner唯一官方微信公众号“学术头条”原创文章。转载仅限全文转载并保留文章标题及内容,不得删改、添加内容绕开原创保护,且文章开头必须注明:转自“SciTouTiao”微信公众号。谢谢您的合作。



论文下载链接

http://t.cn/EvKjhve


您还可在后台回复“知识图谱”免费获取AMiner知识图谱数据集。


回复“信息学会”,可获取由中国中文信息学会发布的《2018知识图谱发展报告》。


那些年AMiner给你分享过的干货


-AMiner统计 -

AI领域全球最具影响力城市TOP100排名,中国有12个城市入选

未来科学大奖|AMiner帮你实现一键查找科学委成员发布的论文(上)

未来科学大奖|AMiner帮你实现一键查找科学委成员发布的论文(下)


-超级计算机 -

AMiner发布《超级计算机研究报告》

超级计算机的发展经历了哪几个阶段?

超级计算机领域中国人才呈现流入趋势(附人才迁徙视频)

细数超级计算机领域国家和厂商排名,谁占市场份额最多?


-知识图谱 -

中国中文信息学会发布《2018知识图谱发展报告》(内附PDF)

AMiner知识图谱数据集开源,欢迎大家下载使用


-计算机图形学 -

计算机图形学技术小白入门篇

计算机图形学领域全球及中国TOP1000学者聚集地在哪里?



后台回复如下对应关键词可获取研究报告(菜单栏可直接下载)

自动驾驶 

机器翻译 

行为经济学

区块链

通信

自然语言处理 

计算机图形学

超级计算机

3D打印

智能机器人


关注我们

你想要的科技资讯都在这



戳阅读原文访问AMiner

扫码微信阅读
小科