走向目标跟踪的大一统模型 | Unicorn 项目原作解读

2022 年 8 月 25 日 机器之心

目标跟踪是计算机视觉领域的基础问题之一,主要可分成以下四项子任务:单目标跟踪(SOT),视频目标分割(VOS),多目标跟踪(MOT),多目标跟踪与分割(MOTS)。由于不同子任务在定义与设定上的差异,绝大多数现有跟踪算法都是被设计用来解决单一或者部分子任务的,缺乏向其他任务的拓展能力。显然,这一长期割裂的状态对于整个跟踪领域的发展并不友好。

针对这一问题,来自大连理工大学、字节跳动、香港大学的研究者们提出了一种目标跟踪任务的大统一模型 Unicorn,该模型只需一套网络结构、一套模型参数即可同时完成四种跟踪任务。Unicorn 首次实现了目标跟踪网络结构与学习范式的大一统,并在来自四种跟踪任务的 8 个富有挑战性的数据集上取得了优异的表现。该项工作《Towards Grand Unification of Object Tracking》现已被 ECCV2022 接收为 Oral。

机器之心最新一期线上分享邀请到了 Unicorn 的第一作者大连理工大学在读博士严彬,介绍他们在目标跟踪大一统方面的探索。



分享主题:走向目标跟踪的大一统

分享嘉宾:严彬,大连理工大学信通学院 IIAU-LAB 博士生、指导老师为卢湖川教授和王栋教授、研究方向为视频目标跟踪,目前作为第一作者在计算机视觉顶级会议上发表论文多篇,曾在微软亚洲研究院、字节跳动人工智能实验室实习。

分享摘要:本次分享将首先回顾目标跟踪领域主流的四种子任务的研究目标与代表方法、比较不同子任务之间的共性与差异。之后会总结阻碍目标跟踪领域统一的三座大山,并介绍如何设计一种统一的网络结构与学习范式来攻克这些困难。

相关链接:

论文地址:https://arxiv.org/abs/2207.07078

代码地址:https://github.com/MasterBin-IIAU/Unicorn

加群看直播
直播间 关注机器之心机动组视频号,北京时间 8 月 26 日 20:00 开播。

交流群: 本次直播设有 QA 环节,欢迎加入本次直播交流群探讨交流。
如群已超出人数限制,请添加机器之心小助手:syncedai2、syncedai3、syncedai4 或 syncedai5,备注「Unicorn」即可加入。
如果你也有最新工作希望分享或提交你感兴趣的内容方向,随时告诉我们吧: https://jiqizhixin.mikecrm.com/fFruVd3

机器之心 · 机动组
机动组是机器之心发起的人工智能技术社区,聚焦于学术研究与技术实践主题内容,为社区用户带来技术线上公开课、学术分享、技术实践、走近顶尖实验室等系列内容。 机动组也将不定期举办线下学术交流会与组织人才服务、产业技术对接等活动,欢迎所有 AI 领域技术从业者加入。

登录查看更多
0

相关内容

标跟踪是指:给出目标在跟踪视频第一帧中的初始状态(如位置,尺寸),自动估计目标物体在后续帧中的状态。 目标跟踪分为单目标跟踪和多目标跟踪。 人眼可以比较轻松的在一段时间内跟住某个特定目标。但是对机器而言,这一任务并不简单,尤其是跟踪过程中会出现目标发生剧烈形变、被其他目标遮挡或出现相似物体干扰等等各种复杂的情况。过去几十年以来,目标跟踪的研究取得了长足的发展,尤其是各种机器学习算法被引入以来,目标跟踪算法呈现百花齐放的态势。2013年以来,深度学习方法开始在目标跟踪领域展露头脚,并逐渐在性能上超越传统方法,取得巨大的突破。

知识荟萃

精品入门和进阶教程、论文和代码整理等

更多

查看相关VIP内容、论文、资讯等
【CVPR2022】语言作为查询的参考视频目标分割框架
专知会员服务
9+阅读 · 2022年4月27日
如何提取关键词?ECIR2022最新《关键词提取》教程,
专知会员服务
29+阅读 · 2022年4月11日
【CVPR2022】GaTector:凝视对象预测的统一框架
专知会员服务
9+阅读 · 2022年3月24日
图像分割二十年,盘点影响力最大的10篇论文
专知会员服务
43+阅读 · 2022年2月7日
视觉目标跟踪十年研究进展
专知会员服务
86+阅读 · 2021年3月10日
专知会员服务
64+阅读 · 2021年2月21日
ECCV 2022 Oral | Unicorn:迈向目标跟踪的大统一
极市平台
1+阅读 · 2022年7月18日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
1+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
2+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
Arxiv
0+阅读 · 2022年11月27日
Arxiv
37+阅读 · 2021年9月28日
Arxiv
17+阅读 · 2021年3月29日
Arxiv
15+阅读 · 2019年4月4日
VIP会员
相关基金
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
1+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
2+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
Top
微信扫码咨询专知VIP会员