项目名称: 图像信息资源可视化协同语义标注及实现研究

项目编号: No.71273195

项目类型: 面上项目

立项/批准年度: 2013

项目学科: 管理科学

项目作者: 陆泉

作者单位: 武汉大学

项目金额: 54万元

中文摘要: 随着图像信息资源的迅速增长,图像标注中存在的语义鸿沟问题严重影响了图像信息资源研究与应用的发展,将人对图像的感性认知与自动图像标注有机联系起来协同标注是解决问题的有效途径。本项目综合应用情报学、管理学、计算机科学、认知科学等多学科的理论与方法,首先通过理论分析与用户认知实验,深度剖析图像语义鸿沟的产生过程,明确图像标注的研究需求;进而构建图像信息资源的可视化协同语义标注模型,以图像与文本协同挖掘进行图像标签语义优化,以语义可视化支持用户感性交互,通过用户对图像及图像之间关系的感性认知与计算机语义处理之间的协同,研究消减乃至消除语义鸿沟的图像标注;接着以典型数据集及web实际数据从系统与用户体验两方面对模型进行实证研究;最后探索将模型应用于图像信息资源研究与实践的途径与方式,为有效标注大规模图像信息资源的多层次语义提供理论与应用指导,并将丰富与拓展图像信息资源管理理论与方法。

中文关键词: 图像标注;语义鸿沟;可视化;协同;

英文摘要: With the rapid growth of image information resources, semantic gaps in existing image annotation theories including Automatic Image Annotation(AIA) have hindered the development in research and application of image information resource field seriously, and an effective way to narrow them is to link up the perceptual-cognition of user to image with AIA organically to annotate images collaboratively. This project integrates application of theory and methods from multi-disciplinary field, including Information Science, Management, Computer Science, and Cognition. First, by theoretical analysis and user cognitive experiments, the production process of image semantic gap is deeply analyzed, which states clearly the needs in image annotation research. Then a cooperative annotation model of images via semantic visualization is presented to solve the problem of semantic gap,in which collaborative mining methods based on images and their text information are studied to assist users by semantic optimization and two semantic visualization models of image information resources are built to enable user to annotate images only with his/her perceptual-cognition to them. This model aims to annotate images avoiding semantic gap through the collaboration of user and computer. Typical data sets and a web data set about image annot

英文关键词: image annotation;semantic gap;visualization;cooperation;

成为VIP会员查看完整内容
0

相关内容

专知会员服务
24+阅读 · 2021年6月17日
专知会员服务
20+阅读 · 2021年5月1日
专知会员服务
39+阅读 · 2021年4月5日
专知会员服务
69+阅读 · 2021年3月29日
跨媒体分析与推理技术研究综述
专知会员服务
69+阅读 · 2021年3月11日
专知会员服务
36+阅读 · 2020年12月14日
【ACM MM2020】对偶注意力GAN语义图像合成
专知会员服务
33+阅读 · 2020年9月2日
【ACMMM2020】零样本语义分割的上下文感知特征生成
专知会员服务
15+阅读 · 2020年8月21日
交叉描述:图像和文本的语义相似度
TensorFlow
2+阅读 · 2021年6月22日
图像描述生成研究进展
专知
1+阅读 · 2021年3月29日
CVPR 2020 | 深度视觉推理2.0:组合式目标指代理解
AI科技评论
15+阅读 · 2020年3月20日
【CVPR2019】弱监督图像分类建模
深度学习大讲堂
37+阅读 · 2019年7月25日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
1+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2011年12月31日
国家自然科学基金
4+阅读 · 2009年12月31日
Arxiv
48+阅读 · 2021年9月11日
A Comprehensive Survey on Graph Neural Networks
Arxiv
13+阅读 · 2019年3月10日
Arxiv
25+阅读 · 2018年8月19日
Arxiv
13+阅读 · 2018年4月6日
小贴士
相关VIP内容
专知会员服务
24+阅读 · 2021年6月17日
专知会员服务
20+阅读 · 2021年5月1日
专知会员服务
39+阅读 · 2021年4月5日
专知会员服务
69+阅读 · 2021年3月29日
跨媒体分析与推理技术研究综述
专知会员服务
69+阅读 · 2021年3月11日
专知会员服务
36+阅读 · 2020年12月14日
【ACM MM2020】对偶注意力GAN语义图像合成
专知会员服务
33+阅读 · 2020年9月2日
【ACMMM2020】零样本语义分割的上下文感知特征生成
专知会员服务
15+阅读 · 2020年8月21日
相关资讯
交叉描述:图像和文本的语义相似度
TensorFlow
2+阅读 · 2021年6月22日
图像描述生成研究进展
专知
1+阅读 · 2021年3月29日
CVPR 2020 | 深度视觉推理2.0:组合式目标指代理解
AI科技评论
15+阅读 · 2020年3月20日
【CVPR2019】弱监督图像分类建模
深度学习大讲堂
37+阅读 · 2019年7月25日
相关基金
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
1+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2011年12月31日
国家自然科学基金
4+阅读 · 2009年12月31日
微信扫码咨询专知VIP会员