项目名称: 面向海量数据的语境离群点检测技术研究

项目编号: No.61170180

项目类型: 面上项目

立项/批准年度: 2012

项目学科: 计算机科学学科

项目作者: 商琳

作者单位: 南京大学

项目金额: 55万元

中文摘要: 语境离群点和具体的语境环境相关,而针对语境离群点的检测比一般的离群点检测更重要。本项目将研究语境离群点检测模型,着重针对分布、多模态、实时等海量数据特点,设计基于MapReduce云计算框架的并行语境离群点检测算法、基于多模态数据融合的语境离群点检测方法以及基于不同粒度的时序数据语境离群点检测方法,并将其应用在电信业务数据处理和视频图像分析中。项目将结合粗糙集、粒计算、PSO、进化计算等方法,对分布式语境离群点的数据表示、多模态数据的融合、并行数据挖掘算法设计和云计算环境下的数据集成等关键问题进行研究。项目的研究范围涉及海量数据挖掘、机器学习、粒计算等多个领域,具有广泛的实际应用价值,其在视频图像分析中的应用更具有重要的社会价值。

中文关键词: 异常检测;决策粗糙集;粒子群优化;多模态;视频行为分析

英文摘要:

英文关键词: anomaly detection;decision-theoretic rough set;binary particle optimization;multimodel;video behavior analysis

成为VIP会员查看完整内容
0

相关内容

在数据挖掘中,异常检测(英语:anomaly detection)对不符合预期模式或数据集中其他项目的项目、事件或观测值的识别。通常异常项目会转变成银行欺诈、结构缺陷、医疗问题、文本错误等类型的问题。异常也被称为离群值、新奇、噪声、偏差和例外。 特别是在检测滥用与网络入侵时,有趣性对象往往不是罕见对象,但却是超出预料的突发活动。这种模式不遵循通常统计定义中把异常点看作是罕见对象,于是许多异常检测方法(特别是无监督的方法)将对此类数据失效,除非进行了合适的聚集。相反,聚类分析算法可能可以检测出这些模式形成的微聚类。 有三大类异常检测方法。[1] 在假设数据集中大多数实例都是正常的前提下,无监督异常检测方法能通过寻找与其他数据最不匹配的实例来检测出未标记测试数据的异常。监督式异常检测方法需要一个已经被标记“正常”与“异常”的数据集,并涉及到训练分类器(与许多其他的统计分类问题的关键区别是异常检测的内在不均衡性)。半监督式异常检测方法根据一个给定的正常训练数据集创建一个表示正常行为的模型,然后检测由学习模型生成的测试实例的可能性。
【AAAI2022】基于图神经网络的统一离群点异常检测方法
专知会员服务
27+阅读 · 2022年2月12日
检索式聊天机器人技术综述
专知会员服务
52+阅读 · 2021年11月28日
专知会员服务
35+阅读 · 2021年8月27日
专知会员服务
50+阅读 · 2021年8月13日
专知会员服务
18+阅读 · 2021年6月10日
专知会员服务
64+阅读 · 2021年5月3日
视觉目标跟踪十年研究进展
专知会员服务
86+阅读 · 2021年3月10日
专知会员服务
32+阅读 · 2020年12月25日
专知会员服务
108+阅读 · 2020年10月27日
专知会员服务
110+阅读 · 2020年3月20日
10个开源工业检测数据集汇总
夕小瑶的卖萌屋
0+阅读 · 2022年2月11日
综述 | 基于GNN的异常检测
图与推荐
1+阅读 · 2021年9月27日
【知识图谱】基于知识图谱的用户画像技术
产业智能官
102+阅读 · 2019年1月9日
面向云端融合的分布式计算技术研究进展与趋势
中国计算机学会
19+阅读 · 2018年11月27日
【大数据】海量数据分析能力形成和大数据关键技术
产业智能官
17+阅读 · 2018年10月29日
【机器视觉】表面缺陷检测:机器视觉检测技术
产业智能官
25+阅读 · 2018年5月30日
一文读懂智能对话系统
数据派THU
16+阅读 · 2018年1月27日
侦测欺诈交易(异常点检测)
GBASE数据工程部数据团队
19+阅读 · 2017年5月10日
国家自然科学基金
7+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
7+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
1+阅读 · 2009年12月31日
Arxiv
1+阅读 · 2022年4月25日
Arxiv
16+阅读 · 2020年5月20日
Deep Face Recognition: A Survey
Arxiv
18+阅读 · 2019年2月12日
小贴士
相关VIP内容
【AAAI2022】基于图神经网络的统一离群点异常检测方法
专知会员服务
27+阅读 · 2022年2月12日
检索式聊天机器人技术综述
专知会员服务
52+阅读 · 2021年11月28日
专知会员服务
35+阅读 · 2021年8月27日
专知会员服务
50+阅读 · 2021年8月13日
专知会员服务
18+阅读 · 2021年6月10日
专知会员服务
64+阅读 · 2021年5月3日
视觉目标跟踪十年研究进展
专知会员服务
86+阅读 · 2021年3月10日
专知会员服务
32+阅读 · 2020年12月25日
专知会员服务
108+阅读 · 2020年10月27日
专知会员服务
110+阅读 · 2020年3月20日
相关资讯
10个开源工业检测数据集汇总
夕小瑶的卖萌屋
0+阅读 · 2022年2月11日
综述 | 基于GNN的异常检测
图与推荐
1+阅读 · 2021年9月27日
【知识图谱】基于知识图谱的用户画像技术
产业智能官
102+阅读 · 2019年1月9日
面向云端融合的分布式计算技术研究进展与趋势
中国计算机学会
19+阅读 · 2018年11月27日
【大数据】海量数据分析能力形成和大数据关键技术
产业智能官
17+阅读 · 2018年10月29日
【机器视觉】表面缺陷检测:机器视觉检测技术
产业智能官
25+阅读 · 2018年5月30日
一文读懂智能对话系统
数据派THU
16+阅读 · 2018年1月27日
侦测欺诈交易(异常点检测)
GBASE数据工程部数据团队
19+阅读 · 2017年5月10日
相关基金
国家自然科学基金
7+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
7+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
1+阅读 · 2009年12月31日
微信扫码咨询专知VIP会员