项目名称: 面向大数据深度分析的马尔科夫逻辑理论与算法研究

项目编号: No.61303179

项目类型: 青年科学基金项目

立项/批准年度: 2014

项目学科: 自动化技术、计算机技术

项目作者: 孙正雅

作者单位: 中国科学院自动化研究所

项目金额: 23万元

中文摘要: 马尔可夫逻辑作为一阶逻辑和概率图模型的充分结合,被视为数据深度分析的最重要技术手段之一,然而在该框架下所开发的大多数算法不具备良好的可扩展性。为了提升从大数据中获取知识和洞见的能力,本项目以马尔可夫逻辑为基础理论框架,拟从特征表示、参数优化以及增量学习系统搭建三个方面系统研究大数据深度分析技术。首先针对大数据类型多样化以及关系复杂化,拟借助预测聚类树和频繁序列模式挖掘思想,研究面向关系n元组的分层概念学习,在此基础上提出新颖的结构学习算法实现异质关系的路径搜索以及逻辑规则的自动构建。其次针对大数据规模庞大,拟借助深层和积网络理论,发展新的在线并行优化算法,实现不确定规则参数化学习。最后为了适应新增数据的不断涌现,在特征表示和参数优化中充分结合增量学习思想,搭建应用于大数据深度分析的增量学习系统。实现从大数据中迅速而准确地获取深层次语义信息,有助于促成科学预见性的决策和判断。

中文关键词: 大数据;统计关系学习;马尔可夫逻辑;和积网络;增量学习

英文摘要: Markov logic has been regarded as one of the most important tools for deep data analysis due to its full expressiveness of probabilistic graphical models and first-order logic. However, as we enter the "big data" era, the ever rising scale of the data makes progress in this paradigm increasingly difficult. To enhance the ability to acquire knowledge and insights from big data, this project conducts a systematic study on the framework of Markov logic from three aspects, including feature representation, parameter optimization and incremental learning system building. For the varied types and complex relations of big data, we first develop an effective hierarchical conceptualization algorithm for relational n-tuples by introducing the idea of predictive clustering trees and frequent sequential pattern mining. On this basis, a novel structure learning algorithm is designed to find paths between heterogeneous relations and automatically construct formulas. Furthermore, we introduce deep sum-product networks to address parameter learning for the large scale data, in which new online parallel optimization strategies are devised. Faced with the emergence of massive new data, we finally investigate feature representation and parameter optimization from incremental learning view, and build an integrated system for in-dep

英文关键词: Big Data;Statistical Relational Learning;Markov Logic;Sum-Product Networks;Incremental Learning

成为VIP会员查看完整内容
2

相关内容

从各种各样类型的数据中,快速获得有价值信息的能力,就是大数据技术。明白这一点至关重要,也正是这一点促使该技术具备走向众多企业的潜力。大数据的4个“V”,或者说特点有四个层面:第一,数据体量巨大。从TB级别,跃升到PB级别;第二,数据类型繁多。前文提到的网络日志、视频、图片、地理位置信息等等。第三,价值密度低。以视频为例,连续不间断监控过程中,可能有用的数据仅仅有一两秒。第四,处理速度快。
空间数据智能:概念、技术与挑战
专知会员服务
81+阅读 · 2022年2月3日
面向大数据处理框架的JVM优化技术综述
专知会员服务
16+阅读 · 2021年11月27日
专知会员服务
111+阅读 · 2021年9月22日
算法分析导论, 593页pdf
专知会员服务
144+阅读 · 2021年8月30日
专知会员服务
122+阅读 · 2021年6月12日
专知会员服务
107+阅读 · 2021年1月8日
【清华大学龙明盛副教授】迁移学习理论与算法,59页ppt
专知会员服务
80+阅读 · 2020年11月27日
专知会员服务
105+阅读 · 2020年10月27日
专知会员服务
189+阅读 · 2020年10月14日
面向大数据领域的事理认知图谱构建与推断分析
专知会员服务
101+阅读 · 2020年8月11日
空间数据智能:概念、技术与挑战
专知
7+阅读 · 2022年2月4日
面向大数据处理框架的JVM优化技术综述
专知
0+阅读 · 2021年11月27日
综述 | 异质信息网络分析与应用综述
专知
27+阅读 · 2020年8月8日
支持个性化学习的行为大数据可视化研究
主流互联网平台广告业务对比分析
百度公共政策研究院
29+阅读 · 2019年5月20日
【大数据】海量数据分析能力形成和大数据关键技术
产业智能官
17+阅读 · 2018年10月29日
【大数据】数据挖掘与数据分析知识流程梳理
产业智能官
12+阅读 · 2017年9月22日
国家自然科学基金
22+阅读 · 2015年12月31日
国家自然科学基金
11+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
3+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
4+阅读 · 2013年12月31日
国家自然科学基金
1+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
国家自然科学基金
1+阅读 · 2008年12月31日
Arxiv
0+阅读 · 2022年4月19日
Arxiv
1+阅读 · 2022年4月15日
Hierarchical Graph Capsule Network
Arxiv
20+阅读 · 2020年12月16日
小贴士
相关VIP内容
空间数据智能:概念、技术与挑战
专知会员服务
81+阅读 · 2022年2月3日
面向大数据处理框架的JVM优化技术综述
专知会员服务
16+阅读 · 2021年11月27日
专知会员服务
111+阅读 · 2021年9月22日
算法分析导论, 593页pdf
专知会员服务
144+阅读 · 2021年8月30日
专知会员服务
122+阅读 · 2021年6月12日
专知会员服务
107+阅读 · 2021年1月8日
【清华大学龙明盛副教授】迁移学习理论与算法,59页ppt
专知会员服务
80+阅读 · 2020年11月27日
专知会员服务
105+阅读 · 2020年10月27日
专知会员服务
189+阅读 · 2020年10月14日
面向大数据领域的事理认知图谱构建与推断分析
专知会员服务
101+阅读 · 2020年8月11日
相关资讯
空间数据智能:概念、技术与挑战
专知
7+阅读 · 2022年2月4日
面向大数据处理框架的JVM优化技术综述
专知
0+阅读 · 2021年11月27日
综述 | 异质信息网络分析与应用综述
专知
27+阅读 · 2020年8月8日
支持个性化学习的行为大数据可视化研究
主流互联网平台广告业务对比分析
百度公共政策研究院
29+阅读 · 2019年5月20日
【大数据】海量数据分析能力形成和大数据关键技术
产业智能官
17+阅读 · 2018年10月29日
【大数据】数据挖掘与数据分析知识流程梳理
产业智能官
12+阅读 · 2017年9月22日
相关基金
国家自然科学基金
22+阅读 · 2015年12月31日
国家自然科学基金
11+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
3+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
4+阅读 · 2013年12月31日
国家自然科学基金
1+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
国家自然科学基金
1+阅读 · 2008年12月31日
微信扫码咨询专知VIP会员