随着IT存储、处理、计算和传感技术的发展,大数据已经成为一种新的生活规范。直到最近,计算机才能够捕获和分析各种领域的各种大规模数据——人、行为、信息、设备、传感器、生物信号、金融、交通工具、占星学、神经学等。几乎所有行业都准备好迎接大数据的挑战,并希望挖掘有价值的信息,以获得解决挑战的洞见。

本课程将提供基本知识,使学生能够处理这些挑战。这门学科本质上涉及许多领域。由于它的重要性和广泛的影响,新的软件和硬件工具和算法正在迅速出现。数据科学家需要跟上这种不断变化的趋势,以便能够为现实世界的挑战创造最先进的解决方案。

这门大数据分析课程首先要介绍应用概述、市场趋势和需要学习的东西。接下来,我将介绍基础平台,如Hadoop, Spark,以及其他工具,如Linked Big Data。之后,本课程将介绍几种数据存储方法以及如何上传、分发和处理它们。包括HDFS、HBase、KV存储、文档数据库、图形数据库。本课程将继续介绍在不同平台上处理分析算法的不同方法。接下来,我将介绍大数据分析中的可视化问题和移动问题。学生将掌握大数据分析的基本知识,以应对各种现实世界的挑战。

之后,课程将聚焦于讨论大型机器学习方法,这是人工智能和认知网络的基础。本课程将讨论基于不同硬件平台优化分析的几种方法,如Intel & Power芯片、GPU、FPGA等。讲座的最后将介绍大数据的未来挑战,特别是正在进行的大数据关联问题,包括图形、图形模型、时空分析、认知分析等。

https://www.ee.columbia.edu/~cylin/course/bigdata/

成为VIP会员查看完整内容
59

相关内容

在社会经济生活,银行、证券或保险业者从市场主体募集资金,并投资给其它市场主体的经济活动。
面向健康的大数据与人工智能,103页ppt
专知会员服务
108+阅读 · 2020年12月29日
专知会员服务
44+阅读 · 2020年12月26日
Google最新《机器学习对偶性》报告,48页ppt
专知会员服务
35+阅读 · 2020年11月29日
【普林斯顿】机器学习数学视角,63页ppt
专知会员服务
87+阅读 · 2020年11月6日
【ECML/PKDD20教程】图表示学习与应用,200页ppt
专知会员服务
90+阅读 · 2020年10月18日
【ECAI2020】可扩展深度学习: 理论与算法,120页ppt
专知会员服务
27+阅读 · 2020年9月25日
最新《统计机器学习》课程,26页ppt
专知会员服务
80+阅读 · 2020年8月30日
商业数据分析,39页ppt
专知会员服务
160+阅读 · 2020年6月2日
智能交通大数据最新论文综述-附PDF下载
专知会员服务
104+阅读 · 2019年12月25日
【供应链】用好大数据,建设数字化供应链
产业智能官
15+阅读 · 2020年7月21日
【类脑智能】类脑智能技术初探
产业智能官
15+阅读 · 2020年2月16日
清华大学:人工智能之知识图谱(附PPT)
人工智能学家
69+阅读 · 2019年6月9日
智能交通大数据最新论文综述-附PDF下载
专知
22+阅读 · 2019年1月21日
多媒体大数据分析研究进展综述导读
专知
8+阅读 · 2018年3月19日
干货 | KDD2017现场:中国论坛直击(讲座完整PPT)
大数据文摘
3+阅读 · 2017年8月16日
Arxiv
0+阅读 · 2021年2月25日
Arxiv
4+阅读 · 2018年5月4日
Arxiv
6+阅读 · 2017年12月7日
Arxiv
4+阅读 · 2016年9月20日
VIP会员
相关VIP内容
面向健康的大数据与人工智能,103页ppt
专知会员服务
108+阅读 · 2020年12月29日
专知会员服务
44+阅读 · 2020年12月26日
Google最新《机器学习对偶性》报告,48页ppt
专知会员服务
35+阅读 · 2020年11月29日
【普林斯顿】机器学习数学视角,63页ppt
专知会员服务
87+阅读 · 2020年11月6日
【ECML/PKDD20教程】图表示学习与应用,200页ppt
专知会员服务
90+阅读 · 2020年10月18日
【ECAI2020】可扩展深度学习: 理论与算法,120页ppt
专知会员服务
27+阅读 · 2020年9月25日
最新《统计机器学习》课程,26页ppt
专知会员服务
80+阅读 · 2020年8月30日
商业数据分析,39页ppt
专知会员服务
160+阅读 · 2020年6月2日
智能交通大数据最新论文综述-附PDF下载
专知会员服务
104+阅读 · 2019年12月25日
微信扫码咨询专知VIP会员