成为VIP会员查看完整内容
VIP会员码认证
首页
主题
发现
会员
服务
注册
·
登录
Spark
关注
51
Apache Spark 是专为大规模数据处理而设计的快速通用的计算引擎。Spark是UC Berkeley AMP lab (加州大学伯克利分校的AMP实验室)所开源的类Hadoop MapReduce的通用并行框架,Spark,拥有Hadoop MapReduce所具有的优点;但不同于MapReduce的是Job中间输出结果可以保存在内存中,从而不再需要读写HDFS,因此Spark能更好地适用于数据挖掘与机器学习等需要迭代的MapReduce的算法。
综合
百科
VIP
热门
动态
论文
精华
【2023新书】使用Spark扩展机器学习:使用MLlib、TensorFlow和PyTorch实现分布式机器学习530页pdf
专知会员服务
76+阅读 · 2023年3月24日
【2020新书】企业级机器学习: Spark XGBoost LightGBM, NLP, Keras深度学习, 367页pdf
专知会员服务
113+阅读 · 2020年2月24日
【干货】大数据入门指南:Hadoop、Hive、Spark、 Storm等
专知会员服务
95+阅读 · 2019年12月4日
【O'Reilly AI Conference 2019】LinkedIn上的机器学习挑战:Spark,TensorFlow等(Machine learning challenges at LinkedIn: Spark, TensorFlow, and beyond),LinkedIn,Zhe Zhang
专知会员服务
6+阅读 · 2019年11月5日
【O'Reilly AI Conference 2019】使用GPU和Docker容器进行Horovod和Spark深度学习(Deep learning with Horovod and Spark using GPUs and Docker containers),BlueData的联合创始人兼首席架构师Thomas Phelan
专知会员服务
20+阅读 · 2019年11月5日
参考链接
父主题
大数据处理
数据批处理框架
子主题
Databricks
Shark
Spark SQL
提示
微信扫码
咨询专知VIP会员与技术项目合作
(加微信请备注: "专知")
微信扫码咨询专知VIP会员
Top