成为VIP会员查看完整内容
VIP会员码认证
首页
主题
发现
会员
服务
注册
·
登录
Spark
关注
51
Apache Spark 是专为大规模数据处理而设计的快速通用的计算引擎。Spark是UC Berkeley AMP lab (加州大学伯克利分校的AMP实验室)所开源的类Hadoop MapReduce的通用并行框架,Spark,拥有Hadoop MapReduce所具有的优点;但不同于MapReduce的是Job中间输出结果可以保存在内存中,从而不再需要读写HDFS,因此Spark能更好地适用于数据挖掘与机器学习等需要迭代的MapReduce的算法。
综合
百科
VIP
热门
动态
论文
精华
DiffECG: A Versatile Probabilistic Diffusion Model for ECG Signals Synthesis
Arxiv
0+阅读 · 5月3日
MoPEFT: A Mixture-of-PEFTs for the Segment Anything Model
Arxiv
0+阅读 · 5月1日
Scheduling of Intermittent Query Processing
Arxiv
0+阅读 · 4月21日
©Plug-in Authorization for Human Content Copyright Protection in Text-to-Image Model
Arxiv
0+阅读 · 4月18日
Moral Sparks in Social Media Narratives
Arxiv
0+阅读 · 4月22日
Mining Area Skyline Objects from Map-based Big Data using Apache Spark Framework
Arxiv
0+阅读 · 4月4日
Retail Central Bank Digital Currency: Motivations, Opportunities, and Mistakes
Arxiv
0+阅读 · 4月4日
IndiBias: A Benchmark Dataset to Measure Social Biases in Language Models for Indian Context
Arxiv
0+阅读 · 3月29日
IndiBias: A Benchmark Dataset to Measure Social Biases in Language Models for Indian Context
Arxiv
0+阅读 · 4月3日
A Distributed Approach for Persistent Homology Computation on a Large Scale
Arxiv
0+阅读 · 4月12日
The HaLLMark Effect: Supporting Provenance and Transparent Use of Large Language Models in Writing with Interactive Visualization
Arxiv
0+阅读 · 3月24日
Navigating Fairness: Practitioners' Understanding, Challenges, and Strategies in AI/ML Development
Arxiv
0+阅读 · 3月21日
Deep Learning for Inertial Positioning: A Survey
Arxiv
0+阅读 · 3月21日
Moral Judgments in Narratives on Reddit: Investigating Moral Sparks via Social Commonsense and Linguistic Signals
Arxiv
0+阅读 · 3月20日
Digital Wellbeing Redefined: Toward User-Centric Approach for Positive Social Media Engagement
Arxiv
0+阅读 · 3月19日
参考链接
父主题
大数据处理
数据批处理框架
子主题
Databricks
Shark
Spark SQL
提示
微信扫码
咨询专知VIP会员与技术项目合作
(加微信请备注: "专知")
微信扫码咨询专知VIP会员
Top