成为VIP会员查看完整内容
VIP会员码认证
首页
主题
发现
会员
服务
注册
·
登录
Spark
关注
51
Apache Spark 是专为大规模数据处理而设计的快速通用的计算引擎。Spark是UC Berkeley AMP lab (加州大学伯克利分校的AMP实验室)所开源的类Hadoop MapReduce的通用并行框架,Spark,拥有Hadoop MapReduce所具有的优点;但不同于MapReduce的是Job中间输出结果可以保存在内存中,从而不再需要读写HDFS,因此Spark能更好地适用于数据挖掘与机器学习等需要迭代的MapReduce的算法。
综合
百科
VIP
热门
动态
论文
精华
Evolving Security in LLMs: A Study of Jailbreak Attacks and Defenses
Arxiv
0+阅读 · 4月2日
AI Regulation and Capitalist Growth: Balancing Innovation, Ethics, and Global Governance
Arxiv
0+阅读 · 4月1日
Role and Use of Race in AI/ML Models Related to Health
Arxiv
0+阅读 · 4月1日
SimDC: A High-Fidelity Device Simulation Platform for Device-Cloud Collaborative Computing
Arxiv
0+阅读 · 4月2日
Evaluating the evaluators: Towards human-aligned metrics for missing markers reconstruction
Arxiv
0+阅读 · 3月28日
SimDC: A High-Fidelity Device Simulation Platform for Device-Cloud Collaborative Computing
Arxiv
0+阅读 · 3月28日
Raising Awareness of Location Information Vulnerabilities in Social Media Photos using LLMs
Arxiv
0+阅读 · 3月26日
Measuring Human and AI Values Based on Generative Psychometrics with Large Language Models
Arxiv
0+阅读 · 3月6日
Sparking Curiosity in Digital System Design Lectures with Take Home Labs
Arxiv
0+阅读 · 3月20日
Simplified vine copula models: state of science and affairs
Arxiv
0+阅读 · 3月18日
Towards Understanding the Fragility of Multilingual LLMs against Fine-Tuning Attacks
Arxiv
0+阅读 · 2月27日
Don't Kill the Baby: The Case for AI in Arbitration
Arxiv
0+阅读 · 3月22日
Self-Supervised Monocular 4D Scene Reconstruction for Egocentric Videos
Arxiv
0+阅读 · 3月16日
The Empty Chair: Using LLMs to Raise Missing Perspectives in Policy Deliberations
Arxiv
0+阅读 · 3月18日
Zero-Execution Retrieval-Augmented Configuration Tuning of Spark Applications
Arxiv
0+阅读 · 3月5日
参考链接
父主题
大数据处理
数据批处理框架
子主题
Databricks
Shark
Spark SQL
提示
微信扫码
咨询专知VIP会员与技术项目合作
(加微信请备注: "专知")
微信扫码咨询专知VIP会员
Top