叽哩叽哩游戏网ACG(G站)

小象学院大数据-Spark入门到精通-陈超百度云阿里云下载

学习资料 AL6

Apache Spark 是专为大规模数据处理而设计的快速通用的计算引擎。Spark是UC Berkeley AMP lab (加州大学伯克利分校的AMP实验室)所开源的类Hadoop MapReduce的通用并行框架,Spark,拥有Hadoop MapReduce所具有的优点;但不同于MapReduce的是——Job中间输出结果可以保存在内存中,从而不再需要读写HDFS,因此Spark能更好地适用于数据挖掘与机器学习等需要迭代的MapReduce的算法。
Spark是一种与Hadoop相似的开源集群计算环境,但是两者之间还存在一些不同之处,这些有用的不同之处使 Spark 在某些工作负载方面表现得更加优越,换句话说,Spark启用了内存分布数据集,除了能够提供交互式查询外,它还可以优化迭代工作负载。
Spark是在Scala语言中实现的,它将Scala用作其应用程序框架。与Hadoop不同,Spark 和?Scala?能够紧密集成,其中的Scala可以像操作本地集合对象一样轻松地操作分布式数据集。
尽管创建 Spark 是为了支持分布式数据集上的迭代作业,但是实际上它是对 Hadoop 的补充,可以在Hadoop文件系统中并行运行。通过名为Mesos的第三方集群框架可以支持此行为。Spark由加州大学伯克利分校AMP实验室 (Algorithms, Machines, and People Lab) 开发,可用来构建大型的、低延迟的数据分析应用程序。

ebbd1381bee78a2db516c7c819b7c227.jpg

资源来自于网络,版权属于作者,仅供交流学习,严禁用于商业用途,下载后请于24小时内删除!如喜欢,请支持正版。
网盘/磁力链接已被隐藏,请根据提示用微信扫码获取

叽哩酱此处内容已经被作者隐藏,请输入验证码查看内容
验证码:
请关注本站微信公众号,回复“网站验证码”,获取验证码。在微信里搜索“叽哩酱”或者“jlj22336”或者微信扫描右侧二维码都可以关注本站微信公众号。
版权所有 © 叽哩叽哩 本站不提供任何视听上传与资源下载服务,所有内容均来自网络资源分享站点所提供的公开引用资源 |内容违规侵权投诉邮箱: jiligamefun@gmail.com 资源来自网络,如有侵权24小时内删除 |2021 |
特别感谢Carseason为本站设计CSS样式