亚洲在线久爱草,狠狠天天香蕉网,天天搞日日干久草,伊人亚洲日本欧美

為了賬號安全,請及時綁定郵箱和手機立即綁定

誰在聽不懂大數據算我輸——大數據核心技術spark

標簽:
Spark

上次,小编给大家介绍什么是大数据以及大数据产生的五大原因!

那,大数据来了,作为程序员的我们如何迎接大数据的到来?

那便只有学好大数据,其中的重中之重我觉得就是spark ,那什么是spark呢?或者说Spark是干嘛的

我总结出四点:

1、Spark分布式的计算框架

2、类似Hadoop生态圈中的MapReduce(分布式计算框架)

3、计算思想和MR(MapReduce简称)非常的相似,都是分而治之的思想

4、Spark比MR火

为什么Spark比MR火呢?就是因为spark的优势所在

1、Speed 速度很快

从时间上来看,Spark计算效率比MR要高100倍以上

2、使用方便

1)支持使用多门语言来编写Spark Application

2)Spark提供了80多种方法来供我们使用

3、强通用性

Spark生态圈中的组件都是基于SparkCore封装起来

庞大的生态圈并且还能无缝集成

4、强适用性

1)Spark Application可以运行在各种各样的资源调度框架上

2)Spark可以接受上百种数据源

spark的现状

官网介绍,到2016年底,有1000多家组织机构正式使用Spark做数据处理。到现在Spark的发展也是如火如荼,到现在好多组织也是从MR往spark转。



作者:A尚学堂Nancy老师
链接:https://www.jianshu.com/p/2afb774c96fb


點擊查看更多內容
TA 點贊

若覺得本文不錯,就分享一下吧!

評論

作者其他優質文章

正在加載中
  • 推薦
  • 評論
  • 收藏
  • 共同學習,寫下你的評論
感謝您的支持,我會繼續努力的~
掃碼打賞,你說多少就多少
贊賞金額會直接到老師賬戶
支付方式
打開微信掃一掃,即可進行掃碼打賞哦
今天注冊有機會得

100積分直接送

付費專欄免費學

大額優惠券免費領

立即參與 放棄機會
微信客服

購課補貼
聯系客服咨詢優惠詳情

幫助反饋 APP下載

慕課網APP
您的移動學習伙伴

公眾號

掃描二維碼
關注慕課網微信公眾號

舉報

0/150
提交
取消