亚洲在线久爱草,狠狠天天香蕉网,天天搞日日干久草,伊人亚洲日本欧美

為了賬號安全，請及時綁定郵箱和手機立即綁定

講師回答 / 叁金
?在向HDFS的寫操作中，不得不提一下“數據流管道”。數據流管道在Google實現他們的分布式文件系統(GFS)時就已引入，其目的是：在寫一份數據的多個副本時，可以充分利用集群中每一臺機器的帶寬，避免網絡瓶頸和高延時的連接，最小化推送所有數據的延時。? 其實這里我可能表述的不太準確，Client在保存數據的過程當中，將數據發送到第一個數據節點DateNode 1，然后在第一個DateNode節點在本地保存數據的同時，將數據推送到第二個數據節點DateNode 2，同理在第二個節點本地保存數據的同時，也會由...

已采納回答 / 叁金
<...code...>這里沒問題的。out賦值的是內容，并不是data的長度。 你可以看一下python的文件IO相關的操作，read方法傳入的是長度，這段代碼的含義是 打開某個文件，并從其中讀出長度為len(data)的數據保存到out里面。
關于 hadoop 在 Mac OS X 上的安裝，大家可以參考這篇比較詳細的教程：https://zhuanlan.zhihu.com/p/33117305
mark mark

講師回答 / 叁金
首先，建議使用anaconda的python科學計算集成環境，利用conda去管理python相關的模塊，如果你用的是anaconda你可以嘗試以下命令：<...code...>? ?
1. 大數據是一門以Hadoop為代表的大數據平臺框架上進行各種數據分析的技術。
2. 具體說，大數據平臺基礎框架包括了Hadoop和Spark為代表的基礎大數據框架。
3. 具體說，各種數據分析技術包括實事數據處理技術、離線處理技術；數據分析、數據挖掘和用機器算法進行預測分析等技術。
謝謝老師！
考自學學到級大數據開發工程師，這想法不錯
希望老師能出一個spark的詳細教程
能出一個詳細的教程嗎？
系統環境為 Ubuntu14.04 （一直用懶得升級）大家可以用用 16、17 什么的。
Python 版本為2.7.13 by Anaconda2 自帶iPython
Hadoop 版本為2.7.2
開發工具為 PyCharm
Anaconda是一個用于科學計算的Python發行版，支持Linux, Mac, Windows系統(建議大家使用linux學習。。。)，提供了包管理與環境管理的功能，可以很方便地解決多版本Python并存、切換以及各種第三方包安裝問題。 墻裂推薦?。?！非常好用。
各位老鐵頂我上去，讓大家都看到。。。
老師用的ubuntu的哪個版本的操作系統
講的簡單易懂，把深奧的理論用幾乎白話文講出來，給老師大大的攢

講師回答 / 叁金
首先，建議使用anaconda的python科學計算集成環境，利用conda去管理python相關的模塊，其也會管理用到的c++模塊，如果你用的是anaconda你可以嘗試以下命令：<...code...>如果你不是anaconda環境，ubuntu系統可以嘗試：<...code...>其他的可以直接搜索github libhdfs3 進行編譯安裝。python訪問hdfs除了hdfs3還有其他模塊可以使用比如snakebite等，大家也可以看看其使用方式
入門基礎講的非常好，期待老師的后續課程
最后一句話 不應該是Mapreduce 1.0 跟 Mapreduce 2.0 的區別嗎
首頁上一頁891011121314下一頁尾頁
課程須知
有Linux命令使用基礎，有Python編程基礎
老師告訴你能學到什么？
大數據到底是個啥，大數據方向到底怎么樣 Hadoop基礎原理與兩個核心 Hadoop的基礎應用 Hadoop生態圈簡介 Hadoop生態圈常用開源項目介紹

微信掃碼，參與3人拼團

微信客服

購課補貼
聯系客服咨詢優惠詳情

 幫助反饋 APP下載

慕課網APP
您的移動學習伙伴

 公眾號

掃描二維碼
關注慕課網微信公眾號
友情提示：

您好，此課程屬于遷移課程，您已購買該課程，無需重復購買，感謝您對慕課網的支持！

本次提問將花費2個積分

你的積分不足，無法發表

為什么扣積分？

本次提問將花費2個積分

繼續發表請點擊 "確定"

為什么扣積分？

舉報

0/150
提交
取消