亚洲在线久爱草,狠狠天天香蕉网,天天搞日日干久草,伊人亚洲日本欧美

為了賬號安全,請及時綁定郵箱和手機立即綁定

Hadoop進階

mooc小牧 JAVA開發工程師
難度中級
時長 3小時 3分
學習人數
綜合評分9.77
31人評價 查看評價
9.9 內容實用
9.5 簡潔易懂
9.9 邏輯清晰
很不錯。很詳細。
添加一個log4j.properties就可以打印日志了
其實可以直接本地調試的,對于新手來說友好一點,配置連接hadoop服務器的環境能折騰死新手
https://www.polarxiong.com/archives/Hadoop-Intellij%E7%BB%93%E5%90%88Maven%E6%9C%AC%E5%9C%B0%E8%BF%90%E8%A1%8C%E5%92%8C%E8%B0%83%E8%AF%95MapReduce%E7%A8%8B%E5%BA%8F-%E6%97%A0%E9%9C%80%E6%90%AD%E8%BD%BDHadoop%E5%92%8CHDFS%E7%8E%AF%E5%A2%83.html
感謝老師的精彩授課!
Hadoop 1.2.1版本

private static String cache = "/ItemCF/step1_output1/part-r-00000.txt";

DistributedCache.addCacheFile(new URI("/ItemCF/step1_output1/part-r-00000#itemUserScore1"),conf);
厲害厲害,簡單明了,就是基礎篇部分講的少了點
Mapper2步驟的時候有一些小問題,進行相似度分母計算時,按照下劃線分割后進行分值相乘的數據應該是位置為1的數據。
聲音好聽 可以加老師微信?
reduce的合并是無序的吧,所以這個合并的結果也是錯的吧,可能后邊會再排序?
【矩陣轉置操作】設A為m×n階矩陣(即m行n列),第i 行j 列的元素是a(i,j),即:A=a(i,j),定義A的轉置為這樣一個n×m階矩陣B,滿足B=a(j,i),即 b (i,j)=a(j,i)(B的第i行第j列元素是A的第j行第i列元素),記A'=B。(有些書記為AT=B,這里T為A的上標)
代碼: https://github.com/SkillyZ/java-spring/tree/master/skilly-hadoop/src/main/java/com/skilly/bigdata/matrix
https://github.com/SkillyZ/java-spring/tree/master/skilly-hadoop 代碼
mdzz 說用二維數組實現的那個,你懂這個教程的意義了嗎。
內容不能少于5個字符
所謂的wordcount從詞面意思直接理解就是對一個單詞出現的次數進行統計,首先使用split將單詞給分好行,然后用map方法做一個統計,接下來shuffle就是把相同的單詞放在一起,最后的reduce就是同一個單詞出現的總數
課程須知
1、在學習本課程之前,需要學習hadoop課程基礎篇,即掌握MapReduce作業的基本步驟。 2、需要掌握線性代數、向量等的基本數學知識
老師告訴你能學到什么?
1、hadoop新舊版本的基本架構 2、mapreduce作業的內部原理 3、mapreduce作業重要參數的調優 4、利用hadoop緩存實現矩陣相乘 5、簡單的推薦算法

微信掃碼,參與3人拼團

微信客服

購課補貼
聯系客服咨詢優惠詳情

幫助反饋 APP下載

慕課網APP
您的移動學習伙伴

公眾號

掃描二維碼
關注慕課網微信公眾號

友情提示:

您好,此課程屬于遷移課程,您已購買該課程,無需重復購買,感謝您對慕課網的支持!

本次提問將花費2個積分

你的積分不足,無法發表

為什么扣積分?

本次提問將花費2個積分

繼續發表請點擊 "確定"

為什么扣積分?

舉報

0/150
提交
取消