計算機hadoop學(xué)習(xí)過程個人總結(jié)
我在本學(xué)期的小組學(xué)習(xí)中主要擔(dān)任的工作是基礎(chǔ)了解hadoop架構(gòu)的工作原理和優(yōu)勢。并為大家進(jìn)行了hadoop的入門級講解。下面我就對我的學(xué)習(xí)過程做一個
總結(jié)。
Hadoop入門
Hadoop是一個分布式系統(tǒng)基礎(chǔ)架構(gòu)。用戶可以
……(新文秘網(wǎng)http://120pk.cn省略212字,正式會員可完整閱讀)……
件,使用傳統(tǒng)的系統(tǒng)可能會花費非常長的時間,但是使用hadoop就會解決這一問題。Hadoop具有高可靠性、高擴展性、高效性、高容錯性。Hadoop是由MapReduce實現(xiàn)的。MapReduce模型就是就是為一個復(fù)雜的問題提供一個簡單的接口,將眾多具有相同特征的有用數(shù)據(jù)統(tǒng)一處理,提高程序的并行效率。而MapReduce所完成的就是將隱藏并行化、容錯、負(fù)載均衡的那些雜亂細(xì)節(jié)放在一個庫中。MapReduce庫為用戶提供了兩個函數(shù):Map函數(shù)、Reduce函數(shù)。Map函數(shù)負(fù)責(zé)接受用戶的一個輸入對,然后找到他們中間的具有相同特征的數(shù)據(jù)。Reduce函數(shù)是由用戶自定義的,用來統(tǒng)一處理這些數(shù)據(jù)。
個人感受
說實話,在老師交給我們這個任務(wù)之前,我們并不能真正說清楚什么是云計算,不理解云計算的優(yōu)勢。所以剛開始的學(xué)習(xí)是云里霧里的,分不清方向,但是隨著對MapReduce的學(xué)習(xí),我們漸漸明白了什么是云計算。明白了云計算在大數(shù)據(jù)計算上的優(yōu)勢。然后漸漸學(xué)習(xí)了hadoop架構(gòu),逐步讓自己對云計算有了一個深入一點的了解。通過這次的 ……(未完,全文共935字,當(dāng)前僅顯示594字,請閱讀下面提示信息。
收藏《計算機hadoop學(xué)習(xí)過程個人總結(jié)》)