hadoop JavaApi訪問(wèn)hdfs在實(shí)際工作中的作用是什么？實(shí)際效果是可以直接用java代碼處理批處理數(shù)據(jù)，調(diào)用API編寫(xiě)代碼靈活，處理數(shù)據(jù)方便，調(diào)試方便。另一種方法也可以使用stream方法。

hadoop JavaApi訪問(wèn)hdfs在實(shí)際工作中的作用是什么？

實(shí)際效果是可以直接用java代碼處理批處理數(shù)據(jù)，調(diào)用API編寫(xiě)代碼靈活，處理數(shù)據(jù)方便，調(diào)試方便。另一種方法也可以使用stream方法。相對(duì)于javaapi，這種方法的優(yōu)點(diǎn)是不需要Java代碼，只要它是一個(gè)可執(zhí)行程序。我一般用stream方法，因?yàn)槲抑饕獙?xiě)C和Python代碼

我忍不住要說(shuō)。不要總是抱著員工的心態(tài)問(wèn)問(wèn)題，不要問(wèn)要學(xué)什么，而是問(wèn)自己想做什么。從大約12年前開(kāi)始，大數(shù)據(jù)在中國(guó)呈現(xiàn)爆炸式增長(zhǎng)。就像馬車(chē)時(shí)代汽車(chē)的出現(xiàn)。如果你問(wèn)我車(chē)來(lái)的時(shí)候需要學(xué)什么，答案很簡(jiǎn)單——“駕照”。所以正確的邏輯應(yīng)該是，什么是大數(shù)據(jù)，大數(shù)據(jù)帶來(lái)了什么，它能給我?guī)?lái)什么變化，我應(yīng)該學(xué)習(xí)什么才能適應(yīng)這種變化。所以學(xué)習(xí)是最后一個(gè)問(wèn)題。只有把這些問(wèn)題考慮清楚了，你的學(xué)習(xí)才能有方向、有意義、有動(dòng)力，你才能知道自己想學(xué)什么。

如果您想從大數(shù)據(jù)入手，可以關(guān)注我對(duì)類(lèi)似問(wèn)題的回答，以供參考，“做數(shù)據(jù)分析需要學(xué)什么？”除了商業(yè)知識(shí)，我首先建議你學(xué)好統(tǒng)計(jì)學(xué)。這是大數(shù)據(jù)的“源頭”。簡(jiǎn)而言之，不要在工具上花費(fèi)太多時(shí)間。這些都是教程，用于提高效率。你需要花更多的時(shí)間來(lái)思考如何結(jié)合你想做的事情，將商業(yè)問(wèn)題轉(zhuǎn)化為統(tǒng)計(jì)或數(shù)學(xué)問(wèn)題，這也是你未來(lái)競(jìng)爭(zhēng)力所在。

任何新知識(shí)的學(xué)習(xí)，像這個(gè)圖像，螺旋上升和下降。此圖來(lái)自pyecharts，一個(gè)python可視化庫(kù)。