成為一個大數據研發(fā)工程師需要學習哪些知識？大數據工程師有很多方向，但他們離不開Hadoop、hive、HBase、Kafka、spark、flum、spoop、Flink等基本組件。我們需要熟悉他們！

成為一個大數據研發(fā)工程師需要學習哪些知識？

大數據工程師有很多方向，但他們離不開Hadoop、hive、HBase、Kafka、spark、flum、spoop、Flink等基本組件。我們需要熟悉他們

！如果你是大數據平臺研發(fā)工程師，你需要專注于Java系統(tǒng)和以上組件的開發(fā)

如果你是大數據運維工程師，你需要專注于Linux運維，包括shell腳本。當然，用Python效果更好，上面組件的部署和維護也很常見

如果你是一個數據訪問和開發(fā)工程師，那就是各種sq l.Java和各種數據訪問和處理組件，包括Kafka，kettle，flum，storm，等等

如果是一種大數據挖掘和分析，各種SQL、hive、spark和重要的機器學習算法都是通用的，另外，各種可視化技術都可以達到更好的效果，謝謝

美國很多政府機構和企業(yè)在早期都進行了大數據挖掘和分析，在數據應用方面取得了很好的成果，不僅在美國，歐洲一些工業(yè)大國，特別是德國和英國，而且在大數據產業(yè)的發(fā)展方面，都取得了很好的成績，并且這些國家非常重視數據分析和應用。因為他們可以看到數據驅動的結果。

國內大數據不一樣。它正處于嬰兒期和最熱的時期。主要原因是相當一部分企業(yè)對大數據的認識不夠！企業(yè)對大數據知之甚少，因為他們沒有意識到數據驅動能給企業(yè)帶來的巨大價值，或者只有少數大型企業(yè)意識到了這一點。所以解決的辦法就是提高數據驅動的意識。

雖然現在互聯網上大數據很熱，但很多公司還是普遍很難遇到合格的大數據人才。即使他們做到了，也面臨著“留人難”的問題。

我認為我工作中最大的挑戰(zhàn)是把每件事都做好。

因為大數據的核心價值是如何看穿數據。在這個時候，你需要你的分析能力。否則，不管你對工具有多熟練，你都沒有一定的分析思維和思考深度，這只是一種淺薄的干預，你無法產生真正的商業(yè)價值。

關于零基礎學習，你可以看到我之前寫的答案。它包含了你需要掌握的基本技能。你要做的就是把它們一個一個地打破。

（ https://www.wukong.com/question/6473318209754959437/)

大數據分析師職業(yè)前景？大數據分析師工作中最重要的素質是？如何從零基礎勝任該職位？

你好，我很高興回答你的問題。

很遺憾，我也是在汽車行業(yè)，主要是在汽車控制軟件，這是一個有點類似你的領域。說實話，汽車工業(yè)確實經歷了一個蓬勃發(fā)展的時期。在短時間內，實現技術深度質的飛躍的可能性不大?？梢哉f，夕陽產業(yè)。

在我看來，目前與汽車領域相關的人工智能可能包括智能交通、L4和L5級無人駕駛技術，這些技術都涉及智能算法、大數據、圖像分析與識別、路徑規(guī)劃等內容。如果你想從事這個領域，建議從Python入手，用Python掌握機器學習、神經網絡、圖像分析等知識，這樣我們就可以再聯系L4和L5了。

此外，您今年30歲，已經工作了近10年。你也可以考慮從事與技術管理相關的工作。人工智能的概念和思想非常重要。您可以嘗試了解人工智能的系統(tǒng)知識和構建智能平臺的全過程。

一句話，人工智能的發(fā)展方向不是更深就是更廣。

感謝您的閱讀。

年過30工程師一枚，覺得汽車行業(yè)成為夕陽行業(yè)了，想轉換做人工智能。有什么途徑么？

大數據工程師崗位分工包括大數據平臺研發(fā)、大數據應用開發(fā)、大數據分析、大數據運維。在當前的大數據時代，這些與大數據相關的崗位還存在很大的人才缺口。隨著大數據技術的逐步實施，對大數據工程師的需求將在未來很長一段時間內保持有不斷增長的趨勢。

隨著大數據的發(fā)展，人工智能領域也獲得了更好的發(fā)展機遇，特別是在機器學習（包括深度學習）、計算機視覺和自然語言處理等領域，都得到了大數據的大力支持。一些人工智能產品也被應用在生產環(huán)境中，如在物流、工業(yè)生產、醫(yī)療等領域它是一體的。

隨著市場對人工智能產品需求的不斷增加，許多科技公司相繼成立了人工智能研發(fā)團隊。因此，近年來，人工智能領域的專業(yè)人士獲得了更多的發(fā)展機會，他們的工資往往相對較高。但由于人工智能領域專業(yè)人才培養(yǎng)周期長，本科階段開設人工智能專業(yè)的高校數量很少，導致未來人工智能相關人才長期短缺。

雖然人工智能相關人才受到市場追捧，但大數據相關人才仍是熱點之一，大數據人才的發(fā)展空間相對較大。隨著工業(yè)互聯網的發(fā)展，與大數據相關的人才將在大多數傳統(tǒng)行業(yè)發(fā)揮巨大作用，因此大數據方向仍是一個不錯的選擇。

最后，大數據和人工智能的關系非常密切。許多人工智能研究人員都是從大數據中轉移過來的，因此大數據也是人工智能的重要途徑之一。