上?？煽诳蓸饭菊衅福抗ぷ黝悇e兩年數(shù)據(jù)庫ETL infomatic開發(fā)經(jīng)驗。在武漢工資能開到多少？ETL工程師各年限工資在武漢是什么行情？如果你的技能比較高，最高年薪30萬，你 我們最好去北京和杭州。

上?？煽诳蓸饭菊衅?？

工作類別

兩年數(shù)據(jù)庫ETL infomatic開發(fā)經(jīng)驗。在武漢工資能開到多少？ETL工程師各年限工資在武漢是什么行情？

如果你的技能比較高，最高年薪30萬，你 我們最好去北京和杭州。

大數(shù)據(jù)工程師需要學歷嗎？

是的，至少你需要一個學士學位。;本科或以上學歷。

從企業(yè)角度來看，大數(shù)據(jù)人才大致可以分為三個領(lǐng)域:產(chǎn)品和市場分析、安全和風險分析、商業(yè)智能。產(chǎn)品分析是指通過算法測試新產(chǎn)品的有效性，這是一個比較新的領(lǐng)域。在安全和風險分析方面，數(shù)據(jù)科學家知道需要收集哪些數(shù)據(jù)，如何快速分析，通過分析信息最終有效遏制網(wǎng)絡(luò)入侵或抓捕網(wǎng)絡(luò)犯罪分子。

一. ETL研究和開發(fā)

隨著數(shù)據(jù)的種類越來越多，企業(yè)對數(shù)據(jù)集成專業(yè)人才的需求越來越大。ETL開發(fā)人員與不同的數(shù)據(jù)源和組織打交道，從不同的來源提取數(shù)據(jù)，進行轉(zhuǎn)換并導入數(shù)據(jù)倉庫，以滿足企業(yè)的需求。

ETL的研發(fā)主要負責將關(guān)系數(shù)據(jù)、平面數(shù)據(jù)文件等分散異構(gòu)的數(shù)據(jù)源中的數(shù)據(jù)提取到一個臨時的中間層進行清洗、轉(zhuǎn)換和集成，最終加載到一個數(shù)據(jù)倉庫或數(shù)據(jù)集市中，成為聯(lián)機分析處理和數(shù)據(jù)挖掘的基礎(chǔ)。

目前ETL行業(yè)比較成熟，相關(guān)崗位的工作生命周期比較長，通常由內(nèi)部員工和外包承包商完成。大數(shù)據(jù)時代ETL人才炙手可熱的原因之一是，在企業(yè)大數(shù)據(jù)應(yīng)用初期，Hadoop只是窮人的ETL。

二、Hadoop開發(fā)

Hadoop的核心是HDFS和MapReduce。HDFS提供海量數(shù)據(jù)存儲，MapReduce提供數(shù)據(jù)計算。隨著數(shù)據(jù)集規(guī)模越來越大，傳統(tǒng)BI數(shù)據(jù)處理成本高，企業(yè)對Hadoop以及相關(guān)的Hive、HBA等廉價數(shù)據(jù)處理技術(shù)感興趣。對e、MapReduce、Pig等的需求。會繼續(xù)增長。如今，擁有Hadoop框架經(jīng)驗的技術(shù)人員是搶手的大數(shù)據(jù)人才。

第三，可視化(前端演示)工具的開發(fā)

海量數(shù)據(jù)的分析是一個很大的挑戰(zhàn)，Spotifre、Qlikview、Tableau等新型數(shù)據(jù)可視化工具可以直觀高效地展示數(shù)據(jù)。

可視化開發(fā)是可視化開發(fā)工具通過在可視化開發(fā)工具提供的圖形用戶界面上操作界面元素，自動生成應(yīng)用軟件?？缍鄠€資源和級別連接所有數(shù)據(jù)也很容易。經(jīng)過時間考驗，完全可擴展、功能全面的可視化組件庫為開發(fā)人員提供了一個完整且易于使用的組件集合，以構(gòu)建極其豐富的用戶界面。

以前數(shù)據(jù)可視化屬于商業(yè)智能開發(fā)人員的范疇，但是隨著Hadoop的興起，數(shù)據(jù)可視化已經(jīng)成為一個獨立的專業(yè)技能和崗位。

第四，信息架構(gòu)開發(fā)

大數(shù)據(jù)重新點燃了主數(shù)據(jù)管理的熱潮。充分利用企業(yè)數(shù)據(jù)，支持決策，需要非常專業(yè)的技能。信息架構(gòu)師必須知道如何定義和歸檔關(guān)鍵元素，以確保以最有效的管理和利用數(shù)據(jù)。信息架構(gòu)師的關(guān)鍵技能包括主數(shù)據(jù)管理、業(yè)務(wù)知識和數(shù)據(jù)建模。

動詞 （verb的縮寫）數(shù)據(jù)倉庫研究

數(shù)據(jù)倉庫是所有類型數(shù)據(jù)的戰(zhàn)略性集合，支持企業(yè)所有級別的決策過程。它是一個單獨的數(shù)據(jù)存儲，用于分析報告和決策支持。為企業(yè)提供指導業(yè)務(wù)流程改進和監(jiān)控時間、成本、質(zhì)量和控制所需的商業(yè)智能。

第六，OLAP發(fā)展

隨著數(shù)據(jù)庫技術(shù)的發(fā)展和應(yīng)用，數(shù)據(jù)庫存儲的數(shù)據(jù)量已經(jīng)從80年代的兆字節(jié)(M)和千兆字節(jié)(G)發(fā)展到現(xiàn)在的兆字節(jié)(T)和千兆字節(jié)(P)。同時，用戶 查詢需求變得越來越復雜，不僅涉及查詢或操作一個關(guān)系表中的一條或幾條記錄，還涉及分析和信息多個表中數(shù)千萬條記錄的數(shù)據(jù)。聯(lián)機分析處理(OLAP)系統(tǒng)負責解決這類海量數(shù)據(jù)處理問題。

OLAP在線分析的開發(fā)人員負責從關(guān)系或非關(guān)系數(shù)據(jù)源中提取數(shù)據(jù)以建立模型，然后創(chuàng)建數(shù)據(jù)訪問的用戶界面以提供高性能的預定義查詢功能。