大數(shù)據(jù)工程師需要會什么？Java最基礎HTML、CSS與JavaLinuxHadoopt體系Spark產(chǎn)業(yè)生態(tài)Storm服務生態(tài)實戰(zhàn)格斗：你的數(shù)據(jù)資源、處理數(shù)據(jù)、數(shù)據(jù)分析、數(shù)據(jù)治理就這些...pdi是

大數(shù)據(jù)工程師需要會什么？

Java最基礎

HTML、CSS與Java

LinuxHadoopt體系

Spark產(chǎn)業(yè)生態(tài)

Storm服務生態(tài)

實戰(zhàn)格斗：你的數(shù)據(jù)資源、處理數(shù)據(jù)、數(shù)據(jù)分析、數(shù)據(jù)治理

就這些...

pdi是什么軟件？

PDI(Kettle)是一款開源的、元信息安裝驅動的ETL(什么數(shù)據(jù)的吸納、裝換、運行程序)輔助工具，是開源ETL輔助工具里功能一樣都很強大的一個。

PDI的全稱是Pentaho Data Integeration，Kettle是PDI以前的公司的名字，Kettle不過是想是暖水瓶的意思是什么，表達了數(shù)據(jù)流的含意。

的確但凡有數(shù)據(jù)整合、轉換成、遷出的景象都這個可以使用PDI，他能用了能夠完成數(shù)字轉換任務的手工好編碼，會降低了旗下難度中等。

大數(shù)據(jù)架構有哪些？應該如何理解？

你說的估計是大數(shù)據(jù)分析平臺中的大型網(wǎng)游框架支撐，我舉例說明幫一下忙：

（一）Hadoop生態(tài)鏈

HDFS：分布式數(shù)據(jù)庫，可以解決云計算的存儲Yarn（MapReduce）：分布式處理基礎框架，可以解決云計算的可以計算Hive：Hadoop中的分析數(shù)據(jù)引擎動力，支持什么SQLHBase：實現(xiàn)HDFS的NoSQL數(shù)據(jù)庫ZooKeeper：分布式計算共同協(xié)調(diào)服務什么，也可以應用于實現(xiàn)HA（高可用架構）別的（二）Spark生態(tài)圈Spark Core：Spark的之一，應用于離線狀態(tài)計算SparkSQL：Spark的統(tǒng)計分析引擎，意見SQL語句SparkStreaming：Spark的基于機器學習換算引擎系統(tǒng)，但本質(zhì)的區(qū)別依然是不聯(lián)網(wǎng)計算出MLlib：機器學習一般框架（三）Flink生態(tài)圈Flink DataSet：Flink批處理文件（離線算出）APIFlinkDataStream：Flink流全面處理（后臺計算）APIFlinkTableampSQL：Flink的統(tǒng)計分析引擎動力，允許SQL語句MLlib：機器學習算法基礎框架