一個(gè)數(shù)據(jù)庫(kù)是否可以創(chuàng)建多個(gè)kettle資源庫(kù)？一個(gè)數(shù)據(jù)庫(kù)可以創(chuàng)建多個(gè)kettle資源庫(kù)，數(shù)據(jù)庫(kù)和kettle資源庫(kù)的關(guān)系實(shí)際上是包含與被包含的關(guān)系。這個(gè)建立是基于不同數(shù)據(jù)庫(kù)的sql語(yǔ)法，可以容納不同的

一個(gè)數(shù)據(jù)庫(kù)是否可以創(chuàng)建多個(gè)kettle資源庫(kù)？

一個(gè)數(shù)據(jù)庫(kù)可以創(chuàng)建多個(gè)kettle資源庫(kù)，數(shù)據(jù)庫(kù)和kettle資源庫(kù)的關(guān)系實(shí)際上是包含與被包含的關(guān)系。這個(gè)建立是基于不同數(shù)據(jù)庫(kù)的sql語(yǔ)法，可以容納不同的kettle數(shù)據(jù)庫(kù)類(lèi)型，并且這些數(shù)據(jù)庫(kù)類(lèi)型是兼容的。

kettle中常見(jiàn)的資源庫(kù)有三種:數(shù)據(jù)庫(kù)資源庫(kù)、文件資源庫(kù)和pentaho資源庫(kù)。

在建立過(guò)程中，系統(tǒng)會(huì)提示您執(zhí)行sql錯(cuò)誤。后面可以選擇OK來(lái)處理這些錯(cuò)誤，對(duì)于以上SQL執(zhí)行提示的所有錯(cuò)誤都可以選擇OK來(lái)實(shí)現(xiàn)資源庫(kù)的建立。

文件存儲(chǔ)庫(kù)定義在文件目錄下。因?yàn)閗ettle使用虛擬文件系統(tǒng)(Apache VFS)，這里的文件目錄是一個(gè)廣義的概念，包括zip文件、web服務(wù)和FTP服務(wù)。

Pentaho repository是一個(gè)插件(在kettle enterprise edition中提供)，它實(shí)際上是一個(gè)內(nèi)容管理系統(tǒng)(CMS)。它具有理想存儲(chǔ)庫(kù)的所有特征，包括版本控制和依賴性完整性檢查。

kettle執(zhí)行sql腳本以后，得到的結(jié)果怎么當(dāng)做變量傳遞出去？

在轉(zhuǎn)換中，每個(gè)步驟都是并發(fā)執(zhí)行的。

數(shù)據(jù)流按順序執(zhí)行。

有沒(méi)有擴(kuò)展性較好的ETL產(chǎn)品？

介紹一下我知道的常用ETL工具:DataX，Datastage，Informatica，Kettle，DataPipeline。

阿里巴巴開(kāi)源軟件:DataX

DataX是一款針對(duì)異構(gòu)數(shù)據(jù)源的離線同步工具，致力于實(shí)現(xiàn)包括關(guān)系數(shù)據(jù)庫(kù)(MySQL、Oracle等)在內(nèi)的各種異構(gòu)數(shù)據(jù)源之間穩(wěn)定高效的數(shù)據(jù)同步。)，HDFS，Hive，ODPS，HBase，F(xiàn)TP等。

水壺開(kāi)源軟件:水壺(中文名)

Kettle是國(guó)外開(kāi)源的ETL工具，純java編寫(xiě)，可以在Window、Linux、Unix上運(yùn)行，擴(kuò)展性好，數(shù)據(jù)抽取高效穩(wěn)定。主從結(jié)構(gòu)，無(wú)高可用性。它不支持?jǐn)?shù)據(jù)的實(shí)時(shí)同步，也不支持?jǐn)帱c(diǎn)續(xù)傳。

IBM商業(yè)軟件:Datastage

最專(zhuān)業(yè)的商業(yè)ETL工具價(jià)格昂貴，但處理速度也能在大量數(shù)據(jù)下保持較快的處理速度和穩(wěn)定性。實(shí)時(shí)監(jiān)控也很好，可以看到數(shù)據(jù)提取的情況，運(yùn)行到哪一步，很直觀。強(qiáng)大的售后技術(shù)支持。

商業(yè)軟件:信息

專(zhuān)業(yè)的ETL工具，比Datastage便宜，需要安裝服務(wù)器和客戶端，處理速度和Datastage相當(dāng)。分布式部署支持實(shí)時(shí)，但效率低。技術(shù)支持主要在美國(guó)，所以國(guó)內(nèi)用的比較少。

國(guó)內(nèi):數(shù)據(jù)管道

國(guó)內(nèi)收入與DataX相比，DataPipeline具有可視化的過(guò)程監(jiān)控，提供多樣化的圖標(biāo)，輔助運(yùn)維，提供故障問(wèn)題的實(shí)時(shí)預(yù)警。DataX需要依靠工具日志來(lái)定位故障。支持實(shí)時(shí)，DataX是定時(shí)的。支持?jǐn)帱c(diǎn)續(xù)傳，但不支持DataX。架構(gòu)也是分布式的，支持橫向擴(kuò)展。

其中，水壺是擴(kuò)展性較好的一款。