ETL（Extract-Transform-Load的縮寫，即數據抽取、轉換、裝載的過程），對于企業(yè)或行業(yè)應用來說，我們經常會遇到各種數據的處理，轉換，遷移，所以了解并掌握一種etl工具的使用，必不可少。本文將詳細介紹6款主流的ETL工具，詳細介紹其功能。

1、DataPipeline

Data Pipeline是一家為企業(yè)用戶提供數據基礎架構服務的科技公司，DataPipeline數據質量平臺整合了數據質量分析、質量校驗、質量監(jiān)控等多方面特性， 以保證數據質量的完整性、一致性、準確性及唯一性，徹底解決數據孤島和數據定義進化的問題。

2、Kettle

Kettle是一款國外開源的ETL工具，純java編寫，可以在Windows、Linux、Unix上運行，數據抽取高效穩(wěn)定。Kettle 中文名稱叫水壺，該項目的主程序員MATT 希望把各種數據放到一個壺里，然后以一種指定的格式流出。

Kettle家族目前包括4個產品：Spoon、Pan、CHEF、Kitchen。

SPOON 允許你通過圖形界面來設計ETL轉換過程（Transformation）。

PAN 允許你批量運行由Spoon設計的ETL轉換 (例如使用一個時間調度器)。Pan是一個后臺執(zhí)行的程序，沒有圖形界面。

CHEF 允許你創(chuàng)建任務（Job）。 任務通過允許每個轉換，任務，腳本等等，更有利于自動化更新數據倉庫的復雜工作。任務通過允許每個轉換，任務，腳本等等。任務將會被檢查，看看是否正確地運行了。

KITCHEN 允許你批量使用由Chef設計的任務 (例如使用一個時間調度器)。KITCHEN也是一個后臺運行的程序。

3、Talend

Talend，是一家專業(yè)的開源集成軟件公司，為企業(yè)提供開源的中間件解決方案，從而讓企業(yè)能夠在他們的應用，系統(tǒng)以及數據庫中贏取更大的價值。 在傳統(tǒng)軟件公司提供封閉、私有的解決方案的領域Talend系列軟件以開源的形式進行開發(fā)。Talend，可運行于 Hadoop 集群之間，直接生成 MapReduce 代碼供 Hadoop 運行，從而可以降低部署難度和成本，加快分析速度。而且 Talend 還支持可進行并發(fā)事務處理的Hadoop2.0。

4、Informatica

Informatica是全球領先的數據管理軟件提供商。在如下Gartner魔力象限位于領導者地位：數據集成工具魔力象限、數據質量工具魔力象限 、元數據管理解決方案魔力象限 、主數據管理解決方案魔力象限 、企業(yè)級集成平臺即服務（EiPaaS）魔力象限。

Informatica Enterprise Data Integration包括Informatica PowerCenter和Informatica PowerExchange 兩大產品，憑借其高性能、可充分擴展的平臺，可以解決幾乎所有數據集成項目和企業(yè)集成方案。

Informatica PowerCenter用于訪問和集成幾乎任何業(yè)務系統(tǒng)、任何格式的數據，它可以按任意速度在企業(yè)內交付數據，具有高性能、高可擴展性、高可用性的特點。Informatica PowerCenter包括4個不同版本，即：標準版，實時版，高級版，云計算版。同時，它還提供了多個可選的組件，以擴展Informatica PowerCenter的核心數據集成功能，這些組件包括：數據清洗和匹配、數據屏蔽、數據驗證、Teradata雙負載、企業(yè)網格、元數據交換、下推優(yōu)化(Pushdown Optimization)、團隊開發(fā)和非結構化數據等。

Informatica PowerExchange 是一系列的數據訪問產品，它確保 IT 機構能夠根據需要隨時隨地訪問并在整個企業(yè)內傳遞關鍵數據。憑該能力，IT機構可以優(yōu)化有限的資源和數據的業(yè)務價值。Informatica PowerExchange支持多種不同的數據源和各類應用，包括企業(yè)應用程序、數據庫和數據倉庫、大型機、中型系統(tǒng)、消息傳遞系統(tǒng)和技術標準。

5、Datax

DataX 是阿里巴巴集團內被廣泛使用的離線數據同步工具/平臺，實現包括 MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、MaxCompute(ODPS)、DRDS 等各種異構數據源之間高效的數據同步功能。

6、Oracle Goldengate

GoldenGate軟件是一種基于日志的結構化數據復制軟件。GoldenGate 能夠實現大量交易數據的實時捕捉、變換和投遞，實現源數據庫與目標數據庫的數據同步，保持亞秒級的數據延遲。

源端通過抽取進程提取redo log或archive log日志內容，通過pump進程（TCP/IP協(xié)議）發(fā)送到目標端，最后目標端的rep進程接收日志、解析并應用到目標端，進而完成數據同步。

來數環(huán)通，無需代碼，為你提供ETL數據工具，幫助企業(yè)降本增效！

數環(huán)通數據連接器iPaaS是一款開箱即用、安全穩(wěn)定與多場景適用的一站式企業(yè)級應用集成平臺。基于云原生基座，通過預置連接器、可視化流程編排和API治理等能力，將企業(yè)內外部不同的業(yè)務、活動、應用、數據、API、設備連接起來，實現各個系統(tǒng)間的業(yè)務銜接、數據流轉、資源整合，高效實現企業(yè)上下游、內外網應用系統(tǒng)的數據互通，從而實現企業(yè)流程自動化，助力企業(yè)敏捷創(chuàng)新發(fā)展和數字化轉型升級。

目前，數環(huán)通已對接打通釘釘、金蝶云、維格表、抖音、企業(yè)微信、CRM、巨量千川、用友等1000+應用系統(tǒng)，擁有超20000+指令動作，且持續(xù)周周更新。能夠快速擴展您現有系統(tǒng)的功能，并將各個系統(tǒng)串聯(lián)起來。

中國南方電網、易方達基金、綠城中國、認養(yǎng)一頭牛、迪卡儂等數千家企業(yè)已選擇數環(huán)通助力企業(yè)數字化經營。