干货丨常用的数据集成ETL工具有哪些？

ETL工具是什么呢？ETL是英文Extract-Transform-Load的缩写，用来描述将数据从来源端经过抽取、转换、加载至目的端的过程。ETL一词较常用在数据仓库，但其对象并不限于数据仓库。

ETL工具用于将异构数据转换为同类数据，然后由数据科学家用于从数据中获得有价值的数据，常用的ETL工具有Microsoft-SQL Server集成服务、AWS Glue、Apache NiFi、Informatica PowerCenter、IBM的Infosphere Information Server等。

常用的数据集成ETL工具

1、Microsoft-SQL Server集成服务(SSIS)

为了构建高性能的数据集成解决方案，例如提取，转换等，SSIS被认为是一个出色的平台。由用于构建和调试程序包的图形工具和向导，用于执行工作流程功能(包括执行SQL语句，FTP操作等)的任务组成。

SSIS的功能：

数据集成和工作流应用程，用于ETL的数据仓库工具。

2、AWS Glue

AWS Glue是一种简单且具有成本效益的，完全托管的无服务器ETL，用于对数据进行分类并将其跨多个数据源移动。由AWS Glue数据目录(即中央元数据存储库，ETL引擎和灵活的计划)组成。

AWS Glue的功能：

它生成ETL脚本以将数据从源转换为目标，检测架构更改并适应您的首选项。

3、Apache NiFi

Apache NiFi支持转换，数据路由和系统中介逻辑的可扩展且功能强大的有向图。开发它是为了使系统之间的数据流自动化。流控制器，Web服务器，内容存储库，扩展是Java虚拟机上NiFi的某些组件。

Apache NiFi的功能：

高度可配置，基于Web的用户界面。

4、Informatica PowerCenter

Informatica PowerCenter是一个数据集成平台，可帮助加快数据集成项目并迅速将数据交付业务。

Informatica PowerCenter的功能：

用于分析和应用程序的实时数据，可扩展性和零停机时间。

5、IBM的Infosphere Information Server

IBM Infosphere Information Server是一个提供大量并行功能的平台。此外，它提供了一个高度灵活且可扩展的平台，可以处理所有数据量，是一个平台，允许用户清理，监视，理解和转换数据。

Infosphere Information Server的功能：

跨各种系统连接数据，评估、分析和监视数据质量。

6、 Qlik Replicate

Qlik Replicate是一个数据集成平台，支持多种用例，其中包括实时数据仓库，大型机现代化该平台可自动执行复制过程，其中包括跨所有主要数据库，数据仓库等生成目标架构。

Qlik Replicate的功能：

数据保护，高性能，实时更新，直观的GUI，可复制数据摄取和复制

7、OracleData Integrator

Oracle Data Integrator是一个平台，可满足从高性能批处理装载到启用SOA的数据服务等几乎所有类型的数据集成需求。包括与Oracle Warehouse Builder到Oracle Data Integrator的互操作性。

Oracle Data Integrator的功能：

快速的开发和维护，数据质量防火墙。

8、SAP BusinessObjects数据集成器

借助SAP BusinessObjects Data Integrator，组织可以在分析环境中提取，转换，集成和加载数据。组织可以从几乎任何来源提取数据，进行转换并将其集成到任何目标数据库中。

SAP的功能：

先进的调试功能，数据质量功能。

9、SAS-数据集成工作室

SAS用于构建，实施和管理数据集成过程，而与平台，应用程序和数据源无关，是一个功能强大的设计工具。该工作室易于管理，具有多用户环境，可以在大型项目上进行协作。