数据仓库 - ETL 和报告工具 - Gingerdoc 姜知笔记

笔记首页 >> cognos >> 数据仓库 – ETL 和报告工具

ETL 工具从所有这些异构数据源中提取数据，转换数据（如应用计算、连接字段、键、删除不正确的数据字段等），并将其加载到数据仓库中。

萃取

在 ETL 加载期间需要一个暂存区。需要集结区的原因有很多。源系统仅在特定时间段内可用于提取数据。这段时间小于总数据加载时间。因此，暂存区允许您从源系统中提取数据，并在时隙结束前将其保存在暂存区中。

当您想要从多个数据源一起获取数据或者想要将两个或多个系统连接在一起时，需要暂存区。

例如– 您将无法执行连接来自两个物理上不同的数据库的两个表的 SQL 查询。

不同系统的数据提取时间段因时区和运行时间而异。从源系统中提取的数据可用于多个数据仓库系统、操作数据存储等。

ETL 允许您执行复杂的转换并需要额外的区域来存储数据。

在数据转换中，您对提取的数据应用一组函数以将其加载到目标系统中。不需要任何转换的数据称为直接移动或传递数据。

您可以对从源系统提取的数据应用不同的转换。例如，您可以执行自定义计算。如果您想要销售收入总和并且这不在数据库中，您可以在转换过程中应用 SUM 公式并加载数据。

例如– 如果您在不同列的表中具有名字和姓氏，则可以在加载之前使用连接。

在加载阶段，数据被加载到最终目标系统中，它可以是平面文件或数据仓库系统。

商业用户使用 BI（商业智能）工具从数据仓库中的交易数据创建基本、中等和复杂的报告，并使用信息设计工具/UDT创建 Universe 。可以使用各种 SAP 和非 SAP 数据源来创建报告。

市场上有很多 BI 报告、仪表板和数据可视化工具。其中一些如下 –