MapForce ETL 工具。

企业级ETL软件。

ETL（提取、转换、加载）工具提供了一种机制，用于从外部数据源提取数据，将其转换为规范化的数据格式，然后将其加载到最终目标或数据存储库中。

支持主流的企业数据格式（XMLMapForce是一款非常高效、轻量级且可扩展的ETL工具，支持多种数据格式（如JSON、PDF、数据库、纯文本文件、EDI、Protobuf、Shopify/GraphQL等）。它提供了一个简单直观的ETL映射界面，让您可以轻松导入各种支持的数据结构，然后通过拖放功能连接节点，添加数据转换函数和过滤器，或者使用...（后续内容省略）。 视觉功能训练工具。 用于更复杂的ETL项目。

为了配合其可视化界面，MapForce ETL 工具可以通过高性能的 MapForce Server 实现无缝自动化。

MapForce 允许您通过拖放操作，轻松地将数据结构关联起来，并利用其强大的 ETL 数据映射功能。

可以通过内置的函数库添加高级数据处理过滤器和功能。您可以使用可视化函数构建器，将多个内联操作和/或递归操作组合在一起，从而在更复杂的ETL（提取、转换、加载）或数据集成项目中实现更强大的功能，甚至可以将构建好的函数保存起来，以便在其他映射项目中重复使用。

MapForce 还支持高级的 ETL（数据抽取、转换、加载）场景，这些场景可能涉及多个输入和输出模式、多个源文件和/或目标文件，或者复杂的、多阶段的数据转换。

数据流支持能够极大地提升您的ETL项目的性能。它允许您从任意大型的XML、CSV和FLF文件以及关系数据库中进行数据流式读取，并将输出数据流式写入同样大型的XML、CSV和FLF文件中，或者将其插入到数据库中。

这个内置功能意味着，MapForce 可以轻松处理海量数据集和 ETL 项目，其限制仅在于您本地机器或网络上可用的磁盘空间大小。

要启用此功能，只需在地图设计面板的工具栏中选择“内置”图标即可。

MapForce Server 不仅支持批量数据库插入以及直接数据流传输，而且非常适合执行 ETL 数据映射任务。

转换数据格式。

在ETL应用中，用于导入的新数据通常以与现有数据仓库不兼容的格式呈现。MapForce 提供了无与伦比的强大功能和灵活性，用于高级的数据转换和处理，使其成为一个高效的ETL工具，适用于全球和企业内部的数据集成项目。您可以轻松地集成来自多个、不同格式的文件中的数据。

MapForce是一款理想的中件产品，它支持数据集成自动化，可以连接任何本地企业中的分布式应用程序、基于Web的工作流程，甚至云架构。

以下图示展示了三种数据格式，它们被用于ETL（抽取、转换、加载）过程。主要的数据源文件是一个Excel电子表格，而最终的输出目标是一个数据库。然而，"SharesAndLeaves"数据库中的记录以JSON对象的形式存储。MapForce ETL工具能够实时构建JSON对象，并将它包含在生成的数据库插入语句中，如截图右下角的输出预览中所示。

无论它是 XML、JSON 还是数据库模式；Shopify API、EDI 配置文件；PDF 模板；或者 XBRL 分类体系，MapForce 都能根据数据结构进行数据集成，而无需考虑内容的具体形式。这意味着，您可以重复使用数据映射，即使业务数据发生变化。

MapForce 可以生成 MapForce 运行文件，供 MapForce Server 执行，也可以生成免版税的数据集成代码，使用 Java、C# 或 C++ 语言，用于自动化 ETL 项目的重新处理。这使得您可以实现基于计划或事件触发的数据集成/迁移操作，并将这些操作集成到任何报表、电子商务或 SOA 应用程序中。MapForce 的数据集成操作还可以通过数据集成 API 或 ActiveX 控件进行自动化。

ETL项目需要对数据进行处理，以在数据被目标系统使用之前对其进行转换。MapForce提供了一个直观的图形化功能构建器，以及完全可扩展的数据处理功能，内置了各种库、过滤器和条件，旨在帮助您轻松地处理数据并整合不同格式的数据。

MapForce 不需要用户去收集各种适配器或其他需要额外付费的插件。用户可以完全掌控数据集成和转换的设计与实现，并且可以处理所有类型的数据，包括 XML、JSON、数据库、文本文件、EDI、Excel、XBRL 以及 Web 服务数据等各种组合。

数据库 ETL 工具。

MapForce数据库ETL工具提供强大的支持，包括： 数据库映射。它能够将数据库数据映射到各种格式之间，包括 XML、JSON、PDF、CSV、EDI、Excel、Protobuf、XBRL、Shopify/GraphQL、Web服务，甚至其他数据库格式的任意组合。

当您在设计窗口中加载数据库结构时，MapForce 会自动解析数据库模式，让您选择可用的数据库表和视图，并识别表之间的关系。

一旦您已加载数据库 ETL 映射所需的所有内容模型，只需通过拖动连接线，将源结构和目标结构连接起来，即可完成映射过程。

数据库映射功能：

MapForce 支持所有主流的关系型数据库以及流行的 NoSQL 数据库，让您能够创建图形化的数据库映射设计，连接数据库中的源数据、数据处理函数和过滤器，以及各种类型的数据结构。

支持。 关系数据库。 用于ETL：

支持用于ETL的NoSQL数据库：

许多数据库 ETL 映射需要根据布尔条件或 SQL 和 SQL/XML 语句，对源数据和目标数据之间的数据进行处理。您可能需要进行逻辑比较、数学计算或字符串操作，检查数据库中特定值的存在，并对数据进行其他修改。如图所示，数据处理函数以方框的形式显示在连接源数据模型和目标数据模型的线条之间。

数据处理功能使您能够实时执行高级数据库映射，以满足各种实际应用场景中的数据转换需求。例如，您可以构建数据库映射，利用 XML 或 EDI 消息，根据 XML 或 EDI 元素中的筛选条件，提取数据库中的数据行。

一旦您完成了映射配置，内置的 MapForce 引擎允许您只需点击一下即可查看和保存结果。

将数据映射到数据库会生成SQL脚本（例如，SELECT、INSERT、UPDATE和DELETE语句），这些脚本可以直接在MapForce软件中运行，也可以通过MapForce Server运行，从而直接作用于目标数据库。

文本和平面文件 ETL 工具。

现有的文本文件中包含的遗留数据可以被提取并更新，使其与现有的ETL数据仓库保持一致。MapForce 包含独特的 FlexText 工具，用于解析和转换各种文本文件，例如大型机文本报告、基于文本的日志文件以及其他类型的遗留文本文件，这些文件可以在映射设计中使用。通过其可视化界面，FlexText 允许您导入现有的文本文件，并在 MapForce 的映射界面中提取您想要转换的部分。

FlexText 会生成一个模板，然后将该模板加载到 MapForce 中。在 MapForce 中，您可以将单个文本节点转换为多种格式，包括 XML、数据库、PDF、EDI、XBRL、纯文本文件、Excel、JSON、Protocol Buffers 以及 Web 服务数据。通过保存您在 FlexText 中创建的配置，您可以重复使用相同的模板，将多个文本文件转换为多种不同的格式。

FlexText 允许您创建规则，用于文本文件转换模板，从而实现 ETL 映射。当您在 FlexText 界面中打开一个文本文件时，该文件会显示在两个区域。根区域代表原始文件，而操作区域（位于其右侧）会实时显示您提取的数据。

您执行的每一个操作的结果都会实时显示，因此您可以立即看到是否达到了预期的效果。

旧的文本文件中可能包含有用的数据，这些数据可能以CSV（逗号分隔值）或FLF（固定长度字段）格式存储在更复杂的文本文件中。FlexText允许您直接提取这些数据，使用CSV和FLF功能即可。在应用“拆分”和其他操作后，您可以配置字段名称、长度等，将剩余的CSV或FLF格式的字段进行存储。

FlexText 允许您通过使用分割命令，移除不相关的文本、字符和空格，从而提取您需要访问的数据。每次分割操作会将您的数据呈现为两个新的区块：一个包含您提取的数据，另一个则显示转换后的文件的修改视图。您可以立即看到每次操作的结果。

FlexText 支持“节点”和“忽略”操作，从而在构建信息树时提供更大的灵活性。 “忽略”操作会将文本块标记为与转换无关，并指示 MapForce 忽略该文本块。 “节点”操作则在 MapForce 中创建一个新的节点，以便在需要时，您可以正确地表示文本数据的层级结构。

“Switch”操作允许您为一段文本定义多个条件。文本文件中包含的数据只有在满足预定义的条件时，才会传递给相关的容器，并在MapForce转换中使用。

FlexText 还支持正则表达式。例如，一个输入文件可能是一个系统生成的报告，其左边距包含数字和字母代码，用于指示记录类型。其中，连续的五个数字后跟字母“O”表示某个办公地点的新的章节开始。