卓越的数据集成性能与可靠性业务案例

IT 组织如何通过扩展 Informatica PowerCenter 环境处理不断增长的 数据量和业务需求

白皮书

本文档含有 Informatica Corporation 的保密、专有信息和商业秘密信息（“机密信息”），事先未经 Informatica 的书面同意，不得进行拷贝、散发、复印或以任何其它方式复制。 尽管我们尽最大努力确保本文档中信息的准确性和完整性，但仍可能存在一些印刷错误或技术误

差。如因使用本文档所含信息而造成任何损失，Informatica 概不负责。本文档中包含的信息随时可

能更改，恕不另行通知。 Informatica 自行决定将这些材料中讨论的产品属性纳入其任何软件产品的发布或升级中，并自行决

定任何此类发布或升级的时间安排。 受下列一项或多项美国专利保护： 6,032,158 ； 5,794,246 ； 6,014,670 ； 6,339,775 ； 6,044,374 ；6,208,990；6,208,990；6,850,947；6,895,471；或受下列正在申请的美国专利保护：09/644,280；10/966,046；10/727,700。 此版本发布于 2009 年 9 月。

白皮书

卓越的数据集成性能与可靠性业务案例 1

目录 引言······························································································ 2

提高数据集成性能和可靠性的必要性··········································· 3 管理风险和合规性 ······················································································· 5

提高运营效率 ······························································································· 5

简化合并与收购 ··························································································· 5

实现业务现代化 ··························································································· 5

加强客户关系 ······························································································ 5

优化数据集成性能与可靠性 ························································· 6 64 位体系结构 ······························································································ 7

高可用性 ······································································································ 8

网格计算 ······································································································ 9

下推优化 ·····································································································10

分区·············································································································11

总结···························································································· 12

2

引言 十几年来，IT 组织面对日益增长的数据量和业务需求，一直在努力改善其企业数

据集成基础设施的性能和可靠性。他们使用了各种方法，实践证明不仅耗时且成

本很高。例如，第三方数据加速器可加快性能，但是也会引入产生另一层复杂性

和管理开销。多节点网格计算环境中的手动开发和调整符合均衡算法可提高可靠

性，但是会消耗稀缺的 IT 人员资源，并且容易出错。

提高数据集成性能和可靠性不需要大型且繁重的 IT 方案。Informatica® PowerCenter® 企业数据集成软件的用户可随意定制为增强性能和可靠性而设计的大量创新功能

与选项。

本白皮书调查数据集成性能的重要性和可靠性，解释 PowerCenter 的这些功能和选

项如何帮助您的 IT 组织处理日益增多的数据量，满足对及时可信信息的业务需

求。这些功能和选项包括：

• 64 位体系结构：利用从 32 位版本的 PowerCenter 升级而来的 64 位服务器技术

的能力。

• 网格计算：采用 PowerCenter Enterprise Grid OptionTM 在网格环境中多台服务器之

间分布数据集成工作负荷。

• 高可用性：在采用 PowerCenter High Availability OptionTM 的硬件、软件或网络中断

情况下，确保数据集成流程的连续性。

• 分区：采用 PowerCenter Partitioning OptionTM 加快并行环境中数据集成工作负荷与

动态调整的执行速度。

• 下推优化：采用 PowerCenter 下推优化选项TM 挖掘数据库对大数据量和复杂转

换的处理能力。

这些功能和选项让您的 IT 组织能够在 PowerCenter 基础上建立行业领先的性能，在

构建数据集成基础设施过程中获得新的灵活性，面临不断增长的数据量和实时业

务需要能够可靠地进行扩展。

本白皮书还阐述了现实中的公司如何最大限度地利用其 PowerCenter 投资。例如：

• 88% 以上的公司调整了其 64 位版本的 PowerCenter，在吞吐量和可扩展性方面

使其性能提高了一倍

• 升级至 64 位版本 PowerCenter 的公司引用了两个关键推动因素：超大数据量和

服务级别协议 (SLA) 合规性

• 在线市场营销人员 LinkShare 已在高可用性网络中使用 64 位版本的 PowerCenter，为接近实时的运营实现大批量数据吞吐量

• 巴西电信供应商 Oi 采用 PowerCenter 下推优化选项将刷新其 20 TB 数据仓库所

需的时间缩短了一半

白皮书

卓越的数据集成性能与可靠性业务案例 3

提高数据集成性能和可靠性的必要性 您的企业数据集成基础设施为您的 IT 组织满足业务需求提供性能和可靠性。

数据集成技术不再只是一种以每周批处理加载方式更新数据仓库的工具。如今，

数据集成技术位于每个行业中任务关键型进程的中心。公司依靠数据集成技术在

核心财务、客户和供应链操作系统中加强数据转换与交换。

其他公司操作接近实时的企业数据仓库 (EDW) 和运营数据库，专门向决策人员、

支持人员、外部客户和合作伙伴提供及时并且一致的信息。数据同步、整合和迁

移方案需要高性能和可靠性来支持全天候 (24x7) 的全球运营。

IT 组织在紧跟不断增长的业务要求的同时，他们还面临另一项挑战 — 不断增长的

数据量。Forrester Research 研究机构 2009 年 6 月的报告指出，在 2009 年，Forrester 以事实证据表明，如今大约三分之二以上的 EDW 含有的数据量在 1 TB 至 10 TB 之间。“Forrester 预计到 2015 年，大型企业中的大多数 EDW 将达到 100 TB 或更大，

电信、金融和商务等领域拥有 PB 规模的 EDW 将根深蒂固，”1 Forrester 的报告 表明。

经济低迷时期提高了数据集成性能和可靠性的利益。在某些环境下，对不断变化

的市场情况作出反应的速度至关重要。当客户缩减开支时，灵活地满足客户要求

对价值和服务也极为重要。

1 Forrester Research，“庞大而灵活：扩展下一代企业数据仓库的最佳实践”，2009 年 6 月。

“Forrester 预计到 2015 年，

大型企业中的大多数 EDW 将

达到 100 TB 或更大，电信、

金融和商务等领域拥有 PB 规

模的 EDW 将根深蒂固。”

—“庞大而灵活：

扩展下一代企业数据仓库的最佳实践”

Forrester 研究有限公司，2009 年 6 月

4

性能和可靠性对满足这些目标以及应对数据量和复杂性的急剧增长至关重要。高

性能和可靠的数据集成技术应该能够处理：

• 任意数据量。数据量的爆炸迫使企业解决其数据集成技术的性能和可扩展

性。当组织因其全球运营业务产生的数据累积到海量数据，并为如何利用这

些数据进行反思和决策而苦苦挣扎时，此问题将首当其冲。

• 任意数据类型。随着数量的提高，数据复杂性相应提高。常见企业管理异构

环境中的几十个或几百个任务关键型源系统。这意味着加载过多的数据类

型、结构和格式，将使性能大打折扣，并且使特殊的数据集成解决方案受到

打击。

• 任意数据延迟。IT 组织必须根据应用程序和用途管理范围广泛的数据集成时

间范围和延迟。这种时间范围可能从几周、几天乃至几秒。无论应用程序或

用户何时需要，无论以实时、批处理或变化数据捕 (CDC) 方式，IT 组织都需要

灵活地交付可信的高质量数据。

• 任意角色。数据集成项目中涉及到许多不同的人员：数据管理员、数据分析

师、架构师、管理员和开发人员。他们具有不同的技能集，需要完成不同的

任务。同时，他们都需要协同工作才可分享对象与任务，提高跨团队的工作

效率，确保 IT 成果与业务需要吻合。

• 任意时间。数据必须享有高可靠性。数据集成流程的停机可能意味着因服务

中断、客户不满意和违反服务水平协议而付出高昂的代价。

经济衰退迫使业务部门和 IT 部门仔细检查运营的低效率、能够承受的目标、具有

潜在高回报的低风险投资，以及对企业财富的实际影响。在经济低迷时期，企业

领导期盼 IT 有助于管理方案，使他们能够渡过艰难的时期，并为长期繁荣奠定 基础。

数据是许多这种业务方案的核心。高层次的数据集成性能和可靠性可帮助 IT 组织

为其公司：

• 管理风险和合规性

• 提高运营效率

• 从合并与收购优化和加速实现价值

• 使企业走向现代化

• 加强客户关系

白皮书

卓越的数据集成性能与可靠性业务案例 5

管理风险和合规性 公司有了类似雷达的风险管理，必须迅速瞄准在市场和业务动态中可能有损于公

司地位的目标位置。从大量快速变化的数据流中以接近实时的方式访问和监控活

动，对于减轻风险以及确保符合 SLA 和法规要求越来越重要。

提高运营效率 在经济低迷时期，公司办事必须事半功倍。即使在缩减开支的情况下，公司也希

望找到从业务流程和 IT 系统同步提高效率的途径。通过更多渠道获得更多可用的

数据和加快处理速度，改善数据集成性能可以压缩业务周期。可靠性的提高转变

为更高的工作效率，同时将高代价的停机风险降到最低。

简化合并与收购 在并购方案中，公司需要快速整合来自新实体的数据。速度就是关键。在不同系

统之间进行实时同步以及处理合并实体中可能翻倍的数据量等方面，性能开始发

挥作用。可扩展性和可靠性对于充分迅速地利用两个实体的合并数据资产至关 重要。

实现业务现代化 许多 IT 组织正在从先前的环境过渡，这些环境提高了维护成本、管理复杂性，要

适应今天的业务需求已不够灵活。向高度可靠的网格计算环境过渡通过多个低成

本商用硬件节点中的分布式转换处理，提供了提高数据集成性能的机遇。

加强客户关系 每位客户都有价值，尤其是在经济困难时期。为吸引客户和留住客户，公司必须

更好地了解其客户。在分析客户需求和满足客户愿望时，他们对速度和精确度的

要求更高。改善客户服务，提高客户满意度，提高交叉销售率和追加销售率，都

需要单一的客户视图。为提供这种单一视图，IT 组织需要创建客户数据中心，合

并、综合与管理来自不同应用程序和系统的客户数据。为满足如今信息灵通的企

业和消费者的要求，IT 组织必须通过多元化渠道按需提供可用的客户数据。

2 IDC 白皮书由 Informatica 发起，“通过企业数据集成尽量扩大机遇和降低风险：不确定时期的成

功战略”，文档编号 217393，2009 年 5 月。

“在这个充满不确定性和激烈

竞争的经济时代，每走错一步

就会付出巨大的代价，每次错

失良机就可能使企业离灾难

更近。”2

— Carl Olofson

IDC 信息管理与数据集成软件

调研副总裁

6

您不需要淘汰并更换现有的系统。所

有 PowerCenter 功能和选项旨在配合您

现有的资源，以便您充分利用现有的

IT 基础设施投资。

优化数据集成性能与可靠性 数据集成性能通常是按照吞吐量和可扩展性来定义的：

• 吞吐量测量处理给定的数据量的速度有多快，例如在 x 分钟内读取、传输和加

载 10 GB 数据。

• 可扩展性指通过修改执行数据集成进程的软硬件环境，加快吞吐量和/或处理

更大数据量的能力。例如，在接近线性扩展的理想情况下，服务器处理器数

量每增加一倍在理论上会使吞吐量翻一番。

指数形式的数据量增长使性能更难于测评。例如，一家 SLA 可能要求 IT 部门在 x 分钟内处理 10 GB 数据。当您的数据量从 10 GB 增加到 100 GB 甚至到 500 GB 而进

入 TB 数量级时，要越来越多的数据，按照一贯的速度就会越来越难。

改善数据集成性能并非总是很简单的事情。您的 IT 组织需要考虑用途、数据类型

和复杂性、分区选项、源和目标、硬件和网络基础设施，以及其他因素。几乎找

不到通用型解决方案来加快吞吐量和建立可扩展性。

在较小程度上，改善数据集成基础设施的可靠性也取决于可变因素。在某些情况

下，数据集成流程向辅助计算机节点的简单故障转移可能已经足够。在某些任务

关键型用途中，IT 组织可能趋向于建立更先进的弹性与恢复功能。

Informatica PowerCenter 提供的大量功能和选项让您的 IT 组织可以针对最迫切的业务

需要和 IT 需求，从策略方面灵活地实现性能与可靠性的增强。 Informatica Professional ServicesSM 服务专员和销售工程师随时辅助您进行策略性评估、技术选

择和概念验证。

无论您选择哪种课程，都不需要淘汰并更换现有的系统。PowerCenter 的功能和选

项旨在为您的现有环境提供补充，帮助您的组织改善使用其所有 IT 资源 — 服务

器、数据集成软件、其他企业软件，以及管理数据基础设施的 IT 人员。这些技术

包括：

• 64 位体系结构

• 高可用性

• 网格计算

• 下推优化

• 分区

让我们看看如何实施这些技术来帮助您的 IT 组织实现其目标，从更良好的数据集

成性能和可靠性中获得回报。

白皮书

卓越的数据集成性能与可靠性业务案例 7

64 位体系结构 如果您的 IT 组织在过去几年中已升级其服务器和操作系统，则已经改变到 64 位体

系结构。现在使用低成本的 x64 服务器，64 位技术扩展到超出 32 位系统的 4 GB 可寻址内存限制吗，并且与速度较慢的磁盘相比，支持在内存中执行更多的计算 进程。

但是 64 位硬件只是具备了一半的条件。为了利用 64 位技术的能力进行数据集成，

需要升级到 64 位版本的 Informatica PowerCenter。PowerCenter 最新版本附带了对 64 位体系结构的内置支持。

认识到从 32 位升级至 64 位技术可实现性能增强十分重要，这将取决于涉及到的数

据集成流程。不大量依赖内存的简单例程映射速度加快可能只是表面上的。

但是大型内存密集型转换的速度加快两三倍这种性能增强则是普遍性的。从业务

角度来看，这些情况可能与支持任务关键型面向客户的系统和财务系统以及企业

数据仓库的实时数据源和集成有关。

调整 64 位 PowerCenter 部署可以产生更好的性能。2009 年 5 月进行的客户调查结果

表明，Informatica 客户有 88% 以上已调整 64 位 PowerCenter 部署，性能提高了两倍

或更高。（参见图 1）。

图 1. 从 64 位性能调整观察 PowerCenter 客户性能改善程度

“无论是对法国的社会资产负

债表还是对有助于 HR 团队管

理其日常活动的多种指标，

PowerCenter 都为欧莱雅的人

力资源职能部门产生了可靠的

数据。过渡到 64 位版本产生

的结果是缩短处理时间，这对

于一个跨五大洲运营的集团按

时交付数据至关重要。”

— Philippe Bot

人力资源部公司信息系统主管，

欧莱雅人事关系办公室

8

调查还发现处理超大数据集和满足 SLA 对性能和可扩展性的要求是客户升级到 64 位版本的 PowerCenter 的关键原因。（参见图 2。注意：图表中的数据总和不等

于 100% 是因为允许选择多个答案。）

图 2. 从 32 位升级到 64 位处理的 PowerCenter 客户的业务驱动因素

高可用性 与高性能一致的是，高可靠性在不稳定的经济环境中也越来越重要。您的公司简

直无法承受数据集成流程中断所带来的成本和风险。此外，许多组织现在以任务

关键型角色来管理数据集成，增强跨操作系统、业务单位和地理位置进行数据交

换的能力。

PowerCenter 的高可用性选项可让您的 IT 组织高枕无忧。如果硬件、软件或网络在

多节点环境中发生故障，此选项通过启用数据集成流程实现到可用服务器的无缝

故障接管来帮助确保可靠性。高可用性选项：

• 尽量减小成本高昂的停机和 SLA 违规风险

• 支持运营数据集成的任务关键型要求

• 使可用性、弹性、恢复和重启实现自动化

白皮书

卓越的数据集成性能与可靠性业务案例 9

网格计算 基于网格的基础设施由低成本的商用服务器组成，已成为传统的对称多任务处理 (SMP) 服务器的经济型备用方案。许多 IT 组织已过渡到基于网格的数据中心来支持

运营应用程序和数据库。

这些分布式体系结构采用负荷均衡技术，通常根据可用的处理器、内存和磁盘资

源通过在多台服务器中计算进程来提高性能。

您的 IT 组织采用 PowerCenter 企业网格选项后，可获得更良好的性能并利用网格环

境可扩展性进行数据集成。此技术自动优化多台服务器中的数据集成，让开发人

员不用手动配置 PowerCenter 即可使其在网格环境中生效。企业网格选项：

• 通过在可用网格资源中自动均衡数据集成负荷提高性能。

• 允许采用附加的网格服务器进行无限制的 PowerCenter 扩展

• 提高处理高峰期和大数据量的能力

实例分析：海量数据吞吐量 LinkShare 成立于 1996 年，十多年来用接近实时的运营数据库和企业数据仓库

建立了全球全天候 (24x7) 的数据基础设施。这个大型系统涉及到 700 多个数据

集成会话、500 个映射 100 个工作流。

由于 LinkShare 在财富 500 强和其他公司中展开了其按行为付费 Web 营销网

络，其数据量立即飙升，因此对更良好的数据集成性能的需求也随之提高。

该公司在高可靠性网格中部署了 64 位版本的 PowerCenter。

通过 PowerCenter 升级和修补基于 Linux 的 IBM 服务器基础设施，LinkShare 实现

了突破性的数据集成性能，并且容量也在向未来方向增长。

“我们通过在 64 位体系结构中进行负荷均衡、来源分区、动态分区和网格会

话的完全组合，确实能够实质性提高我们的吞吐量，”LinkShare 业务智能和

分析主管 Dave Ramos 说。“您总是想要更大更好更快，Informatica 确实能够让

我们如愿。”

10

下推优化 提高数据集成流程的性能常常意味着利用所有可用的资源。采用 PowerCenter 下推

优化选项，您的 IT 组织可以挖掘关系数据库的潜力来提高性能。

这项创新技术通过分割 PowerCenter 数据服务器与关系数据库（源数据和目标数据

驻留在其中）之间的转换处理，可以动态加快数据集成。此选项将数据处理“下

推”到数据库层，为您提供了新的灵活性来向前推动性能并扩展峰值需求。下推

优化选项：

• 采用数据库处理过程提高性能与可扩展性

• 实现最高的 IT 投资利用率

• 动态创建并执行专门针对数据库的转换

实例分析：电话公司实现性能加倍 巴西电信提供商的翘楚 Oi 采用了 PowerCenter 下推优化选项，使其数据集成性

能加倍。

Oi 依靠 Informatica 数据集成平台支持基于天睿资讯 (Teradata) 企业数据仓库，

来适应以单一的客户视图推动销售和市场。由于具有更良好的性能，Oi 销售

和服务专业人员可更快速地获得关于公司的 3100 万客户的准确数据。

通过向其环境中增加 PowerCenter 下推优化选项，Oi 将其 1 TB 以上的每日数据

负荷存入 20 TB 数据仓库所需的小时数缩短了一半。Oi 企业 IT 经理 Vera Duarte 说：“这种性能提升使我们可以为市场营销团队提供更迅速的响应。”

该选项支持 Oi 立即实现性能提升和可扩展性，可处理越来越多的数据量。该

公司采用 Informatica 平台奠定了成功的基础，在公司成立时集成 16 家独立公

司的异类数据起到了重要作用。

Oi 还使用 PowerCenter 企业网格选项在基于两台 16 核 Linux 服务器的 64 位体系

结构中按照 SLA 要求妥善处理了 1.5 亿次通话详细记录。Informatica 平台帮助

增强了面向客户的开单系统，将信用充值时间缩短了 60%，并且使响应能力

提高了 400%，真是令人难以置信。

白皮书

卓越的数据集成性能与可靠性业务案例 11

分区 分区是对安装数据量和加速数据驱动型业务流程提高性能的另一种武器。

PowerCenter 分区选项将数据处理划分成子集，在多处理器和基于网格的系统中可

用的 CPU 中并行运行。

通过在可用的 IT 资源中分散计算负荷，可以更快地处理大数据量。数据集成流程

是以并行方式而不是以串行方式执行的。与手动数据分区不同，PowerCenter 分区

选项可确保数据集成，因为其并行引擎可为面向集合的转换对数据分区进行动态

调整。分区选项：

• 使硬件和软件能够一起扩展，以处理大数据量

• 用多分区机制提供并行灵活性。

• 为开发人员配备设计和跟踪工具来优化性能

12

总结 经济衰退终究会结束。经济增长必将恢复。但是您的数据量增长却看不到尽头。

为帮助您的 IT 组织继续满足业务需求和 SLA，需要为数据集成流程提供卓越的性

能和可靠性。

沿着这种趋势思考若干年，或五至十年，您的组织将会拥有多少数据？快速可靠

地利用这些数据对于实现您的业务目标有多重要？您的组织对于及时、可信和一

致的数据需求将会面临什么新的业务要求？

卓越的数据集成性能和可靠性是截然不同的战略优势，支持了不确定经济时期的

短期幸存和未来时期的长期繁荣。

Informatica 使您的组织可按节俭的方式轻松利用 PowerCenter 功能与选项获得高性能

和可靠性。有了这些功能和选项，您就获得了利用数据能力的强大手段，在繁荣

时期和萧条时间均可享有更强的灵活性、洞察力和竞争优势。

了解更多 欲更多了解关于 Informatica PowerCenter 功能及选项获取卓越的数据集成性能和可靠

性。欲了解更多信息，请致电 +86 010 5879 3366，或登陆 Informatica 公司网站：

www.informatica.com.cn。

关于 Informatica Informatica 公司（纳斯达克代码：INFA）是全球首屈一指的数据集成软件独立提供

商。通过将及时、相关和可靠的数据视为首要业务依据，组织可在当今全球信息

经济中获得竞争优势。全球已有超过 4,100 家企业依赖 Informatica 存取、集成并信

任其位于传统企业内外及因特网云中的信息资产。

白皮书

卓越的数据集成性能与可靠性业务案例 13

北京办事处 上海办事处 地址：北京市朝阳区建国门外大街乙 12 号 地址：上海浦东世纪大道 201 号

LG 双子座大厦东塔 19 层 1906 室 渣打银行大厦 5 楼 邮编：100022 邮编：200120 电话：86-10-5879 3366 电话：86-21-6182 6825 传真：86-10-5879 3130 传真：86-21-6182 6755

© 2009 Informatica Corporation。保留所有权利。在中国出版。Informatica、Informatica 徽标、Informatica PowerCenter 是 Informatica Corporation 在美国和全世界辖区内的商标和注册商标。所有其它

公司的产品名称可能是各自所有者的商品名称或商标。此处描述的任何 Informatica 产品的开发、发布和时间安排均由 Informatica 自行决定。本文不可作为制作购买决策的依据。 7037 (09/01/2009)

www.informatica.com.cn