informatica技术解决方案.doc

Informatica技技术术解决方案解决方案  提交人:闫东  联系： 010-82705218  提交日期:2019-10-22  版本号:1.0 目目 录录 序言序言. 1 1.1INFORMATICA公司介绍. 1 1.2INFORMATICA公司针对各行业的解决方案及特点.3 2设计理念设计理念 9 2.1设计理念的先进性. 9 2.2设计理念的符合性. 12 3基本功能基本功能 14 3.1字段级的操作，主要包括：字段映射，映射的自动匹配，字段的拆分，多字段的混合运算，自动 完成时间类型的转换. 14 3.2记录级的操作，主要包括：去重复记录，记录间合并或计算，记录拆分等15 3.3表级的操作，主要包括：代理键的生成,行列变换,排序,统计,制造样品数据16 3.4数据库级的操作，主要包括：对各种码表的支持包括GBK（必需）、UNICODE（必 需）、ASCII（必需） 17 4技术特点技术特点 21 4.1跨异构数据库的关联、支持关联条件的复杂程度、自定义函数的实现、过滤条件的复杂程度21 4.2支持的数据类型，包括 BINARAY、DATE/TIME、DECIMAL、DOUBLE、INTEGER、STRING、TEXT、REAL、SMALL INTEGER等.21 4.3抽取断点,支持参数抽取的灵活程度,如何抽取远程数据，抽取数据的事务处理支持，抽取的字段是 否可以动态修改，对抽取的环境变量配置情况，环境变量是否可以动态修改 .23 4.4是否支持脏读，数据的提交方式，支持各种数据库的批量装载功能包括ORACLE（必 需）、INFORMIX、DB2、SQL SERVER,针对不同数据库是否具有批量加载能力包括ORACLE（必 需），INFORMIX，DB2,SYBASE，TERADATA. 27 4.5在转换过程中是否支持数据比较的功能，在设计调试时能否对每个转换环节进行数据预览，在设 计调试时能否对每个转换环节进行性能监控，在转换过程中是否支持按行按列的分组聚合，能否提供直 观的视图、灵活的配置以及能否自定义功能，是否提供丰富的转换函数，是否支持诸如VALIDATE、 TRANSLATE、 HIERARCHY FLATTERN,MAP，MERGE 等转换功能，ETL过程中数据转换的可追溯能力.29 4.6不同类型运算所耗的系统资源状况，包括常见的 JOIN、LOOKUP、MAPPING、AGGREAGATION、SORT、PIVOT、FILTER等 40 4.7是否内置提供数据预览和数据质量评估的功能 .41 4.8是否内置提供具有强大的元数据管理功能 .45 4.9对于实时ETL及按需ETL的支持 51 5整体架构整体架构 53 5.1对平台的支持，支持主流的操作系统平台包括SUN SOLARIS，HP-UX（必需）, IBM AIX（必需）, LINUX, WINDOWS（必需）等。

53 5.2对数据源的支持，支持常见的数据源，包括ORACLE（必需），DB2（必需）,INFORMIX（必 需），SYBASE，SQL SERVER，TERADATA，SAS，TEXT（必需），EXCEL，SAP R/3，PEOPLESPFT，SIEBLE，IMS，VSAM,QSAM ON 390，用户自定义文件，FTP（必需），XML（必 需），MESSAGE QUEUE，EMAIL，WEBLOG，OLEDB，其它54 5.3支持数据库的种类、连接方式、配置方式及是否随产品打包，包括ORACLE（必需），DB2（必 需）,INFORMIX（必需），SYBASE，SQL SERVER.56 5.4产品自身并行处理能力，对并行数据库的支持情况如ORACLE RAC/OPS，系统的线性可扩展性.56 5.5是否支持远端的数据抽取和加载功能. 59 5.6对错误恢复逻辑的支持，对异常情况的处理是否得当，对于出现差错的流程是否支持异常控制、 错误告警以及错误流程恢复的加载. 60 5.7对中间存储的支持. 65 5.8产品可编程的灵活性如何，模块化的设计能力 .65 5.9能否根据日志监测源数据的变化，是否支持增量抽取，增量抽取的处理方式，增量加载的处理方 式，是否提供数据更新的时间点或周期，以便可以灵活处理.67 5.10对元数据的管理，主要包括：元数据存储的提取方式、元数据存储的开放性、元数据存储的可 移植性、是否提供多种方式访问元数据、元数据的版本控制程度、是否支持开放的元数据标准如 CWM、是否支持XML进行元数据交换、是否支持分布式的元数据访问和管理、是否生成元数据报表、 是否支持ETL过程的冲突分析、是否支持基于元数据的查询功能、是否支持ETL过程的流程分析等。

68 5.11可以实现对所有主流关系型数据库的快速访问和,对本地数据访问模式的支持(这里本地指 NATIVE,如OCI等)；通过利用本地数据库API高效实现ETL功能75 5.12对基本处理（如SQL）的支持. 76 5.13提供友好界面 76 5.14具有使用内部函数或者用户定义函数的强大转换功能.80 5.15是否提供强大的脚本和用户自定义函数开发和转化的功能.84 5.16是否提供数据校验的功能，如空值处理、流程异常处理、异常值的处理等手段.89 6接口与交换接口与交换 90 6.1支持通用接口，如ODBC、数据库本地接口等90 6.2是否支持各种主流的消息中间件，可以通过消息中间件进行数据抽取和加载，例如MQ SERIES,JMS 等92 6.3是否支持WEB SERVICES接口. 92 6.4在调度时除了执行ETL规则是否可以执行其它任务如系统的可执行程序、数据库的存储过程、动 态链接库中的程序、FTP命令、EMAIL任务. 93 6.5是否调用各种外部应用，包括存储过程、各种流行语言开发的应用程序等93 6.6是否支持客户化定制的转换过程，支持的编程语言种类例如C、C++、VC++、JAVA、PERL等94 6.7与OLAP数据库，如HYPERION ESSBASE、ORACLE EXPRESS OLAP等的集成、与前端工具集如 COGNOS、BUSINESS OBJECT、BRIO的集成 99 6.8是否有开放的API可将产品集成到统一界面.99 6.9是否支持与统计分析工具如BUSINESSOBJECTS,SAS的集成等99 6.10原厂商专用接口对不同数据源的支持 100 7项目重点问答项目重点问答 101 7.1工具是否满足无编码开发. 101 7.2安装调试时，对系统环境是否有额外安装要求 .102 7.3在不改变系统内核参数据前提下，能否顺利完成产品的安装及调试？ 如需改变系统内核参数，请 说明。

102 7.4REPOSITORY的移植性：在不改变原设计和应用的前提下，能否顺利完成跨平台、跨异构数据库和 跨产品版本的移植 如需更改设计等工作，请加以说明102 7.5REPOSITORY的开放性？是否可建立在主流RDBMS基础上，例如：ORACLE、DB2等？如果不支 持，请加以说明 103 7.6详细论述性能调优及步骤. 104 7.7ETL部分产品，厂家的发展策略和趋势，产品延续性如何？113 8元数据管理分析元数据管理分析 115 8.1元数据管理工具的架构及工作原理. 115 8.2元数据管理工具的功能模块描述及工作流程 .119 8.3元数据管理工具界面友好性如何. 123 8.4元数据管理工具的平台性. 125 8.5元数据管理工具采集接口. 125 8.6是否具有元数据脱机分析功能. 127 8.7是否具有表级和字段级的血缘分析功能.127 8.8是否可在一个分析视图上，表现出跨不同工具的元数据血缘分析功能129 8.9是否有影响分析功能. 130 8.10是否具有WEB 展现功能 130 8.11元数据管理工具的REPOSITORY的开放性？是否支持主流的RDBMS？如不支持，请加以说明。

132 8.12元数据分析报表，可导出为哪些种类的文件类型？.132 8.13元数据检索功能 133 8.14元数据同步及调度功能 133 8.15能否方便看到计算字段的元数据及计算公式.135 8.16是否支持自定义元模型？ 是否支持CWM 元数据标准？.136 9产品供应商资质产品供应商资质 139 9.1财务状况和公司规模. 139 9.2业界影响. 139 9.3成功案例. 141 10产品供应商市场情况产品供应商市场情况 147 10.1国内客户数量及全球客户数量 147 10.2市场准入 148 10.3市场份额 149 11实施供应商资质和实施供应商市场情况实施供应商资质和实施供应商市场情况 151 12可实施能力可实施能力 152 12.1软件安装、配置的简单性和灵活性 152 12.2ETL性能监控与调优的能力. 152 12.3如何从开发环境迁移到生产环境 161 12.4是否支持网格计算和负载均衡 162 12.5是否支持ETL过程中的冲突分析. 164 12.6是否支持流程分析 165 12.7是否有简体中文版本的软件 165 12.8开放文档的自动生成 166 13实施方法论论及咨询团队实施方法论论及咨询团队 168 13.1实施方法论 168 13.2咨询团队 175 14售后维护售后维护 176 14.1是否有本地支持，支持工程师是否充足.176 14.2本地支持方式如是分公司还是代理（总代理或是什么级别的代理）.176 14.3产品升级 177 15运营维护运营维护 178 15.1资料库的备份、恢复 178 15.2是否支持SNMP管理，可与网管软件集成180 15.3是否支持基于WEB的运行管理和监控，以及元数据报告.181 15.4方便的系统部署功能和良好的系统监控功能，是否支持未完成任务的监控、报告和恢复功能 184 15.5是否提供版本控制和管理的功能 192 15.6是否支持统一以及自定义的管理平台 192 15.7在调度时是否支持时间触发方式，在调度时是否支持事件触发方式.197 15.8是否支持命令行执行方式 198 附件、附件、INFORMATICA公司售后服务内容介绍公司售后服务内容介绍202 序言序言 1.1 Informatica公司介绍公司介绍 Informatica Co. Ltd 1993年创立于美国并于1999年登陆纳斯达 克。

Informatica一直致力于为客户提供具有强大的元数据管 理、数据集成和个性化分析递送功能的世界通行标准的统一 数据服务平台Informatica的基础设施产品以可伸缩的、可 扩展的企业级数据集成平台为特点，并广泛支持来自 Informatica和其他的领先商务智能提供商的数据仓库基础设 施和分析型应用软件的开发和管理，提供元数据管理解决方 案，帮助企业集成、优化、审核信息资产以提高运营效率， 增加客户收益，取得竞争优势 作为数据整合软件产业的领导者，Informatica拥有遍布全球 的客户，客户范围涵盖金融、电信、制造、政府、能源、保 险、公众服务等多种行业Informatica的客户： 超过82％的Fortune 100客户 80% 的道• 琼斯工业指数客户 全球 500 强企业中 5个最大的的娱乐和媒体机构 15 个最大的 电信公司中的13个 31 个最大的 金融服务/银行机构 中的24个 13 个最大的 制药公司 中的12个 18 个最大的 能源公司 中的12个 20 个最大的 制造企业 中的16个 20 个最大的 保险公司 中的15个 所有四兵种的 美国军队 (陆军、海军、海军陆战队和空 军) 作为数据整合方面的专家，更先进的技术和更完善的服务一 直是我们追究的目标。

为了给客户提供系统是全方位服务， 我们拥有大量专业级的资源，来满足客户各个方面的需求 从自身来说，我们有高品质专家提供丰富的资源为客户服 务；从合作伙伴来说，我们有最好的战略合作伙伴，企业的 硬件。