SybaseIQ体系结构与特点.pptx

Sybase IQ 产品介绍 AgendaSybaseIQ综述1SybaseIQ体系结构及特点23SybaseIQ应用案例分享4SybaseIQ解决方案1.全球银行前25强中的24家和前50强中的46家均为Sybase的客户2.Sybase 365 是移动运营商全球互联的#1供应商 连接700多个移动运营商并通达30亿订阅者3.Sybase 365 每年处理2000多亿条消息4.Sybase 于1984年开创了首款客户机/服务器关系型数据库5.Sybase 因支撑了全球最大的数据仓库而被收录至吉尼斯世界纪录，其中包含了1pb的关系型和非结构化数据6.Sybase 利用业界领先的分析服务器，Sybase IQ，开创了列式分析7.Sybase的股票业绩在过去一年、三年和五年中都大大高出同组别的其他个股和市场指数8.美国最大的百事瓶装饮料集团依赖Sybase移动软件支持12000多名销售和分发代理9.Sybase支撑了超过4百万用户的QuickBooksIntuit领先的商业管理软件10. 美国地方税务局(IRS)使用Sybase IQ鉴别税务欺骗、 将合规性审计率提高至63%，并在2008年征收了564亿美元的税款SYBASE 要点您可能不知道的Sybase Sybase 成就 企业信息无限化(Unwired Enterprise)Sybase是致力于信息管理和信息移动动技术术的全球最大的企业级软业级软 件公司 其业业界领领先的技术术及解决方案将数据从数据中心传递传递 到所需的任何地方Sybase IQ在产品线中的位置信息管理信息移动可信赖的基础构架Trusted Infrastructure信息无处不在Information Anywhere商业智能Intelligent Enterprise产品数据库管理SybaseASE业务连续性SybaseMirrorActivator开发WorkSpacePowerBuilder产品数据仓库SybaseIQAnalyticsServer数据集成SybaseDataIntegrationSuite建模 & 元数据SybasePowerDesigner产品企业移动化InformationAnywhereSuite嵌入式开发SQLAnywhereRFIDAnywhere移动服务MobileMessagingServicesMobilePaymentsSYBASE聚焦于助力客户实现无限企业。

信息随时随地交付到所需要的任何场所5-10 年数据集市分析型CRM业务指标分析数据仓库数据仓库操作型与分析型RDBMS关系数据库SAP/ERPVSAM主机系统EXCELWeb/XMLOLTP业务系统分析型系统 数据是当前的数据是当前的数据总在实时变化中数据总在实时变化中存储明细数据存储明细数据优化是针对即时更新的事务处理优化是针对即时更新的事务处理支持日常的业务支持日常的业务支持办事人员或行政人员支持办事人员或行政人员 数据是历史的数据是历史的数据是静态的，除数据刷新外数据是静态的，除数据刷新外数据是汇总的数据是汇总的优化是针对大批量查询而不是更新优化是针对大批量查询而不是更新支持长远的业务战略决策支持长远的业务战略决策支持决策人员和管理人员支持决策人员和管理人员面向事务面向事务面向决策面向决策OLTP vs. OLAP（ASE & IQ）OLTPOLAP应用特性事务型，数据的插入，删除，修改为主查询报表类，复杂分析事务总量多少单个事务或查询时间短（毫秒级）长（分钟到小时）并发度高（几百到几千个）低（几个到几十个）涉及的数据量小（几行）大 海量（几千万几千亿行）数据模型三范式多维模型查询涉及的字段所有字段（几十个）个别字段（往往是几百个中的几个）数据库市场细分OLTP 交易业务业务OLAP 分析系统统传统传统 行式数据库库内存数据库库更多事务处务处 理列式数据库库更大量数据的分析SybaseASETeraDataSybaseIQOracleTimesTen主要数据库对比没有万能的数据库没有万能的数据库, ,数据库必然走向专业化数据库必然走向专业化IBMDB2SolidDB列式数据库行式数据库内存数据库OLTP应用OLAP应用OSybase IQ是什么?Sybase IQ OLAP，高效、环保、高性价比的列式数据库 专门为大数据量快速查询/分析/报表环境设计数据仓库“Are you really concentrating on BI? Then use technology optimized for BI!”SybaseIQ在Gartner近期的数据仓库DBMS(数据库管理系统)MagicQuadrant报告中被列入“领导者”象限(01/10)SybaseIQ被评为TPC-H（数据仓库或决策支持系统测试标准）最佳性价比产品SybaseIQ被誉为韩国畅销产品Sybase IQ在信息管理领域的创新Sybase IQ :是市场的领导者第一个 column-based 分析服务器 为分析型应用提供服务超过10年 比其他数据库快10到1,000倍 超过4,000独立安装点和1,500多客户并且还在增长Sybase 国内IQ用户 电信电信 四川移动数据业务分析平台 重庆移动数据业务经营分析平台 广东电信公司经营分析系统（9T数据） 贵州电信公司经营分析系统（3T数据） 广州电信公司帐务分析系统 广东电信163/169多媒体后台分析系统 广东惠州、中山电信市场经营分析系统 广州市移动公司大客户分析系统 佛山市移动公司大客户分析系统 广西电信163/169多媒体后台分析系统 广西移动BOSS数据仓库系统 福建电信网管中心本地网网络分析系统 联通统一经营信息系统 云南、贵州、海南、广西、 新疆、甘肃、宁夏、河南、安徽每年以40%的速度增长！北京电电信信网管分析系统 湖南电信数据仓库系统 新疆电信网管数据分析系统乌鲁木齐电信统计分析查询系统甘肃电信生产统计系统西安电信计费统计报表查询系统常州电信数据仓库系统广东移动IP数据网管广东移动信令分析平台 证券证券 大鹏证券分析型CRM系统福建兴业证券经纪业务分析系统 国信证券数据仓库系统 长城证券数据仓库系统 银行银行 招商银行业务分析系统 广西工商银行报表中心分析系统 中国农业银行营业部分析系统 零售零售 北京市翠微商厦数据仓库系统Sybase 国内IQ用户 政府政府 湖北地税数据仓库系统 南京地税数据仓库系统 青岛地税数据仓库系统 上海市公安局数据仓库系统 北京市基础教育分析系统 国家教委高校信息统计分析系统 能源及交通能源及交通 南方航空公司数据仓库系统 中国铁路客票数据仓库系统 广西电力用电营销数据仓库系统AT&T澳大利亚Telstra移动公司英国RSL电信公司葡萄牙Telecel电信公司美林证券美国证券交易管理委员会摩根斯坦利Internal RevenueService(IRS）土耳其Yapi Kredi银行比利时Fortis银行挪威Lindoff资产管理机构爱尔兰联合银行加拿大蒙特利尔银行MasterLink证券公司GE Capital保险服务公司韩国人寿保险公司洛杉机时报North Jersey媒体集团德国EMI唱片公司AOL美国尤他州财政局美国航空法国铁路运输局美国运输管理局BNP Paribas (Europe)Sybase IQ全球客户SK TelecomKorea148 cpu 44 T朝兴银行Korea13 T Samsung Card Korea 22 T ING Europe32 cpu联邦快递USA80 cpuComscore USA120 cpu尼尔森媒体机构USA100 cpu15T韩国农业局Korea 60T韩国保险行业检查评估委员会Korea 29TLG Card Korea16TB Korea 16T西班牙Telefonica电信公司Europe29 cpu20TAgendaSybaseIQ综述1SybaseIQ体系结构及特点23SybaseIQ应用案例分享4SybaseIQ解决方案SybaseIQ是一个高优化的分析服务器，在标准硬件平台和操作系统上，针对极高速分析查询和报表具有特殊的设计针对于分析的设计，不是事务的设计不同于传统数据库非常卓越的查询性能针对分析型应用具有最低的总拥有成本基于列模式的索引，具有领先的性价比，用于决策支持系统 Sybase IQ速度速度 快速响应n10-100倍的快速查询响应n基于列的存储结构n高性能的数据访问n无处不索引nI/O减少90%可扩展性可扩展性 适应大量的用户数n同时支持成百上千的用户数n从GB到上百个TB的数据n接近实时的新数据装入数据仓库的用户查询几乎不受影响Sybase IQ产品优势低低TCOTCO 经济性n30-70%数据压缩,而不是数据膨胀n低成本n更少硬件n更少的数据存储设备n更少的支持维护人员灵活性灵活性 开放的标准nANSISQL(ODBC,JDBC)nUnix,Linux,Windowsn任何的查询n任何的schema快速高效 列式存储数据传统行式数据库c5c4c3c2c1c9c8c7c6r1r2r3r4r5列式数据库c5c4c3c2c1c9c8c7c6r1r2r3r4r5 数据按列存储储 每一列单单独存放 数据即是索引 只访问查询访问查询 涉及的列 大量降低系统统IO 每一列由一个线线索来处处理 查询查询 的并发处发处 理 数据类类型一致，数据特征相似 方便压缩压缩 数据是按行存储储的 没有索引的查询查询 使用大量I/O 建立索引和物化视图视图 需要花费费大量时间时间 和资资源 面对查询对查询 的需求，数据库库必须须被大量膨胀胀才能满满足性能要求快速高效按列存储快速查询和装载, 垂直分区q 数据垂直存储储 每个字段独立存储储q 只获获取查询查询需要的列 降低系统统I/Oq 为为每一个列分配一个单单独的线线程 查询查询并行处处理垂直分区OtherRDBMSSYBASEIQc5c4c3c2c1c9c8c7c6c5c4c3c2c1c9c8c7c6r1r2r3r4r5r1r2r3r4r5好处A: 无须使用其他的技术，Sybase IQ 就可以减少I/O 超过 90%好处B: SybaseIQ也可运行于低端廉价存储快速高效 维护方便、不需要数据库重组 灵活的表结构修改Customer TableZip CodeCityHobby101-001102-001103-001203-222304-212456-001734-101SeoulSeoulPusanDaejeonInchonTaeguKwangjuGolfMusicBlankBlankGolfDanceBlankChangeCar OwnAddNullDelete空余空间重用DeleteOriginalDeleteReloadReloadReload维护维护方便q 由于列的结结构数据结结构改变变更灵活q 被删删除的空间间可以重用，因此不需要数据库库重组组Sybase IQ:绿色的数据压缩索引就是数据1、数据压缩率随数据聚合度变化20702、绿色的数据压缩（基于数据结构的压缩）3、 Sybase IQ 15的3字节 FP索引alphaalphabetagammabetabeta快速高效专利的索引技术，加速数据查询运算高基数非分组,适应运算/范围搜索,Bit-wise索引高基数分组,提高groupby和排序性能,G-Array(包括一个改进的B-tree)缺省索引，简单列存储,数据压缩存储低基数,sum/avg/count极快,Bit map索引两个列比较，增加列比较的性能字符型数据，增加字符定位查找的性能日期和时间型数据，增加日期查询和分类性能新增Text索引实现中文、韩文、日文全文信息检索经济性数据压缩，降低存储空间和维护成本数据压缩显著降低存储空间和维护成本LOADLOADBase table: 0.2 - 0.5TBIndexes: 0.05 - 0.3TBAggr/Summ: 0 - 0.1TBSummaries。