保险行业对象存储平台规划
10页1、保险行业对象存储平台规划目 录二、预期效果4三、风险揭示与管理6四、技术选型7五、方案设计8六、当前阶段10一、背景和原因 对象存储(Object Storage),也叫做基于对象的存储,是用来描述解决和处理离散单元的方法的通用术语,这些离散单元被称作为对象。早在 2006 年,亚马逊推出 Amzaon S3(Simple Storage Service),随后各大厂商均推出各种形态的类似产品, 均称为对象存储。当前,保险公司对海量非结构化数据的管理逐渐力不从心, 各方面的问题扑面而来:1、业务的需求。随着业务监管要求的明确以及业务量的增长,非结构化数据的访问需求不断增多,一个是存储的量,另外一个是业务并发的量。2、技术的需求。海量的文件数量,直接导致了检索效率的降低,从而影响业务体验。3、备份的需求。传统存储架构无法满足数据量快速增长带来的备份需求,备份效率低。4、容灾的需求。随着保险公司业务规模的不断扩大,分公司影像系统的单点架构风险太大,容灾能力差。5、成本的需求。随着分公司设备老化严重,传统存储的采购和维保费用高昂。面对上述问题,我们需要更加积极主动的优化非结构化数据的存储和管
2、理,寻求技术上的革新,构建新一代存储架构,以分公司为试点,积极探索适合保险公司业务发展的新型对象存储平台。二、预期效果通过使用分布式对象存储架构替换传统的 IP 存储架构,能够解决海量非结构化数据的集中存储及访问问题,提升非结构化文件存取效率,解决分公司影像系统单点问题。分布式对象存储能够保证不丢失数据、不中断服务、提供良好的用户体验, 解决存储扩容复杂问题。由于分布式对象存储采用扁平化的数据组织方式,所以目录架构扩展性强,耦合性低,增删节点时所需迁移的数据少。整体而言,在业务系统、IT 性能以及运维方面都带了本质的提升。业务系统方面,当前分公司影像系统面临升级架构改造, 双录系统需求日趋增多,分公司对网盘的呼声也日渐高涨。通过采用对象存储,提升对海量非结构化数据的访问效率,满足影像系统和双录系统的需求,提升系统访问效率,从而使得系统能够高效工作,直接提升客户满意度。在访问效率方面,传统 IP 存储超过亿级文件后就会出现普遍的性能下降,甚至达到秒级响应。而对于分布式对象存储来讲,分布式的线性扩展能力使得超过百亿的数据访问依然可以稳定在毫秒级响应。在试验环境下,选择成本基本相同的 NAS
3、 存储和对象存储,对 2000 万文件数量、128k 大小的数据进行测试,得出以下结果:NAS 存储7356 OPS=5ms对象存储14159 OPS=10ms对 10 亿文件数量、128k 大小的数据进行测试,得出以下结果:NAS 存储4800 OPS=50ms对象存储11040 OPS=20ms通过上述实验结果可以看出,对于海量小文件的检索,对象存储存在巨大优势。分析其主要原因,除了 NAS 元数据内容多且采用树形结构检索导致的访问速率慢以外,还有很大一部分原因是因为 NAS 存储目录层级。如果是三级目录,那么每一个文件的访问都至少会有三次目录的打开操作和获取权限操作, 加上最后的文件访问操作,客户端和服务端总计会有不少于四次的交互操作,而对象存储只需要一次。与此同时,分布式对象存储是基于 x86 平台硬件,对硬件无明显要求,使用通用的 x86 硬件即可,而传统存储则需要选购专用硬件。在同等质量和可靠性条件下,对象存储即使加上存储软件后的成本,较传统存储也有一定优势。整体结合运维、可靠性和扩展性等各方面的使用成本来考虑,TCO(Total Costof Ownership )下降约
4、为 20%以上。分布式对象存储对运维也产生了巨大的改变,主要体现在以下几个方面:设备老化替换、业务调整、扩容等带来的数据迁移无需通过专业的迁移工具或者迁移服务来完成,分布式对象本身即可通过分布式纠删、自动数据均衡技术完成数据从老旧设备到新设备的迁移,全程无需人为干预,可靠性强。以目前每年不少于 10 次、迁移数据约 3PB、总计约 15 亿文件的现状,全年整个迁移过程需要 300+人天。使用分布式对象存储后,预计可减少迁移工作 200 人天,效率提升近 300%。传统备份技术采用了逐个文件读取进行备份的方式,影像类业务的海量文件造成备份无法按时备份完成,恢复时间又过长的问题无法解决。对象存储通过底层复制技术化零为整进行备份,备份和恢复效率提升 10 倍。通过使用对象的多版本功能, 可以实现文件粒度的精细化备份管理。总体来讲,成本上节省了备份软件、备份网络的建设以及大量备份的容量许可,约合每 TB 节省 10000 元。对象存储中存储与服务器间半永久链接维护的消除,减少了由于半永久链接带来的 IP 地址变更、挂载路径的变更、版本升级的变更、负载均衡的调整等方面的不便。基于 HTTP 方式
《保险行业对象存储平台规划》由会员nj****e分享,可在线阅读,更多相关《保险行业对象存储平台规划》请在金锄头文库上搜索。
龟板生物材料的探索与利用
龟板产业的政策环境与投资机会
龟板产业的品牌塑造与市场推广
龟板产业链全产业链分析
龟板产业发展与中医现代化的关系
龟板产业可持续发展战略
龟板替代品研发与市场竞争
龟板养殖技术与产业化发展
龙齿齿轮传动承载能力影响因素分析
龙齿齿轮传动系统的故障诊断与健康管理的社会影响评估
龙齿齿轮传动系统的故障诊断与健康管理的循环经济
龟板产业的数字化转型与智能化
龙齿齿轮传动承载能力失效分析
龙齿齿轮传动系统的故障诊断与健康管理的专家系统
龟板活性成分的提取与鉴定
龟板cosmétiquesetsanté美容护肤应用
龟板提取工艺创新与优化
龙齿磨损机理与预测模型建立
龟板产业的绿色发展与环境保护
龙齿谐波传动的传动比可调技术
2022-06-26 1页
2021-11-16 8页
2021-11-16 8页
2021-07-21 6页
2021-07-21 8页
2021-07-21 8页
2021-07-20 4页
2021-07-20 3页
2021-05-02 32页
2021-02-21 3页