通关无纸化电子随附单据数据存储方案(方案计划书).doc

通关无纸化电子随附单据数据存储方案目 录第一章 前言 4第二章 现状与问题分析 42.1. 现状分析 42.1.1. 信息中心 42.1.2. 数据中心 72.2. 试运行情况 102.2.1. 信息中心 102.2.2.1 存储 102.2.2.2 网络 102.2.2. 数据中心 112.2.2.1 存储 112.2.2.2 网络 112.3. 问题分析 122.3.1. 信息中心面临的问题 122.3.2. 数据中心面临的问题 132.3.3. 直属海关面临的问题 13第三章 需求分析 143.1. 业务需求 143.1.1. 数据存留 143.1.2. 存储容量 143.1.3. 读写I/O分析 153.1.4. 磁盘并发数分析 153.2. 开发需求 153.2.1. 接口需求 153.2.2. 迁移改造需求 153.3. 运维需求 163.3.1. 管理工具 163.3.2. 生命周期管理 163.3.3. 监控工具集成 163.3.4. 设备扩展性 163.3.5. 业务连续性 173.3.6. 复制迁移 173.3.7. 数据备份 173.3.8. 数据质量 173.3.9. 数据安全 173.3.10. 机房环境需求 173.3.11. 技能需求 173.3.12. 升级支持 173.3.13. 售后服务支持水平 183.4. 设备安全需求 183.5. 数据安全需求 183.6. 网络需求 183.6.1. 网络背景流量 183.6.2. 无纸化报关传输流量 193.6.3. 无纸化调阅流量 213.6.4. 高清无纸化报关传输流量 223.7. 其它需求 233.7.1. 成本 233.7.2. 产品成熟度 23第四章 规划总体结构 234.1. 方案一：集中存放模式 234.1.1. 总体结构图 234.1.2. 优点 254.1.3. 缺点 264.1.4. 网络估算 264.1.5. 工作量估算 314.2. 方案二：分布存放模式 324.2.1. 总体结构图 324.2.2. 优点 344.2.3. 缺点 344.2.4. 网络估算 354.2.5. 工作量估算 364.3. 方案三：集中+分布存放模式 374.3.1. 模式1：准实时下发模式 374.3.2. 模式2：分时下发模式 434.3.3. 模式3：非下发模式 464.4. 倾向性建议 504.5. 运维管理 514.5.1. 备份管理 514.5.2. 数据同步 524.5.3. 容灾切换 524.6. 数据管理 52第五章 可行性存储方案及分析 535.1. 方案一：可横向扩展的集群式NAS系统 535.1.1. 简介 535.1.2. 方案架构图 535.1.3. 特性 545.1.4. 方案分析－IBM SONAS 555.1.5. 方案分析－EMC Isilon 565.2. 方案二：成熟型内容管理路线 575.2.1. 简介 575.2.2. 方案架构图 575.2.3. 特性 575.2.4. 方案分析－IBM ECM 585.2.5. 方案分析－Oracle WebCenter Content 595.2.6. 方案分析－EMC Documentum 595.3. 方案三: 分布式存储+计算 605.3.1. 简介 605.3.2. 方案架构图 615.3.3. 特性 615.3.4. 方案分析－EMC MapR 625.3.5. 方案分析－天云科技 Hadoop 635.3.6. 方案分析－Intel Hadoop 645.4. 方案利弊对比 665.5. 倾向性方案 67第一章 前言通关作业无纸化改革试点是2012年全国海关关长会议确定的重点工作。

根据监管司 《海关通关作业无纸化改革实施方案（试行）》要求确定的改革实施步骤，于2012年8月，第一期选定12个海关的不同种类的业务类型进行试点、2013年将进一步深化通关无纸化作业改革试点、 2014年将深入推进并将于2015年在全国海关全面推广实施根据上面的业务改革实施步骤，第一期试点的设计的文件存储系统将无法满足进一步的业务需求，需要建立能支撑通关无纸化业务改革在全国海关全面推广实施后的通关无纸化电子随附单据电子数据存储系统本方案是在科技司牵头下，信息中心、数据中心、上海海关成立专题工作组，对今后存储、网络等需求进行综合评估，并对业界相关的技术和产品进行调研，初步形成的电子随附单据数据存储方案，本方案的实施将为今后通关无纸化全面推广提供基础的技术支撑第二章 现状与问题分析2.1. 现状分析2.1.1. 信息中心2.1.1.1. 文件系统文件系统结构如下： 整个文件系统分元数据的存储、非结构化数据文件存储、和对文件系统的访问三部分，其中元数据是结构化数据（包括服务器的配置信息和非结构化数据文件信息），放入到Oracle数据库中，非结构化数据文件放入文件服务器中，其中文件服务器是用EMC VMAXe的硬件存储。

H2010客户端需要调阅随附单据时，对文件系统进行访问实现上是由H2010客户端通过中间层服务器发送请求，中间层向客户端返回文件地址和时间戳，客户端对以上信息及用户信息、请求IP加签，向缓冲文件服务器发送文件请求缓冲文件服务器和总署级文件服务器上，设立WEB站点，接收文件请求收到文件请求后，先对请求的内容进行验证，如果能够通过验证且在时间戳后的有效时间内，将对请求内容进行响应首先，缓冲文件服务器检索本服务器是否有相应的文件，如果没有，则进一步向上级（总署级）文件服务器发送请求，将获得的文件在缓冲文件服务器缓冲，并返回给请求方对于非业务量大的海关， 客户端向中间层服务器发送请求，由中间层服务器直接向总署Web服务器发送请求文件，并返回给客户端2.1.1.2. 设备列表硬件名称硬件配置数量软件及版本说明存储EMC VMAXe可用容量10.7TB1文件服务器CPU：4路8核内存：64GB2OS：Windows2008R2 64位Cluster信息中心可扩展（整组增加）WEB服务器CPU ：4路8核内存：64GB2OS：Windows2008R2 64位NLB信息中心可扩展MQ服务器CPU：4路4核内存：8GB2OS：Windows2008R2 64位IBMMQ 7.0Cluster信息中心不可扩展，但能按通道拆分ESB数据库服务器CPU：4路4核内存：32GB2OS：Windows2008R2 64位Cluster信息中心不可扩展ESB应用服务器虚机 CPU：4核内存：16GB2OS：Windows2008R2 64位NLB信息中心可扩展ESB Biztalk服务器CPU ：4路8核内存：64GB2OS：Windows2008R2 64位Group信息中心可扩展2.1.2. 数据中心2.1.2.1. 存储2.1.2.1.1. 部署结构目前无纸通关项目中上传服务器在德胜和亦庄两个机房都有部署，但数据库和后台程序只在亦庄机房有部署，拓扑如下：2.1.2.1.2. 设备列表硬件名称硬件配置数量软件及版本说明上传服务器CPU：2.8G*4内存：8G硬盘：80G8Os：linux64位 中标麒麟5.4内核版本2.6.18-164Weblogic10Jdk1.6亦庄4台、德胜4台随附单证MQ服务器IBM 750平台CPU ：8个内存16G本地盘：120G2Os：AIX6.1.0.6-sp8MQ：ibmmq6.0部署在亦庄NFS SERVERIBM 5608CPU32G内存2OS：AIX5.3.0.11-sp10 部署在亦庄，其中一台为冷备机存储IBM-DS8300,存储容量10T1部署在亦庄传输用加密机Sjy362OS: linux部署在亦庄2.1.2.2. 网络目前数据中心为两地三中心的网络结构，北京、上海为三个核心机房的所在地，其中北京为同城主备两个机房，上海为异地容灾机房。

各个分中心都是双线上联至数据中心，北方十省的分中心采用联通、电信各一条线路的方式连接到北京同城主备两个机房，南方的分中心使用双电信线路，一条连接到北京，另一条连接到上海绝大部分情况下每个分中心上联数据中心的带宽都是2M，南方的分中心主用至主运行机房的电信线路，北方十省的分中心通常主用至同城备份机房的联通线路为了确保无纸化通关项目的顺利进行，数据中心计划将南京、拱北、杭州、北京、天津、福州等6个试点分中心上联至数据中心主用线路的带宽扩容至10M数据中心的同城主备机房与H2010系统的北京、广东节点都有互联，除今年7月将主运行机房与H2010系统北京节点（金宝街）的互联线路升级到为100M裸光纤外，所有与H2010互联的线路都是4M SDH专线2.1.2.2.1. NFS Server设计2.1.2.1.1. SAN结构NFS服务器采用两台IBM 小型机P560,两台服务器互为主备关系，需要手工切换，存储采用IBM DS8300，可用空间10TB，另外新采购EMC存储一台，裸容量为80T，可在后期数据量上升时挂载到NFS服务器上拓扑结构如下： 2.1.2.1.2. 文件系统设计NFS Server文件系统上传服务器挂载点备注/shanghai(1TB)/shenzhen(1TB)/nanjing(1TB)/huangpu(1TB)/other(1TB)/edoc/2200/edoc/5300/edoc/2300/edoc/5200/edoc先期每个文件系统预分配空间1TB2.2. 试运行情况2.2.1. 信息中心2.2.2.1 存储截至到12月7日24时，通关无纸化项目自上线以来，系统运行基本正常。

总共申报通关无纸化报关单253840份，随附单据（pdf文件）共518789个，存储占用约47G（47417M），存储相关的磁盘读写I/O、文件服务器及WEB服务器CPU、内存资源空闲2.2.2.2 网络在无纸化通关项目试运行的20几天中，全国海关骨干网运行情况较为良好取试点前一个普通工作日（2月28日）的上午10:00至11:00业务高峰期一小时流量平均值，再取试点最近一个月（11月13日日至12月13日）中每天上午10:00至11:00业务高峰期流量最大一天的一小时流量平均值，得到的对比表如下，从整体上看，试点海关的线路流量增长不明显，骨干网目前带宽现状可以承载试点应用的流量单次样本具有随机性，不可简单直接相减计算差值，仅用于概要反映整体变化情况关区名称运行网带宽M试点上线前流量M试点上线后流量M1北京关区期间由2M扩容至8M1.53.042天津关区期间由4M扩容至8M3.92.643上海海关2011.4114南京海关6。