netapp产品维护指南.ppt

Netapp 系列产品维系列产品维护指南护指南 概述概述一:介绍二:基本信息 三:日常检查 四:产品健康状态检查指南产品健康状态检查指南介绍介绍4本培训内容是为本培训内容是为NetApp存储系统的人员编写的日存储系统的人员编写的日常维护的手册，详细的系统描述和管理命令参见随常维护的手册，详细的系统描述和管理命令参见随机手册机手册,帮助及帮助及http://www.cn或或从从http://now.您可从上面获得几乎所您可从上面获得几乎所有得产品支持信息，如：电子版手册，知识库，软有得产品支持信息，如：电子版手册，知识库，软件下载，等等件下载，等等基本信息 1) 开机开机开机顺序：开机顺序： 先按照磁盘架编号顺序加电磁盘架的双电源，先按照磁盘架编号顺序加电磁盘架的双电源，10秒秒钟后加电控制器钟后加电控制器 2) 关机关机关机顺序：关机顺序： 先关控制器电源，依次关闭磁盘架电源先关控制器电源，依次关闭磁盘架电源 3) 指示灯指示灯存储系统前面板有存储系统前面板有3个指示灯：个指示灯：Activity, Status, Power Activity绿-------操作活动正常闪烁----检测到CPU活动灭-------没有活动Status绿-------系统运行正常橙-------系统正加载内核Power绿-------已经加电灭-------没加电存储系统后部电源指示灯：橙色灯和绿色灯存储系统后部电源指示灯：橙色灯和绿色灯橙色灯亮-----------有交流电源供电灭-----------无交流电源供电绿色灯亮-----------电源输出正常灭-----------无电源输出磁盘灯绿色--------正常绿色闪动--正常读写红色--------磁盘故障4) 用户管理用户管理 存储系统管理用户名：存储系统管理用户名：root，，负责存储系统的资源分配和管理。

负责存储系统的资源分配和管理 系统管理员需牢记口令，注意口令更改系统管理员需牢记口令，注意口令更改 密码更改密码更改:在开机时按在开机时按ctrl+c 出现一菜单出现一菜单 可迭可迭 change passwd 改变改变root 密码密码 新建用户新建用户: 使用使用useradmin useradmin useradd login_name useradmin userdel login_name useradmin userlist 具体可参考具体可参考command手册手册5) CLI管理管理 连接笔记本串行口到连接笔记本串行口到console线，取缺省设置线，取缺省设置9600，，8，，N，，1 在在Password：：提示后输入提示后输入root用户口令，进用户口令，进入入CLI管理，提示符：主机名〉管理，提示符：主机名〉 输入输入help或？可以查看所有命令，命令具体使或？可以查看所有命令，命令具体使用方法参见随机命令手册用方法参见随机命令手册 6) FilerView管理管理在在WebWeb浏（浏（NetscapeNetscape高于高于4.74.7版版, ,IEIE高于高于5.05.0版）的版）的URLURL输入：输入：http://http://主机名主机名/ /nana_admin_admin 输入用户名输入用户名rootroot和管理员和管理员口令，进入管理系统。

具体内口令，进入管理系统具体内容可以使用帮助容可以使用帮助 7) 空间管理空间管理NetApp存储系统空间管理分存储系统空间管理分3个层次个层次: : 若干物理磁盘构成磁盘组，若干物理磁盘构成磁盘组，1个校验盘，其余个校验盘，其余数据盘 若干磁盘组构成卷，卷是管理的基本单位，容若干磁盘组构成卷，卷是管理的基本单位，容量只能增大，不能缩小快照是基于卷的量只能增大，不能缩小快照是基于卷的 在卷上可以建立在卷上可以建立Qtree，，是逻辑概念，可以通是逻辑概念，可以通过过Quota限制容量等限制容量等注意：系统必须保留至少注意：系统必须保留至少1 1块热备份盘块热备份盘 8) 网络管理网络管理 网网络络端端口口分分为为物物理理端端口口和和虚虚拟拟端端口口，，虚虚拟拟端端口口有有多多个个物物理理端端口口组组成成虚虚拟拟端端口口配配置置与与物物理理端端口口配配置相同 虚拟端口虚拟端口( (vifvif) )由由Single和和Multi两种模式两种模式 9)NFS输出输出    Unix用户通过用户通过NFS协议实现数据访问。

可以在协议实现数据访问可以在FilerView中修改中修改/etc/exports文件设置文件设置NFS输出    NFS输出有输出有3种模式：种模式：Access，，Root，，Rw/RoAccess:用户可以访问（用户可以访问（mount））文件系统文件系统Root:以超级用户身份进行数据访问以超级用户身份进行数据访问Rw/Ro:以读写方式或只读方式进行数据访问以读写方式或只读方式进行数据访问修改完成，用修改完成，用Apply保存，然后输出或在保存，然后输出或在CLI中运行中运行exportfs –a 10) CIFS映射映射   Windows用户通过用户通过CIFS协议实现数据访问协议实现数据访问CIFS设置命令：设置命令：cifs setup，，也可以在也可以在FilerView设置CIFS有有3种认证方式：种认证方式：域认证方式，本地用户认证方式，工作组方式，域认证方式，本地用户认证方式，工作组方式，分别适合不同环境分别适合不同环境 11) Snapshot     Snapshot是存储系统的特点技术，是文件系是存储系统的特点技术，是文件系统的只读拷贝统的只读拷贝 Snapshot可以手工创建，也可以设定后由系可以手工创建，也可以设定后由系统自动创建。

可以设置保留的每周、每日、每时的统自动创建可以设置保留的每周、每日、每时的Snapshot数目注意：手工创建的注意：手工创建的Snapshot在使用后手工删除，否在使用后手工删除，否则占用系统空间则占用系统空间 12) SnapRestoreSnapRestore是快速数据恢复手段除根卷外，其是快速数据恢复手段除根卷外，其余数据卷可以立即恢复具体命令参见随机手余数据卷可以立即恢复具体命令参见随机手册册 snap restore[-f] [-t vol | file ] [-s name] [-r ] | 13)系统监控系统监控采用采用Web进行观察进行观察或登陆到控制台进行操作：或登陆到控制台进行操作：>sysstat 1观察存储系统运行状况观察存储系统运行状况>rdfile /etc/messgaes阅读存储系统日志阅读存储系统日志> >cfcf status status观察双机系统工作状况观察双机系统工作状况 14)     硬盘更换硬盘更换 保持系统中存在热备份盘，一旦数据磁盘发生保持系统中存在热备份盘，一旦数据磁盘发生物理损坏，存储系统会自动进行数据重建。

损坏的物理损坏，存储系统会自动进行数据重建损坏的磁盘可以通过磁盘可以通过RMA更换 Raid4 72G的硬盘重建时间是的硬盘重建时间是75分种分种;Raiddp 同样同样的环境下重建时间是的环境下重建时间是160分钟分钟例例:例例:硬盘更换及问题的解决方法硬盘更换及问题的解决方法显示硬盘的分配owned情况: disk show –v如:1) neapp1> disk show -v  DISK       OWNER                  POOL   SERIAL NUMBER   0b.16        netapp1   (84203626)   Pool0  3KR0YZBM00007608Y7DE0b.17        netapp1   (84203626)   Pool0  3KR0VJ2900007609L45P0b.20        Not Owned              NONE   3KR0XE240000760926CP0b.21        Not Owned              NONE   3KR0X0J400007609MC220b.22        Not Owned              NONE   3KR0X63B00007609ME5J0b.23        Not Owned              NONE   3KR0XE38000076099U4L0b.24        Not Owned              NONE   3KR0X0AA000076099RFK0b.18        netapp2   (84203626)   Pool0  3KR0YZBM00007608Y7DE0b.19       netapp2   (84203626)   Pool0  3KR0VJ2900007609L45P2) 分配硬盘到到270c其中一个机头模块上neapp1> disk assign 0b.20 0b.21   (硬盘分配到当前270c机头使用)neapp1> disk assign 0b.22 0b.23 0b.24 –o netapp2 (指定这三个硬盘分配到另外的一个270c机头上使用)则:Netapp1>disk show  显示如下3)neapp1> disk show   DISK       OWNER                            POOL   SERIAL NUMBER   0b.16        netapp1   (84203626)          Pool0  3KR0YZBM00007608Y7DE0b.17        netapp1   (84203626)           Pool0  3KR0VJ2900007609L45P0b.20        netapp1   (84203626)    Pool0    3KR0XE240000760926CP0b.21        netapp1   (84203626)    Pool0   3KR0X0J400007609MC220b.22        netapp2   (84204112)    Pool0    3KR0X63B00007609ME5J0b.23        netapp2   (84204112)    Pool0    3KR0XE38000076099U4L0b.24        netapp2  (84204112 )    Pool0    3KR0X0AA000076099RFK0b.18        netapp2   (84204112 )   Pool0  3KR0YZBM00007608Y7DE0b.19       netapp2    (84204112 )   Pool0  3KR0VJ2900007609L45PNetapp1>disk show –a4)如果当netapp1机头没有spare 盘，而netapp2还有三个spare硬盘,可把netapp2的其中一个spare盘 重新分配给netapp1机头当作spare盘操作如下:Netapp2>disk assign –f 0b.24 –s unowned 把0b.24硬盘重新指定为末分配过的硬盘权限 如下:Netapp2>Disk show –vDISK       OWNER                            POOL   SERIAL NUMBER   0b.16        netapp1   (84203626)          Pool0  3KR0YZBM00007608Y7DE0b.17        netapp1   (84203626)           Pool0  3KR0VJ2900007609L45P0b.20        netapp1   (84203626)    Pool0    3KR0XE240000760926CP0b.21        netapp1   (84203626)    Pool0   3KR0X0J400007609MC220b.22        netapp2   (84204112)    Pool0    3KR0X63B00007609ME5J0b.23        netapp2   (84204112)    Pool0    3KR0XE38000076099U4L0b.24       Not Owned              NONE         3KR0X0AA000076099RFK 0b.18        netapp2   (84204112 )   Pool0  3KR0YZBM00007608Y7DE0b.19       netapp2    (84204112 )   Pool0  3KR0VJ2900007609L45P上面0b.24为末分陪的状态；重新指定给netapp1机头使用，操作如下:Netapp2>disk assign 0b.24 –o netapp1Netapp1>sysconfig –r 则会显示则会显示0b.24 自动成为自动成为spare盘盘 netapp1> sysconfig -r..RAID DiskHA.IDHA SHELF BAY CHAN Used (MB/blks)Phys (MB/blks)spare0b.248b 2 2 FC:B 0 68444/140174232注注:如果硬盘坏了如果硬盘坏了 换新的硬盘时换新的硬盘时 如果系统当时没有分配的话如果系统当时没有分配的话 则输入如下指令则输入如下指令 重新分配给所需的重新分配给所需的机头既可机头既可:Disk assign xx xx xx15) Autosupport说明说明     Autosupport是为了简化存储系统管理的工是为了简化存储系统管理的工具，通过配置邮件服务器可以接收到存储系统发来具，通过配置邮件服务器可以接收到存储系统发来的事件报告，包括正常的磁盘扫描和故障报告，可的事件报告，包括正常的磁盘扫描和故障报告，可以及时、准确了解存储系统的状态，配合以及时、准确了解存储系统的状态，配合NetApp的支持服务更可以预先发现系统可能的隐患，做到的支持服务更可以预先发现系统可能的隐患，做到防患未然。

防患未然     Autosupport可以在控制台和可以在控制台和FilerView中中配置如果考虑到系统对外访问不方便，可以先发配置如果考虑到系统对外访问不方便，可以先发送到内部管理员的邮箱管理员可以根据情况决定送到内部管理员的邮箱管理员可以根据情况决定是否转给是否转给NetApp 二二:日常检查日常检查1)     目测目测 现场首先进行指示灯和现场首先进行指示灯和LCD面板检查，判断是否面板检查，判断是否有异常情况发生有异常情况发生 2)2)通过控制台或通过控制台或Telnet进行系统检查进行系统检查 检查频度检查频度 任务任务 命令或文件命令或文件 每天每天 文件器性能和文件器性能和cpu利用率利用率 Sysstat 磁盘使用情况（卷或快照）磁盘使用情况（卷或快照） df 检查磁盘失败或其他信息检查磁盘失败或其他信息 /etc/messages文件文件 CIFS操作情况操作情况 cifs stat NFS操作情况操作情况 nfsstat 每周每周 用户水平磁盘使用用户水平磁盘使用 quota report NT域的连接情况域的连接情况 cifs testdc CIFS共享目录共享目录 cifs shares NFS输出卷输出卷 /etc/exports文件文件 网络流量统计网络流量统计 netstat 网络接口性能统计网络接口性能统计 ifstat 每月每月 磁盘架连接磁盘架连接 shelfchk 上线时间上线时间 uptime 设备环境状态检查设备环境状态检查Environment status1:netapp1> cf enable 2:netapp2>cf enable3:Netapp1> Cf takeover 把另外一个机头的服务接过来把另外一个机头的服务接过来4:Netapp1(takeover)> 当前是已接过来状态当前是已接过来状态 5:Netapp1(takeover)> vfiler status 当前当前netapp1机头所运行的服务机头所运行的服务 vfiler0 running6:Netapp1(takeover)>partner vfiler status ，，显示正常，说明显示正常，说明cluster 已经成功的运行能已经成功的运行能接管所运行的服务接管所运行的服务 vfiler0 running vfiler1 running7:上上面面操操作作已已经经常常可可以以正正常常接接管管了了，，现现在在 将将接接管管的的服服务务 应应用用还还给给另另外外那那台台机机头头来来运运行行操操作作如下：如下：netapp1(takeover)> cf giveback –f   在接管模式下在接管模式下,将服务返回给原节点将服务返回给原节点8:netapp1>  服务和应用已还给服务和应用已还给netapp2了了,双机双机cluster 运行状态正常运行状态正常 能正常接管冗余服务能正常接管冗余服务CLUSTER CLUSTER 检查检查通过通过Filerview来管理来管理clustercluster产品健康状态检查指南产品健康状态检查指南目标目标: :为无法使用为无法使用AutoSupport 之用户使用之用户使用 一一:Autosupport 功能及使用方法功能及使用方法二二: :如何自己解读如何自己解读Autosupport文件，了解系统状态文件，了解系统状态. Autosupport 功能及使用方法功能及使用方法•主要是方便自动监控files的系统运行状态•基于系统的状态信息，自动发送电子邮件•立刻发现系统的故障(如磁盘，风扇，电源模块，系统重启动，Cluster的切换)并自动创建问题立案•打开autosupport功能的每个系统均会发送信息文件•对警告信息主动进行分析•可以人工配置可能发生系统不稳定的警告条件•包含每周日志以及磁盘整理的信息•收集系统配置和状态信息，方便对系统的了解和快速解决问题•收集系统的统计信息，从而跟踪系统的可用性以及监控系统部件的可靠性•容许对系统进行 24x7x365 监控Autosupport 功能功能- 快速服务–对对“可采取行动可采取行动” 的信息的信息(如告警和硬件故障如告警和硬件故障) ，，系统自动创系统自动创建问题立案建问题立案–如需备件更换，例如磁盘，风扇和电源，系统会根据支持条款，如需备件更换，例如磁盘，风扇和电源，系统会根据支持条款，自动邮寄备件到指定地址自动邮寄备件到指定地址–加快平均故障修复时间加快平均故障修复时间 (MTTR智能智能- Mean Time to Repair) . Autosupport(asup) 功能功能- 主动支持· NetApp公司的 软件工具Panic Message Analyzer (PMA) 分析收到的asup信息 ，判断是否是因为某个bug引起，是否在某个版本中解决。

如果没有的话，系统会提示我们的工程师需要对系统的核心文件进行进一步分析·我们同时亦有另外一个软件分析syslog中的警告信息，判断是否有硬软件部件故障，发现问题时自动创建问题立案，并同时告知用户需采取的行动这样一来，可排除不必要的系统宕机自动自动化流程处理系统的问题化流程处理系统的问题•NetApp邮箱自动接受asup信息•根据信息自动确定问题优先级•对 asup信息逐行进行检查•与NetApp公司的故障数据库进行配对检查•如有配对成功，系统自动生成问题立案•如有其他异常,工程师手动进行处理•将每周日志进行归档NetApp使用专门系统处理使用专门系统处理asup….•该系统功能强大并可扩展•该系统采用独立系统并硬件冗余•对所有asup进行实时处理•所有信息均储存到Oracle数据库中Autosupport 信息信息包括包括...        系统触发的事件        系统主动提示的信息和警告         信息内容的描述定义在                自动化处理自动化处理 •完全自动化处理:- 在系统中自动生成case- 备件更换的自动化处理- 验证用户信息然后结束立案•在ＮＯＷ网站中定义个人资料-自动备件运输-故障发生后，授权配件发送Autosupport – 如何使用·步骤 1: 打开该功能·在NetApp的机器上·请确保 autosupport@ 是其中的一个邮件接受者. 在Now网站中的 ‘Turn on Autosupport’ 一页中详细列出操作指令。

Autosupport 功能无需付费·命令和设置如下:Þautosupport.enable: on,off 缺省为缺省为 on. 此选项用于打开和关闭此选项用于打开和关闭autosupport 的电子邮件功能的电子邮件功能. 如需关闭，如需关闭，需在需在/etc/rc文件中使用：文件中使用：options autosupport.enable off Þautosupport.mailhost: 用逗号间格的邮件服务器列表 缺省为缺省为mailhost. 列表数最大为五个列表数最大为五个. Autosupport逐个测试直到成功为止逐个测试直到成功为止 可在可在/etc/hosts设置：设置：options autosupport.mailhost mercury,venus,mars Þautosupport.to:用逗号间格的邮件列表缺省为缺省为autosupport@.列表数最大为五个列表数最大为五个options autosupport.to sysadm,autosupport@ Þautosupport.noteto:用逗号间格的邮件列表 缺省为空列表数最大为五个4options autosupport.noteto sysadm1@,sysadm2@ Þautosupport.from: 本地用户名缺省为autosupport. 用于电子邮件的回复options autosupport.from sysadm Þautosupport.doit:text 原因 用于电子邮件的标题。

如:options autosupport.doit SYSTEM_INFO ·步骤 2: 正确填写您的联系信息和邮寄地址·确保您的联系信息在六个月内· ·确保您的联系信息在六个月内，以免延迟（超出六个月，我们会重新确认）·信息的修改既可通过，亦可通过我们的Now网站· Autosupport – 如何发送测试信息·为验证信息能被为验证信息能被NetApp收到收到:–使用使用 doit option 命令命令:optionsautosupport.doit ‘正文正文’ –在以下网站中验证在以下网站中验证http://cs-人工检查人工检查Autosupport文件文件 由于特殊原因，你无法将由于特殊原因，你无法将AutosupportAutosupport信息发送到信息发送到 autosupportautosupport@ @, ,您将无法享受您将无法享受AutosupportAutosupport带来的许多好处您只好自己做些工带来的许多好处您只好自己做些工作来弥补在此介绍如何自己解读作来弥补在此介绍如何自己解读AutosupportAutosupport文文件，以了解系统状态件，以了解系统状态. .获取获取Autosupport 文件文件 首先，请你激活（首先，请你激活（enableenable））AutosupportAutosupport。

这样不论是否发送，这样不论是否发送，AutosupportAutosupport 信息将会自动生成于系统中信息将会自动生成于系统中 建议将建议将AutosupportAutosupport信息自动发送至系统管理员的信息自动发送至系统管理员的emailemail信箱信箱 或经或经cifscifs map(windows) map(windows)或或nfsnfs mount( mount(unixunix) )存取存取filerfiler的根卷的根卷/ /volvol/vol0, /vol0, 进进入入/ /etc/log/etc/log/autosupportautosupport目录在此目录下，每个子目录包含了每次目录在此目录下，每个子目录包含了每次autosupportautosupport需发出的文件你可选择目录，将这些文件拷贝出来，自己解读或送给需发出的文件你可选择目录，将这些文件拷贝出来，自己解读或送给NetAppNetApp帮帮你解读你解读 Autosupport 包含的文件及信息包含的文件及信息 autosupport utosupport 文件包含一个文本文件及文件包含一个文本文件及6 6～～7 7个压缩个压缩的系统配置信息文件的系统配置信息文件 :Z:\etc\log\autosupport>dir 200407141703.0.files Volume in drive Z is C$ Volume Serial Number is C401-6B21 Directory of Z:\etc\log\autosupport\200407141703.0.files2004-07-14  17:03