《HP服务器上安装和管理HP 磁盘柜MSA500G23937207649.docx》由会员分享,可在线阅读,更多相关《HP服务器上安装和管理HP 磁盘柜MSA500G23937207649.docx(31页珍藏版)》请在三一办公上搜索。
1、HP服务器上安装和管理HP 磁盘柜MSA500G2(Redhat Linux AS3.0字符环境)目录:l 一、磁盘柜硬件安装;l 二、驱动和工具软件安装;l 三、阵列配置;l 四、系统监控 先给服务器安装操作系统Redhat Linux AS3.0。一、 磁盘柜硬件安装默认的SCSI口认不到MSA500G2控制器,因此服务器必须插一块Smart Array642卡(每台MSA500G2都带2块Smart Array642卡),由于SA642是全长的PCI-X卡,因此服务器必须能提供全长的PCI-X插槽。连接线缆,先开磁盘柜,等2分钟后再开服务器。二、 驱动和工具软件安装1、以超级用户root
2、登录Linux系统,将随盘柜或自己下载的HP SmartStart光盘放入服务器光驱中。(最新SmartStart下载地址:)#mount t iso9660 /dev/cdrom /mnt#cd /mnt/compaq/csp/linux#ls *.sh l2、执行看到的.sh文件,例如#./install760.sh在这个过程中会回答一些系统管理问题,一部份是有关SNMP有关的,一部份是与管理帐号和安全的,可以过后再配(本文第四节),可以使用默认设置,必须输入的先随便输入。这个过程会安装HP驱动(包括网卡驱动)、管理和配置软件。3、检查安装效果#lsmod |grep cciss应该显示
3、ciss 。如没有:#insmod cciss用vi编辑 /etc/rc.local,加入:insmod ccisscpqacuxe R4、 重启服务器#cd /#umount /mnt#reboot三、 阵列配置有三种方式配置阵列:l 方法1:用HP SmartStart CD启动服务器,启用ACU(Array Configuration Utility)配置阵列;(图形界面,最方便使用);l 方法2:用Linux下命令行配置(可以做ACU所有工作,又增加改MSA500G2名称等功能);l 方法3:在网络环境下,在一台PC上用浏览器登录服务器管理界面(System Management Ho
4、mepage),在里面启用ACU-XE,界面和方法1一样。MSA500G2共有颗磁盘,建议仅定义一个磁盘组(Array),包含颗磁盘,此磁盘组划分成4个逻辑盘,分别标记为logical disk1-4,下图,每个逻辑盘都用到个硬盘的一部分(在操作系统看来是4个物理盘)每个逻辑盘采用RAID5模式,第14颗硬盘作为热备援盘。当阵列中某个物理磁盘损坏时,自动加入到阵列中,参与阵列,此时系统从其它磁盘读数据,运算后写入此磁盘,此过程称为重构(rebuild)。从以下(一)、(二)、(三)中挑一个方法来配置成上述效果。(一) 方法11、用HP SmartStart CD启动服务器;启用ACU(Arra
5、y Configuration Utility)工具(要用到鼠标):2、ACU会自动扫描所有的阵列卡(机器内部集成的,Smart Array 642)和MSA500G2;点中MSA500G2;3、观察检测到的硬盘,看有没有事先的设置,如果有且数据不用,删除掉。4、先创建磁盘组(Create Array):5、再分别创建4个逻辑盘(Create Logical Drive):根据需要配置每个逻辑盘的参数:RAID级别,条带大小(stripe size),逻辑盘大小(Logical Drive Size,最后一个用默认)。 ss 是条带大小(stripe size),单位是KB;(性能调优:a.混
6、合读写:使用默认;b.主要连续读,例如语音和视频应用:stripe size调大;c.主要是写:例如图象处理:RAID5或6用小的stripe size,RAID0和1+0用大的stripe size);. raid 级别必须是本控制器能支持的,缺省是RAID6(ADG,可损坏任意两颗硬盘,但性能比RAID5略低8%15%)5、 设置备援盘注:以上配置(RAID5+热备援)与选择14颗硬盘做RAID6(ADG)相比,磁盘利用率都是(14-2)/14; RAID6可靠性更高,但是性能比RAID5低10%左右。保存,退出ACU。(二) 方法2:用命令行的阵列配置1、以超级用户root登录Linux
7、系统,输入阵列配置命令行#cpqacuxe -stop#hpacucli进入阵列配置命令行模式,标记是“=”;可以敲help 进行帮助,常见有关术语见下表:全称缩写解释全称缩写解释adapterid ai适配器ID号serialnumbersn控制器序列号arrayacceleratoraa缓存cacheratiocr读写缓存比率logicaldriveld逻辑盘,即能被操作系统看见的卷physicaldrivepd真实的物理硬盘,操作系统不可见chassisnamech盘柜名字,可自己修改controllerctrl控制器2、扫描和察看阵列卡= rescan= ctrl all show此时
8、应该可以看到SA642和MSA500G2两个控制器,可能是这样显示:MSA500G2 in 22K9LYPN44 (sn=xxxxxxxxxxxxxxxxxx xxxxxxxxxxxxx)Smart Array642 in slot 0 (sn=xxxxxxxxxxxxxxxx )3、将冗长的盘柜名字从22K9LYPN44改成好用好记的= ctrl ch=22K9LYPN44 modify ch=21cn4、设置目标控制器,这样后面命令都是指针对它,可以减少命令行长度=set target ctrl ch=21cn5、查看控制器和其所有物理磁盘和逻辑盘=show=pd all show=ld
9、all show6、选择物理盘,组成磁盘组(Array),创建逻辑盘(卷);一个磁盘组可以划成多个逻辑盘,RAID级别是在逻辑盘指定的,即允许同一磁盘组的不同逻辑盘各采用不同RAID级别。例如本测试里将14颗磁盘做进一个磁盘组,再将它划成5个大小接近的逻辑盘:=create type=ld drives=1:1-1:13 size=420000 ss=32 raid=5=create type=ld drives=1:1-1:13 size=420000 ss=32 raid=5=create type=ld drives=1:1-1:13 size=420000 ss=32 raid=5=c
10、reate type=ld drives=1:1-1:13 ss=32 raid=5以上命令行中:. drives也可以随意选择非连续盘,用逗号(,)分开;. size 后数字的单位是MB;省略的话是采用所有可用空间做逻辑盘(见以上第4行); ss 是条带大小(stripe size),单位是KB;(性能调优:a.混合读写:使用默认;b.主要连续读,例如语音和视频应用:stripe size调大;c.主要是写:例如图象处理:RAID5或6用小的stripe size,RAID0和1+0用大的stripe size);. raid 级别必须是本控制器能支持的,缺省是RAID6(ADG,可损坏任意
11、两颗硬盘,但性能比RAID5略低8%15%)7、配置备援盘=add spares=1:148、查看效果=ld all show=ld 1 show=ld 2 show=ld 3 show=ld 4 show9、为逻辑盘启用阵列控制器缓存(如果新控制器或新缓存在,加电后,电池充电期间,缓存会被控制器禁用,一段时间后缓存才可用)= ld all modify aa=enable10、修改阵列控制器缓存的读写比率,默认设为50% 比50%,可以根据应用环境自行调整。= modify cr=50/50*11、为物理盘启用缓存(MSA500G2不支持)= modify dwc=enable其它设置和命令
12、参阅文档HP Array Configuration Utility User Guide的“Using the Command Line Interface”一节。12、退出=quit#cpqacuxe R(三)方法3第四章第(二)节配好后,从网上其它计算机访问本服务器的管理网页,:http:/机器名或IP:2301或https:/机器名或IP:2381选择HP Array Configuration Utility;具体配置方法同第(一)节。(四)验证设备名#fdisk /dev/cciss/c0d0 rootlocalhost init.d# fdisk /dev/cciss/c0d0T
13、he number of cylinders for this disk is set to 105412.There is nothing wrong with that, but this is larger than 1024,and could in certain setups cause problems with:1) software that runs at boot time (e.g., old versions of LILO)2) booting and partitioning software from other OSs (e.g., DOS FDISK, OS
14、/2 FDISK)Command (m for help): pDisk /dev/cciss/c0d0: 440.4 GB, 440402968064 bytes255 heads, 32 sectors/track, 105412 cylindersUnits = cylinders of 8160 * 512 = 4177920 bytes Device Boot Start End Blocks Id SystemCommand (m for help): q#fdisk /dev/cciss/c0d1#fdisk /dev/cciss/c0d2 #fdisk /dev/cciss/c
15、0d3 如果有2个msa500G2,另外的设备名就是/dev/cciss/c1d0/dev/cciss/c1d1/dev/cciss/c1d2/dev/cciss/c1d3HP DL380G5 内置E200阵列卡配的内置硬盘的设备名是:/dev/cciss/c2d0 (如果分了多个逻辑盘就依次增加)/dev/cciss/c2d1.设备根据具体应用要求使用;一般先建分区(fdisk里用n);然后再直接使用裸设备(例如 /dev/cciss/c0d0p0);也可做成文件系统(#mkfs 设备名)四、 系统监控(一) Linux下基于命令行的察看#cpqacuxe -stop#hpacucli= c
16、trl ch=21cn show= ctrl ch=21cn ld all show= ctrl ch=21cn ld 1 show= ctrl ch=21cn pd all show= ctrl ch=21cn pd 1 show如果一颗硬盘坏,上述含pd命令可看到。此时ld看到。详细方法参阅第三章第(二)节。(二) 管理代理,每台服务器必装必配1、验证和配置网络,开放管理端口(1)判断网卡是否正确被系统识别 # dmesg | grep -i eth0 如果有返回值,例如: eth0: registerted as PCnet/PCI . 说明系统有网卡识别。 # dmesg | grep
17、 -i eth1 如果返回空,则表示系统之有一块网卡。没有eth1。 (2)如何配置网卡地址: netconfig (缺省是eth0) 设置图形下的设置, 例如:10.2.30.35 查看你的设置是否正确。; ifconfig eth0 或者ip addr 还可以通过手动的方式制定IP地址: 例如: ifconfig eth0 10.2.30.35 netmask 255.255.255.0 up route add default gw 10.2.30.254 同样可以达到设置IP地址和网关的目的。 (3) ping 从外部机器ping或者直接连接到 10.2.30.35 ping 10.2
18、.30.35 此时应该可以通。 (5)禁止/设置防火墙功能 # service iptables stop或 #setup在firewall Configuration里选Disabled。如果不允许禁止防火墙,在custom里将网卡,http,ssh设为可用,并增加允许端口:2301,2381,280,50000*2、管理agent安装在第二章,已经在系统安装了管理代理,并提供一个访问接口System Management Homepage;如果修改过用户密码又不记得之前密码,可能需要重新执行第二章的安装。确认agent包已经安装:#rpm q hpasm#rpm q hpsmh3、设置Sy
19、stem Management Homepage帐号、安全#perl /usr/local/hp/hpSMHSetup.pl根据需要设置帐号。账号组别分成管理员、操作员和用户,一般将linux root 账号加到管理员组。根据需要设置安全机制。Trust by Certification 最安全,但是限制最大,方便性受到最大影响;另外有基于名字的信任和完全信任。4、设置SNMP及管理代理有关配置(1)修改SNMP及管理代理有关配置#/etc/init.d/hpasm configure按照提示,注意“community string”要正确。其中一定要输入“Trap Destination”地
20、址,即安装了管理中心软件SIM的管理中心服务器的地址,即后文第(三)节的那台服务器(例如:IP为10.2.30.35)。(2)重启SNMP和管理代理进程#/etc/init.d/hpasm stop#/etc/init.d/snmpd stop#/etc/init.d/snmpd start #/etc/init.d/hpasm start5、访问管理代理(System Management Homepage)从网上其它带浏览器的机器,在浏览器里:http:/机器名或IP:2301或https:/机器名或IP:2381(三) 管理中心System Insight Manager(SIM),负责
21、接收各个服务器和存储信息并负责发起 email提示报警,同一网络环境只需装一台)1、系统准备HP 提供的SIM有Linux,Windows和HP-UX三个版本,任何一个版本可以跨平台管理安装了主流操作的服务器和存储。本指导手册只介绍Linux下SIM的安装;SIM操作则三个版本都是一样的。SIM需要用到数据库,在Linux环境中可以用Oracle和PostgreSQL,本指导手册只介绍安装PostgreSQL。(1) 如果系统已经安装PostgreSQL,需要备份它和删除它,否则到步骤(2)。#rpm -qa | grep postgresqlTo back up your database,
22、 execute the following command:# cp rp /var/lib/pgsql /var/lib/pgsql.oldl# rpm e rh-postgresql-devel# rpm e rh-postgresql-lib# rm rf /var/lib/pgsql /usr/lib/pgsql(2) 要求环境检查# rpm -qa | grep ssh#rpm -qa | grep snmp#rpm -qa | grep compat#rpm -qa | grep glib#rpm -qa | grep gdk-pixbuf没有安装则需要这些Linux包。2、安装
23、SIM下载SIM并上传到管理中心服务器或使用SIM for Linux 光盘:#mount /dev/cdrom /mnt/cdrom#cd /mnt/cdrom#cp /mnt/cdrom/HPSIM-Linux*.bin /tmp#cd /tmp#chmod u+x HPSIM-Linux_C.05.*.bin#./HPSIM-Linux*.bin3、初始化SIM#/opt/mx/bin/mxinitconfig l#/opt/mx/bin/mxstop#/opt/mx/bin/mxinitconfig a这个过程在步骤14时间会比较久,可能持续30分钟或更长。可以用#cat /var/o
24、pt/mx/logs/initconfig.log看完成情况。4、确认进程都正常ps -ef | grep mx可以看见mxdomainmgr, mxinventory 和 mxdtf如果没有,用以下方式启动:#/opt/mx/bin/mxstart#rpm -qa | grep snmp5、验证和配置SNMP设置(1)确认SNMP和管理代理已安装#rpm -qa | grep snmp# rpm -qa | grep hpasm# /etc/init.d/hpasm status(2)验证和配置SNMP设置文件# /etc/init.d/hpasm stop# /etc/init.d/snm
25、pd stop# vi /etc/snmp/snmpd.conf (redhat是此目录,其它Linux可能目录不同)找到 trapsink一行,如果有#号,去掉之前的#号,改成trapsink 10.2.30.35验证或手工添加:rocommunity public 10.2.30.35(这里以管理中心的IP是10.2.30.35 , SNMP 只读community string是“public”为例)保存退出vi.(:wq!)# /etc/init.d/snmpd start# /etc/init.d/hpasm start6、初次使用SIM 和设置从网上其它带浏览器的机器,在浏览器里:
26、http:/机器名或IP:280或https:/机器名或IP:50000用户名和密码是root和root的密码,如果步骤3后改了密码又不记得之前密码,可能需要重新执行步骤3。以下是成功登录后的画面。(1) 配置发现范围点击上图中红圈处;先enable,再edit增加要管理的IP地址区间,默认一般是所在网段的所有IP,可以增加例外(exclude);可以修改自动发现设备的间隔,默认是每天上午11点。再点击 Run Now按键开始搜索。点击右上角的home 链接回到home 页面。(2) 配置邮件报警设置,发起(From)点击email 设置链接;SIM本身并没有邮件服务功能,这里填写SIM所在网
27、络环境中的邮件服务器的真实机器名或IP,填写发送者(from)的邮箱地址,如果此邮箱需要账号、密码,请钩选“Server Requires Authentication”并填入帐号和密码。点击OK并点击右上角的home 链接回到home 页面。(3) 配置邮件报警设置,递送目标(To)点击“Set up Automatic event handing”:使用现有或创建一个事件处理任务:取一个自己喜欢的任务名字:确定哪些类型事件需要发送邮件报警,一般用默认的“重要未清除事件”:钩选 “Send e-mail”和“Write to System Log”,在To:和CC:处填入发送目标的邮箱地址,
28、多个邮箱用逗号隔离,不能用分号,不能是中文全角。在Subject 里填入自己定义的邮件主题内容(邮件正文会是具体事件的描述,不能在这里自己设):(4)确认SIM服务器和e-mail服务器网络能够通,需要设置网关要设置网关,需要加路由的要加路由。按next,“Select time filter”里,如果希望在某段时间不发送,设置它,建议不理会,按next;看看设置的总结:参阅文档:HP Array Configuration Utility User GuideHP System Management Homepage Release Notes;System Management Homep
29、age online helpHP System Management Homepage Installation GuideLinux Trap ID and SNMP Traps HP Systems Insight Manager Installation and Configuration Guide for Linux显示HP MSA 500 配置信息:1以root身份运行 /opt/compaq/hpacucli/bld/hpacucli2输入: ctrl all show MSA500 G2 at M78ELYPN7L (sn: PAB360NX3TQ0BN, csn: M78E
30、LYPN7L)Smart Array 642 in Slot 0 (sn: P9226AJ9SU507S)发现磁盘柜3输入:ctrl csn=M78ELYPN7L show 指令可以看到一半状态。4输入:ctrl csn=M78ELYPN7L physicaldrive all show 察看物理盘使用,5输入:ctrl csn=M78ELYPN7L logicaldrive all show 察看逻辑卷使用,每个逻辑卷对应os看到的一个物理磁盘设备6最后用 fdisk -l 察看分区情况。 HP StorageWorks模块化智能阵列(MSA)家族采用简单、经济、业界领先的技术,提供卓越的存
31、储性能,同时增强投资保护 HP StorageWorks Modular Smart 500 G2 (MSA500 G2) 专门为集群和存储共享而设计。MSA500 G2架构降低了复杂性,减少了集群费用和存储共享。它基于熟悉的智能阵列和HP ProLiant技术,是一个Ultra320 SCSI存储系统,可支持高达2 TB的数据容量。MSA500 G2提供易于部署、配置和管理的高级数据保护特性。此外,MSA500 G2还可转换为SAN阵列,确保提高可扩展性,提供未来扩展的硬件投资。智能阵列架构为从MSA500 G2向MSA1000迁移提供了一个快速、轻松的途径,从而提高了可扩展性。MSA500
32、 G2将阵列控制器托架和驱动器托架结合在一起,可在1个4U机架安装式机柜中安装多达14个HP通用磁盘驱动器,提供超过2 TB的存储容量。 主要特性与优点 提供新的快速驱动器重建技术:提高RAID 5和RAID ADG驱动器重建的速度 采用选择性存储演示(SSP)技术:提供多服务器的存储共享(逻辑单元数掩码) 支持14个Ultra 320、Ultra3和Ultra2 HP通用驱动器:提供2TB容量(14个146.8 GB的HP通用磁盘驱动器) 提供覆盖磁盘驱动器的故障前保修:保护IT投资 具备从存储设备启动的功能:将所有磁盘转换为外部存储设备,以便充分地利用容量 为Microsoft、Linux
33、和NetWare提供集群支持 技术规格 HP StorageWorks Modular Smart Array 500 G2 Modular Smart Array 500 G2 接口:连接硬盘驱动器的Ultra320 SCSI接口,连接主机服务器的Ultra320 SCSI接口 最大驱动器数:14个1英寸Ultra320、Ultra3或Ultra2通用硬盘驱动器(Modular Smart Array 500 G2机柜) 端口:2端口SCSI I/O - 2个VHDCI Ultra320 SCSI端口 Modular Smart Array 500 G2控制器 支持的协议:Wide Ultr
34、a320 SCSI(每个通道320 MB/s) SCSI通道:总计4个,2个Ultra320 SCSI通道支持多达4台主机服务器,2个Ultra320 SCSI 通道支持14个磁盘驱动器(每个通道7个驱动器),640 MB/s最大传输率 支持的驱动器数:多达14个驱动器 最大容量:2 TB(14个驱动器x 146.8 GB) 逻辑驱动器:多达32个逻辑驱动器 RAID支持:RAID ADG(高级数据保护); RAID 5(分布式数据保护); RAID 1+0 (条带化和镜像); RAID 1(镜像); RAID 0(条带化) 高速缓冲存储器:标配256 MB读/写缓存;使用第二个256 MB缓
35、存模块提供高达512 MB读/写缓存;ECC保护,电池支持,可拆除; 注:模块化智能阵列控制器允许采用下列缓存配置:1 x 256 MB; 2 x 256 MB。安装冗余控制器时,两个控制器中的缓存配置必须相同。 支持的磁盘驱动器和机柜协议:HP Ultra 320、Ultra3和Ultra2 SCSI 1英寸通用驱动器 Smart Array 642适配器 协议:Ultra320 SCSI SCSI端口连接器:1个外部和1个内部SCSI端口 通道传输率:总计640 MB/s, 每个通道320 MB/s PCI总线速度:64位,133 MHz PCI-X (最大带宽1 GB/s) PCI:仅兼
36、容3.3伏CPI插槽 MSA500 G2 4端口I/O模块(选件) 连接器类型:VHDCI Ultra320 SCSI 端口:4个Ultra320 SCSI 带宽:每个端口320 MB/s 支持的协议/HBA:Ultra320、Ultra3和Ultra2 SCSI/Smart Array 532、Smart Array 5i适配器 MSA500 G2高可用性套件 此套件提供为MSA500 G2添加完全冗余或支持多达4台服务器所需的全部功能。包括1个MSA500 G2控制器,1个MSA500 G2 4端口I/O模块,2个Smart Array 642适配器,Smart Array Multipath IO软件,以及2个6英尺SCSI电缆