江西省电信有限公司系统维护手册.doc

《江西省电信有限公司系统维护手册.doc》由会员分享，可在线阅读，更多相关《江西省电信有限公司系统维护手册.doc（97页珍藏版）》请在三一办公上搜索。

1、 江西省电信有限公司网上客服中心系统系统维护手册江西电信IT技术支撑中心二OO六年十二月第一章、服务器配置及相关规划1一网络拓扑结构图1二服务器配置表1三IP地址规划2第二章、数据库维护手册4一、 前言4二、 HACMP操作4三、 RAC的操作4四、 完整的操作步骤41 启动42 关闭5第三章、LVS维护手册6一、 前言6二、 配置 LVS 路由器上的服务6三、 配置 LVS 路由器61 必要软件72 登录 Piranha 配置工具73 CONTROL/MONITORING84 GLOBAL SETTINGS105 REDUNDANCY116 VIRTUAL SERVERS13四、 同步配置文

2、件19五、 启动群集20第四章、HACMP5.3配置及维护21一、 需求分析21二、 环境说明21三、 设计规划221 IP及拓扑设计222 资源组命名263 应用服务器建立264 配置资源组265 hosts文件设计26四、 实施步骤271 环境准备272 HACMP配置273 同步HACMP配置并启动HACMP334 创建concurrent vg，并创建资源组345 同步HACMP配置并启动HACMP39五、 附录401 相关文件402 问题集锦42第五章、VERITAS备份维护手册53一、 前言53二、 备份的恢复(文件系统恢复)531 备份的恢复（Oracle数据库恢复）582 备份

3、的恢复（Oracle数据库基于时间点恢复步骤）593 备份的恢复（归档日志的恢复）60三、 NetBackup 常用命令行介绍60四、 NetBackup 常见问题62第六章、F5 BIGIP 1500维护手册67一、 服务器健康状况监控671 定义特别的健康检查方法672 绑定对服务器的检查方法68二、 服务器双机HA设置69三、 系统监控和日志711 系统日志72四、 设备管理731 多级管理员权限控制732 系统配置备份和恢复73五、 日常运维管理751 2/3层网络联通性检查752 47层应用负载均衡检查753 F5 BIG-IP设备的运维管理75第七章、防火墙维护手册78一连接外网S

4、ecpath 500F防火墙及3528交换机781路由782安全策略79二连接外网Secpath 500F防火墙及3528交换机801路由802安全策略81第八章、DS4300磁盘阵列规划和配置83一DS4300磁盘阵列规划83二DS4300磁盘阵列配置过程83第九章、B16光纤交换机维护及激活93第一章、 服务器配置及相关规划一网络拓扑结构图二服务器配置表服务器IP操作系统安装软件Web 1134.224.15.21RHEL 4 ASWEBLOGIC 816Web 2134.224.15.22RHEL 4 ASWEBLOGIC 816APP 1134.224.15.23RHEL 4 ASWE

5、BLOGIC 816APP 1134.224.15.24RHEL 4 ASWEBLOGIC 816INTERFACE 1134.224.15.139RHEL 4 ASWEBLOGIC 816、 CLUSTER SUITEINTERFACE 2134.224.15.140RHEL 4 ASWEBLOGIC 816、CLUSTER SUITEDB server1134.224.15.132(130)AIX HACMP,ORA9i RACDB server2134.224.15.133(131)AIX HACMP,ORA9i RAC三IP地址规划序号设备名称IP地址子网掩码网关1数据库服务器A134

6、.224.15.132255.255.255.224134.224.15.158 数据库服务器A虚拟地址134.224.15.1302数据库服务器B134.224.15.133255.255.255.224134.224.15.158数据库服务器B虚拟地址134.224.15.1313应用服务器A134.224.15.23255.255.255.128134.224.15.1264应用服务器B134.224.15.24255.255.255.128134.224.15.126应用服务器虚拟地址134.224.15.25负载均衡F5-1134.224.15.123/256负载均衡F5-2134.

7、224.15.122/25F5虚拟地址134.224.15.1267WEB服务器A134.224.15.21255.255.255.128134.224.15.1268WEB服务器B134.224.15.22255.255.255.128134.224.15.126WEB服务器虚拟地址134.224.15.113邮件服务器134.224.15.2514接口服务器-1134.224.15.139255.255.255.128134.224.15.12615接口服务器-2134.224.15.140255.255.255.128134.224.15.126接口服务器虚拟地址134.224.15.1

8、4116S3528P-1134.224.15.12417S3528P-2134.224.15.125虚拟地址134.224.15.12118认证服务器1(wtrz1)134.224.15.30认证服务器2(wtrz2)134.224.15.31第二章、 数据库维护手册一、 前言本部分包括数据库服务器上HACMP的启动与关闭,数据库的启动与关闭的最常用的操作说明。二、 HACMP操作HACMP的启动： smit clstart HACMP的关闭：smit clstop三、 RAC的操作启动监听服务器：lsnrctl start关闭监听服务器：lsnrctl stop查看监听状态：lsnrctl

9、status启动RAC服务：gsdctl start关闭RAC服务：gsdctl stop 查看RAC状态：gstctl stat 启动数据库实例：srvctl start database -d ora92关闭数据库实例：srvctl stop database -d ora92查看数据库实例状态：srvctl status database -d ora92四、 完整的操作步骤1 启动1)用root用户登录，启动hasmit clstart注意查看服务器状态netstat -in 查看地址状态，当服务器真实地址变为虚拟地址时，方可进行下一步。lspv 查看卷组，当datavg被挂上之后才可

10、能进行下一步。2)转变到oracle用户登录，启动监听服务lsnrctl start3)启动oraclegsdctl startsrvctl start database -d ora922 关闭1) 关闭oracle,用oracle用户任意一台机上执行srvctl stop database -d ora92在两台上分别执行gsdctl stop2)关闭监听服务lsnrctl stop 2)关闭ha,用root用户在两台上分别执行smit clstop注意用下面两条命令查看服务器状态netstat -in 查看地址状态，确定ip已经由虚拟ip变回真实iplspv 查看阵列，确定阵列已经正常卸

11、载lsvg l 第三章、 LVS维护手册一、 前言本部分内容包括LVS服务的启动和关闭，以及图形化界面的配置。二、 配置 LVS 路由器上的服务红帽企业 Linux 安装程序安装所有所需的部件来设置 LVS 群集，但是在配置群集前你必须激活恰当的服务。对于 LVS 路由器来说，设置要在引导时激活的恰当服务。设置服务在红帽企业 Linux 引导时激活的主要工具有三个：命令行程序 chkconfig；基于 ncurses 的 ntsysv 程序；以及图形化的服务配置工具。这三个工具都需要根访问权限。 LVS 路由器上有三个需要在引导时被激活的服务： piranha-gui 服务（只有在主节点上）

12、pulse 服务 sshd 服务如果要集群多端口的服务或使用防火墙标记（firewall marks），必须还启用 iptables 服务。最后设置这些服务在运行级别 3 和 5 中激活。要使用 chkconfig 来达到这个目的，给每个服务运行以下命令： /sbin/chkconfig -level 35 piranha-gui on/sbin/chkconfig -level 35 pulse on/sbin/chkconfig -level 35 sshd on要获得系统服务的列表以及它们被激活的运行级别，使用以下命令： /sbin/chkconfig -list三、 配置 LVS 路由

13、器Piranha 配置工具为 Piranha 群集创建必要的配置文件 /etc/sysconfig/ha/lvs.cf 提供了一种比较有结构的方法。本章描述了 Piranha 配置工具的基本操作，以及配置结束后该如何激活群集。1 必要软件要使用 Piranha 配置工具，主 LVS 路由器上必须运行 piranha-gui 服务，你至少需要一个仅文本的万维网浏览器，如 links。如果你要从另一个机器进入 LVS 路由器，你还需要根用户身份的到主 LVS 路由器的 ssh 连接。 在配置主 LVS 路由器时，在终端窗口中保持一个并行的 ssh 连接是一个好办法。该连接会为重启 pulse 和其

14、它服务、配置网络分组过滤器、以及故障排除期间监视 /var/log/messages 等提供一种安全方法。 2 登录 Piranha 配置工具在配置 LVS 群集时，你总是应该从使用 Piranha 配置工具配置主路由器着手。要配置它，请校验 piranha-gui 的确在运行，并且设置了管理口令。 如果你从本地进入机器，你可以在一个万维网浏览器中打开 http:/localhost:3636 来使用 Piranha 配置工具。否则，键入服务器的真正 IP 地址或主机名再跟随 :3636。浏览器连接后，你就会看到如下所示的屏幕图 12-1. 欢迎面板点击 Login 按钮，在 Username

15、 中输入 piranha，在 Password 字段中输入你创建的管理口令。 Piranha 配置工具有四个主要屏幕或面板（panels）。此外，Virtual Servers 面板包含四个子节（subsections）。CONTROL/MONITORING 面板是登录屏幕后的第一个面板。 3 CONTROL/MONITORINGCONTROL/MONITORING 面板向群集管理员显示了一个有限的群集运行时间状态。它显示了 pulse 守护进程的状态、LVS 选路表、以及 LVS 生出的 nanny 进程。 Auto update 在这一页上显示的状态可以按照用户配置的间隔被自动更新。要启用

16、这项功能，点击 Auto update 复选箱，在 Update Interval: 文本箱内输入想要的更新频率（默认为10秒）。 推荐你不要把自动更新间隔设置为小于10秒的值。这么做会使你很难重新配置 Auto update 间隔，因为页面会过分频繁地被更新。如果你碰到了这个问题，只需点击另一个面板，然后再回到 CONTROL/MONITORING 即可。 Auto update 功能不能在所有浏览器上（如 Mozilla）运行。 Update information now 你可以点击这个按钮来手工更新状态信息。 CHANGE PASSWORD 点击这个按钮把你带到帮助屏幕，该屏幕包括如何

17、改变 Piranha 配置工具的管理口令的信息。 4 GLOBAL SETTINGSGLOBAL SETTINGS 是群集管理员为主 LVS 路由器的公共和专用网络接口定义联网细节的地方。 图 12-3. GLOBAL SETTINGS 面板面板的上半部设置主 LVS 路由器的公共和专用网络接口。这些是已经配置的接口。 Primary server public IP 在这个字段中，输入主 LVS 节点的可公开选路的真正 IP 地址。 Primary server private IP 输入主 LVS 节点上的另一个网络接口的真正 IP 地址。该地址仅被用作备份路由器的另一个心跳频道，它不必和

18、真正专用 IP 地址互连。你可以把这个字段留为空白，但是这就意味着备份 LVS 路由器无法使用另外的心跳频道，从而造成单一失效点。 Use network type 点击 NAT 按钮来选择 NAT 选路。随后的三个字段是 NAT 路由器的虚拟网络接口特有的。这些网络接口连接专用网络和真正服务器。 NAT Router IP 在这个文本自动中输入专用浮动 IP 地址。该 IP 地址应该被用作真正服务器的网关。 NAT Router netmask 如果 NAT 路由器的浮动 IP 地址需要一个特殊的子网掩码，从拉下菜单中选择它。 NAT Router device 使用这个文本字段来定义浮动

19、IP 地址的网络接口的设备名称，如 eth1:1。 5 REDUNDANCYREDUNDANCY 面板允许你配置备份 LVS 路由器节点，以及设置各类心跳监视选项。Redundant server public IP 输入备份 LVS 路由器节点的公共真正 IP 地址。 Redundant server private IP 在这个文本字段中输入备份节点的专用真正 IP 地址。 如果你看不到 Redundant server private IP，回到 GLOBAL SETTINGS 面板，输入 Primary server private IP 地址，并点击 ACCEPT。 面板上的剩余部分

20、被用来配置心跳频道，它被备份节点用来监视主节点上的失效情况。 Heartbeat Interval (seconds) 该字段被设置为心跳之间的秒数 备份节点检查主 LVS 节点的功能状态的间隔。 Assume dead after (seconds) 如果主 LVS 节点在几秒钟后没有答复，那么备份 LVS 路由器节点就会发起失效转移。 Heartbeat runs on port 该字段设置到主 LVS 节点的心跳通信端口。若留为空白，默认值就会被设为539。 6 VIRTUAL SERVERSVIRTUAL SERVERS 面板为每个当前定义的虚拟服务器显示信息。每个表格项目都显示了虚拟

21、服务器的状态、服务器名称、给服务器分配的虚拟 IP 地址、虚拟 IP 的子网掩码、服务通信所用的端口号码、所用协议、以及虚拟设备接口。 图 12-5. VIRTUAL SERVERS 面板VIRTUAL SERVERS 面板中显示的每个服务器都可以在随后的屏幕或子节（subsections）中被配置。 要添加服务，点击 ADD 按钮。要删除服务，选择该服务，点击它旁边的单选按钮，然后点击 DELETE 按钮。 要启用或禁用表中的虚拟服务器，点击它的单选按钮，然后点击 (DE)ACTIVATE 按钮。 添加了虚拟服务器后，你可以配置它。点击它旁边的单选按钮然后点击 EDIT 按钮来显示 VIRT

22、UAL SERVER 子节。 VIRTUAL SERVER 子节面板允许你配置个别虚拟服务器。到相关子节的链接位于页面顶端。在配置任何与这个虚拟服务器相关的子节时，请首先完成这一页并点击 ACCEPT 按钮。图 12-6. VIRTUAL SERVERS 子节Name 输入识别虚拟服务器的描述性名称。这个名称不是机器的主机名，因此请尽可能地使用描述性的可识别名称。你甚至可以引用虚拟服务器使用的协议，如 HTTP。 Application port 输入服务程序将会监听的端口号码。因为我们使用 HTTP 服务为例，端口被设为80。 Protocol 在拉下菜单中选择 UDP 或 TCP。万维网服

23、务器通常通过 TCP 协议通信，因此在上面的例子中选择了 TCP。 Virtual IP Address 在这个文本字段中输入虚拟服务器的浮动 IP 地址。 Virtual IP Network Mask 使用下拉菜单为虚拟服务器设置子网掩码。 Firewall Mark 不要在这个字段中输入防火墙标记号码，除非你要捆绑多端口协议或为分开的却又相关的协议创建一个多端口虚拟服务器。以上服务器的 Firewall Mark 是80，这是因为我们把到端口80的 HTTP 连接和到端口443的 HTTPS 连接都捆绑在一起使用防火墙标记80。当和持续性综合使用时，这种技术会确保获取不安全或安全网页的用

24、户都会被选路发送到同一真正主机，从而保留状态。Device 输入你想让在 Virtual IP Address 字段中定义的浮动 IP 地址绑定的网络设备的名称。 你应该把公共浮动 IP 地址的别名定为连接公共网络的以太网接口。在这个例子中，公共网络位于 eth0 接口，因此 eth0:1 就应该是设备名称。 Re-entry Time 输入以秒为单位的时间，必须是整数值。这个时间是活跃 LVS 路由器试图把某个失效的真正服务器重新加入群集之前必须经过的时间。 Service Timeout 输入以秒为单位的时间，必须是整数值。这个时间是真正服务器被认为已失效并从群集中删除之前所必须经过的时间

25、。 Quiesce server 当选择了 Quiesce server 单选按钮时，无论何时某个新的真正服务器节点联机，最少连接表都会被重设为零，因此活跃 LVS 路由器就会选路发送所有请求，如同所有真正服务器都被重新加入群集一样。这个选项防止了新服务器在进入群集时对大量连接应接不暇。 Load monitoring tool LVS 路由器能够使用 rup 或 ruptime 来监视各个真正服务器的载量。如果你从拉下菜单中选择了 rup，每个真正服务器就必须运行 rstatd 服务。如果选择了 ruptime，每个真正服务器就必须运行 rwhod 服务。 Scheduling 从拉下菜单中

26、选择优选的调度算式。默认为 Weighted least-connection。 Persistence 如果管理员需要在客户传输事务期间具备到虚拟服务器的持续性连接，在这个文本字段中输入连接超时前所允许经过的不活跃期间的秒数。 Persistence Network Mask 要限制某个特定子网的持续性，从拉下菜单中选择相应的子网掩码。 REAL SERVER 子节链接显示了某个特定虚拟服务的物理服务器主机的状态。点击 ADD 按钮来添加一个新服务器。要删除一个现存服务器，选择它旁边的单选按钮，然后点击 DELETE 按钮。点击 EDIT 按钮来载入 EDIT REAL SERVER 面板。

27、该面板上有三个项目字段： Name 一个用于真正服务器的描述性名称。 Address 真正服务器的 IP 地址。由于相关虚拟服务器的监听端口已经被指定，你不必添加端口号码。 Weight 一个表明和集合内其它主机相比而言的主机能力的整数值。这个值可以是任意的，但是请把它当作和群集中其它真正服务器的比例对待。EDIT MONITORING SCRIPTS 子节允许管理员指定 send/expect 字符串序列来校验每个真正服务器上的虚拟服务器都能正常功能。在这里，管理员还可以指定定制脚本来检查需要动态改变数据的服务。Sending Program 关于更高级的服务校验信息，你需要使用这个字段来指

28、定到服务检查脚本的路径。该功能对于需要动态改变数据的服务（如 HTTPS 或 SSL）特别有用。 要使用该功能，你必须编写一个而能够返回文本答复的脚本，把它设置为可执行，然后在 Sending Program 字段中键入该脚本的路径。在编写外部服务检查脚本时，你可以参照以下脚本范例： #!/bin/shTEST=dig -t soa $1 | grep -c if $TEST != 1 ; thenecho OKelseecho FAILfiSend 在这个字段中输入 nanny 守护进程发送给每个真正服务器的字符串。按照默认设置，该字段会为 HTTP 填充。你可以根据需要来改变这个值。如果你

29、把这个字段留为空白，nanny 守护进程会试图打开端口，若成功则假定该服务正在运行。 这个字段中只允许一个 send 序列，而且它只能包含可打印的、ASCII 字符以及下列转义序列： n 代表新行。 r 代表换行。 t 代表制表符。 转义跟随其后的字符。 Expect 输入服务器正常运行时应该返回的文本答复。如果你自行编写了发送程序，输入发送成功后的答复。 使用 Piranha 配置工具配置了虚拟服务器后，你必须把指定的配置文件复制到备份 LVS 路由器上。四、 同步配置文件配置了主 LVS 路由器后，在启动群集前，把几个配置文件复制到备份 LVS 路由器上。 这些文件包括： /etc/sys

30、config/ha/lvs.cf LVS 路由器的配置文件。 最佳途径是使用 scp 命令。以根用户身份从主 LVS 路由器启用以下命令来同步路由器之间的 lvs.cf 文件： scp /etc/sysconfig/ha/lvs.cf 134.224.15.140:/etc/sysconfig/ha/lvs.cf /etc/sysctl 在内核中启用分组转发的配置文件。 /etc/sysconfig/iptables 如果你使用了防火墙标记，你应该根据所使用的网络分组过滤器来同步其中的一个文件。 以根用户身份从主 LVS 路由器输入以下命令： scp /etc/sysconfig/iptabl

31、es 134.224.15.140:/etc/sysconfig/以根用户身份登录到机器上，键入以下命令： /sbin/service iptables restart当你使用 Piranha 配置工具来配置群集时，/etc/sysctl.conf 和 /etc/sysconfig/iptables 文件不会改变。五、 启动群集要启动 LVS 群集，最好是同时打开两个根终端，或两个到主 LVS 路由器的 ssh 会话。 在一个终端里，使用以下命令来观察内核日志消息： tail -f /var/log/messages在另一个终端里，键入以下命令来启动群集： /sbin/service puls

32、e start观察终端上的内核日志消息来跟踪 pulse 服务器的启动进度。该守护进程被正确启动，如果你看到了以下输出： gratuitous lvs arps finished第四章、 HACMP5.3配置及维护一、 需求分析在本次HACMP实施中采用双机并行的运行模式，即：两台P55A主机上安装Oracle 9i RAC产品，HACMP版本为5.3,操作系统为AIX5305.二、 环境说明主机名信息备注主机1Jxwt_dbsrv1System Model: IBM,9133-55AMachine Serial Number: Processor Type: PowerPC_POWER5+N

33、umber Of Processors: 2Processor Clock Speed: 1648 MHzCPU Type: 64-bitKernel Type: 64-bitLPAR Info: 1 06-E64EGMemory Size: 5888 MBDisk:146G*2AIX 5300-05Hacmp：5.3主机2Jxwt_dbsrv2System Model: IBM,9133-55AMachine Serial Number: Processor Type: PowerPC_POWER5+Number Of Processors: 2Processor Clock Speed:

34、1648 MHzCPU Type: 64-bitKernel Type: 64-bitLPAR Info: 1 06-E64DGMemory Size: 5888 MBDisk:146G*2AIX 5300-05Hacmp：5.3三、 设计规划1 IP及拓扑设计cluster namemyclusternode nameJxwt_dbsvr1ip labeldb1_bootdb1_stdbydb1_svrdb1_prvnetwork typeethernetethernetethernetethernetnetwork attributepublicpublicpublicprivateip

35、aliasdisabledisabledisabledisablenetwork namenet_ether_01net_ether_01net_ether_01net_ether_02ip address134.224.15.132192.168.1.1134.224.15.130192.168.2.1adapter functionbootstandbyserviceprivateadapter nameEn0En1En2cluster namemyclusternode nameJxwt_dbsvr1ip labeldb2_bootdb2_stdbydb2_svrdb2_prvnetwo

36、rk typeethernetethernetethernetethernetnetwork attributepublicpublicpublicprivateip aliasdisabledisabledisabledisablenetwork namenet_ether_01net_ether_01net_ether_01net_ether_02ip address134.224.15.133192.168.1.2134.224.15.131192.168.2.2adapter functionbootstandbyserviceprivateadapter nameEn0En1En22

37、 资源组命名Res.Grp.NameNode Rel.Part.Node NamedbrgconcurrentJxwt_dbsvr1, Jxwt_dbsvr2dbrg1cascadingJxwt_dbsvr1dbrg2cascadingJxwt_dbsvr23 应用服务器建立App NameStart ScriptStop Scriptdbapp/usr/bin/start.sh/usr/bin/stop.sh4 配置资源组Res. Grp.NameService IPVolume GroupApplication Serversdbrgdatavgdbappdbrg1db1_svrdbrg2

38、db2_svr5 hosts文件设计127.0.0.1loopback localhost Jxwt_dbsvr1/2# loopback (lo0) name/address134.224.15.132 db1_boot jxwt_dbsvr1192.168.1.1 db1_stdby192.168.2.1 db1_prv134.224.15.133 db2_boot jxwt_dbsvr2192.168.1.2 db2_stdby192.168.2.2 db2_prv134.224.15.130 db1_svr134.224.15.131 db2_svr四、 实施步骤1 环境准备序号内容项

39、内容备注1.安装HACMP软件2.打HACMP补丁IY848833.重起主机4.检查补丁检查补丁是否已经打上5.修改/sbin/rc.boot#Modified By Sinosoft For Hacmp Software Start#nohup /usr/sbin/syncd 60 /dev/null 2&1 &nohup /usr/sbin/syncd 10 /dev/null 2&1 &#Modified By Sinosoft For Hacmp Software End6.修改water marksmit system -Change / Show Characteristics o

40、f Operating SystemHIGH water mark for pending write I/Os per file 33 LOW water mark for pending write I/Os per file 24 2 HACMP配置a） 让HACMP主动认双机配置 HACMP for AIXMove cursor to desired item and press Enter. Initialization and Standard Configuration Extended Configuration System Management (C-SPOC) Probl

41、em Determination Tools nitialization and Standard ConfigurationMove cursor to desired item and press Enter. Two-Node Cluster Configuration Assistant Add Nodes to an HACMP Cluster Configure Resources to Make Highly Available Configure HACMP Resource Groups Verify and Synchronize HACMP Configuration H

42、ACMP Cluster Test Tool Display HACMP Configuration Configure Nodes to an HACMP Cluster (standard)Type or select values in entry fields.Press Enter AFTER making all desired changes. Entry Fields* Cluster Name mycluster New Nodes (via selected communication paths) jxwt_dbsvr1 Entry Fields* Cluster Name testcluster New Nodes (via selected communication paths) jxwt_dbsvr2 Currently Configured Node(s) jxwt_dbsvr1在这一过程中，HACMP会认出在/etc/hosts文件中配置的所有信息，并进行分类，配置如下：Node:testdb01NetWork: net_ether_01Adapter:db1_console1,db1_prvNetWork: net_ether_02Adapter:db1_boot,db1_stdby=Node:testdb