IBM-小型機日常管理及故障處理

1、1IBM 小型機小型機日常管理與故障處理日常管理與故障處理2內(nèi)容提要內(nèi)容提要 系統(tǒng)健康檢查 HMC的使用 ASMI 的使用 常用操作 故障的處理 IBM 服務(wù)熱線3系統(tǒng)健康檢查系統(tǒng)健康檢查4系統(tǒng)健康檢查系統(tǒng)健康檢查 巡檢用戶：xunjian（普通權(quán)限）。 至/tmp/xunjian/ 目錄下執(zhí)行common_check.sh腳本。 查看輸出的日志：more pxxx20160920.log，進(jìn)行系統(tǒng)的狀態(tài)查看。5系統(tǒng)健康檢查系統(tǒng)健康檢查 檢查文件系統(tǒng) 查看有沒有“滿”的文件系統(tǒng)。文件系統(tǒng)滿可導(dǎo)致系統(tǒng)不能正常工作，尤其是AIX的基本文件系統(tǒng)。如/ (根文件系統(tǒng))滿則會導(dǎo)致用戶不能登錄。# df

2、-k # df -k ( (查看查看AIXAIX的基本文件系統(tǒng)的基本文件系統(tǒng)) )Filesystem 1024-blocks Free %Used Iused %Iused Mounted onFilesystem 1024-blocks Free %Used Iused %Iused Mounted on/dev/hd4 24576 1452 95% 2599 22% /dev/hd4 24576 1452 95% 2599 22% /dev/hd2 614400 28068 96% 22967 15% /usr/dev/hd2 614400 28068 96% 22967 15% /us

3、r/dev/hd9var 8192 4540 45% 649 32% /var/dev/hd9var 8192 4540 45% 649 32% /var/dev/hd3 167936 157968 6% 89 1% /tmp/dev/hd3 167936 157968 6% 89 1% /tmp/dev/hd1 16384 5332 68% 1402 35% /home/dev/hd1 16384 5332 68% 1402 35% /home6系統(tǒng)健康檢查系統(tǒng)健康檢查 查看卷組信息 lsvg -l vg_name 有沒有stale狀態(tài)的邏輯卷。 用syncvg 命令修復(fù)。# smitty

4、syncvgLV NAME TYPE LPs PPs PVs LV STATE MOUNT POINTLV NAME TYPE LPs PPs PVs LV STATE MOUNT POINThd5 boot 1 2 2 closed/hd5 boot 1 2 2 closed/syncd syncd N/A N/Ahd6 paging 48 96 2 open/hd6 paging 48 96 2 open/syncdsyncd N/A N/Apaging00 paging 32 64 2 open/paging00 paging 32 64 2 open/syncdsyncd N/A N/

5、Ahd8 jfslog 1 2 2 open/hd8 jfslog 1 2 2 open/syncdsyncd N/A N/Ahd4 jfs 1 2 2 open/hd4 jfs 1 2 2 open/stale stale / /hd2 jfs 32 64 2 open/hd2 jfs 32 64 2 open/syncdsyncd /usr /usrhd9var jfs 5 10 2 open/hd9var jfs 5 10 2 open/syncdsyncd /var /varhd3 jfs 4 8 2 open/hd3 jfs 4 8 2 open/syncdsyncd /tmp /t

6、mphd1 jfs 1 2 2 open/hd1 jfs 1 2 2 open/syncdsyncd /home /home7系統(tǒng)健康檢查系統(tǒng)健康檢查 網(wǎng)絡(luò)檢查 netstat -i 查看網(wǎng)卡狀態(tài) Ierrs/Ipkts 和 Oerrs/Opkts是否1% ping host_name /IP Address 查看是否通和是否有丟包。 路由表 #netstat -rn 查看路由表是否正確，ping 各路由器是否通。 核 對 主 機 名 #hostname8系統(tǒng)健康檢查系統(tǒng)健康檢查 #ifconfig -aen0: en0: flags=4e080863UP,BROADCAST,NOTRAILE

7、RS,RUNNING,SIMPLEX,MULTICAST,GROUPRT,flags=4e08086364BIT,PSEGinet 172.40.10.31 netmask 0 xffff0000 broadcast 172.40.255.255inet 172.40.10.31 netmask 0 xffff0000 broadcast 172.40.255.255lo0: lo0: flags=e08084bUP,BROADCAST,LOOPBACK,RUNNING,SIMPLEX,MULTICAST,GROUPRT,64Bflags=e08084bITinet 127.0.0.1 net

8、mask 0 xff000000 broadcast 127.255.255.255inet 127.0.0.1 netmask 0 xff000000 broadcast 127.255.255.255inet6 :1/0inet6 :1/09系統(tǒng)健康檢查系統(tǒng)健康檢查 #lsattr El inet0#lsattr El inet0authm 65536 Authentication Methods Trueauthm 65536 Authentication Methods Truehostname qtsms Host Name Truehostname qtsms Host Name

9、Truegateway Gateway Truegateway Gateway Trueroute netroute net,0,172.40.10.1,0,172.40.10.1 Route True Route Truebootup_option no Serial Optical Network Interface Truebootup_option no Serial Optical Network Interface Truerout6 FDDI Network Interface Truerout6 FDDI Network Interface Trueroute屬性是否有相應(yīng)的路

10、由信息。格式為：屬性是否有相應(yīng)的路由信息。格式為：net,0,172.16.23.81如果沒有缺省路由如果沒有缺省路由,執(zhí)行命令：執(zhí)行命令：#chdev l inet0 a route=0,172.16.23.81其中其中172.16.23.81為網(wǎng)關(guān)為網(wǎng)關(guān)如果缺省路由不正確，則先刪除路由如果缺省路由不正確，則先刪除路由,再增加缺省路由再增加缺省路由:#chdev l inet0 a delroute= net,0,133.16.23.81#chdev l inet0 a route=0,172.16.23.8110系統(tǒng)健康檢查系統(tǒng)健康檢查 系統(tǒng)故障記錄(errorlog) errdemon

11、進(jìn)程在系統(tǒng)啟動時自動運行 記錄包括硬件、軟件及其他操作信息 故障記錄文件為/var/adm/ras/errlog，可備份下來或拷貝到別的機器上分析 errpt 命令的使用(普通用戶權(quán)限也可使用)11系統(tǒng)健康檢查系統(tǒng)健康檢查#errpt |more 列出簡短出錯信息ERROR_ID TIMESTAMP T C RESOURCE_NAME ERROR_DESCRIPTION192AC071 0723100300 T 0 errdemon Error logging turned off0E017ED1 0720131000 P H mem2 Memory failure9DBCFDEE 07010

12、00000 T 0 errdemon Error logging turned on038F2580 0624131000 U H scdisk0 UNDETERMINED ERRORAA8AB241 0405130900 T O OPERATOR OPERATOR NOTIFICATIONTIMESTAMP: MMDDHHMMYY (月日時分年）T（類型）: P 永久; T 臨時; U 未知（永久性的錯誤應(yīng)引起重視）C（分類）: H 硬件; S 軟件; O 用戶; U未知#errpt -d H 列出所有硬件出錯信息#errpt -d S 列出所有軟件出錯信息#errpt -aj ERROR_

13、ID 列出詳細(xì)出錯信息12系統(tǒng)健康檢查系統(tǒng)健康檢查# errpt -aj 0502f666- ERROR_ID用大小寫均可LABEL: SCSI_ERR1ID: 0502F666Date/Time: Jun 19 22:29:51Sequence Number: 95Machine ID: 123456789012Node ID: host1Class: HType: PERMResource Name: scsi0Resource Class: adapterResource Type: hscsiLocation: 00-08VPD:System Management (C-SPOC)-R

14、esource Group and Applications-Move Resource Groups to Another Node35常用操作常用操作-HACMP的資源切換的資源切換36 Administration Guide Concepts and Facilities Guide HACMP Troubleshooting Guide Planning and Installation Guide 以上文檔可以在隨機所帶的光盤上找到常用操作常用操作-HACMP參考文檔參考文檔37故障處理故障處理38故障處理故障處理-故障的定義故障的定義 弄清楚系統(tǒng)發(fā)生了什么問題 系統(tǒng)現(xiàn)在能做什么？

15、不能做什么？ 故障什么時候發(fā)生的？ 有沒有做平時不同的操作？ 故障有沒有規(guī)律？定時還是不定時？發(fā)生的頻率有多高？ 是一臺機器出現(xiàn)故障還是多臺機器故障？故障現(xiàn)象是否相同？ 最近有沒有做改動？如安裝了新的硬件、軟件，改變了系統(tǒng)的一些設(shè)置(如 HACMP配置)等 。39故障處理故障處理-故障信息的收集故障信息的收集 收集故障信息對于判斷、診斷故障原因，修復(fù)系統(tǒng)非常重要。 系統(tǒng)故障記錄(errorlog) errdemon 進(jìn)程在系統(tǒng)啟動時自動運行 記錄包括硬件、軟件及其他操作信息 故障記錄文件為/var/adm/ras/errlog，可備份下來或拷貝到別的機器上分析 errpt 命令的使用(普通用戶

16、權(quán)限也可使用)40故障處理故障處理-故障信息的收集故障信息的收集 HMC Service focal point 記錄了連接在此臺HMC上的所有P系列主機的硬件報錯信息。 選擇“Service focal point“,選擇“Manage Serviceable Events“。 可以根據(jù)主機、機柜序列號進(jìn)行查詢 #mail系統(tǒng)會向root用戶發(fā)mail報告出錯信息。通常系統(tǒng)出現(xiàn)故障后沒有進(jìn)行檢查修復(fù)，系統(tǒng)會定時提醒root41故障處理故障處理-故障信息的收集故障信息的收集 其他用于收集系統(tǒng)信息的命令 lsdev -C 系統(tǒng)設(shè)備信息#lsdev -Cc diskhdisk0 Available

17、 00-06-00-2,0 4.5 GB 16 Bit SCSI Disk Drivehdisk1 Available 00-06-00-1,0 4.5 GB 16 Bit SCSI Disk Drivehdisk2 Defined 00-06-00-4,0 16 Bit SCSI Disk Drive lspv 查看物理卷信息#lspvhdisk0 0007821160af3d76 rootvghdisk1 000782117f571294 rootvghdisk2 0000000045c45bde datavg lsvg 查看卷組信息42故障處理故障處理-故障信息的收集故障信息的收集#ls

18、vg datavgVOLUME GROUP: datavg VG IDENTIFIER: 0000000055e2458bVG STATE: active PP SIZE: 4 megabyte(s)VG PERMISSION: read/write TOTAL PPs: 2169 (8676 megabytMAX LVs: 256 FREE PPs: 1 (4 megabytes)LVs: 3 USED PPs: 2168 (8672 megabytOPEN LVs: 2 QUORUM: 2TOTAL PVs: 1 VG DESCRIPTORS: 2STALE PVs: 0 STALE PP

19、s: 0ACTIVE PVs: 1 AUTO ON: yesMAX PPs per PV: 2032 MAX PVs: 16#lsvg -l rootvgrootvg:LV NAME TYPE LPs PPs PVs LV STATE MOUNT POINThd5 boot 1 1 1 closed/syncd N/A . lv00 jfs 51 102 1 closed/stale /ibmcxxlv01 jfs 1 1 1 open/syncd /cics_regionslv02 jfs 4 4 1 open/syncd /var/mqm 43故障處理故障處理-故障信息的收集故障信息的收集

20、l sl pp 查看文件組信息# lslpp -L |grep 23100020.devices.pci.23100020.rte 4.3.2.7 C IBM PCI 10/100 Ethernet Adapt看某個文件組是否已安裝，如以太網(wǎng)卡驅(qū)動。也用于查詢補丁程序的版本。l sattr查看設(shè)備參數(shù)設(shè)置# lsattr -El ent2busio 0 x7fffc00 Bus I/O address Falsebusintr 9 Bus interrupt level Falseintr_priority 3 Interrupt priority Falsetx_que_size 512 T

21、RANSMIT queue size Truerx_que_size 256 RECEIVE queue size Truerxbuf_pool_size 384 RECEIVE buffer pool size Truemedia_speed 10_Half_Duplex Media Speed Trueuse_alt_addr no Enable ALTERNATE ETHERNET address Truealt_addr 0 x000000000000 ALTERNATE ETHERNET address Trueip_gap 96 Inter-Packet Gap True 44故障處理故障處理-故障信息的收集故障信息的收集l scf g查看VPD 信息（Vi rtual Product D ata)# lscfg -vl ssa1 DEVICE LOCATION DESCRIPTI