卡生命周期項目_運維手冊.doc

1 23 卡生命周期卡生命周期 維護手冊維護手冊 上海理想信息產(chǎn)業(yè) 集團 有限公司上海理想信息產(chǎn)業(yè) 集團 有限公司 二零一零年七月二零一零年七月 2 23 目錄 1引言引言 3 1 1編寫目的 3 1 2適用范圍 3 1 3定義 3 1 4參考資料 4 2客戶基本信息客戶基本信息 4 3系統(tǒng)說明系統(tǒng)說明 4 3 1產(chǎn)品 項目介紹 4 3 2產(chǎn)品 項目面向的用戶 5 3 3產(chǎn)品應(yīng)當(dāng)遵循的標準或規(guī)范 5 3 4產(chǎn)品 項目范圍 5 3 5網(wǎng)絡(luò)拓撲圖 6 3 6系統(tǒng)設(shè)備詳細情況 6 4應(yīng)用部署應(yīng)用部署 6 5系統(tǒng)軟件信息系統(tǒng)軟件信息 7 6遠程接入方式遠程接入方式 7 7系統(tǒng)安裝系統(tǒng)安裝 7 8系統(tǒng)維護系統(tǒng)維護 8 9服務(wù)系統(tǒng)巡檢 可選 服務(wù)系統(tǒng)巡檢 可選 8 9 1主機巡檢 8 9 2數(shù)據(jù)庫巡檢 9 9 3應(yīng)用服務(wù)巡檢 9 10應(yīng)用日志應(yīng)用日志 10 11系統(tǒng)常見問題及解決方法系統(tǒng)常見問題及解決方法 10 12應(yīng)急情況預(yù)案應(yīng)急情況預(yù)案 10 3 23 1 引言引言 1 1編寫目的編寫目的 本文檔是對卡生命周期管理項目的運維內(nèi)容進行說明 適用于項目成員 系統(tǒng)維護人 員 1 2適用范圍適用范圍 卡生命周期項目相關(guān)系統(tǒng)使用對象 包括 單位 企業(yè)信息化部 個客部卡中心 財務(wù)部 其他相關(guān)單位 系統(tǒng) CRM 各卡平臺 卡清分清算 ODS 卡生命周期管理系統(tǒng) 本項 目新建 過期 11888 卡脫機卡系統(tǒng) 本項目新建 卡業(yè)務(wù)范圍 11888 卡 1 3定義定義 術(shù)語和縮寫術(shù)語和縮寫解釋解釋備注備注 CRM客戶關(guān)系管理系統(tǒng)IBM UVC統(tǒng)一充值平臺華為 UVC 外圍統(tǒng)一充值外圍消息處理 包 括卡充值 現(xiàn)金充值的處理 理想三部 ODS運營數(shù)據(jù)系統(tǒng)理想二部 清分清算卡交易情況的清分對賬理想三部 脫機卡庫管理過期的 11888 卡信息理想三部 卡生命周期又稱財帳核對 主要體現(xiàn)卡 財帳平衡關(guān)系 現(xiàn)金平衡關(guān) 系 理想三部 4 23 1 4參考資料參考資料 參考文件參考文件備注備注 卡生命周期管理項目建設(shè)方案 20091112 V3 4 doc 卡生命周期管理項目 需求調(diào)研報告 20091204 doc 卡生命周期管理項目 需求調(diào)研報告 20091214 doc 2 客戶基本信息客戶基本信息 項目名稱 項目編號項目經(jīng)理 初驗日期試運行期限 客戶單位名稱公司地址 客戶代表客戶電話 傳真電子郵件 郵編 3 系統(tǒng)說明系統(tǒng)說明 3 1產(chǎn)品產(chǎn)品 項目介紹項目介紹 通過收集 分散在各系統(tǒng)中的電信卡流轉(zhuǎn)數(shù)據(jù) 對 11888 卡生命周期數(shù)據(jù) 達到提供準確的財帳核對數(shù)據(jù)及統(tǒng)計報表的目的 通過優(yōu)化各卡系統(tǒng)之間的關(guān) 系 從而減少人工管理環(huán)節(jié) 提高卡業(yè)務(wù)流程的規(guī)范性 具體目標如下 新建卡生命周期管理子系統(tǒng) 從 CRM 進銷存系統(tǒng) ODS 清分清算 UVC 過期 11888 卡脫機卡庫 等平臺采集數(shù)據(jù) 并進行數(shù)據(jù)處理 提取滿足平衡公式所需數(shù)據(jù) 完成 11888 卡的進銷存平衡公式 卡平臺平衡公式 財務(wù)平衡公式以 5 23 及三者之間在卡的生命周期各個環(huán)節(jié)上的統(tǒng)計報表 新建 11888 卡脫機庫平臺 新建 11888 卡脫機庫 對 11888 脫機卡的進行存儲和管理 為 CRM 提 供 11888 脫機卡的余額查詢功能 優(yōu)化卡清分清算平臺 為卡生命周期管理子系統(tǒng)提供使用各類卡為各計費網(wǎng)元的進行充值和 銷賬數(shù)據(jù) 增加退款信息 優(yōu)化目前各卡平臺和清分清算平臺對賬結(jié)算功 能 3 2產(chǎn)品產(chǎn)品 項目面向的用戶項目面向的用戶 本項目面象的用戶 包括 企業(yè)信息化部 個客部卡中心 財務(wù)部 其他相關(guān)單位的運維操作人員 3 3產(chǎn)品產(chǎn)品 項目范圍項目范圍 規(guī)范現(xiàn)有的業(yè)務(wù)操作流程 在換卡操作 過期卡進收入 已過期卡未轉(zhuǎn)收入 庫存已銷毀而平臺 未刪除等情況發(fā)生時減少人工控制的環(huán)節(jié) 通過系統(tǒng)自動形成財帳平衡報表 數(shù)據(jù)的采集通過系統(tǒng)自動實現(xiàn) 避免人工加減數(shù)據(jù) 系統(tǒng)通過數(shù)據(jù)處 理 并按照財務(wù)平衡公式進行計算 最終形成卡的財帳平衡報表 6 23 3 4網(wǎng)絡(luò)拓撲圖網(wǎng)絡(luò)拓撲圖 CRM ENI ODSUVC96088通訊卡 應(yīng)用及接口服務(wù)器清分清算應(yīng)用服務(wù)器 南匯IT機房 數(shù)據(jù)庫文件服務(wù)器 機房共用存儲 3 5系統(tǒng)設(shè)備詳細情況系統(tǒng)設(shè)備詳細情況 見 卡生命周期匯總硬 件20100720 xls 4 應(yīng)用部署應(yīng)用部署 主機名稱主機名稱服務(wù)器所在位置服務(wù)器所在位置IPIP 地址地址應(yīng)用名稱應(yīng)用名稱部署目錄部署目錄 Db 1Card cycle ws10 7 88 100 Card cycle ws T deploys files Db 1finaAccBalance10 7 88 100 finaAccBalance T deploys files Db 1Czph uvc10 7 88 100 Czph uvc T deploys files Db 1Czph ods10 7 88 100 Czph ods T deploys files Db 1Serv U10 7 88 100 Serv U E tools Db 1Czph total10 7 88 100 Czph total T deploys files 7 23 Db 2Card cycle ws10 7 88 101 Card cycle ws T deploys files Db 2finaAccBalance10 7 88 101 finaAccBalance T deploys files Db 2Czph uvc10 7 88 101 Czph uvc T deploys files Db 2Czph ods10 7 88 101 Czph ods T deploys files Db 2Serv U10 7 88 101 Serv U E tools Db 2Czph total10 7 88 101 Czph total T deploys files 說明 card cycle ws 提供給 crm 查詢 刪除的 webservice 接口 finaAccBalance 查詢頁面 報表展現(xiàn)及下載 czph ods crm 數(shù)據(jù)采集 czph uvc uvc 數(shù)據(jù)采集 czph total 報表數(shù)據(jù)分析 統(tǒng)計 serv u 管理 ftp 服務(wù) 5 系統(tǒng)軟件信息系統(tǒng)軟件信息 內(nèi)容內(nèi)容子項子項情況說明情況說明備注備注 操作系統(tǒng)版本W(wǎng)indows Server 2003 R2 企業(yè)版 64 位 操作系統(tǒng)打補丁情況 SP 2 安裝目錄C 盤 操作系統(tǒng) 系統(tǒng)管理員名字 口令登錄名 Administrator 廠商 系統(tǒng)版本 安裝目錄 數(shù)據(jù)庫系統(tǒng) 系統(tǒng)管理員名字 口令 系統(tǒng)版本 安裝目錄 系統(tǒng)管理員名字 口令 WEBLOGIC 系統(tǒng) 所提供的業(yè)務(wù) 廠商 系統(tǒng)版本 安裝目錄 其他系統(tǒng) 系統(tǒng)管理員名字 口令 8 23 6 遠程接入方式遠程接入方式 內(nèi)容內(nèi)容描述描述 接入軟件Windows 自帶遠程桌面工具 IP 地址10 7 88 103 用戶名administrator 口令admin 7 系統(tǒng)安裝系統(tǒng)安裝 在遠程檢查 VCS 集群狀態(tài) 需要安裝 Veritas Cluster Monitor 軟件 見附件 vcs維護 doc 8 系統(tǒng)維護系統(tǒng)維護 8 1應(yīng)用進程和模塊巡檢 每天一次 應(yīng)用進程和模塊巡檢 每天一次 設(shè)備 名 服務(wù)器名業(yè)務(wù)軟件業(yè)務(wù)端口周期HA 方式機器 IP 服務(wù) IP Card cycle ws 全天主用 finaAccBalance 全天主用 Czph uvc 全天主用 Czph ods 全天主用 Serv U 全天主用 應(yīng)用 數(shù)據(jù) 庫服 務(wù)器 1 Db 1 Czph total 全天主用 10 7 88 100 10 7 88 103 Card cycle ws 全天備用 finaAccBalance 全天備用 Czph uvc 全天備用 Czph ods 全天備用 Serv U 全天備用 應(yīng)用 數(shù)據(jù) 庫服 務(wù)器 2 Db 2 Czph total 全天備用 10 7 88 101 10 7 88 103 9 23 8 1 1檢查應(yīng)用服務(wù)器檢查應(yīng)用服務(wù)器 1 進程進程 10 7 88 100 1 登陸 登陸 10 7 88 100 login administrator Password admin 2 查看服務(wù) 查看服務(wù) 查看 card cycle ws 接口進程 巡檢周期 每天 第一步 使用 weblogic 登陸 http 10 7 88 103 8000 console 用戶名 密碼 weblogic 第二步 查看 server 運行狀態(tài) 點擊左功能樹 lixiangdomain 部署查看右邊界 面紅色部分 活動和 ok 說明服務(wù)正常 10 23 查看 finaAccBalance 服務(wù)進程 巡檢周期 每天 第一步 使用 weblogic 登陸 http 10 7 88 103 8000 console 用戶名 密碼 weblogic 第二步 查看 server 運行狀態(tài) 點擊左功能樹 lixiangdomain 部署查看右邊界 面紅色部分 活動和 ok 說明服務(wù)正常 11 23 查看 czph ods 采集 crm 數(shù)據(jù) 接口進程 巡檢周期 每天 在開始 運行框內(nèi)輸入 services msc 查找 ksmzq crm file import Service 服 務(wù) 驗證其狀態(tài)是否為已啟動 注 已切換為備機的話該狀態(tài)為已停止 查看 czph uvc 采集 uvc 數(shù)據(jù) 接口進程 巡檢周期 每天 在開始 運行框內(nèi)輸入 services msc 查找 ksmzq uvc file import Service 服 12 23 務(wù) 驗證其狀態(tài)是否為已啟動 注 已切換為備機的話該狀態(tài)為已停止 查看 czph total 卡數(shù)據(jù)天 月統(tǒng)計 進程 巡檢周期 每天 在開始 運行框內(nèi)輸入 services msc 查找 ksmzq totalt Service 服務(wù) 驗證 其狀態(tài)是否為已啟動 注 已切換為備機的話該狀態(tài)為已停止 13 23 查看 serv u ftp 服務(wù)進程 巡檢周期 每天 在開始 運行框內(nèi)輸入 services msc 查找 Serv U File Server 服務(wù) 驗證其狀 態(tài)是否為已啟動 注 已切換為備機的話該狀態(tài)為已停止 3 查看業(yè)務(wù)日志查看業(yè)務(wù)日志 其日志地址為 T logs 可分別查看log目錄下所有子文件夾中的 log 文件 日志檢查的內(nèi)容包括 日志檢查的內(nèi)容包括 日志文件沒有被刪除 所有 log 文件中均沒有 warning error 等異常提示信息 日志文件大小沒有發(fā)生異常增長 注意 注意 在日志文件中看到類似在日志文件中看到類似 error warning 等等表示錯誤的告警字樣需向理想等等表示錯誤的告警字樣需向理想 報障報障 4 查看查看 cpu 和內(nèi)存和內(nèi)存 查看服務(wù)器 CPU 占用率 操作方法 通過 Windows 任務(wù)管理器 性能選項來檢查 14 23 判斷依據(jù) CPU 占用率達到 80 時 報異常 具體數(shù)值根據(jù)各系統(tǒng)情況而 定 服務(wù)器內(nèi)存狀態(tài) 操作方法 通過 Windows 任務(wù)管理器來檢查 判斷依據(jù) 內(nèi)存占用率達到 80 時 報異常 具體數(shù)值根據(jù)各系統(tǒng)情況而 定 5 查看存儲空間查看存儲空間 主要是 T 盤 注意 每天查看占用情況 當(dāng)文件系統(tǒng)使用率超過 80 時 需聯(lián)系項目組進 行日志數(shù)據(jù)清理 8 1 2檢查應(yīng)用服務(wù)器檢查應(yīng)用服務(wù)器 1 進程進程 10 7 88 101 1 登陸 登陸 10 7 88 101 login administrator Password admin 2 查看服務(wù) 查看服務(wù) a 查看 card cycle ws 接口進程 巡檢周期 每天 第一步 使用 weblogic 登陸 http 10 7 88 103 8000 console 用戶名 密碼 weblogic 15 23 第二步 查看 server 運行狀態(tài) 點擊左功能樹 lixiangdomain 部署查看右邊界 面紅色部分 活動和 ok 說明服務(wù)正常 b 查看 finaAccBalance 服務(wù)進程 巡檢周期 每天 第一步 使用 weblogic 登陸 http 10 7 88 103 8000 console 用戶名 密碼 weblogic 16 23 第二步 查看 server 運行狀態(tài) 點擊左功能樹 lixiangdomain 部署查看右邊界 面紅色部分 活動和 ok 說明服務(wù)正常 c 查看 czph ods 采集 crm 數(shù)據(jù) 接口進程 巡檢周期 每天 在開始 運行框內(nèi)輸入 services msc 查找 ksmzq crm file import Service 服 務(wù) 驗證其狀態(tài)是否為已啟動 注 已切換為備機的話該狀態(tài)為已停止 17 23 d 查看 czph uvc 采集 uvc 數(shù)據(jù) 接口進程 巡檢周期 每天 在開始 運行框內(nèi)輸入 services msc 查找 ksmzq uvc file import Service 服 務(wù) 驗證其狀態(tài)是否為已啟動 注 已切換為備機的話該狀態(tài)為已停止 e 查看 czph total 卡數(shù)據(jù)天 月統(tǒng)計 進程 巡檢周期 每天 在開始 運行框內(nèi)輸入 services msc 查找 ksmzq totalt Service 服務(wù) 驗證 18 23 其狀態(tài)是否為已啟動 注 已切換為備機的話該狀態(tài)為已停止 f 查看 serv u ftp 服務(wù)進程 巡檢周期 每天 在開始 運行框內(nèi)輸入 services msc 查找 Serv U File Server 服務(wù) 驗證其狀 態(tài)是否為已啟動 注 已切換為備機的話該狀態(tài)為已停止 19 23 3 查看業(yè)務(wù)日志查看業(yè)務(wù)日志 其日志地址為 T logs 可分別查看log目錄下所有子文件夾中的 log 文件 日志檢查的內(nèi)容包括 日志檢查的內(nèi)容包括 日志文件沒有被刪除 所有 log 文件中均沒有 warning error 等異常提示信息 日志文件大小沒有發(fā)生異常增長 注意 注意 在日志文件中看到類似在日志文件中看到類似 error warning 等等表示錯誤的告警字樣需向理想等等表示錯誤的告警字樣需向理想 報障報障 4 查看查看 cpu 和內(nèi)存和內(nèi)存 查看服務(wù)器 CPU 占用率 操作方法 通過 Windows 任務(wù)管理器 性能選項來檢查 判斷依據(jù) CPU 占用率達到 80 時 報異常 具體數(shù)值根據(jù)各系統(tǒng)情況而 定 服務(wù)器內(nèi)存狀態(tài) 操作方法 通過 Windows 任務(wù)管理器來檢查 判斷依據(jù) 內(nèi)存占用率達到 80 時 報異常 具體數(shù)值根據(jù)各系統(tǒng)情況而 定 5 查看存儲空間查看存儲空間 主要是 T 盤 注意 每天查看占用情況 當(dāng)文件系統(tǒng)使用率超過 80 時 需聯(lián)系項目組進 行日志數(shù)據(jù)清理 8 2主機巡主機巡檢檢 1 巡檢內(nèi)容 主機名稱巡檢內(nèi)容巡檢目標巡檢周期責(zé)任人備注 IBM AIX 主 機 系統(tǒng)錯誤報告如果有新的錯誤 分析是硬件原因還 是軟件原因 周 20 23 有無 root 用戶 郵件 如果有新的郵件 分析原因 周 查看 hacmp out 如果系統(tǒng)使用了 HACMP 軟件 查 看該日志文件 周 查看文件系統(tǒng) 使用率 確保關(guān)鍵文件系統(tǒng) 的使用率不超過 80 周 查看邏輯卷有 無 stale 如果有卷 stale 需 要做同步 月 內(nèi)存交換區(qū)是 否超過 70 如果超過 70 需 要擴大內(nèi)存交換區(qū) 月 內(nèi)存交換區(qū)是 否為物理內(nèi)存 的 1 倍以上 如果內(nèi)存交換區(qū)小 于物理內(nèi)存大小 需要擴大內(nèi)存交換 區(qū) 月 網(wǎng)絡(luò)通訊測試主機和網(wǎng)關(guān)的 聯(lián)通性 月 系統(tǒng) dump 設(shè) 置是否正確 查看系統(tǒng) dump 目 錄是否為 var adm ras 月 查看 rootvg 是 否有鏡像 確保 rootvg 有兩塊 磁盤 月 系統(tǒng)性能檢測查看主機的 CPU MEM DIS K 性能 季度 其他方式 Hp 主機系統(tǒng)錯誤報告如果有新的錯誤 分析是硬件原因還 是軟件原因 月 查看文件系統(tǒng) 使用率 確保關(guān)鍵文件系統(tǒng) 的使用率不超過 80 月 內(nèi)存使用是否 超過 70 如果持續(xù)超過 70 需要擴大內(nèi) 存或重啟釋放內(nèi)存 周 CPU 占用率是 否超過 70 如果持續(xù)很長時間 超過 70 建議重 啟 周 網(wǎng)絡(luò)通訊測試主機和網(wǎng)關(guān)的 聯(lián)通性 周