資源池后端存儲(chǔ)服務(wù)狀態(tài)異常的問(wèn)題處理

故障現(xiàn)象某資源池在巡檢過(guò)程中檢查服務(wù)狀態(tài)，其中云盤(pán)后端的服務(wù)狀態(tài)為down，如下圖所示，影響虛擬機(jī)云盤(pán)的生命周期管理操作。

故障分析

產(chǎn)生資源池后端存儲(chǔ)服務(wù)狀態(tài)異常的原因可能有如下四個(gè)：

后端存儲(chǔ)異常。

控制節(jié)點(diǎn)和存儲(chǔ)后端的帶外地址不通。

控制節(jié)點(diǎn)cinder-volume服務(wù)異常。

控制節(jié)點(diǎn)和存儲(chǔ)后端對(duì)接信息錯(cuò)誤。

根據(jù)分析原因，進(jìn)行問(wèn)題排查：

1. 登錄后端存儲(chǔ)管理頁(yè)面，無(wú)異常告警，存儲(chǔ)運(yùn)行狀態(tài)異常。

2. 在控制節(jié)點(diǎn)Ping存儲(chǔ)后端的帶外地址，能夠正常通訊，如下圖所示。

3. 檢查控制節(jié)點(diǎn)/var/log/cinder/volume.log日志，確認(rèn)為對(duì)接的賬號(hào)密碼錯(cuò)誤導(dǎo)致服務(wù)狀態(tài)down，和運(yùn)維人員確認(rèn)最近有做過(guò)密碼重置操作，如下圖所示。

4. 檢查存儲(chǔ)后端的事件日志，有大量的賬號(hào)密碼訪(fǎng)問(wèn)異常，確認(rèn)為對(duì)接的賬號(hào)密碼錯(cuò)誤導(dǎo)致，如下圖所示。

故障處理1. 在后端存儲(chǔ)上解鎖賬號(hào)密碼，同時(shí)重置密碼，如下圖所示。

2. 登錄Daisy界面，在“存儲(chǔ)設(shè)備對(duì)接”界面選擇后端存儲(chǔ)，單擊編輯，修改對(duì)接賬戶(hù)密碼，如下圖所示。

3. 在主控制節(jié)點(diǎn)執(zhí)行systemctl restart openstack-cinder-volume命令，重啟cinder-volume服務(wù)。

4. 檢查服務(wù)狀態(tài)正常，如下圖所示。

審核編輯：湯梓紅