發表于:2011-07-14 00:00:00來(lái)源:網易科(kē)技報道人(rén)氣:3088
11日(rì)下午2點到12日(rì)下午4點,藝龍旅遊網出現了持續的訪問(wèn)故障。據了解,該事(shì)件(jiàn)最初是EMC存儲設備出現故障,而由于藝龍網的存儲結構不完善導緻長時間無法修複。
此次事(shì)件(jiàn)在互聯網行業的系統架構領域引發了很多的討(tǎo)論,藝龍因爲這次宕機(jī)事(shì)件(jiàn),其網站(zhàn)服務和呼叫中心業務也無法進行,據一些媒體(tǐ)計(jì)算,藝龍網這次直接損失超過14.7萬營業收入,而其對客戶造成的潛在影(yǐng)響無法估計(jì)。
EMC存儲出現問(wèn)題引發連鎖反應
11日(rì)下午,不斷有網友反應藝龍網訪問(wèn)出現錯誤,很快(kuài),官方就(jiù)出現了“系統故障,正在修複中……”的提示。對于這家以網站(zhàn)和呼叫中心爲主要經營窗(chuāng)口的企業來(lái)說(shuō),此故障直接影(yǐng)響到業務運營。
12日(rì)早上8點,藝龍CEO崔廣福表示,藝龍的存儲系統出現故障,導緻全部服務中斷,崔廣福稱藝龍和EMC的工(gōng)程師(shī)已搶修18個小時。
至此,不少目光(guāng)集中在EMC公司上,藝龍網使用的存儲産品由EMC提供,據接近現場人(rén)士透露,此次宕機(jī)也的确是存儲硬件(jiàn)出現問(wèn)題,導緻數據庫挂機(jī),系統恢複需要較長時間造成。
12日(rì)下午呼叫中心恢複機(jī)票服務,網站(zhàn)服務等在4點開始恢複,到18點全部業務恢複運營。
備份架構不完善導緻維修時間較長
對于藝龍網這次出現問(wèn)題的原因一時衆說(shuō)紛纭,在不少人(rén)認爲EMC硬件(jiàn)出現問(wèn)題時,一些企業技術(shù)架構人(rén)員(yuán)開始聲援EMC。
丁香園網站(zhàn)CTO馮大(dà)輝在微博表示,EMC的産品不會持續到幾十個小時恢複不了,而一位網友也提到,“做爲EMC的競争對手也不得(de)不說(shuō),這不隻是硬件(jiàn)的問(wèn)題”。
IT服務公司中達金橋的孫巍表示,他(tā)在12日(rì)到現場參與系統恢複。從(cóng)他(tā)的複述中得(de)知,EMC存儲硬件(jiàn)出現故障引發了整個事(shì)件(jiàn),而由于藝龍對數據庫的備份不足,存儲層沒有災備方案,導緻系統恢複緩慢(màn),雖然硬件(jiàn)很快(kuài)恢複正常,系統仍然無法工(gōng)作(zuò)。
據深入介紹,企業在運營平台的系統設備架構中,爲了應對突發硬件(jiàn)、軟件(jiàn)故障,一般需要對各個層級的系統進行備份,比如(rú)在服務器端使用雙機(jī)熱(rè)備,在存儲層完成災備,在軟件(jiàn)層做冗餘工(gōng)作(zuò)。這樣任何一個環節出現問(wèn)題都(dōu)可(kě)以及時找到替代。
而在藝龍的事(shì)件(jiàn)中,藝龍的存儲架構隻預備了高性能架構的集群備份,災備的準備依賴唯一的存儲硬件(jiàn),軟件(jiàn)層也缺少冗餘準備,這樣存儲出現問(wèn)題,事(shì)先準備的災備準備也就(jiù)不起作(zuò)用。
“把所有雞蛋都(dōu)放(fàng)在一個籃子裡(lǐ),籃子出了問(wèn)題,雞蛋就(jiù)全碎了。”孫巍這麽形容。
存儲行業的一些廠(chǎng)商人(rén)士在微博上紛紛表示,硬件(jiàn)不可(kě)能保證100%數據安全,要硬件(jiàn)保證不出現問(wèn)題是不可(kě)能的,企業需要在架構上減少硬件(jiàn)出錯對企業運營的影(yǐng)響。
到截稿爲止,藝龍和EMC并沒有回複關于此事(shì)技術(shù)過程的疑問(wèn)。
藝龍再次停機(jī)升級或爲加強存儲系統
14日(rì)淩晨,藝龍網再次宣布停止運營7個小時,以實現系統升級。此前崔廣福在微博上發出“英雄帖”,邀請(qǐng)咨詢師(shī)、方案服務提供商、專家等爲藝龍數據中心系統構架、災備方案及運維管理(lǐ)會診。這也說(shuō)明藝龍對此次事(shì)件(jiàn)的重視。
業界人(rén)士認爲,對于一個在線服務提供商,時刻在線和穩定性成爲消費者一種信賴和依靠,而出現系統完全停止服務将對客戶感受造成較大(dà)的影(yǐng)響。
據存儲技術(shù)人(rén)士透露,主要的容災技術(shù)結構已經完善,各個單位采用不同的架構主要原因還(hái)是因爲成本問(wèn)題。
也有人(rén)認爲,這次的事(shì)件(jiàn)對于災備行業來(lái)說(shuō)将是一次促進,企業和政府單位在認識到意外發生(shēng)的結果後會加大(dà)數據系統的投入。(王傑聰)