時(shí)間:2022-06-21 19:53:57
緒論:在尋找寫作靈感嗎?愛發(fā)表網(wǎng)為您精選了8篇企業(yè)數(shù)據(jù)存儲(chǔ)方案,愿這些內(nèi)容能夠啟迪您的思維,激發(fā)您的創(chuàng)作熱情,歡迎您的閱讀與分享!
人們對(duì)數(shù)據(jù)存儲(chǔ)備份一詞并不陌生,然而對(duì)備份的真正內(nèi)涵并不完全了解。在一般人腦海里,往往把備份和拷貝等同起來,把備份單純看作是更換磁帶、為磁帶編號(hào)等一個(gè)完全程式化的、單調(diào)的操作過程。其實(shí)不然,因?yàn)槌丝截愅猓€包括更重要的內(nèi)容即管理。備份管理包括備份的可計(jì)劃性,磁帶機(jī)的自動(dòng)化操作、歷史記錄的保存以及日志記錄等。事實(shí)上,備份管理是一個(gè)全面的概念,它不僅包含制度的制定和磁帶的管理,而且還能決定引進(jìn)備份技術(shù),如備份技術(shù)的選擇、備份設(shè)備的選擇、介質(zhì)的選擇乃至軟件技術(shù)的挑選等。
有些人往往也把雙機(jī)熱備份、磁盤陣列備份以及磁盤鏡象備份等硬件備份的內(nèi)容和數(shù)據(jù)存儲(chǔ)備份相提并論。事實(shí)上,所有的硬件備份都不能代替數(shù)據(jù)存儲(chǔ)備份,硬件備份只是拿一個(gè)系統(tǒng)、一個(gè)設(shè)備等作犧牲來換取另一臺(tái)系統(tǒng)或設(shè)備在短暫時(shí)間內(nèi)的安全。若發(fā)生人為的錯(cuò)誤、自然災(zāi)害、電源故障、病毒侵襲等,引起的后果就不堪設(shè)想,如造成所有系統(tǒng)癱瘓,所有設(shè)備無法運(yùn)行,由此引起的數(shù)據(jù)丟失也就無法恢復(fù)了。事實(shí)證明,只有數(shù)據(jù)存儲(chǔ)備份才能為人們提供萬無一失的數(shù)據(jù)安全保護(hù)。
隨著網(wǎng)絡(luò)應(yīng)用規(guī)模的擴(kuò)張和計(jì)算機(jī)應(yīng)用的深入、企業(yè)數(shù)據(jù)存儲(chǔ)量呈爆炸性增長,企業(yè)用戶的存儲(chǔ)系統(tǒng)日益龐雜,存儲(chǔ)管理的成本也在大幅上升。數(shù)據(jù)備份、災(zāi)難恢復(fù)和存儲(chǔ)資源管理等存儲(chǔ)理念正在得到用戶的接受,網(wǎng)絡(luò)存儲(chǔ)也逐漸得到更廣泛的應(yīng)用。目前市場上的存儲(chǔ)產(chǎn)品主要有磁盤陣列、磁帶機(jī)與磁帶庫、光盤庫等,其中磁帶設(shè)備以其技術(shù)成熟、價(jià)格低廉、產(chǎn)品線齊全、使用方便等優(yōu)點(diǎn)占據(jù)了存儲(chǔ)市場的重要地位。
企業(yè)數(shù)據(jù)存儲(chǔ)的三種方式
在企業(yè)剛剛建立初期,用戶的數(shù)據(jù)規(guī)模并不大,存儲(chǔ)需求也很簡單,只是要把相關(guān)數(shù)據(jù)存放在某一地方即可。而存放數(shù)據(jù)的最終目的不僅是為了能夠安全保存,還必須保證數(shù)據(jù)可以隨時(shí)被調(diào)用。我們最早都是采用一種稱之為“DAS(Direct Attached Storage,直接外掛存儲(chǔ))”存儲(chǔ)方式的一種方案。這種存儲(chǔ)方案的服務(wù)器結(jié)構(gòu)如同PC機(jī)架構(gòu),外部數(shù)據(jù)存儲(chǔ)設(shè)備(如磁盤陣列、光盤機(jī)、磁帶機(jī)等)都直接掛接在服務(wù)器內(nèi)部總線上,數(shù)據(jù)存儲(chǔ)設(shè)備是整個(gè)服務(wù)器結(jié)構(gòu)的一部分,同樣服務(wù)器也擔(dān)負(fù)著整個(gè)網(wǎng)絡(luò)的數(shù)據(jù)存儲(chǔ)職責(zé)。DAS這種直連方式,能夠解決單臺(tái)服務(wù)器的存儲(chǔ)空間擴(kuò)展、高性能傳輸需求,并且單臺(tái)外置存儲(chǔ)系統(tǒng)的容量,已經(jīng)從不到1TB,發(fā)展到了2TB,隨著大容量硬盤的推出,單臺(tái)外置存儲(chǔ)系統(tǒng)容量還會(huì)上升。此外,DAS還可以構(gòu)成基于磁盤陣列的雙機(jī)高可用系統(tǒng),滿足數(shù)據(jù)存儲(chǔ)對(duì)高可用的要求。從趨勢(shì)上看,DAS仍然會(huì)作為一種存儲(chǔ)模式,繼續(xù)得到應(yīng)用。
NAS(Network Attached Storage,網(wǎng)絡(luò)附加存儲(chǔ))方式則全面改進(jìn)了以前低效的DAS存儲(chǔ)方式,它是采用獨(dú)立于PC服務(wù)器,單獨(dú)為網(wǎng)絡(luò)數(shù)據(jù)存儲(chǔ)而開發(fā)的一種文件服務(wù)器。NAS服務(wù)器中集中連接了所有的網(wǎng)絡(luò)數(shù)據(jù)存儲(chǔ)設(shè)備(如各種磁盤陣列、磁帶、光盤機(jī)等),存儲(chǔ)容量可以較好地?cái)U(kuò)展,同時(shí)由于這種網(wǎng)絡(luò)存儲(chǔ)方式是NAS服務(wù)器獨(dú)立承擔(dān)的,所以,對(duì)原來的網(wǎng)絡(luò)服務(wù)器性能基本上沒什么影響,以確保整個(gè)網(wǎng)絡(luò)性能不受影響。它提供了一個(gè)簡單、高性價(jià)比、高可用性、高擴(kuò)展性和低總擁有成本(TCO)的網(wǎng)絡(luò)存儲(chǔ)解決方案。
SAN(Storage Area Network,存儲(chǔ)域網(wǎng)絡(luò))與NAS則是完全不同,它不是把所有的存儲(chǔ)設(shè)備集中安裝在一個(gè)專門的NAS服務(wù)器中,而是將這些存儲(chǔ)設(shè)備單獨(dú)通過光纖交換機(jī)連接起來,形成一個(gè)光纖通道的網(wǎng)絡(luò),然后這個(gè)網(wǎng)絡(luò)再與企業(yè)現(xiàn)有局域網(wǎng)進(jìn)行連接,在這種方案中,起著核心作用的當(dāng)然就是光纖交換機(jī)了,它的支撐技術(shù)就是Fibre Channel(FC,光纖通道)協(xié)議,這是ANSI為網(wǎng)絡(luò)和通道I/O接口建立的一個(gè)標(biāo)準(zhǔn)集成,支持HIPPI、IPI、SCSI、IP、ATM等多種高級(jí)協(xié)議。在SAN中,數(shù)據(jù)以集中的方式進(jìn)行存儲(chǔ),加強(qiáng)了數(shù)據(jù)的可管理性,同時(shí)適應(yīng)于多操作系統(tǒng)下的數(shù)據(jù)共享同一存儲(chǔ)池,降低了總擁有成本。
選擇合理數(shù)據(jù)存儲(chǔ)方案
企業(yè)存儲(chǔ)應(yīng)用的體系結(jié)構(gòu)主要有DAS、NAS和SAN三種模式,三種模式從體系架構(gòu)的邏輯上看,有明顯的區(qū)別。一個(gè)企業(yè)存儲(chǔ)具有以下幾方面的要求: 性能、安全性、擴(kuò)展性、易用性、整體擁有成本、服務(wù)等等。由于企業(yè)用戶的存儲(chǔ)系統(tǒng)構(gòu)建并不是一蹴而就的事情,會(huì)經(jīng)歷從單機(jī)邁向網(wǎng)絡(luò)化存儲(chǔ)的過程,因此就存在DAS、NAS和SAN三種存儲(chǔ)方案供企業(yè)用戶進(jìn)行不同的選擇。
1. 選擇DAS方案
DAS直連式存儲(chǔ)依賴服務(wù)器主機(jī)操作系統(tǒng)進(jìn)行數(shù)據(jù)的I/O讀寫和存儲(chǔ)維護(hù)管理,數(shù)據(jù)備份和恢復(fù)要求占用服務(wù)器主機(jī)資源(包括CPU、系統(tǒng)I/O等),數(shù)據(jù)流需要回流主機(jī)再到服務(wù)器連接著的磁帶機(jī)(庫),數(shù)據(jù)備份通常占用服務(wù)器主機(jī)資源20%~30%,因此許多企業(yè)用戶的日常數(shù)據(jù)備份常常在深夜或業(yè)務(wù)系統(tǒng)不繁忙時(shí)進(jìn)行,以免影響正常業(yè)務(wù)系統(tǒng)的運(yùn)行。直連式存儲(chǔ)的數(shù)據(jù)量越大,備份和恢復(fù)的時(shí)間就越長,對(duì)服務(wù)器硬件的依賴性和影響就越大。這種方案主要在早期的計(jì)算機(jī)和服務(wù)器上使用,由于當(dāng)時(shí)對(duì)數(shù)據(jù)存儲(chǔ)的需求并不大,單個(gè)服務(wù)器需要的存儲(chǔ)能力就可以滿足日常數(shù)據(jù)存儲(chǔ)需求,因此在低檔網(wǎng)絡(luò)應(yīng)用中相當(dāng)普遍。
2. 選擇NAS方案
NAS作為一個(gè)網(wǎng)絡(luò)附加存儲(chǔ)設(shè)備,NAS設(shè)備內(nèi)置優(yōu)化的獨(dú)立存儲(chǔ)操作系統(tǒng),可以有效、緊密地釋放系統(tǒng)總線資源,全力支持I/O存儲(chǔ),同時(shí)NAS設(shè)備一般集成本地的備份軟件,可以不經(jīng)過服務(wù)器將NAS設(shè)備中的重要數(shù)據(jù)進(jìn)行本地備份,而且NAS設(shè)備提供硬盤RAID、冗余的電源和風(fēng)扇以及冗余的控制器,可以滿足保證NAS的穩(wěn)定應(yīng)用。
NAS設(shè)備主要用來實(shí)現(xiàn)在不同操作系統(tǒng)平臺(tái)下的文件共享應(yīng)用,與傳統(tǒng)的服務(wù)器或DAS存儲(chǔ)設(shè)備相比,NAS設(shè)備的安裝、調(diào)試、使用和管理非常簡單,采用NAS可以節(jié)省一定的設(shè)備管理與維護(hù)費(fèi)用。NAS設(shè)備提供 RJ- 45 接口和單獨(dú)的IP地址,可以將其直接掛接在主干網(wǎng)的交換機(jī)或其他局域網(wǎng)的Hub上,通過簡單的設(shè)置(如設(shè)置機(jī)器的IP地址等)就可以在網(wǎng)絡(luò)即插即用地使用NAS設(shè)備,而且進(jìn)行網(wǎng)絡(luò)數(shù)據(jù)在線擴(kuò)容時(shí)也無需停頓,從而保證數(shù)據(jù)流暢存儲(chǔ)。
NAS數(shù)據(jù)存儲(chǔ)方案是基于局域網(wǎng)而設(shè)計(jì)的,按照傳統(tǒng)的TCP/IP協(xié)議進(jìn)行通信,面向消息傳遞,以文件的I/O方式進(jìn)行數(shù)據(jù)傳輸。在LAN環(huán)境下,NAS已經(jīng)完全可以實(shí)現(xiàn)異構(gòu)平臺(tái)之間的數(shù)據(jù)級(jí)共享,比如Windows NT、Linux、Unix等平臺(tái)的共享。基于這種種原因,NAS存儲(chǔ)方案對(duì)于企業(yè)來說的使用和維護(hù)成本就相當(dāng)?shù)停耆梢杂涩F(xiàn)有網(wǎng)管員擔(dān)當(dāng)。
3. 選擇SAN方案
由于SAN是通過一個(gè)單獨(dú)的通常是基于光纖通道的SAN網(wǎng)絡(luò)把存儲(chǔ)設(shè)備以及服務(wù)器相連,如此當(dāng)有海量數(shù)據(jù)的存取需求時(shí),數(shù)據(jù)完全可以通過SAN網(wǎng)絡(luò)在相關(guān)服務(wù)器和后臺(tái)的存儲(chǔ)設(shè)備之間高速傳輸,對(duì)于LAN的帶寬占用幾乎為零,而且服務(wù)器可以訪問SAN上的任何一個(gè)存儲(chǔ)設(shè)備,提高了數(shù)據(jù)的可用性。在對(duì)性能和可靠性要求較高的場合,采用先進(jìn)的SAN數(shù)據(jù)存儲(chǔ)網(wǎng)絡(luò),可以使數(shù)據(jù)的存儲(chǔ)、備份等活動(dòng)獨(dú)立在原先的局域網(wǎng)之外,從而將減輕LAN的負(fù)載,保證原有網(wǎng)絡(luò)應(yīng)用的順暢進(jìn)行; 同時(shí)SAN網(wǎng)采用光纖傳輸通道,可以得到高速的數(shù)據(jù)傳輸率。
SAN方案簡化了管理和集中控制,這對(duì)于全部存儲(chǔ)設(shè)備都集中在信息中心,是非常有現(xiàn)實(shí)意義的。SAN將企業(yè)的存儲(chǔ)和服務(wù)器平臺(tái)分開,可以實(shí)現(xiàn)24 x 7不間斷的系統(tǒng)可用性和集中管理,在這個(gè)平臺(tái)的基礎(chǔ)上,還可以應(yīng)用一套統(tǒng)一的災(zāi)難恢復(fù)解決方案,同時(shí)可經(jīng)濟(jì)高效地?cái)U(kuò)展存儲(chǔ)環(huán)境。因此SAN非常適用于非線性編輯、服務(wù)器集群、遠(yuǎn)程災(zāi)難恢復(fù)、因特網(wǎng)數(shù)據(jù)服務(wù)等多個(gè)領(lǐng)域。
企業(yè)數(shù)據(jù)存儲(chǔ)的發(fā)展趨勢(shì)
【關(guān)鍵詞】中小企業(yè);網(wǎng)絡(luò)存儲(chǔ)模式;優(yōu)劣分析;
一、基本簡述
網(wǎng)絡(luò)存儲(chǔ)技術(shù)(Network Storage Technologies)是基于數(shù)據(jù)存儲(chǔ)的一種通用網(wǎng)絡(luò)術(shù)語。網(wǎng)絡(luò)存儲(chǔ)結(jié)構(gòu)大致分為三種:直連式存儲(chǔ)(DAS:Direct Attached Storage)、網(wǎng)絡(luò)存儲(chǔ)設(shè)備(NAS:Network Attached Storage)和存儲(chǔ)網(wǎng)絡(luò)(SAN:Storage Area Network)。
二、數(shù)據(jù)安全性上的優(yōu)劣分析
在NAS網(wǎng)絡(luò)附加存儲(chǔ)方案中,服務(wù)器與實(shí)際的存儲(chǔ)設(shè)備是分開的。也就是說,在硬盤等存儲(chǔ)設(shè)備與客戶端之間存在著一個(gè)網(wǎng)絡(luò)附加存儲(chǔ)服務(wù)器。如果某臺(tái)NAS節(jié)點(diǎn)出現(xiàn)故障,用戶仍然可以訪問其它的數(shù)據(jù),不會(huì)造成整個(gè)系統(tǒng)的崩潰。
而在DAS直接方式存儲(chǔ)的方案中,往往服務(wù)器與磁盤陣列柜是在一起的。也就是說,如果其中的一臺(tái)服務(wù)器出現(xiàn)故障癱瘓,那必須要整個(gè)服務(wù)器修復(fù)后才能夠使用。可以看出,NAS存儲(chǔ)方案在冗余性方面比DAS系統(tǒng)更優(yōu)秀。當(dāng)然,這也只是相對(duì)的,DAS方案也可以通過其它的方式,如服務(wù)器冗余等來提高服務(wù)器自身的安全性和可靠性,但是這樣一來,DAS額外的系統(tǒng)成本會(huì)是一筆不小的開支。
在數(shù)據(jù)備份上,NAS網(wǎng)絡(luò)附加存儲(chǔ)也有著比較出色的表現(xiàn),在數(shù)據(jù)備份效率、安全性上更加有保障,而且靈活性更高,如可以實(shí)現(xiàn)不同設(shè)備之間的數(shù)據(jù)備份等。而DAS直連方式存儲(chǔ)一般需要用戶自己去選擇第三方的備份工具,或者采用RAID磁盤陣列的方式實(shí)現(xiàn)數(shù)據(jù)的冗余備份。這種方式盡管在安全性上有保證,但是在備份效率與靈活性方面是很難跟配套的專業(yè)備份軟件相比的。
數(shù)據(jù)安全性的另外一個(gè)體現(xiàn)就是容災(zāi)性。對(duì)于NAS存儲(chǔ)方案來說,它可以更加容易、簡便地實(shí)現(xiàn)遠(yuǎn)程容災(zāi)備份。相反,由于DAS采用磁盤陣列技術(shù)本身就可以在一定程度上實(shí)現(xiàn)容災(zāi)的要求。如在磁盤陣列中,即使損壞一塊硬盤,那么服務(wù)器仍然可以根據(jù)一定的規(guī)則自動(dòng)修復(fù)數(shù)據(jù),而不會(huì)導(dǎo)致數(shù)據(jù)的丟失等等。
如果單從安全性方面來考慮采用哪一個(gè)存儲(chǔ)方案,那么可以從是否需要遠(yuǎn)程容災(zāi)備份的角度考慮。如果需要的話,則采用NAS存儲(chǔ)方案,否則還是選擇DAS方案。
三、跨平臺(tái)性能上的差異分析
眾所周知,跨平臺(tái)性能是NAS網(wǎng)絡(luò)附加存儲(chǔ)最出色的優(yōu)點(diǎn)之一。NAS網(wǎng)絡(luò)存儲(chǔ)在處理異構(gòu)操作系統(tǒng)平臺(tái)方面相比傳統(tǒng)的磁盤陣列來說具有絕對(duì)的優(yōu)勢(shì),如NAS服務(wù)器系統(tǒng)本身就支持多種操作系統(tǒng)。并且,即使在同一個(gè)網(wǎng)絡(luò)下,NAS也可以存儲(chǔ)來自多個(gè)操作系統(tǒng)的數(shù)據(jù),而不需要做任何的數(shù)據(jù)轉(zhuǎn)換,也不需要為不同的操作系統(tǒng)設(shè)置多個(gè)NAS服務(wù)器。
DAS存儲(chǔ)在跨平臺(tái)上的表現(xiàn)就要弱勢(shì)得多。雖然很多磁盤陣列本身可以支持不同的操作系統(tǒng),但在存儲(chǔ)數(shù)據(jù)時(shí),卻只支持一種客戶端。如果有多個(gè)客戶端同時(shí)往一個(gè)DAS設(shè)備存儲(chǔ)數(shù)據(jù),則需要經(jīng)過數(shù)據(jù)轉(zhuǎn)換,或采用虛擬機(jī)等中間設(shè)備才可以實(shí)現(xiàn)。這不僅增加了額外的成本與管理難度,而且還會(huì)導(dǎo)致數(shù)據(jù)的存儲(chǔ)能力下降。因此,企業(yè)如果需要支持異構(gòu)操作系統(tǒng)平臺(tái),最好在一開始就選擇NAS網(wǎng)絡(luò)附加存儲(chǔ)。
四、部署成本上的高低分析
DAS的磁盤陣列主要有軟件RAID和硬件RAID兩種。而硬件RAID又分為獨(dú)立的硬件RAID與內(nèi)置式硬件RAID,所采用的RAID模式不同,成本上相差會(huì)很大。而NAS網(wǎng)絡(luò)附加存儲(chǔ)本身就是一立的功能強(qiáng)大的磁盤陣列。從目前市場上主流的產(chǎn)品來看,NAS存儲(chǔ)產(chǎn)品的購買價(jià)格要比軟件RAID和內(nèi)置式硬件RAID DAS系統(tǒng)高,但比獨(dú)立式硬件RAID系統(tǒng)要低。
獨(dú)立式的硬件RAID一般用來做一些中央存儲(chǔ),如銀行總部的存儲(chǔ)與備份。對(duì)于這樣的要害部門而言這點(diǎn)投資是值得的。但是對(duì)于中小企業(yè)來說,獨(dú)立式硬件RAID的成本就太高了,收益率不高。
對(duì)于小型企業(yè)來說,使用軟件RAID或內(nèi)置式RAID的DAS方案就足夠了。而對(duì)于中型企業(yè),在資金允許的情況下最好還是選擇NAS方案。對(duì)于數(shù)據(jù)量比較大的企業(yè),可以適當(dāng)增加硬盤容量。一些集團(tuán)企業(yè)下面子公司的存儲(chǔ)設(shè)備,也可以采用NAS網(wǎng)絡(luò)附加存儲(chǔ)。
五、維護(hù)成本對(duì)比
NAS數(shù)據(jù)存儲(chǔ)方案是基于局域網(wǎng)而設(shè)計(jì)的,按照傳統(tǒng)的TCP/IP協(xié)議進(jìn)行通信。在LAN環(huán)境下,NAS已經(jīng)完全可以實(shí)現(xiàn)異構(gòu)平臺(tái)之間的數(shù)據(jù)級(jí)共享,比如Windows NT、Linux、UNIX等平臺(tái)的共享和集中管理。因此,NAS存儲(chǔ)方案對(duì)于企業(yè)來說的使用和維護(hù)成本相當(dāng)?shù)?,完全可以由現(xiàn)有網(wǎng)管員擔(dān)當(dāng)。相對(duì)而言,DAS的維護(hù)成本就要高得多,一般需要專人看管,而且數(shù)據(jù)量越大備份時(shí)間越長,維護(hù)周期和成本都要相應(yīng)增加。
綜合以上對(duì)比結(jié)果我們可以看到,對(duì)于中型企業(yè)來說,基于網(wǎng)絡(luò)架構(gòu)的NAS存儲(chǔ)系統(tǒng)無疑具有更多的優(yōu)勢(shì)。首先,它解決了DAS解決方案先天不足的存儲(chǔ)容量上限的問題;其次,它的架構(gòu)相對(duì)簡單,容量和設(shè)備部署也比較靈活,而且可以很好地支持跨平臺(tái)操作;而網(wǎng)絡(luò)架構(gòu)也使它更容易實(shí)現(xiàn)集中管理和維護(hù),特別是在實(shí)現(xiàn)遠(yuǎn)程備份和容災(zāi)等方面具有比較明顯的優(yōu)勢(shì),而這些都是中型企業(yè)在選擇數(shù)據(jù)存儲(chǔ)時(shí)必須要考慮的。
參考文獻(xiàn):
[1]http:///v8976411.htm.
[2]http:///storage-network-137964.htm.
大數(shù)據(jù)不是一個(gè)分析工具,而是新的基礎(chǔ)架構(gòu)。
大數(shù)據(jù)的核心價(jià)值是如何把數(shù)據(jù)變成商業(yè)價(jià)值。
大數(shù)據(jù)存儲(chǔ),可以認(rèn)為是存儲(chǔ)廠商基于現(xiàn)有大數(shù)據(jù)應(yīng)用的特點(diǎn)進(jìn)行優(yōu)化的解決方案。
記者不久前去香港出差,剛下飛機(jī)就收到招商銀行發(fā)來的一條短信,內(nèi)容是告之香港有哪些商場在舉辦促銷活動(dòng)。不知道這是巧合,還是招商銀行利用大數(shù)據(jù)的新成果,但是可以肯定,利用大數(shù)據(jù)分析可以為客戶提供定制化的服務(wù),實(shí)現(xiàn)精準(zhǔn)營銷。大數(shù)據(jù)正在改變企業(yè)業(yè)務(wù)模式,也讓人們的生活變得更加便利和豐富多彩。
存儲(chǔ)必須整合
大數(shù)據(jù)存儲(chǔ)是一類單獨(dú)的產(chǎn)品嗎?賽迪顧問高級(jí)分析師陳靚并不這么認(rèn)為:“把大數(shù)據(jù)軟件與存儲(chǔ)進(jìn)行整合,就稱為大數(shù)據(jù)存儲(chǔ),未免有些牽強(qiáng)。如果非要說出大數(shù)據(jù)存儲(chǔ)的特征,那么我認(rèn)為它至少應(yīng)該能讓大數(shù)據(jù)的‘4V’發(fā)揮出應(yīng)有的效果,滿足大數(shù)據(jù)對(duì)性能和擴(kuò)展性的要求?!?/p>
“與其說大數(shù)據(jù)存儲(chǔ)是一類產(chǎn)品,不如說它是下一代的存儲(chǔ)架構(gòu)。這種架構(gòu)可以將傳統(tǒng)的DAS、SAN和NAS有效地整合起來,以滿足上層計(jì)算平臺(tái)的要求。”Forrester Research首席咨詢分析師戴昆表示,“大數(shù)據(jù)存儲(chǔ)本身的性能與傳統(tǒng)企業(yè)級(jí)存儲(chǔ)并沒有顯著差異,它主要依賴于上層計(jì)算平臺(tái)的分布式并行處理能力,但其擴(kuò)展性一定要強(qiáng)。”
“在中國市場上,大數(shù)據(jù)應(yīng)用還沒有真正落地,許多用戶談的還是BI(商業(yè)智能)。而從國外的實(shí)踐看,BI只是大數(shù)據(jù)的一部分,屬于大數(shù)據(jù)的起步階段,真正的大數(shù)據(jù)應(yīng)用是近實(shí)時(shí)或?qū)崟r(shí)的數(shù)據(jù)分析?!敝袠蛘{(diào)研咨詢首席分析師王叢告訴記者,“計(jì)算、存儲(chǔ)、網(wǎng)絡(luò)等都與大數(shù)據(jù)的價(jià)值有關(guān)。大數(shù)據(jù)存儲(chǔ)并不是一類單獨(dú)的產(chǎn)品,它也可以通過類似公有云或私有云的方式提供給用戶。應(yīng)用和數(shù)據(jù)量的增加,對(duì)數(shù)據(jù)的存取提出了更高要求。因此,并行存儲(chǔ)能力的增強(qiáng)對(duì)大數(shù)據(jù)存儲(chǔ)來說非常重要?!?/p>
EMC Isilon存儲(chǔ)事業(yè)部總經(jīng)理?xiàng)钐m江表示,大數(shù)據(jù)存儲(chǔ)有很多實(shí)現(xiàn)方式,不過它應(yīng)具備以下特性:海量數(shù)據(jù)存儲(chǔ)能力、全局命名空間、支持標(biāo)準(zhǔn)接口、讀寫性能優(yōu)異、易于管理維護(hù)、基于開放架構(gòu)、多級(jí)數(shù)據(jù)冗余、多級(jí)存儲(chǔ)備份等。
“存儲(chǔ)產(chǎn)品并不像網(wǎng)絡(luò)產(chǎn)品那樣有嚴(yán)格的界線,因此很難將大數(shù)據(jù)存儲(chǔ)單獨(dú)劃分出來。其實(shí),大數(shù)據(jù)存儲(chǔ)并不是只有分布式存儲(chǔ)這一種方式,傳統(tǒng)的存儲(chǔ)也可以成為大數(shù)據(jù)存儲(chǔ)解決方案的一部分?!比A為存儲(chǔ)產(chǎn)品線市場總監(jiān)經(jīng)寧解釋說,“華為將大數(shù)據(jù)存儲(chǔ)當(dāng)成相對(duì)獨(dú)立的一類產(chǎn)品,主要是從產(chǎn)品的主定位角度考慮的。華為有針對(duì)企業(yè)級(jí)應(yīng)用的高端存儲(chǔ),也有針對(duì)中小型用戶的通用存儲(chǔ),當(dāng)然還有專門為大數(shù)據(jù)優(yōu)化的分布式、可橫向擴(kuò)展的大數(shù)據(jù)存儲(chǔ)?!?/p>
目前,業(yè)內(nèi)并沒有關(guān)于大數(shù)據(jù)存儲(chǔ)產(chǎn)品的通用定義,但是綜合考慮廠商的產(chǎn)品以及用戶的需求,可以簡單概括出大數(shù)據(jù)存儲(chǔ)的特征:首先,大數(shù)據(jù)存儲(chǔ)必須能夠支持全類型數(shù)據(jù),包括結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù),實(shí)現(xiàn)統(tǒng)一數(shù)據(jù)支持;其次,在保證可靠性的基礎(chǔ)之上,大數(shù)據(jù)存儲(chǔ)必須具備線性擴(kuò)展能力,同時(shí)還要具有很強(qiáng)的批處理和實(shí)時(shí)處理能力;最后,在系統(tǒng)達(dá)到一定規(guī)模后,大數(shù)據(jù)存儲(chǔ)平臺(tái)的易用性和可管理性也是不可或缺的。
在大數(shù)據(jù)處理過程中,用戶發(fā)現(xiàn)性能的瓶頸并不在計(jì)算層面,而在于海量數(shù)據(jù)的上傳和下載。因此,極高的數(shù)據(jù)加載速率是大數(shù)據(jù)存儲(chǔ)必須具備的特性。大數(shù)據(jù)解決方案通常包含數(shù)據(jù)存儲(chǔ)、計(jì)算及分析,存儲(chǔ)是大數(shù)據(jù)基礎(chǔ)架構(gòu)中的一部分。
凸顯高性能、可擴(kuò)展
對(duì)中國用戶來說,大數(shù)據(jù)應(yīng)用落地的關(guān)鍵是如何更好地讓企業(yè)的IT決策者和架構(gòu)師理解業(yè)務(wù)需求,建立適合企業(yè)業(yè)務(wù)特點(diǎn)的數(shù)據(jù)應(yīng)用場景和數(shù)據(jù)管理架構(gòu),更好地利用企業(yè)現(xiàn)有的數(shù)據(jù)資產(chǎn),而非盲目地進(jìn)行所謂的大數(shù)據(jù)投資?!坝脩羰紫纫紤]的是什么樣的大數(shù)據(jù)應(yīng)用才能為企業(yè)帶來合理產(chǎn)出,其次再考慮大數(shù)據(jù)平臺(tái)和存儲(chǔ),切勿本末倒置。”戴昆表示。
賽迪顧問的研究發(fā)現(xiàn),中國使用大數(shù)據(jù)存儲(chǔ)比較多的行業(yè)是電信、互聯(lián)網(wǎng)、金融等,其他行業(yè)大多還在觀望及測(cè)試中。中國用戶對(duì)于大數(shù)據(jù)存儲(chǔ)的需求首先是可靠和穩(wěn)定,金融行業(yè)的用戶非常重視這一點(diǎn);互聯(lián)網(wǎng)用戶則要求大數(shù)據(jù)存儲(chǔ)具有很高的I/O吞吐能力;電信行業(yè)的客戶更青睞高性價(jià)比的大數(shù)據(jù)存儲(chǔ)設(shè)備。
中國惠普有限公司企業(yè)集團(tuán)存儲(chǔ)產(chǎn)品部存儲(chǔ)架構(gòu)師張楠表示,很多中國用戶會(huì)追求大容量和高性能,忽略了大數(shù)據(jù)存儲(chǔ)本身應(yīng)該具有的其他屬性,這讓用戶在實(shí)際應(yīng)用中很容易遇到一些障礙,比如無法將存儲(chǔ)與大數(shù)據(jù)平臺(tái)進(jìn)行對(duì)接,無法在業(yè)務(wù)中充分發(fā)揮大數(shù)據(jù)存儲(chǔ)的價(jià)值等。究其原因,主要障礙在于有些大數(shù)據(jù)存儲(chǔ)產(chǎn)品沒有開放的接口協(xié)議, 沒有針對(duì)用戶的大數(shù)據(jù)應(yīng)用場景進(jìn)行特別優(yōu)化, 沒有提供用戶容易接受的易用管理方式等。
存儲(chǔ)的高可擴(kuò)展性、高可用性和并行處理能力是企業(yè)評(píng)估大數(shù)據(jù)存儲(chǔ)最重要的三個(gè)因素。高可擴(kuò)展性可以確保企業(yè)的IT能夠隨著數(shù)據(jù)量的增長和性能需求的提高進(jìn)行擴(kuò)展;高可用性能夠保證大數(shù)據(jù)分析過程的平穩(wěn)和無間斷運(yùn)行;高并行處理能力則能夠確保在大數(shù)據(jù)處理過程中同時(shí)進(jìn)行更多數(shù)據(jù)的處理,高效地完成數(shù)據(jù)分析,同時(shí)縮短產(chǎn)品或技術(shù)的上市周期。低延遲、自動(dòng)分層存儲(chǔ)以及對(duì)10GbE網(wǎng)絡(luò)的支持等也是用戶評(píng)估大數(shù)據(jù)存儲(chǔ)的重要考核因素。
“如何管理好大數(shù)據(jù)真的是一個(gè)大問題。從IT的角度看,我們還缺乏能夠展現(xiàn)數(shù)據(jù)價(jià)值的行之有效的手段。數(shù)據(jù)作為一種資產(chǎn),如何被長期、高效、經(jīng)濟(jì)地保存也是一個(gè)問題。”華為海量存儲(chǔ)產(chǎn)品線總經(jīng)理袁遠(yuǎn)表示,“大數(shù)據(jù)提出了一個(gè)新的方法論——以數(shù)據(jù)為中心,而不是以應(yīng)用為中心。以數(shù)據(jù)為中心,就要考慮數(shù)據(jù)的來源,如何以更低的成本存儲(chǔ)和管理數(shù)據(jù),誰有權(quán)利獲得哪些數(shù)據(jù),對(duì)數(shù)據(jù)進(jìn)行分析前必須進(jìn)行模型化的抽象等。大數(shù)據(jù)需要新的工具、新的管理思路和方法,同時(shí)還要對(duì)技術(shù)架構(gòu)進(jìn)行創(chuàng)新?!?/p>
歐洲核子研究中心(CERN)創(chuàng)建的OpenLAB旨在通過部署全球領(lǐng)先的IT系統(tǒng)和解決方案,將全球大型強(qiáng)子對(duì)撞機(jī)(LHC)行業(yè)的資源、研究成果匯集在一起。持續(xù)快速增長的海量科研數(shù)據(jù)對(duì)CERN的存儲(chǔ)系統(tǒng)在可擴(kuò)展性、可靠性等方面提出了嚴(yán)峻挑戰(zhàn),這也促使CERN開始評(píng)估新的存儲(chǔ)技術(shù)。最終,CERN選擇了華為UDS云存儲(chǔ)系統(tǒng),并在三個(gè)月內(nèi)完成了安裝調(diào)測(cè)和基準(zhǔn)性能的評(píng)估。測(cè)試結(jié)果顯示,UDS創(chuàng)新的軟硬件和系統(tǒng)非常適合海量數(shù)據(jù)存儲(chǔ)的業(yè)務(wù)要求,這讓CERN可以在未來輕松應(yīng)對(duì)EB級(jí)數(shù)據(jù)量的挑戰(zhàn)。
談到華為大數(shù)據(jù)存儲(chǔ)解決方案的特色,經(jīng)寧概括說:“我們能更好地把握大數(shù)據(jù)的本質(zhì)需求,并依靠自主研發(fā)能力,在IT架構(gòu)上實(shí)現(xiàn)創(chuàng)新,將計(jì)算與存儲(chǔ)進(jìn)行有機(jī)結(jié)合。我們還基于自己的大數(shù)據(jù)存儲(chǔ)平臺(tái),提供了多種類型的接口,便于與應(yīng)用銜接?!睆漠a(chǎn)品研發(fā)的角度看,華為將重點(diǎn)放在了軟件方面,硬件則采用了開放的標(biāo)準(zhǔn)化的存儲(chǔ)服務(wù)器架構(gòu)。在2013年華為云計(jì)算大會(huì)上,華為與中央電視臺(tái)正式簽署合作協(xié)議,在大數(shù)據(jù)存儲(chǔ)領(lǐng)域建立戰(zhàn)略合作關(guān)系,為媒資行業(yè)提供領(lǐng)先的技術(shù)和應(yīng)用模式。雙方計(jì)劃聯(lián)合開發(fā)自適應(yīng)、深度節(jié)能的高密度、大容量的媒資存儲(chǔ)系統(tǒng)。
面對(duì)大數(shù)據(jù)的需求,存儲(chǔ)永遠(yuǎn)不變的是對(duì)數(shù)據(jù)可靠性、性能、可擴(kuò)展性和效率的追求,而有可能發(fā)生改變的是為了提高效率、節(jié)省消耗,存儲(chǔ)可以變得更加靈活,也可以考慮與計(jì)算進(jìn)行融合等。不管存儲(chǔ)如何變化,用戶對(duì)高性價(jià)比的需求始終不變。
數(shù)據(jù)收集和存儲(chǔ)是大數(shù)據(jù)分析的第一個(gè)環(huán)節(jié)。在大數(shù)據(jù)時(shí)代,應(yīng)用數(shù)量、數(shù)據(jù)量和使用者數(shù)量的增長,對(duì)存儲(chǔ)IOPS以及OLTP和OLAP的要求越來越高,具體表現(xiàn)在現(xiàn)有的存儲(chǔ)已不能滿足業(yè)務(wù)關(guān)鍵型應(yīng)用的需求。中橋調(diào)研咨詢針對(duì)中國用戶的調(diào)研數(shù)據(jù)顯示,F(xiàn)C SAN仍是企業(yè)級(jí)用戶(42.1%)和中型企業(yè)(34.0%)的首選,遠(yuǎn)高于其他存儲(chǔ)類型的占比。這是因?yàn)镕C SAN對(duì)OLTP和OLAP的性能穩(wěn)定性優(yōu)于其他存儲(chǔ)技術(shù)。這一調(diào)查結(jié)果也顯示,目前中國用戶大多處于大數(shù)據(jù)分析的第一階段,其工作以存儲(chǔ)和IT架構(gòu)的整合和優(yōu)化為主。王叢分析說,隨著Hadoop和MapReduce的不斷普及,中國用戶將逐步進(jìn)入近實(shí)時(shí)和實(shí)時(shí)分析階段,節(jié)點(diǎn)式存儲(chǔ)的占比會(huì)隨之增加。
打通行業(yè)價(jià)值鏈
華為的金字塔型“4V”理論具體來說,第一步,要建立一個(gè)高效的存儲(chǔ)架構(gòu)平臺(tái),它既能處理大量的小文件,也能處理單體較大的文件。第二步,這個(gè)存儲(chǔ)平臺(tái)要具備極高的處理性能。第三步,這個(gè)存儲(chǔ)平臺(tái)要能處理多樣化的數(shù)據(jù),包括結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)。只有通過前面三步打下的基礎(chǔ),企業(yè)用戶才能進(jìn)入最后一步,在一個(gè)高效的專門為大數(shù)據(jù)構(gòu)建和優(yōu)化的平臺(tái)上進(jìn)行數(shù)據(jù)分析和挖掘,并最終獲得所需的價(jià)值。
經(jīng)寧表示:“如果仔細(xì)甄別,大數(shù)據(jù)與海量數(shù)據(jù)還是有差別的,畢竟大數(shù)據(jù)不僅僅是指數(shù)據(jù)量大,還包括處理、分析和挖掘等過程。從表面上看,大數(shù)據(jù)的‘4V’特征是并列的關(guān)系,但實(shí)際上這些因素之間還是有層次性的。我們提出的大數(shù)據(jù)金字塔模型,可以更好展現(xiàn)大數(shù)據(jù)價(jià)值的實(shí)現(xiàn)過程。”
華為倡導(dǎo)構(gòu)建高效的大數(shù)據(jù)存儲(chǔ)平臺(tái),而其中的高效又是如何來衡量的呢?高效的第一個(gè)衡量指標(biāo)就是性能。性能是大數(shù)據(jù)存儲(chǔ)平臺(tái)的基石之一,沒有性能的保證,大數(shù)據(jù)系統(tǒng)無異于空中樓閣。其次,大數(shù)據(jù)強(qiáng)調(diào)的是簡化使用,提高效率。最后,高效的大數(shù)據(jù)存儲(chǔ)平臺(tái)應(yīng)該采用融合的技術(shù)架構(gòu)。以華為OceanStor 9000大數(shù)據(jù)存儲(chǔ)系統(tǒng)為例,它采用華為首創(chuàng)的全融合創(chuàng)新架構(gòu),可以實(shí)現(xiàn)存儲(chǔ)、分析和歸檔的融合,同時(shí)具有很強(qiáng)的橫向擴(kuò)展能力,最大可擴(kuò)展至288節(jié)點(diǎn),單一文件系統(tǒng)可支持40PB容量。分析功能是指OceanStor 9000中內(nèi)置了分布式數(shù)據(jù)庫,能完成數(shù)據(jù)的快速檢索和查詢,以支持上層應(yīng)用。
華為一直堅(jiān)持“被集成”的策略,這在大數(shù)據(jù)領(lǐng)域同樣適用。華為的大數(shù)據(jù)存儲(chǔ)平臺(tái)可以提供開放的接口,方便與BI軟件和應(yīng)用軟件連接,進(jìn)一步提高查詢效率。在OceanStor 9000這樣的融合平臺(tái)之上,用戶還可以根據(jù)業(yè)務(wù)的情況靈活添加相關(guān)的功能模塊?!霸诖髷?shù)據(jù)方面,我們主要從垂直行業(yè)切入,與行業(yè)ISV緊密合作,為金融、電信運(yùn)營商、媒體、智慧城市、石油勘探等領(lǐng)域的用戶提供端到端的大數(shù)據(jù)存儲(chǔ)解決方案?!苯?jīng)寧說,“雖然我們已在大數(shù)據(jù)存儲(chǔ)市場上取得了豐碩的成果,但是我們更看好大數(shù)據(jù)存儲(chǔ)市場未來的潛力,因?yàn)槠湓鲩L速度遠(yuǎn)高于傳統(tǒng)存儲(chǔ)市場?!?/p>
更好的兼容 更經(jīng)濟(jì)的交付
關(guān)鍵字:“數(shù)字湖南”;DAS;NAS;SAN;虛擬化存儲(chǔ)
0 前言
地理空間框架是“數(shù)字湖南”的核心、重要基礎(chǔ)與支撐。而地理空間框架由地理信息數(shù)據(jù)組成;因此,解決了地理信息數(shù)據(jù)的存儲(chǔ)問題,也就解決了“數(shù)字湖南”數(shù)據(jù)的存儲(chǔ)問題。地理信息數(shù)據(jù)的主要特點(diǎn)是:數(shù)據(jù)量龐大且增長迅速;數(shù)據(jù)格式繁多且不易轉(zhuǎn)換;數(shù)據(jù)安全性要求高。為滿足以上要求,地理信息數(shù)據(jù)的存儲(chǔ)必須做到:足夠的數(shù)據(jù)存儲(chǔ)容量;較高的數(shù)據(jù)傳輸效率;兼容異構(gòu)平臺(tái);可充分利用局域網(wǎng)內(nèi)各種存儲(chǔ)設(shè)備,減少數(shù)據(jù)多重拷貝;簡化數(shù)據(jù)備份與管理,提高數(shù)據(jù)備份、恢復(fù)效率;最重要的是高可靠的數(shù)據(jù)安全特性。
為了更好地管理快速增長的地理信息數(shù)據(jù),需要對(duì)“數(shù)字湖南”數(shù)據(jù)中心的網(wǎng)絡(luò)存儲(chǔ)系統(tǒng)進(jìn)行統(tǒng)籌規(guī)劃;考慮未來技術(shù)發(fā)展趨勢(shì)和快速增加的數(shù)據(jù)量,應(yīng)以滿足“十二五”期間的數(shù)據(jù)存儲(chǔ)管理需求為目標(biāo),進(jìn)行數(shù)據(jù)中心網(wǎng)絡(luò)存儲(chǔ)方案設(shè)計(jì)。本文在研究當(dāng)前存儲(chǔ)主要技術(shù)、發(fā)展趨勢(shì)以及地理信息數(shù)據(jù)存儲(chǔ)現(xiàn)狀的基礎(chǔ)上,制定了“數(shù)字湖南”數(shù)據(jù)中心的內(nèi)網(wǎng)數(shù)據(jù)網(wǎng)絡(luò)存儲(chǔ)方案。
1 當(dāng)前主流存儲(chǔ)技術(shù)
目前,應(yīng)用較多的網(wǎng)絡(luò)化存儲(chǔ)系統(tǒng)主要是表1所列的三種:
從表1可以看出,只有SAN較適用于地理信息數(shù)據(jù)的存儲(chǔ)。
虛擬化存儲(chǔ)和云存儲(chǔ)是未來存儲(chǔ)技術(shù)的發(fā)展方向。存儲(chǔ)虛擬化是為存儲(chǔ)用戶提供統(tǒng)一的虛擬存儲(chǔ)池;即將品牌、級(jí)別不同且分散的存儲(chǔ)產(chǎn)品統(tǒng)一到一個(gè)(或幾個(gè))大的存儲(chǔ)池下,用戶看見的不再是孤立的、分散的系統(tǒng),而是一個(gè)統(tǒng)一的整體;它方便用戶更好地使用存儲(chǔ)資源,提高存儲(chǔ)資源利用效率。虛擬化存儲(chǔ)是提高網(wǎng)絡(luò)存儲(chǔ)系統(tǒng)可管理性的核心技術(shù)之一,也是目前研究的熱點(diǎn)。目前主要有以下三種虛擬化存儲(chǔ)技術(shù):
由表2可見由于基于主機(jī)和基于存儲(chǔ)的方法對(duì)初建者吸引力最大;但兼容性差?;诼酚善骰蚪粨Q機(jī)的方法更為適合于互操縱性要求高的企業(yè);前者具有更高可擴(kuò)充性。
目前,云存儲(chǔ)由于安全性遠(yuǎn)遠(yuǎn)達(dá)不到地理信息數(shù)據(jù)的保密要求,故不予考慮。
2 數(shù)據(jù)中心數(shù)據(jù)存儲(chǔ)方案設(shè)計(jì)
現(xiàn)以某地理信息中心為例設(shè)計(jì)數(shù)據(jù)存儲(chǔ)方案。
2.1 數(shù)據(jù)中心數(shù)據(jù)存儲(chǔ)需求
該中心2001年建成了采用DAS方式連接的數(shù)據(jù)存儲(chǔ)系統(tǒng),數(shù)據(jù)容量為1.5TB。雖然數(shù)據(jù)存儲(chǔ)系統(tǒng)經(jīng)過幾次升級(jí)擴(kuò)容,存儲(chǔ)容量擴(kuò)大到10TB以上,但仍為DAS連接;無法滿足中心的數(shù)據(jù)存儲(chǔ)備份需求。主要存在以下問題:存儲(chǔ)總?cè)萘刻。粩?shù)據(jù)的安全性、一致性和完整性面臨多方威脅;存儲(chǔ)資源浪費(fèi)現(xiàn)象嚴(yán)重;網(wǎng)速太慢。
因此,數(shù)據(jù)中心數(shù)據(jù)存儲(chǔ)系統(tǒng)建成后,應(yīng)具備如下性能:數(shù)據(jù)容量60TB;采用易管理、省投資、可擴(kuò)展的集中化存儲(chǔ)架構(gòu);較高的存儲(chǔ)備份速度;較好的可管理性;高可靠性;完善的災(zāi)難恢復(fù)計(jì)劃;連續(xù)地提供數(shù)據(jù)查詢、檢索和分析、計(jì)算的功能。
2.2 存儲(chǔ)技術(shù)選型
通過第2節(jié)的分析已確定了SAN技術(shù)比較適合地理信息中心的數(shù)據(jù)存儲(chǔ)備份,下表對(duì)IP-SAN與FC-SAN兩種技術(shù)進(jìn)行了一般性比較。
從表3中可以看出FC-SAN目前比較適合地理信息數(shù)據(jù)存儲(chǔ)。
從第2節(jié)中已知基于交換機(jī)的虛擬化技術(shù)與其他虛擬化技術(shù)相比具有較高的安全性、易使用、設(shè)備便宜,較好的互操作性,較易實(shí)現(xiàn)故障接替等優(yōu)點(diǎn),故采用FC-SAN+基于交換機(jī)的虛擬化存儲(chǔ)構(gòu)成池化存儲(chǔ)是該地理信息中心的最佳數(shù)據(jù)存儲(chǔ)方案。
2.3 數(shù)據(jù)存儲(chǔ)架構(gòu)
數(shù)據(jù)存儲(chǔ)結(jié)構(gòu)拓?fù)鋱D如下:
3 方案評(píng)價(jià)
該方案的特點(diǎn)是:
1.采用基于交換機(jī)的虛擬化存儲(chǔ);采用了性價(jià)比較高的硬件設(shè)備,故成本較低。
2.存儲(chǔ)網(wǎng)絡(luò)采用了FC-SAN,傳輸速率較高。
3.采用了虛擬化存儲(chǔ)技術(shù),整個(gè)存儲(chǔ)系統(tǒng)整合為一個(gè)存儲(chǔ)池,設(shè)備利用率高。4.采用了合理的RAID技術(shù),提高了磁盤容錯(cuò)能力。
4 不足之處是沒有備份和容災(zāi)。
綜上所述,該方案提供了一個(gè)可行的高性能、任務(wù)關(guān)鍵性數(shù)據(jù)存儲(chǔ)中心環(huán)境。
“私有云”是針對(duì)處于防火墻內(nèi)的有限人群提供托管服務(wù)專有計(jì)算網(wǎng)絡(luò)架構(gòu),其優(yōu)點(diǎn)是:構(gòu)筑在防火墻后,數(shù)據(jù)安全性較高、服務(wù)質(zhì)量穩(wěn)定,不影響現(xiàn)有IT管理的流程,大大降低了成本。 隨著云存儲(chǔ)技術(shù)的不斷發(fā)展,未來“數(shù)字湖南”數(shù)據(jù)中心數(shù)據(jù)架構(gòu)存儲(chǔ)可以考慮采用“私有云”方式。
參考文獻(xiàn):
[1]時(shí)成閣,《網(wǎng)絡(luò)存儲(chǔ)導(dǎo)論》[M],華東大學(xué)出版社,2007-1.
在如今的企業(yè)中,應(yīng)用得最多的數(shù)據(jù)存儲(chǔ)解決方案主要包括直連式存儲(chǔ)(DAS)、存儲(chǔ)區(qū)域網(wǎng)絡(luò)(SAN)、網(wǎng)絡(luò)接入存儲(chǔ)(NAS)等幾種。其中,SAN采用光纖通道(Fibre Channel)技術(shù),通過光纖通道交換機(jī)連接存儲(chǔ)陣列和服務(wù)器主機(jī),建立專用于數(shù)據(jù)存儲(chǔ)的區(qū)域網(wǎng)絡(luò)。而NAS則采用網(wǎng)絡(luò)(TCP/IP、ATM、FDDI)技術(shù),通過網(wǎng)絡(luò)交換機(jī)連接存儲(chǔ)系統(tǒng)和服務(wù)器主機(jī),建立專用于數(shù)據(jù)存儲(chǔ)的存儲(chǔ)私網(wǎng)。
非結(jié)構(gòu)化數(shù)據(jù)帶來的難題
目前,SAN、NAS是應(yīng)用的較廣泛的數(shù)據(jù)存儲(chǔ)技術(shù)。然而,現(xiàn)在的非結(jié)構(gòu)化數(shù)據(jù)越來越多,導(dǎo)致現(xiàn)在的存儲(chǔ)系統(tǒng)在管理上越來越難了。
由于很多非結(jié)構(gòu)化的數(shù)據(jù)呈爆炸性、無管理的增長,文件虛擬化目前非常流行。這些數(shù)據(jù)不能放在數(shù)據(jù)庫中進(jìn)行管理,例如郵件、Word文件和音頻視頻文件等。并且企業(yè)也沒有投資成百上千的美元去購置成百上千的NAS設(shè)備以及PB級(jí)別的磁盤存儲(chǔ)來管理這些數(shù)據(jù)。
這些數(shù)據(jù)正以無法遏制的速度不斷增長,企業(yè)只好花更多的人力去管理它們。而這些數(shù)據(jù)一開始就創(chuàng)建的亂七八糟,隨處可見,這導(dǎo)致了當(dāng)前的數(shù)據(jù)存儲(chǔ)解決方案難以管理它們。
在這種情況下,Acopi、博科等廠商提出了文件虛擬化解決方案。文件虛擬化技術(shù)能夠隱藏所有你的物理設(shè)備,通過子物理設(shè)備上面構(gòu)建一個(gè)新的層,本質(zhì)上也就是為那些NAS設(shè)備提供一個(gè)對(duì)外的邏輯視圖。所以你可以非常有效地管理你的NAS設(shè)備,讓一切變得非常容易。
使用文件虛擬化的另一個(gè)原因是存儲(chǔ)的需求繼續(xù)不斷的擴(kuò)大,我們需要找到一個(gè)非常有效的方式幫助管理員來管理這些數(shù)據(jù)。并且更為關(guān)鍵的是,哪些數(shù)據(jù)能夠管理?多少數(shù)據(jù)需要管理?這兩者之間存在著很大的差異。而這種差異也將變得越來越大并產(chǎn)生更壞的結(jié)果。
理解存儲(chǔ)虛擬化
虛擬化是當(dāng)前討論最多的技術(shù)之一,服務(wù)器虛擬化已經(jīng)得到了很多企業(yè)的認(rèn)同,如今,虛擬化已經(jīng)進(jìn)入存儲(chǔ)領(lǐng)域。
但存儲(chǔ)虛擬化是IT業(yè)的一個(gè)奇怪的現(xiàn)象。人們總是不停的提到它,但是準(zhǔn)確的說,虛擬化到底是什么,它的真正功能是什么,還是有很多疑問。
根據(jù)調(diào)查公司Freeform Dynamics在英國最近所進(jìn)行的一次定向企業(yè)的調(diào)查,對(duì)于服務(wù)器虛擬化,用戶還是有很高的熱情,而且清楚明白如何部署以及它所帶來的變化。但是到了存儲(chǔ)虛擬化,只有一半的報(bào)告回答者可以非常清楚或部分清楚存儲(chǔ)虛擬化的概念。
有一種看法是:存儲(chǔ)虛擬化指在現(xiàn)有的存儲(chǔ)陣列上增加虛擬層的做法來實(shí)現(xiàn)。在現(xiàn)在的應(yīng)用中,例如文件系統(tǒng)和存儲(chǔ)陣列,其實(shí)就是虛擬化的例子。
其實(shí),存儲(chǔ)虛擬化最重要的一個(gè)分類概念在于:將數(shù)據(jù)文件管理系統(tǒng)與存儲(chǔ)介質(zhì)分離出來,從而實(shí)現(xiàn)數(shù)據(jù)的統(tǒng)一存儲(chǔ)管理,這就是我們提到的文件虛擬化。
存儲(chǔ)廠商與網(wǎng)絡(luò)廠商群較勁
由上分析可見,文件虛擬化系統(tǒng)可能給當(dāng)前的存儲(chǔ)系統(tǒng)帶來革命性的變化,這是一個(gè)潛在的龐大的市場。因此,不少廠商介入了這個(gè)領(lǐng)域。
介入文件虛擬化領(lǐng)域的廠商主要分為兩類:一類是原本為存儲(chǔ)設(shè)備的供應(yīng)商,例如博科等,另一類就是思科、F5等網(wǎng)絡(luò)設(shè)備供應(yīng)商。
例如不久前,博科(Brocade)宣布與日立數(shù)據(jù)系統(tǒng)公司(HDS)簽署轉(zhuǎn)售協(xié)議, HDS 將轉(zhuǎn)售 Brocade StorageX 文件虛擬化管理軟件解決方案。根據(jù)此項(xiàng)協(xié)議,Brocade StorageX 將為 HDS 的客戶提供業(yè)界領(lǐng)先的文件數(shù)據(jù)復(fù)制和遷移解決方案,實(shí)現(xiàn)對(duì)多重命名空間的集中管理。該創(chuàng)新解決方案致力于應(yīng)對(duì)目前分布式異構(gòu)環(huán)境中最迫切需要解決的文件數(shù)據(jù)管理挑戰(zhàn),其中包括整合、遠(yuǎn)程辦公數(shù)據(jù)管理、業(yè)務(wù)連續(xù)性和災(zāi)難恢復(fù)。
另外,思科收購了另一家文件虛擬化廠商:NeoPath,以此進(jìn)入文件虛擬化市場。而F5則收購了Acopia,從而進(jìn)入了數(shù)據(jù)存儲(chǔ)領(lǐng)域。
思科、F5等網(wǎng)絡(luò)設(shè)備廠商進(jìn)軍存儲(chǔ)領(lǐng)域,給博科、EMC等老牌存儲(chǔ)廠商帶來了巨大的沖擊。有業(yè)內(nèi)人士認(rèn)為,博科正努力抵擋思科在SAN市場對(duì)其發(fā)起的挑戰(zhàn),并且在虛擬文件存儲(chǔ)市場中正占據(jù)著主導(dǎo)地位。然而,思科的力量是極其強(qiáng)大的,博科等存儲(chǔ)廠商必然受到嚴(yán)重的挑戰(zhàn)。
存儲(chǔ)設(shè)備廠商和網(wǎng)絡(luò)設(shè)備廠商都看中了這個(gè)市場,由此可見,文件虛擬化市場的確是未來的發(fā)展趨勢(shì)。
文件虛擬化的特征
不知現(xiàn)在你對(duì)存儲(chǔ)虛擬化結(jié)構(gòu)清楚了沒有。
現(xiàn)在,我們?cè)傩蜗蟮亟忉屢幌拢捍鎯?chǔ)虛擬化方案主要包括兩個(gè)部分,首先就是硬件存儲(chǔ)介質(zhì),例如EMC等供應(yīng)商提供磁盤機(jī)等;另一方面,就是文件管理系統(tǒng),這是獨(dú)立與存儲(chǔ)介質(zhì)的存儲(chǔ)網(wǎng)絡(luò)管理系統(tǒng),通過于存儲(chǔ)介質(zhì)的分離,實(shí)現(xiàn)虛擬化的管理、數(shù)據(jù)的集中管理,并且?guī)砑嫒菪?、低成本等?yōu)勢(shì)。
要知道,此前的文件管理系統(tǒng)往往與存儲(chǔ)介質(zhì)聯(lián)合在一起,并且通常由某一個(gè)廠商提供,在這種情況下,就帶來了兼容性、技術(shù)高成本、重復(fù)投資等多種問題,這也是當(dāng)前存儲(chǔ)系統(tǒng)價(jià)格居高不下的主要原因。
文件虛擬化平臺(tái)在行業(yè)標(biāo)準(zhǔn)的服務(wù)器上運(yùn)行,為在大型企業(yè)中跨多個(gè)分布式文件虛擬化系統(tǒng)進(jìn)行管理的管理策略提供了基礎(chǔ),因而顯著簡化了部署和操作,減少了錯(cuò)誤,并降低了運(yùn)營成本。
此外,文件虛擬化還有另外一個(gè)重要的特征:對(duì)數(shù)據(jù)進(jìn)行熱遷移。
如果能夠使各公司將工作中的虛擬機(jī)從一個(gè)物理服務(wù)器移動(dòng)到另一個(gè)物理服務(wù)器上,無需進(jìn)行中斷操作,這將極大地減少管理時(shí)間和成本,并保證了企業(yè)的關(guān)鍵應(yīng)用的業(yè)務(wù)連續(xù)性。
你可以這樣想像:一條生產(chǎn)彩電的生產(chǎn)線,斷電并啟動(dòng)一次,需要至少半個(gè)小時(shí)的時(shí)間,而三峽水電站如果因?yàn)橥V拱l(fā)電半小時(shí)間,這將帶來多大的機(jī)會(huì)損失?
為了解決這個(gè)問題,文件虛擬化解決方案提供了虛擬化快照功能。它提供了異構(gòu)(即采用多個(gè)不同供應(yīng)商產(chǎn)品的環(huán)境)虛擬化快照的企業(yè)級(jí)實(shí)施??煺帐前凑諗?shù)據(jù)在某個(gè)特定時(shí)間點(diǎn)的原樣復(fù)制品。借助這個(gè)新功能,管理員能夠立即跨多個(gè)異構(gòu)文件管理程序創(chuàng)建快照。然后,用戶和應(yīng)用程序能夠在諸如備份、復(fù)制和恢復(fù)意外刪除或修改的文件以及目錄等多種應(yīng)用中,直接訪問這些聯(lián)合快照。虛擬化快照創(chuàng)建過程對(duì)于終端用戶工作流而言是透明的。如果沒有這項(xiàng)功能,快照就不能跨多個(gè)異構(gòu)文件管理程序。
數(shù)據(jù)中心虛擬化戰(zhàn)略
一、傳統(tǒng)的XBRL數(shù)據(jù)存儲(chǔ)方式
現(xiàn)階段我國常見的XBRI數(shù)據(jù)存儲(chǔ)方式主要包括:文件系統(tǒng)存儲(chǔ)、關(guān)系數(shù)據(jù)庫存儲(chǔ)、原生數(shù)據(jù)庫存儲(chǔ)。目前運(yùn)用最為廣泛的XBRL數(shù)據(jù)存儲(chǔ)方式是以關(guān)系數(shù)據(jù)庫存儲(chǔ)XBRL文檔,可以分為CLOB字段存入關(guān)系數(shù)據(jù)庫和拆分方式存入關(guān)系數(shù)據(jù)庫,其中以拆分方式存入關(guān)系數(shù)據(jù)庫最為常見。以拆分方式存入即將XBRL文檔分解映射到關(guān)系數(shù)據(jù)庫的多張關(guān)系型表中。采用該種方式保證了數(shù)據(jù)的安全性和完整性,且易于數(shù)據(jù)查詢、挖掘和數(shù)據(jù)的深加工,是目前廣泛應(yīng)用的XBRL數(shù)據(jù)存儲(chǔ)方案。但此種方式也存在弊端:一是難以映射復(fù)雜的XBRL實(shí)例文檔,且其維護(hù)極其復(fù)雜。二是對(duì)于XBRL文檔完整性的體現(xiàn)蕩然無存。三是這種分解的方式會(huì)耗費(fèi)數(shù)據(jù)庫服務(wù)器的大量CPU和內(nèi)存資源。四是這種方式破壞XBRL文檔內(nèi)部的關(guān)聯(lián)關(guān)系,容易造成XBRL數(shù)據(jù)失真。盡管以關(guān)系數(shù)據(jù)庫存儲(chǔ)技術(shù)進(jìn)行XBRL數(shù)據(jù)存儲(chǔ)的存儲(chǔ)方案,在目前市場上有著堅(jiān)實(shí)的地位和強(qiáng)大的軟件支持,然而因信息管理技術(shù)不斷進(jìn)步而涌現(xiàn)的諸多問題,將會(huì)是關(guān)系型數(shù)據(jù)庫所不能承受的生命之重。
二、新一代XBRL數(shù)據(jù)存儲(chǔ)方式――混合數(shù)據(jù)庫存儲(chǔ)
在關(guān)系型數(shù)據(jù)庫所主宰的堅(jiān)固世界正在逼近變革的臨界點(diǎn)上,根據(jù)“螺旋式”上升的法則,混合型數(shù)據(jù)庫孕育而生。本文擬將基于混合數(shù)據(jù)庫,就一個(gè)商品銷售信息的存儲(chǔ)為例,從下述方面來探討混合數(shù)據(jù)庫存儲(chǔ)技術(shù)所具備的優(yōu)質(zhì)功能特性。(1)邏輯存儲(chǔ)。創(chuàng)建同時(shí)包含傳統(tǒng)SQL數(shù)據(jù)類型列和新的XBRL數(shù)據(jù)類型列的表。列表沒有制定XML數(shù)據(jù)的內(nèi)部結(jié)構(gòu),原因是XBRL文檔是自我描述的,混合型數(shù)據(jù)庫對(duì)XBRL數(shù)據(jù)存儲(chǔ)時(shí),只需驗(yàn)證其是否符合XBRL分類標(biāo)準(zhǔn)及規(guī)范。這種寬松的方式給用戶提供了很強(qiáng)的靈活性,更容易存儲(chǔ)包含不同屬性和內(nèi)部結(jié)構(gòu)的XBRL文檔集合,從而保證了XBRL數(shù)據(jù)的完整性與準(zhǔn)確性。(2)物理存儲(chǔ)。以樹和節(jié)點(diǎn)作為模型來存儲(chǔ)和處理XBRL數(shù)據(jù),采用經(jīng)過解析的格式來反映原始XBRL文檔的層次結(jié)構(gòu),混合型數(shù)據(jù)庫將用模式類型信息對(duì)XML層次結(jié)構(gòu)中的所有節(jié)點(diǎn)進(jìn)行標(biāo)注,從而保證了XBRL數(shù)據(jù)的內(nèi)部網(wǎng)狀關(guān)聯(lián)以及XBRL數(shù)據(jù)的層次性、多維度性。(3)索引。采用的是SQL DDL語句創(chuàng)建XBRL索引。該索引方式顯著提高了數(shù)據(jù)庫查詢和應(yīng)用程序的性能,減少為返回查詢結(jié)果集而必須讀取的數(shù)據(jù)量,同時(shí)具有標(biāo)示性,可以確保數(shù)據(jù)的準(zhǔn)確性。(4)查詢語言。程序員可以使用SQL或XQuery搜索數(shù)據(jù),應(yīng)用程序可以自由地使用這兩種語言的語句,而且一個(gè)查詢語句可以結(jié)合使用SQL和XQuery。此外,混合型數(shù)據(jù)庫有兩個(gè)查詢語言分析器:一個(gè)用于XQuery,另一個(gè)用于SQL。這兩種語言編寫的查詢都能高效地重寫查詢操作符以及選擇低成本的數(shù)據(jù)訪問計(jì)劃。
混合數(shù)據(jù)庫的核心價(jià)值體現(xiàn)在,能將關(guān)系性數(shù)據(jù)庫引擎和XML數(shù)據(jù)庫引擎連接起來,采用“雙核”引擎機(jī)制,除了支持表數(shù)據(jù)模型之外,還支持XML文檔的層次化數(shù)據(jù)模型,使用戶能夠同時(shí)管理好兩部分的數(shù)據(jù)內(nèi)容。同時(shí),使用SQL和XQuery來查詢和處理這兩種形式的數(shù)據(jù),既保留了關(guān)系型數(shù)據(jù)庫的優(yōu)勢(shì),又融入了XML對(duì)復(fù)雜數(shù)據(jù)管理的層次性、靈活性。因此,可以得出結(jié)論,采用混合數(shù)據(jù)庫技術(shù)進(jìn)行XBRL數(shù)據(jù)存儲(chǔ),是一種最為理想的XBRL數(shù)據(jù)存儲(chǔ)方案,將成為企業(yè)XBRL財(cái)務(wù)信息集成管理體系運(yùn)用的核心關(guān)鍵技術(shù)。
三、企業(yè)級(jí)XBRL財(cái)務(wù)信息管理體系架構(gòu)
隨著我國企業(yè)會(huì)計(jì)準(zhǔn)則通用分類標(biāo)準(zhǔn)的公布,企事業(yè)單位大范圍采用XBRL技術(shù)將指日可待。在企業(yè)財(cái)務(wù)信息供應(yīng)鏈上,大部分?jǐn)?shù)據(jù)都是分布在不同部門和系統(tǒng)之中,從多數(shù)據(jù)源進(jìn)行信息集成的難度會(huì)隨著信息化發(fā)展而帶來的數(shù)據(jù)格式增多和數(shù)據(jù)量增大而迅猛增長。數(shù)據(jù)集成到財(cái)務(wù)報(bào)告的最終目標(biāo)是滿足使用者的需求,面對(duì)眾多的需求,財(cái)務(wù)報(bào)告要能實(shí)時(shí)的、準(zhǔn)確的、豐富的、全面的信息來幫助人們做出決策。設(shè)想是否存在這樣一個(gè)集成的、高效的財(cái)務(wù)信息管理系統(tǒng),它提供用戶集中地管理多數(shù)據(jù)源的財(cái)務(wù)報(bào)告能力,智能地獲取實(shí)時(shí)財(cái)務(wù)信息,來輔助商業(yè)決策以及金融監(jiān)管。本文就混合數(shù)據(jù)庫存儲(chǔ)技術(shù)探討的基礎(chǔ)上,構(gòu)建一種存儲(chǔ)優(yōu)化的XBRL財(cái)務(wù)信息管理體系,如圖1所示。
【關(guān)鍵詞】網(wǎng)絡(luò)數(shù)據(jù);存儲(chǔ)備份系統(tǒng);解決方案
隨著社會(huì)的發(fā)展,科技水平的提高,網(wǎng)絡(luò)技術(shù)應(yīng)用于各個(gè)領(lǐng)域,同時(shí)網(wǎng)絡(luò)結(jié)構(gòu)也趨于復(fù)雜,從而影響著網(wǎng)絡(luò)數(shù)據(jù)的安全與共享。網(wǎng)絡(luò)數(shù)據(jù)存儲(chǔ)備份系統(tǒng)要不斷完善與發(fā)展,才能適應(yīng)社會(huì)發(fā)展的需求。本文將通過對(duì)DAS、NAS與SAN技術(shù)的分析與研究,提出網(wǎng)絡(luò)數(shù)據(jù)存儲(chǔ)備份系統(tǒng)的解決方案。
一、DAS、NAS、SAN技術(shù)的概況
(一)DAS、NAS、SAN技術(shù)的涵義
DAS即直接附加存儲(chǔ)或磁盤陣列,DAS將直接連接在服務(wù)器或客戶端的數(shù)據(jù)存儲(chǔ)設(shè)備上,它的中心為服務(wù)器,通過服務(wù)器或客戶端實(shí)現(xiàn)存儲(chǔ),主要是由硬件組成的。NAS即網(wǎng)絡(luò)附加存儲(chǔ),NAS具有特殊性與獨(dú)立性等優(yōu)勢(shì),它是一種專用的數(shù)據(jù)存儲(chǔ)服務(wù)器,它具備獨(dú)立的系統(tǒng)軟件,從而保證存儲(chǔ)的優(yōu)化,同時(shí)其具有共享功能,能夠提供跨平臺(tái)的文件。NAS的中心為數(shù)據(jù),通過存儲(chǔ)設(shè)備和服務(wù)器的分離,實(shí)現(xiàn)了對(duì)數(shù)據(jù)的集中管理,進(jìn)而利于寬帶的高效釋放。SAN即存儲(chǔ)局域網(wǎng),SAN是一種共用的、高速的專用存儲(chǔ)網(wǎng)絡(luò),其存儲(chǔ)設(shè)備主要分布在服務(wù)器的末端。SAN是一種專用的高速光纖網(wǎng)絡(luò),其光纖通道是由PRID陳列連接形成的,同時(shí)SAN的架構(gòu)需要專用的光纖交換機(jī)與集線器[1]。
(二)DAS、NAS、SAN技術(shù)的比較
關(guān)于DAS與NAS技術(shù)的比較主要表現(xiàn)在以下幾方面:在安裝方面,DAS的安裝相對(duì)復(fù)雜,一般情況下需要兩天時(shí)間;NAS的安裝相對(duì)便捷,通過獨(dú)立安裝,在十分鐘左右便可以完成。在文件共享方面,DAS不具備跨平臺(tái)文件共享的功能,因此,各個(gè)系統(tǒng)平臺(tái)的文件存儲(chǔ)需要分別進(jìn)行;NAS具備跨平臺(tái)文件共享的功能,因此可以實(shí)現(xiàn)文件共享。在操作系統(tǒng)方面,DAS不具備獨(dú)立的存儲(chǔ)操作系統(tǒng),其應(yīng)用依賴于服務(wù)器或客戶端,因此,DAS極易造成網(wǎng)絡(luò)的癱瘓與數(shù)據(jù)的丟失;NAS具備獨(dú)立的存儲(chǔ)操作系統(tǒng),從而能夠保證其寬帶的釋放,利于網(wǎng)絡(luò)的正常運(yùn)行。在存儲(chǔ)數(shù)據(jù)結(jié)構(gòu)方面,DAS的數(shù)據(jù)存儲(chǔ)模式相對(duì)分散,因此,不利于網(wǎng)絡(luò)管理人員的管理,同時(shí)也增加了維護(hù)的費(fèi)用;NAS的數(shù)據(jù)存儲(chǔ)模式相對(duì)集中,因此,其便于網(wǎng)絡(luò)管理人員對(duì)數(shù)據(jù)的集中管理,其維護(hù)的成本也相對(duì)較少。關(guān)于NAS與SAN技術(shù)的比較主要體現(xiàn)在以下幾方面:在設(shè)計(jì)理念方面,NAS擁有專用的數(shù)據(jù)存儲(chǔ)設(shè)備,同時(shí)可以直接聯(lián)網(wǎng),是一項(xiàng)獨(dú)立的系統(tǒng)存儲(chǔ)平臺(tái);SAN需要存儲(chǔ)在局域網(wǎng),不具備獨(dú)立的設(shè)備。在安裝方面,NAS安裝十分便捷,即插即用;SAN的安裝需要在服務(wù)器或存儲(chǔ)設(shè)備上添加光纖網(wǎng)卡。在文件共享方面,NAS具備跨平臺(tái)文件共享的功能,因此可以實(shí)現(xiàn)文件共享;SAN具有獨(dú)立的數(shù)據(jù)存儲(chǔ)池,因此,不同系統(tǒng)平臺(tái)的數(shù)據(jù)可以在同一存儲(chǔ)設(shè)備中進(jìn)行存儲(chǔ)。在存儲(chǔ)距離方面,NAS可以滿足長距離、不同區(qū)域數(shù)據(jù)存儲(chǔ)的需求;SAN的存儲(chǔ)距離由光纖傳輸距離決定,因此,SAN可以進(jìn)行短距離的數(shù)據(jù)存儲(chǔ)。
二、網(wǎng)絡(luò)數(shù)據(jù)存儲(chǔ)備份系統(tǒng)的解決方案
網(wǎng)絡(luò)數(shù)據(jù)存儲(chǔ)備份系統(tǒng)采用NAS存儲(chǔ)技術(shù),其具有以下特點(diǎn):網(wǎng)絡(luò)快,其網(wǎng)絡(luò)訪問為雙千兆以太網(wǎng);容量大,其容量為4U高度和10顆熱插拔的硬盤;實(shí)現(xiàn)了文件共享,并可以跨平臺(tái)、跨主機(jī);安全性,其具有權(quán)限安全管理功能,并能夠?qū)ο到y(tǒng)進(jìn)行全天候的監(jiān)控。
(一)NAS的系統(tǒng)存儲(chǔ)
在E-mail存儲(chǔ)方面,其系統(tǒng)存儲(chǔ)完全能夠滿足萬人用戶的需求,NAS在E-mail存儲(chǔ)中其容量可以達(dá)到200GB。在光盤數(shù)據(jù)下載方面,NAS的數(shù)據(jù)傳遞可以滿足100個(gè)并發(fā)的需求。
(二)NAS的系統(tǒng)安裝與維護(hù)
在硬件安裝方面,NAS的系統(tǒng)安裝可以保持原有網(wǎng)絡(luò)不變,將其連接到網(wǎng)絡(luò)的交換機(jī)上,在連接電源便實(shí)現(xiàn)了安裝;在軟件安裝方面,NAS的系統(tǒng)安裝可以在局域網(wǎng)的服務(wù)器上進(jìn)行安裝,在軟件運(yùn)行后,NAS將被自動(dòng)搜索,再打開設(shè)置窗口,便可以對(duì)NAS進(jìn)行設(shè)置。同時(shí),NAS系統(tǒng)中可以安裝防病毒的相關(guān)軟件,進(jìn)而保證其數(shù)據(jù)的安全性[2]。
(三)本方案的優(yōu)點(diǎn)
本方案有眾多的優(yōu)點(diǎn),主要優(yōu)點(diǎn)如下:
應(yīng)用了負(fù)載均衡技術(shù),NAS根據(jù)并發(fā)量的不可控性,應(yīng)用了負(fù)載均衡技術(shù),從而數(shù)據(jù)的讀取由負(fù)載均衡軟件控制,并提升了并發(fā)訪問的速度。
NAS自身的優(yōu)勢(shì),如:安全性、便捷性與擴(kuò)展性等,NAS可以即插即用,其安裝十分便捷,其管理不需要專業(yè)的人員,在應(yīng)用過程中,減輕了服務(wù)器的負(fù)荷,保證了網(wǎng)絡(luò)的高效,其安全性與共享性能夠保證數(shù)據(jù)的安全,即便網(wǎng)絡(luò)存在故障。
具有較快的響應(yīng)與較多的并發(fā)用戶。NAS的獨(dú)立性與優(yōu)化性,主要體現(xiàn)在其系統(tǒng)存儲(chǔ)平臺(tái)的獨(dú)立與存儲(chǔ)操作系統(tǒng)的優(yōu)化,從而NAS利用網(wǎng)絡(luò)數(shù)據(jù)傳輸率的提升,利于用戶響應(yīng)時(shí)間的降低。在并發(fā)用戶較多的情況下,NAS的性能愈加突顯,它能夠滿足較多的并發(fā)用戶的需求。
實(shí)現(xiàn)了跨平臺(tái)的文件共享。NAS的跨平臺(tái)文件共享,節(jié)約了用戶的費(fèi)用,可以對(duì)不同文件格式的資料進(jìn)行存儲(chǔ),同時(shí)也可以在不同的系統(tǒng)上對(duì)數(shù)據(jù)進(jìn)行訪問。
同時(shí)具有便捷性與安全性。NAS在安裝與維修方面十分便捷,不僅不需要輔助的軟件,還不需要網(wǎng)絡(luò)服務(wù)的停止,并且在安裝時(shí),不需要改變網(wǎng)絡(luò)架構(gòu),進(jìn)而利于用戶投資與成本的控制。NAS可以保證數(shù)據(jù)的完整性與安全性,主要是將源數(shù)據(jù)變成了日志文件,從而利于文件系統(tǒng)的恢復(fù)[3]。
總結(jié):綜上所述,網(wǎng)絡(luò)數(shù)據(jù)存儲(chǔ)備份系統(tǒng)的完善直接關(guān)系著系統(tǒng)數(shù)據(jù)的安全,文中分析了DAS、NAS、SAN存儲(chǔ)技術(shù),其中NAS技術(shù)具有諸多的優(yōu)勢(shì),因此,網(wǎng)絡(luò)數(shù)據(jù)存儲(chǔ)備份系統(tǒng)解決方案中運(yùn)用了NAS技術(shù),形成了跨平臺(tái)的網(wǎng)絡(luò)數(shù)據(jù)存儲(chǔ)系統(tǒng),這一方案具有實(shí)用性、可靠性與擴(kuò)展性等,不僅控制了成本,還提高了網(wǎng)絡(luò)的性能。
參考文獻(xiàn):
[1]賴晨捷.華能太倉電廠數(shù)據(jù)存儲(chǔ)備份系統(tǒng)解決方案探討[J].電力技術(shù),2010,2(04):26-27.
關(guān)鍵詞:大數(shù)據(jù) 存儲(chǔ)行業(yè)環(huán)境 戰(zhàn)略分析
引言
大數(shù)據(jù)時(shí)代,呈爆炸性增長的數(shù)據(jù)規(guī)模,可以直接決定企業(yè)發(fā)展的未來。一方面,數(shù)據(jù)爆炸性增長可能給企業(yè)帶來問題和隱患。比如,如何保證數(shù)據(jù)的絕對(duì)安全和可靠?隨著越來越多的應(yīng)用信息轉(zhuǎn)變?yōu)閿?shù)據(jù)進(jìn)行存儲(chǔ)和處理,數(shù)據(jù)的重要性和價(jià)值也越來越高,這也使得企業(yè)難以容忍數(shù)據(jù)的損壞或丟失。數(shù)據(jù)信息的毀壞和丟失會(huì)給企業(yè)帶來不可估量的損失(Patterson,D.A.,2002)。數(shù)據(jù)的重要性和價(jià)值對(duì)于諸如廣電行業(yè)企業(yè)這種有海量數(shù)據(jù)存儲(chǔ)需求的客戶來說,體現(xiàn)得更為明顯。另一方面,大數(shù)據(jù)也可以為企業(yè)帶來正面收益,比如從價(jià)值密度低的海量數(shù)據(jù)中,通過數(shù)據(jù)分析和數(shù)據(jù)挖掘技術(shù),迅速提取更有價(jià)值的數(shù)據(jù),用于提高企業(yè)自身的核心競爭力。在這一背景下,一些存儲(chǔ)行業(yè)企業(yè)紛紛展開兼并收購,提升綜合能力。如存儲(chǔ)行業(yè)領(lǐng)導(dǎo)廠商VMware公司(NYSE:VMW)先后收購了開源Java開發(fā)商SpringSource、關(guān)系型和非關(guān)系型分布式數(shù)據(jù)管理系統(tǒng)廠商GemStone、開源軟件開發(fā)商WaveMaker、企業(yè)社交協(xié)作解決方案提供商Socialcast、PPT在線制作服務(wù)提供商 SlideRocket,并對(duì)其進(jìn)行整合,成為提供大數(shù)據(jù)解決方案的服務(wù)提供商。IBM也在大數(shù)據(jù)領(lǐng)域展開了連環(huán)收購,先后收購銷售數(shù)據(jù)分析公司Varicent和企業(yè)搜索和導(dǎo)航軟件提供商Vivisimo,將大數(shù)據(jù)的搜索和分析擴(kuò)展到Hadoop之外的傳統(tǒng)遺留應(yīng)用和數(shù)據(jù)倉庫。
存儲(chǔ)行業(yè)產(chǎn)業(yè)環(huán)境現(xiàn)狀
產(chǎn)業(yè)環(huán)境分析體現(xiàn)了產(chǎn)業(yè)內(nèi)的競爭激烈程度和企業(yè)的最終獲利潛力。波特認(rèn)為五種力量狀況及其綜合強(qiáng)度決定行業(yè)環(huán)境:新進(jìn)入者的威脅、供方的討價(jià)還價(jià)能力、買方的討價(jià)還價(jià)能力、替代品的威脅及現(xiàn)有競爭者之間的競爭。就存儲(chǔ)行業(yè)而言,本文用五力模型對(duì)其行業(yè)環(huán)境進(jìn)行分析(見圖1):
(一)新進(jìn)入者的威脅
目前我國存儲(chǔ)產(chǎn)業(yè)的潛在競爭者主要來自于IBM、EMC和VMware等技術(shù)和資金實(shí)力雄厚的跨國公司,基于核心傳統(tǒng)的存儲(chǔ)設(shè)備技術(shù)能力,通過內(nèi)部研發(fā)和兼并收購等已經(jīng)具備為客戶提供綜合化存儲(chǔ)解決方案的能力。另外,華為、藍(lán)汛科技、永新視博、同洲、索貝、新奧特、數(shù)碼視訊等公司也紛紛涉足大數(shù)據(jù)領(lǐng)域,推出了針對(duì)廣電行業(yè)應(yīng)用的產(chǎn)品與解決方案。以上行業(yè)新進(jìn)入者對(duì)現(xiàn)有存儲(chǔ)企業(yè)帶來了較高威脅,雖然存儲(chǔ)產(chǎn)業(yè)具有一定的技術(shù)和資金壁壘,對(duì)于中小企業(yè)進(jìn)入障礙較高,但對(duì)于這些技術(shù)研發(fā)具有優(yōu)勢(shì)的企業(yè),這些壁壘不足以形成障礙。所以,新進(jìn)入者威脅是需要充分考慮的要素。為獲得可持續(xù)發(fā)展,現(xiàn)有存儲(chǔ)企業(yè)必須提升研發(fā)能力,以客戶需求為中心,結(jié)合云計(jì)算為用戶提供更多創(chuàng)新的業(yè)務(wù)體驗(yàn),還可通過構(gòu)建業(yè)務(wù)研發(fā)云平臺(tái),降低新業(yè)務(wù)開發(fā)成本,加快新業(yè)務(wù)推出速度,為贏得市場先機(jī)奠定基礎(chǔ)。
(二)替代產(chǎn)品的威脅
存儲(chǔ)行業(yè)企業(yè)提供的是存儲(chǔ)設(shè)備產(chǎn)品和專業(yè)化服務(wù),諸如廣電和證券行業(yè)等具有海量數(shù)據(jù)存儲(chǔ)需求的企業(yè),由于技術(shù)的局限很難選擇自營的形式為自身提品和服務(wù)。當(dāng)數(shù)據(jù)量達(dá)到一定程度時(shí),只能選擇專業(yè)從事存儲(chǔ)的企業(yè)提品或服務(wù)??梢?,存儲(chǔ)行業(yè)企業(yè)的替代性較低。
(三)供應(yīng)商的討價(jià)還價(jià)能力
存儲(chǔ)行業(yè)的供應(yīng)商包括存儲(chǔ)基礎(chǔ)零部件設(shè)備供應(yīng)商和數(shù)據(jù)管理服務(wù)供應(yīng)商,大部分是IT制造行業(yè)企業(yè),供應(yīng)商的討價(jià)還價(jià)能力決定于其規(guī)模、技術(shù)實(shí)力和專業(yè)性。如果業(yè)務(wù)量大、技術(shù)能力強(qiáng)、專業(yè)服務(wù)水準(zhǔn)高,討價(jià)還價(jià)能力就相對(duì)較強(qiáng)。
(四)買方的討價(jià)還價(jià)能力
中國存儲(chǔ)產(chǎn)業(yè)集中度較高,能提供海量數(shù)據(jù)存儲(chǔ)設(shè)備和服務(wù)的國內(nèi)企業(yè)并不多。相對(duì)于國外企業(yè)來講,國內(nèi)企業(yè)的產(chǎn)品和服務(wù)具有價(jià)格優(yōu)勢(shì),國外企業(yè)提供專業(yè)化產(chǎn)品和服務(wù)水準(zhǔn)較高,客戶方的討價(jià)還價(jià)能力不高,一般根據(jù)成本節(jié)約的目標(biāo)選擇國內(nèi)或國外企業(yè)的產(chǎn)品。
(五)現(xiàn)有競爭者之間的競爭
存儲(chǔ)行業(yè)競爭雖然激烈,但是主要依靠品牌、本地化支持、技術(shù)和性價(jià)比等因素的良性競爭。一方面,在高端市場,國外廠商依靠品牌和技術(shù)優(yōu)勢(shì)占據(jù)了一部分對(duì)價(jià)格不敏感的大客戶,但是由于其本地化支持程度較低,后期發(fā)生的服務(wù)成本較高,很多企業(yè)選擇國內(nèi)存儲(chǔ)企業(yè)的產(chǎn)品和服務(wù)。一部分國內(nèi)存儲(chǔ)行業(yè)企業(yè)依靠強(qiáng)大的本地化支持,依靠性能和價(jià)格兩方面競爭;另一部分企業(yè)通過拓展增值型服務(wù)和提升服務(wù)水準(zhǔn),拓展新服務(wù)幫助客戶企業(yè)提升競爭力并創(chuàng)造價(jià)值來獲取競爭地位。通過以上分析,可見存儲(chǔ)行業(yè)是個(gè)具有吸引力的朝陽產(chǎn)業(yè),服務(wù)市場的需求和利潤空間較大。
大數(shù)據(jù)時(shí)代存儲(chǔ)行業(yè)的機(jī)遇與挑戰(zhàn)
大數(shù)據(jù)時(shí)代的來臨也將會(huì)給廣電、銀行、證券等有海量數(shù)據(jù)存儲(chǔ)需求的行業(yè)帶來巨大的價(jià)值和影響,這些存儲(chǔ)產(chǎn)業(yè)鏈下游的客戶企業(yè)必定會(huì)更加依賴于大數(shù)據(jù)的發(fā)展,這為存儲(chǔ)行業(yè)提供了大量的潛在需求和發(fā)展機(jī)遇。另一方面存儲(chǔ)行業(yè)企業(yè)更應(yīng)該明確客戶需求和清楚自身的優(yōu)勢(shì)和劣勢(shì),確保從容應(yīng)對(duì)大數(shù)據(jù)時(shí)代的來臨,并充分利用大數(shù)據(jù)時(shí)展帶來的能量,提升和深耕自身能力,建立可持續(xù)發(fā)展的競爭優(yōu)勢(shì)(張帥,2000)。以新聞廣電這一典型存儲(chǔ)行業(yè)客戶為例,存在的挑戰(zhàn)主要表現(xiàn)在:第一,高性能和低延時(shí)。信息流、工作流的整合對(duì)性能要求日益提高。數(shù)據(jù)傳輸?shù)膶?shí)時(shí)性要求高,如節(jié)目播出流暢、不丟幀,要求數(shù)據(jù)必須在限定時(shí)間以限定的形式和流量提供;第二,大容量和高可靠性。行業(yè)的數(shù)據(jù)存儲(chǔ)若以音頻視頻流為主,往往一個(gè)文件即高達(dá)數(shù)十GB,清晰度提高,使得數(shù)據(jù)量大幅增長,另外數(shù)據(jù)(音視頻資料)這種核心資源,具有珍貴的歷史意義和保留價(jià)值,若發(fā)生丟失會(huì)給電視臺(tái)、網(wǎng)絡(luò)公司帶來巨大損失;第三,節(jié)約成本。由于設(shè)備和服務(wù)的分散采購,給客戶方帶來了額外的交易成本支出,如何為客戶節(jié)約交易流程復(fù)雜帶來的成本,提升綜合服務(wù)能力是存儲(chǔ)行業(yè)企業(yè)面臨的又一挑戰(zhàn)。
大數(shù)據(jù)時(shí)代存儲(chǔ)行業(yè)發(fā)展戰(zhàn)略
(一)推進(jìn)增值服務(wù)管理,從存儲(chǔ)設(shè)備提供商向數(shù)據(jù)解決方案的服務(wù)提供商轉(zhuǎn)型
在大數(shù)據(jù)時(shí)代背景下,客戶需求和科技發(fā)展相互結(jié)合,相互促進(jìn),一些客戶自身具備豐富的業(yè)務(wù)類型和應(yīng)用場景,具備豐富的實(shí)戰(zhàn)經(jīng)驗(yàn),可以為大數(shù)據(jù)的方案實(shí)施提供寶貴的信息基礎(chǔ);而大數(shù)據(jù)領(lǐng)域的科技發(fā)展則可以為客戶企業(yè)提供高效、安全、合理的技術(shù)平臺(tái),最大程度滿足企業(yè)需求。例如,廣電行業(yè)對(duì)大數(shù)據(jù)應(yīng)用存在著諸多顯見或潛在需求,伴隨著大數(shù)據(jù)技術(shù)的飛速發(fā)展,廣電行業(yè)的大數(shù)據(jù)應(yīng)用也必將隨之興起。在廣電行業(yè)內(nèi)部,大部分電臺(tái)、電視臺(tái)都已經(jīng)完成了數(shù)字化改造,并開始實(shí)施包括生產(chǎn)、辦公、網(wǎng)絡(luò)集成一體的全臺(tái)網(wǎng)絡(luò)建設(shè)。企業(yè)需要的不僅僅是能存儲(chǔ)海量數(shù)據(jù)的高端存儲(chǔ)設(shè)備,更需要滿足終端綜合需求的數(shù)據(jù)管理解決方案,這要求存儲(chǔ)企業(yè)能夠提品+服務(wù)的“交鑰匙”工程,從存儲(chǔ)設(shè)備提供商向數(shù)據(jù)解決方案的服務(wù)提供商轉(zhuǎn)型。這種轉(zhuǎn)型要求存儲(chǔ)企業(yè)具備較高的綜合需求管理能力,在面對(duì)不同客戶的多級(jí)多域綜合需求時(shí),能迅速響應(yīng)分解到企業(yè)內(nèi)部和二級(jí)、三級(jí)供應(yīng)商,再進(jìn)一步整合成定制化的解決方案交遞客戶。可見培育企業(yè)的供應(yīng)商管理和客戶關(guān)系管理能力是成為數(shù)據(jù)解決方案的服務(wù)提供商的基礎(chǔ)(陳向東、王曉方,2011)。
(二)采用科技前置的營銷策略,提升數(shù)據(jù)整合能力
以市場需求為導(dǎo)向,強(qiáng)化技術(shù)創(chuàng)新所獲得的競爭優(yōu)勢(shì),實(shí)現(xiàn)增值營銷。為使存儲(chǔ)企業(yè)高端客戶和產(chǎn)品市場呈現(xiàn)出強(qiáng)勁增長態(tài)勢(shì),必須采取科研前置的技術(shù)營銷策略,這也是大客戶營銷的基礎(chǔ)所在。大客戶代表著前向產(chǎn)業(yè)的拉動(dòng)者,公司需堅(jiān)持技術(shù)領(lǐng)先,緊緊跟隨前項(xiàng)產(chǎn)業(yè)的技術(shù)進(jìn)步,如云計(jì)算、云平臺(tái)和活性存儲(chǔ)等,采取合作開發(fā)、單獨(dú)研制等方式不斷創(chuàng)新產(chǎn)品、創(chuàng)新技術(shù),并針對(duì)不同使用條件和環(huán)境,為顧客進(jìn)行合理數(shù)據(jù)存儲(chǔ)方案設(shè)計(jì),以滿足個(gè)性化需求。一方面,更敏銳地把握技術(shù)發(fā)展趨勢(shì)和客戶的最新需求;另一方面,保持向高端客戶和新的產(chǎn)品服務(wù)模式拓進(jìn),把知識(shí)營銷運(yùn)用于存儲(chǔ)企業(yè)的經(jīng)營管理,是對(duì)傳統(tǒng)設(shè)備制造型存儲(chǔ)企業(yè)的改造升級(jí),構(gòu)建強(qiáng)勢(shì)存儲(chǔ)企業(yè)品牌的長期競爭優(yōu)勢(shì),其主旨是企業(yè)不僅要能夠?yàn)榭蛻籼峁┴S富的產(chǎn)品、協(xié)助數(shù)據(jù)管理,更重要的是能夠針對(duì)用戶應(yīng)用環(huán)境研發(fā),提供有針對(duì)性的優(yōu)化解決方案。
(三)推進(jìn)產(chǎn)業(yè)聯(lián)盟和培育存儲(chǔ)產(chǎn)業(yè)鏈,構(gòu)建全球化網(wǎng)絡(luò)
一方面,在提升技術(shù)研發(fā)能力的同時(shí),積極與全球各地的研究機(jī)構(gòu)開展人才交流和技術(shù)合作;積極開展供應(yīng)商參與的、科研院所聯(lián)合研發(fā),跨企業(yè)、跨產(chǎn)業(yè)的技術(shù)研發(fā)聯(lián)盟;另一方面,建立多方合作平臺(tái),建立以綜合服務(wù)集成商為主導(dǎo)的產(chǎn)業(yè)價(jià)值網(wǎng),以建立穩(wěn)定持續(xù)的業(yè)務(wù)關(guān)系為目標(biāo),由專人或?qū)m?xiàng)小組直接與目標(biāo)客戶溝通,為其提供個(gè)性化服務(wù)?;谄放?、技術(shù)、制造和服務(wù)積累力量,作為國際化的 “四輪驅(qū)動(dòng)”,推動(dòng)中國存儲(chǔ)企業(yè)的國際化進(jìn)程。無論是現(xiàn)在還是未來,品牌、技術(shù)、服務(wù)和制造都是全球存儲(chǔ)市場的角力點(diǎn)。存儲(chǔ)行業(yè)企業(yè)應(yīng)盡快完成從產(chǎn)品輸出到以技術(shù)、服務(wù)輸出和品牌輸出的轉(zhuǎn)變,極大地提高產(chǎn)品的供應(yīng)能力和服務(wù)能力?;谝陨险归_國際市場布局,面對(duì)復(fù)雜陌生的海外市場,還需要建立本土化的供應(yīng)網(wǎng)絡(luò),與當(dāng)?shù)毓?yīng)商合作,在構(gòu)建渠道網(wǎng)絡(luò)的同時(shí),了解和熟悉當(dāng)?shù)厥袌?。隨著國際市場業(yè)務(wù)增長以及銷售渠道和服務(wù)網(wǎng)絡(luò)的完善,提供與之匹配的本地化服務(wù)支持,與國際存儲(chǔ)企業(yè)競爭。
參考文獻(xiàn):
1.Patterson,D.A.2002.Availability and maintainability performance: New focus for a new century. Key note speech at FAST'02
2.2011年存儲(chǔ)行業(yè)十大發(fā)展趨勢(shì)預(yù)測(cè)[J].微電腦世界,2011(2)
3.邁克爾·波特.競爭優(yōu)勢(shì)[M].華夏出版社,1985
4.張帥.存儲(chǔ)行業(yè)的先鋒—美國EMC公司[J].中國科技信息,2000(24)
5.存儲(chǔ)行業(yè)從品質(zhì)競爭轉(zhuǎn)向品位競爭[J].計(jì)算機(jī)與網(wǎng)絡(luò),2006(13)
6.陳向東,王曉方.創(chuàng)意產(chǎn)業(yè)廣電行業(yè)國際競爭力的比較分析—基于中國和歐洲的對(duì)比[J].現(xiàn)代商業(yè),2011(17)