企業(yè)數據存儲方案范文

時間:2023-03-20 01:37:18

導語:如何才能寫好一篇企業(yè)數據存儲方案,這就需要搜集整理更多的資料和文獻,歡迎閱讀由公文云整理的十篇范文,供你借鑒。

企業(yè)數據存儲方案

篇1

【關鍵詞】海量數據;電力企業(yè);存儲

1 引言

在電力行業(yè),堅強智能電網的迅速發(fā)展使信息通信技術正以前所未有的廣度、深度與電網生產、企業(yè)管理快速融合,信息通信系統(tǒng)已經成為智能電網的“中樞神經”,支撐新一代電網生產和管理發(fā)展。目前,電網公司已初步建成了國內領先、國際一流的信息集成平臺。隨著各地集中式數據中心的陸續(xù)投運,一級部署業(yè)務應用范圍的拓展,結構化和非結構化數據中心的上線運行,電網業(yè)務數據從總量和種類上都已初具規(guī)模。隨著后續(xù)智能電表的逐步普及,電網業(yè)務數據將從時效性層面進一步豐富和拓展。電網業(yè)務數據將跨入海量數據時代,如何處理這些海量數據已成為電力企業(yè)信息管理首要解決的問題。而在海量數據的處理中,如何有效地保存和恢復數據就成了這些問題當中的首要問題。

2 海量數據特征

海量數據按照數據結構來進行劃分,可以劃分為結構化數據和非結構化數據兩大類。

(1)結構化數據:簡單來說就是數據庫, 即行數據,存儲在數據庫里,可以用二維表結構來邏輯表達實現的數據。結合到典型場景中更容易理解,比如企業(yè)ERP、財務系統(tǒng);醫(yī)療HIS數據庫;教育一卡通;政府行政審批;其他核心數據庫等

(2)非結構化數據:相對于結構化數據而言,不方便用數據庫二維邏輯表來表現的數據即稱為非結構化數據,包括所有格式的辦公文檔、文本、圖片、XML、HTML、各類報表、圖像和音頻/視頻信息等等。 非結構化數據庫是指其字段長度可變,并且每個字段的記錄又可以由可重復或不可重復的子字段構成的數據庫,用它不僅可以處理結構化數據(如數字、符號等信息)而且更適合處理非結構化數據(全文文本、圖象、聲音、影視、超媒體等信息)

按照數據的時效性而言,海量數據又可劃分為實時數據和離線數據兩類。

實時數據:實時數據一般用于金融、移動和互聯網B2C等產品,往往要求在數秒內返回上億行數據的分析,從而達到不影響用戶體驗的目的。要滿足這樣的需求,可以采用精心設計的傳統(tǒng)關系型數據庫組成并行處理集群,或者采用一些內存計算平臺,或者采用HDD的架構,這些無疑都需要比較高的軟硬件成本。目前比較新的海量數據實時分析工具有EMC的Greenplum、SAP的HANA等。

離線數據:對于大多數反饋時間要求不是那么嚴苛的應用,比如離線統(tǒng)計分析、機器學習、搜索引擎的反向索引計算、推薦引擎的計算等,應采用離線分析的方式,通過數據采集工具將日志數據導入專用的分析平臺。但面對海量數據,傳統(tǒng)的ETL工具往往徹底失效,主要原因是數據格式轉換的開銷太大,在性能上無法滿足海量數據的采集需求?;ヂ摼W企業(yè)的海量數據采集工具,有Facebook開源的Scribe、LinkedIn開源的Kafka、淘寶開源的Timetunnel、Hadoop的Chukwa等,均可以滿足每秒數百MB的日志數據采集和傳輸需求,并將這些數據上載到Hadoop中央系統(tǒng)上。

3 企業(yè)海量數據存儲現狀

3.1 海量數據導致存儲成本、維護管理成本不斷增加

大型企業(yè)都面臨著業(yè)務和IT投入的壓力,與以往相比,系統(tǒng)的性能/價格比更加受關注。GIGA研究表明,ROI(投資回報率)越來越受到重視。海量數據使得企業(yè)因為保存大量在線數據以及數據膨脹而需要在存儲硬件上大量投資,雖然存儲設備的成本在下降,但存儲的總體成本卻在不斷增加,并且正在成為最大的一筆IT開支之一。另一方面,海量數據使DBA陷入持續(xù)的數據庫管理維護工作當中。

3.2 海量數據缺乏快速備份與災難恢復機制

傳統(tǒng)的數據庫備份技術,如通常采用的磁帶備份方式,不能運用于海量數據,因為磁帶備份將使備份時間增加,需要幾小時-幾天,不僅影響了生產,而且增加了備份的難度,使得備份/恢復變得緩慢而且不可靠,幾乎無法在固定的時間窗口完成備份工作。另外,第三方備份軟件隱含的成本代價如成本開銷、復雜度、昂貴的實施等也是企業(yè)需要考慮的。因此海量數據安全顯得異常重要,只有通過引入有效的備份、方便高效的備份恢復技術,才能滿足海量數據安全的需要。

4 存儲解決方案概述

在海量數據存儲中我們主要考慮的是大數據的存儲,雖然現行的商業(yè)平臺也能滿足非結構化數據的存儲,但問題主要出在系統(tǒng)可擴展性和建設費用上。對于龐大的非結構化數據存儲產生的I/O瓶頸問題和昂貴的服務器價格不得不使我們另謀出路。

Hadoop的分布式文件系統(tǒng)HDFS出現恰好解決了商業(yè)平臺中的I/O瓶頸和服務器價格昂貴問題。Hadoop的優(yōu)勢體現在以下幾個方面:

(1)Hadoop依賴于低端服務器甚至是普通計算機,相對于商業(yè)平臺的高昂成本,它的成本要低得多,幾乎可以說任何人都可以使用它,哪怕是信息化成本預算較少的小微企業(yè);

(2)HDFS與Map/Reduce緊密集成是Hadoop分布式計算的存儲基石。它有自己明確的設計目標那就是支持大的數據文件大至T級,并且這些文件以順序讀取為主,以文件存/讀的高吞吐量為目標。在使用HDFS分布式文件系統(tǒng)存儲非結構化文件后,將提高我們系統(tǒng)的存儲文件速度;

(3)HDFS的數據恢復能力也保證了系統(tǒng)的安全可靠性,可靠性體現在它假設計算元素和存儲會失敗,因此它維護多個工作數據副本,確保能夠針對失敗的節(jié)點重新分布處理。

(4)同時支持存儲節(jié)點的熱插拔和可以在普通PC機上存儲非結構化文件,這不但提高了系統(tǒng)的擴展靈活性,還大大降低了企業(yè)在硬件方面的投入

5 應用架構

在本存儲解決方案中,我們選擇了Hadoop作為數據文件存儲機制,Hadoop中的HDFS存儲數據可以選擇普通的PC機器作為數據節(jié)點,這大大的降低了存儲數據所需要昂貴存儲設備價格,并且在數據存儲過程中,HDFS擁有很好的數據容災機制。

6 HDFS

Hadoop的存儲主要使用HDFS來進行管理,HDFS是一個分布式文件存儲系統(tǒng)。HDFS起源于Apache Nutch Web 搜索引擎項目。

對于HDFS分布式文件系統(tǒng)中的塊進行抽象會帶來很多好處:

(1)文件的大小可以大于網絡中任意一個磁盤的容量,文件的所有塊不需要存儲在同一個磁盤上,因此他們可以利用集群上的任意一個磁盤進行存儲。

(2)使用塊抽象而非整個文件作為存儲單元,大大的簡化了存儲系統(tǒng)的設計。簡化是所有系統(tǒng)的目標,但對于故障種類繁多的分布式系統(tǒng)來說尤為重要。

(3)塊非常適合用于數據備份,進而提高數據容錯能力和可用性。

6.1 HDFS架構

6.2 HDFS文件存儲方式使用大塊的原因

HDFS的塊比磁盤大,其目的是為了最小化尋址的開銷。如果塊設置的足夠大,從磁盤傳輸數據的時間可以明顯的大于定位這個塊開始位置所需的時間。這樣,傳輸一個由多個塊組成的文件的時間取決于磁盤的傳輸速率,由此可見適當的設置磁盤塊空間大小可以加快數據讀寫效率。

6.3 HDFS的集群管理模式

HDFS集群有兩類節(jié)點,并以管理者――工作者模式運行,即一個namenode(管理者)和多個datanode(工作者)。管理者管理文件系統(tǒng)的命名空間,它維護著文件系統(tǒng)樹及整棵樹內所有的文件和目錄。這些信息以兩個文件形式永久保存在本地磁盤上:命名空間鏡像和編輯文件日志。工作者也記錄著每個文件中各個塊所有在的數據節(jié)點信息,但它不永久保存塊的位置信息,因為這些信息會在系統(tǒng)啟動時由數據節(jié)點重建。

6.4 HDFS文件寫入方式

客戶端通過調用HDFS類DistributedFileSystem對象調用create()函數來創(chuàng)建文件,在此時文件系統(tǒng)的命名空間中創(chuàng)建了一個新文件,但該文件還沒有相應的數據塊。管理者(namenode)執(zhí)行各種不同的檢查確保當前創(chuàng)建的文件不存在,并且客戶端有創(chuàng)建該文件的權限,如果檢查通過則創(chuàng)建新文件記錄;否則,文件創(chuàng)建失敗并拋出異常。在客戶端寫入數據時,數據被分成一個個的數據包,并寫入內部隊列,HDFS的DataStreamer處理數據隊列,它的責任是根據工作者(datanode)的隊列列表要求管理者(namenode)分配適合的新塊來存儲數據備份。如下圖

7 實現功能

海量數據存儲部分主要包含了三部分的功能:數據采集、數據存儲與備份、數據分析,如圖所示:

7.1 數據采集

海量數據存儲采用開放上傳接口的方式進行被動數據采集,各業(yè)務平臺通過向上傳接口傳遞業(yè)務平臺標識、文件信息標識和文件信息的二進制流的方式將文件打包傳送到非結構化數據管理平臺,非結構化數據管理平臺通過業(yè)務平臺標識對傳輸過來的文件進行分類解碼存儲。

7.2 數據存儲與備份

海量數據管理在接收到各業(yè)務平臺發(fā)送過來的文件后,根據業(yè)務平臺標識在HBASE中生成文件信息數據,同時將文件存儲至HBase中。

7.3 數據分析

基于已存儲的數據,可以分析各業(yè)務平臺的數據量,數據高峰的周期,從而適時調整數據存儲策略,為不同的業(yè)務應用制定不同的存儲計劃,充分體現系統(tǒng)存儲的靈活性,提升海量數據的存儲效率。

8 方案總結

篇2

存儲技術日新月異,在數據存儲和文件分享方面,有實體存儲、云存儲、虛擬存儲和軟件定義存儲及純閃存陣列,各存儲方式都有各自的優(yōu)缺點,企業(yè)需要根據特定的環(huán)境來選定合適的存儲方案。仔細看來,云存儲在企業(yè)文件分享上有用武之地,而且適用面比較廣。

云存儲可以充分利用現有硬件的存儲能力,分布計算,提高存儲能力,云存儲分為公有云存儲和私有云存儲,對企業(yè)客戶來說,使用公有云存儲最大的顧慮是數據安全,但是私有云存儲就能很好的解決這個問題。

實體存儲是存儲行業(yè)的大趨勢,主要原因是非結構化數據的飛速增長或傳統(tǒng)數據存儲的局限性。在選擇私有云儲存時要考慮云存儲的技術實現,選擇基于實體存儲解決方案的產品。這里以企業(yè)云盤為例,介紹企業(yè)在文檔和數據存儲方面的管理。

在技術解決方案上,企業(yè)云盤一般分三層,最底層是硬件資源和云管理平臺,充分利用公司現有的存儲硬件。中間一層是云存儲核心部分,實現云存儲的數據管理,基于實體存儲的設計思路,突破操作系統(tǒng)對文件管理的局限性。商務邏輯為企業(yè)用戶定制,含企業(yè)特有的模塊和功能。最上面的一層是應用層,榮之聯提供不同終端的軟件供用戶安裝,終端軟件和云存儲對接,做數據交換。對員工而言,終端軟件就是企業(yè)云盤。

那站在企業(yè)的角度來看,運用企業(yè)云盤這種私有云存儲能給企業(yè)帶來怎樣的好處了呢?

1.數據更加安全高效:私有云存儲是部署在公司的防火墻內,受公司的安全機制管制,還能輕松管理每個員工的讀寫權限。同時文件分享可以讓員工在無VPN的情況下讀寫文檔,公司內部無需安裝文件服務器,而且企業(yè)云盤擁有去重的功能,對硬件資源的利用更充分,大大減少硬件資源的浪費。還能支持各移動終端進行移動辦公,無須擔心數據同步問題。

2.文檔分享、搜索更快捷:群組概念提供更靈活的分享途徑。員工可以創(chuàng)建項目組、興趣組、部門組、公司組。群組的概念讓文件分享更加有針對性。企業(yè)文檔被集中管理,員工可以在創(chuàng)建的不同層面上做搜索。

3.更優(yōu)的用戶體驗:企業(yè)云盤和用戶的電腦無縫集成。用戶無需改變使用習慣就可以充分享受云存儲的好處。備份,同步自動在后臺進行,優(yōu)化的算法也充分利用網絡帶寬。用戶也可自設上傳下載的速率。同時榮之聯創(chuàng)新的分布式部署極大降低對帶寬的要求。用戶的數據首先是存放到最近的服務器,讀寫更快捷。

4.審計和版本管理:云盤自帶審計和版本管理功能,可以輕松地恢復到以前的版本。

5.API 支持:企業(yè)云盤可以部署為云存儲。企業(yè)內部的應用可以直接調用云存儲的API來讀寫數據。是真正意義上的企業(yè)私有實體存儲(Object Storage) 。

任何東西都有兩面性,企業(yè)云盤在給企業(yè)帶來好處的同時,也存在一些缺陷,而企業(yè)云盤最大的缺陷是對帶寬的依賴。

篇3

【關鍵詞】 云存儲 私有云 存儲 共享

當前,供電企業(yè)個人或部門的數據,例如文本、圖片、歸檔數據、各種格式的文件等等,數據量呈現海量的增長,面臨如下問題:

1、個人存儲空間不足。供電企業(yè)個人PC設備,使用年限一般為5-7年,部分機型較老較舊,配置較低。主要的存儲設備為硬盤,空間在多年的存儲使用下已出現嚴重不足,普遍無法適應新增數據存儲的需求。

2、數據交互共享難。當前,個人用戶之間,部門之間,需要及時共享的數據容量越來越大,通過傳統(tǒng)的使用U盤、移動硬盤、FTP來中轉拷貝數據的方式,已越來越不適應當前的需要,存在著病毒感染、丟失等安全隱患。

針對以上兩種情況,本文通過架設私有云存儲服務器的方式來解決數據存儲和共享方面的問題,為供電企業(yè)數據存儲提供新的思路和解決方案。

一、項目實現功能

從應用場景上,我們的方案包括如下主要內容:1、文件存儲(為每個用戶提供10G以上的存儲空間);2、數據同步(通過云存儲提供的數據同步功能,實現員工數據的多終端同步);3、桌面數據備份(通過云存儲提供的數據備份功能,實現電腦中的數據的自動備份,支持文件級差異化備份機制);4、文檔內容(通過云存儲提供的數據自動分發(fā)功能,可將企業(yè)內部公告、通訊錄等文檔或電子表格快速地分發(fā)給指定的員工或部門,或通過外鏈地址(U RL)嵌入到郵件等);5、文檔快速匯總(通過云存儲提供的數據自動匯總功能,可以實現快速將員工本地文件自動匯總到云存儲的指定位置中);6、群組或部門工作區(qū)(可按需要建立群組或部門工作區(qū),用于團隊協作,協同辦公,并支持文件多版本及文件鎖機制,提升多人協同辦公的效率)。

二、項目實施方案

2.1系統(tǒng)架構設計圖

如圖1。

2.2主要功能模塊

1、負載均衡模塊(LVS):負載均衡模塊建立在所有應用結構之上,它提供了一種有效透明的方法擴展網絡設備和服務器的帶寬、增加吞吐量、加強網絡數據處理能力、提高網絡的靈活性和可用性。

2、應用服務模塊(APP Server):提供了一套完整的企業(yè)數據應用、管理、監(jiān)控的應用系統(tǒng)。私有云存儲作為企業(yè)數據應用系統(tǒng),為企業(yè)員工提供個人數據存儲、分享服務,保護數據安全;也可以按照企業(yè)組織架構組建企業(yè)級、部門級、項目級的協同工作服務,提高數據處理效率。此外,靈活的空間管理、集中的賬戶配置、實時的日志審計方便系統(tǒng)管理者實現全方位的管理和監(jiān)控。其中包括功能模塊如下。

應用服務(Web Service):為整套系統(tǒng)前端應用和web端訪問提供支持。

傳輸服務(TP Service):為用戶提供數據傳輸的支持。

3、文件存儲模塊(Storage Server):是一套分布式文件存儲系統(tǒng),為應用服務模塊提供底層數據存儲及管理服務??梢宰鳛闃藴实拇鎯ο到y(tǒng)為企業(yè)應用系統(tǒng)提供標準的數據存儲。

4、數據庫模塊(DB Server):其中包括功能模塊如下。

主數據庫:為應用服務模塊提供結構化數據服務。

從數據庫:為主數據庫提供備份服務。

2.3部署方式

在內網服務器上安裝私有云存儲軟件,并配置存儲服務器與之互聯。保持私有云存儲系統(tǒng)的網絡連通,在IE中輸入默認的管理地址進行管理訪問。

對私有云存儲的部門及員工進行初始化,并為其分配私有存儲空間,以及劃分上傳、只讀和下載等權限歸屬等。對服務端配置完畢后,在每一臺個人PC設備上需要安裝客戶端軟件,通過建立的用戶名和密碼登陸后,即可在客戶端上進行文件存儲操作,并可以通過外鏈的形式共享給他人。

篇4

紫光集團近幾年在IT領域,特別是半導體領域積極布局,通過不斷并購,在增強自身整體實力的同時,實踐著自主可控的創(chuàng)新夢。在云計算、大數據時代,打造從“芯”到“云”的完整產業(yè)鏈是紫光集團的大戰(zhàn)略。

9月8日,紫光西部數據有限公司(以下簡稱紫光西部數據)成立典禮在南京舉行,這是中國大數據產業(yè)創(chuàng)新發(fā)展的又一重要里程碑。秉承“自主創(chuàng)新+國際合作”的發(fā)展理念,紫光西部數據致力于為各行業(yè)客戶提供基于全產業(yè)鏈的大數據服務,成為中國大數據產業(yè)戰(zhàn)略合伙人,這是為逐步實現紫光集團大戰(zhàn)略而設定的一個“小目標”。紫光西部數據從現在開始起步。

構建從“芯”到“云”的大生態(tài)

眾所周知,紫光集團是中國IT界的一艘新航母。在國家集成電路產業(yè)推進戰(zhàn)略的引導下,紫光集團以“自主創(chuàng)新+國際合作”雙輪驅動,確立了以集成電路產業(yè)為主導,向泛IT、移動互聯、云計算與云服務等信息產業(yè)核心領域集中發(fā)展的戰(zhàn)略。

從2013年以來,紫光集團通過一系列的戰(zhàn)略并購,不斷完善自己的戰(zhàn)略布局,豐富產品線。紫光集團先后投資超過1500億元,收購了全球移動通信芯片公司展訊通信和銳迪科,控股H3C和惠普中國企業(yè)業(yè)務,分別成立紫光展銳和新華三集團。清華系旗下最重要的IT產業(yè)平臺已具雛形,全面構筑從“芯”到“云”的信息產業(yè)生態(tài)系統(tǒng)并非妄言。

IDC預測,到2020年,全球的數據總量將達到44ZB。數據規(guī)模的持續(xù)增加,用戶對數據處理的速度,以及系統(tǒng)的可用性、可擴展、靈活性等的要求不斷提升,這些都是大數據存儲迫切需要解決的問題,也是大數據存儲產業(yè)面臨的新機遇。

毫無疑問,大數據存儲業(yè)務是紫光集團這艘航母前進的主要動力之一,而紫光集團的戰(zhàn)略布局也早為大數據存儲業(yè)務的快速發(fā)展埋下伏筆。2016年7月,紫光集團收購武漢新芯多數股權后,長江存儲科技有限責任公司正式成立。紫光集團持有長江存儲科技有限公司超過50%的股份。紫光集團董事長趙偉國出任長江存儲公司董事長。這是紫光集團的大戰(zhàn)略從“芯”開始的一個具體體現。

在今年舉行的第二屆中國大數據產業(yè)峰會暨中國電子商務創(chuàng)新發(fā)展峰會上,趙偉國曾表示,從2016年開始,紫光集團計劃投資300億美元用于存儲器芯片制造,這大概是中國有史以來最大的存儲項目。大數據的發(fā)展需要海量存儲,而中國以前在這方面是空白,這便是紫光集團選擇的發(fā)力點。芯片是產生和存儲數據的基本單位,也是發(fā)展大數據存儲的基礎。只有在芯片上掌握主動,才能在發(fā)展大數據存儲時做到有的放矢。

在紫光集團著力打造的從“芯”到“云”的產業(yè)鏈中,“芯”是指芯片,那么“云”當然是指大數據、大互聯、大安全和云計算。紫光集團控股的新華三集團在云和大數據方面提供了完整的解決方案,包括服務器、存儲、網絡設備,以及云操作系統(tǒng)、大數據安全系統(tǒng)等,在除運營商以外的企業(yè)網絡領域,紫光排名第一,在全球僅次于思科。

在大數據存儲的產業(yè)鏈條上,有了武漢新芯的存儲芯片,又有了新華三的存儲解決方案,這中間是不是還少了一個能夠將它們串聯和徹底打通的環(huán)節(jié)?紫光西部數據應運而生。

自主創(chuàng)新也少不了國際合作

紫光西部數據于2016年3月28日注冊成立,總部位于南京市秦淮高新技術園區(qū)內,市場和銷售總部則位于北京。紫光集團旗下紫光股份持股比例為51%,而西部數據持股比例為49%。

紫光西部數據首席執(zhí)行官繆剛表示,新公司的愿景可以概括為一句話:以數據成就未來,做中國大數據產業(yè)戰(zhàn)略合伙人。

具體來看,這一愿景又可以細分為以下四個層面:第一,扎根中國,放眼全球,新公司將以中國為起點,憑借全球領先的技術研發(fā)、設計生產、市場推廣等方面的優(yōu)勢,提供符合中國市場需求的全方位大數據解決方案,并在此基礎上,進軍全球市場;第二,自主創(chuàng)新,安全可控,通過自主研發(fā),實現自主、安全和可控,在保護數據可靠的基礎上,保障多種核心應用的安全、穩(wěn)定運行;第三,行業(yè)優(yōu)化,扁平融合,針對具體的行業(yè)需求,開發(fā)符合行業(yè)特性的全方位數據服務,通過實現應用層扁平化,實現大數據整體發(fā)展;第四,開放合作,攜手共贏,全面打造開放創(chuàng)新的平臺,攜手各界合作伙伴,建立合作共贏的生態(tài)體系,合力推動大數據產業(yè)的創(chuàng)新發(fā)展。

為了實現上述宏偉目標,紫光西部數據需要在堅持自主創(chuàng)新的基礎上,以開放的胸懷,采取積極的合作策略,而西部數據無疑是一個理想的合作伙伴。

西部數據是全球領先的數據存儲解決方案提供商,在全球硬盤市場的占有率排名第一。與紫光集團類似,西部數據近幾年也通過一系列的收購不斷完善產品的布局。2012年,西部數據收購昱科環(huán)球存儲科技咨詢有限公司(HGST),目的在于為企業(yè)級市場的客戶提供高價值的存儲解決方案。2016年5月,西部數據又以190億美元的大手筆完成了對閃迪(SanDisk)公司的收購,快速轉型,成了閃存市場的佼佼者。

美國西部數據公司全球高級副總裁、數據中心系統(tǒng)事業(yè)部總經理唐戴夫表示:“我們之所以選擇紫光集團作為合作對象,一方面是因為紫光集團具有本地研發(fā)、設計、生產、營銷的能力,可以提供針對本土用戶需求的定制化的解決方案;另一方面,紫光集團擁有寬泛的產品線和業(yè)務,紫光旗下的新華三、紫光互聯等,都可以成為西部數據的合作伙伴,形成解決方案和業(yè)務上的互補。西部數據與紫光集團的全方位合作,讓我們感覺未來在技術和業(yè)務的創(chuàng)新大有可為?!?/p>

繆剛進一步介紹說:“合資公司將在核心存儲技術、企業(yè)級存儲解決方案,以及大數據全產業(yè)鏈服務等領域形成關鍵戰(zhàn)略合作,推動紫光集團從‘芯’到‘云’的信息產業(yè)生態(tài)系統(tǒng)的構建,同時幫助西部數據實現業(yè)務拓展,為智慧城市、金融服務、媒體娛樂、天文氣象、電信、基因科學、醫(yī)療衛(wèi)生、新興互聯網等各行業(yè)客戶提供符合其需求的數據存儲和數據服務解決方案。”

打造系統(tǒng)級的存儲產品

紫光西部數據為何落戶南京?首先,紫光西部數據在南京現有一支70多人的研發(fā)團隊,未來還要進一步擴張,這也是讓紫光西部數據引以為豪的實現自主可控的基本保證。其次,紫光西部數據接下來要與南京當地的政府、企事業(yè)單位加強合作,紫光西部數據與南京市有關部門聯合成立的大數據研發(fā)中心正在醞釀之中。

正如繆剛所說,紫光西部數據要首先扎根中國,為中國用戶提供滿足其需求的定制化的大數據存儲解決方案。紫光西部數據9月8日舉行成立慶典之后將全面展開營銷活動,而最先推出的產品就是西部數據特有的動態(tài)歸檔(Active Archive)系統(tǒng)。這一動態(tài)歸檔系統(tǒng)是一個獨立自主的對象存儲系統(tǒng),可以方便地擴展存儲容量,最高可達數PB,且具有更高的可靠性和更好的成本效益,能夠同時滿足傳統(tǒng)應用需求和新型應用需求。

時至今日,西部數據已經不再是那個擁有單一硬盤產品的廠商,其產品線涵蓋存儲介質、存儲平臺、系統(tǒng)軟件和系統(tǒng)構件,其中存儲系統(tǒng)成了最主要的抓手,動態(tài)歸檔系統(tǒng)就是代表,而這正是紫光集團與西部數據合作最重要的一類產品。

“我們計劃利用3~5年的時間,打造一個完整的系統(tǒng)級存儲的產品框架。以動態(tài)歸檔系統(tǒng)為例,這是新興的對象存儲,與新華三的存儲產品線并不沖突,反而是互補關系?!笨妱偨榻B說,“在動態(tài)歸檔系統(tǒng)的基礎上,我們會與中國的ISV攜手,針對不同的應用場景提供定制化的服務,打造產品與需求深度融合的本地化解決方案,同時也不排除與開源技術相結合,研發(fā)基于開放平臺的動態(tài)歸檔系統(tǒng)的可能性。這正是紫光西部數據的優(yōu)勢和價值所在。”

篇5

>> 高校圖書館數據存儲安全探討 關于高校圖書館采編業(yè)務外包的探討 淺談基于VMware實現高校圖書館數據的存儲管理 高校圖書館編目外包數據的質量控制 圖書館數據存儲方案的比較 圖書館:云時代數字圖書館的數據存儲 高校圖書館采編業(yè)務外包的成因及意義探討 關于高校圖書館編目業(yè)務外包工作的探討 高校圖書館跨區(qū)域存儲的研究應用 高校圖書館業(yè)務外包的理性分析 高校圖書館編目外包的對話與合作 高校圖書館業(yè)務外包研究 淺談高校圖書館業(yè)務外包 淺論高校圖書館業(yè)務外包 圖書館采編業(yè)務外包的探討 借力大數據優(yōu)化圖書館數據存儲 高職院校圖書館編目外包書目數據質量控制探討 數字圖書館的存儲之路 高校圖書館圖書編目業(yè)務外包再思考 高校圖書館圖書外包加工服務模式研究 常見問題解答 當前所在位置:l.

[7] 姜愛蓉.存儲需求與應用分析―清華大學數字圖書館實踐[J].中國教育網絡,2007(4):71.

[8] 于立,劉慧蘭.信息技術外包的成因分析―信息技術外包服務商的視角[J].情報雜志,2006(10):12-13.

[9] 徐中平,毛洪濤.企業(yè)信息技術外包戰(zhàn)略分析[J].經濟問題探索,2000(11):35.

[10] 楊錦園,李艷靈.基于SAN的數字圖書館解決方案研究[J].圖書館學研究,2007(7):8-10.

[11] 劉古權.存儲介質[DB/OL].(2006-08-01)[2007-12-31]..

[12] 蔡忠兵.業(yè)務外包與圖書館核心能力構架的辯證分析[J].圖書館界,2007(6):54-56.

[13] 饒思軍.業(yè)務外包:圖書館業(yè)務核心化戰(zhàn)略的必然趨勢[J].圖書館建設,2004(4):63-64.

[14] 楊海蔚,董安邦.企業(yè)信息技術外包淺析[J].情報科學,2002,20(7):772-774.

[15] 王曉燕.信息技術外包策略在我國金融電子化進程中的應用探討[J].金融電子化,2000(4):68-71.

篇6

關鍵詞:

作為業(yè)界公認的存儲系統(tǒng)與RAID技術的領導者,PROMISE公司在過去的二十余年中,為全球的用戶貢獻了超過1500萬個存儲系統(tǒng)與數據解決方案,其存儲技術被廣泛應用在企業(yè)存儲、個人存儲、服務器和工作站等領域中,確保了使用者寶貴的數據受到無微不至的保護。

1988年,PROMISE Technology, Inc. 于美國加州圣荷西成立,成立伊始,PROMISE的創(chuàng)立者們便確定了以數據存儲為核心的企業(yè)理念,并在此后的發(fā)展中,PROMISE不斷基于數據存儲為核心的發(fā)展理念,拓展出今天包括企業(yè)級存儲系統(tǒng)、中小企業(yè)存儲系統(tǒng)、個人工作室及家庭存儲系統(tǒng)、服務器/工作站磁盤陣列控制卡、磁盤陣列軟件解決方案在內的全面的芯片、軟件與系統(tǒng)解決方案,而正是得益于全面的產品線、領先的設計理念、完善的研發(fā)與服務、營銷團隊,每一天全球各地都有企業(yè)級數據中心選擇基于PROMISE的數據存儲解決方案;每一秒鐘都有數據經由PROMISE所提供的解決方案提供給需要他們的企業(yè)或個人。

中國存儲市場:渴望綠色與創(chuàng)新

2010年,隨著中國市場用戶對存儲系統(tǒng)理解的加深,以及國家對于節(jié)能減排工作的愈發(fā)重視,中國用戶普遍不再滿足于原有的存儲系統(tǒng)以及舊有的存儲知識,其開始尋找更具創(chuàng)新性的存儲技術、產品與系統(tǒng),并同時,將綠色節(jié)能作為一個重要的考量目標列入其評價體系當中。容量、性能和簡單的擴展性只是數據存儲系統(tǒng)的“基礎條件”,而真正能改善應用體驗,節(jié)省資金支出,支持業(yè)務高速發(fā)展才是用戶所期待的。

首先,中國用戶認識到,存儲供應商能否具有創(chuàng)新的技術,前瞻的理念以及能夠不斷向前發(fā)展的研發(fā)體系,是其能否持續(xù)滿足其自身要求的重要關鍵——無法做到這三點的供應商將被用戶無情的拋棄。其次,中國用戶發(fā)現國家所倡導的綠色節(jié)能并非遙不可及或無關痛癢,越來越昂貴的IT設施耗電、制冷費用、空間費用都使得IT系統(tǒng)變?yōu)槌杀局行?,而非?chuàng)造價值的生產中心,綠色、環(huán)保、低碳成為用戶普遍的存儲系統(tǒng)采購標準之一。

技術、服務與本土化成就PROMISE全面領先

中國用戶所發(fā)生的變化并非是孤立的,與此同時,全球的用戶,尤其是在IT系統(tǒng)應用方面更為領先的歐美用戶早已認識到了技術創(chuàng)新、綠色節(jié)能等方面的重要性,而在歐美市場具有極高知名度的PROMISE公司,正是得益于對用戶所提出的這些需求的高度認知和積極行動,成為了歐美用戶“保護其重要信息及確保數據持續(xù)可用的技術首選”。

事實上,為了達成技術方面的持續(xù)領先,PROMISE都付出了極大的努力。在PROMISE 450人的全球化團隊中,有40%的員工服務于研發(fā)部門,基于全球化的辦公網絡完善并設計針對性的產品,從1997年業(yè)界第一個ATA RAID controller,次年第一個RAID on Motherboard芯片,2004年業(yè)界第一個雙連接端口,HW iSCSI RAID存儲系統(tǒng)Vtrak,再到今年領先業(yè)界發(fā)表新一代的ROMB (RAID on Motherboard) 解決方案,在存儲系統(tǒng)中全面引入第二代Green RAID技術,PROMISE的研發(fā)團隊都在不斷刷新業(yè)績的標桿與記錄。

PROMISE 1999年通過ISO 9001質量認證, 2005年PROMISE通過了ISO 14000環(huán)保認證,董事長李志恩就曾經表示:“PROMISE提供更環(huán)保的產品為使命?!?/p>

PROMISE時刻不忘對本地化需求的滿足以及與本土合作伙伴的緊密合作?;谄湓诿绹?、臺灣、中國、日本、荷蘭、德國、意大利、英國等地設立的分支機構,提供了業(yè)界領先的三年全系統(tǒng)保修, 24x7的電子郵件及電話服務,以及遍布全球服務網絡。

于是,在經濟并不景氣的過去三年,PROMISE非但沒有受到金融危機的影響,反而由于其領先的技術產品、前瞻性的綠色節(jié)能以及本地化的貼心服務,在歐美市場上加深了用戶關系,甚至爭取到了許多原本與競爭對手合作卻頗感失望的用戶的青睞——“發(fā)展穩(wěn)健,客戶穩(wěn)定”是金融危機時刻對PROMISE出人意料的表現的最佳評價。

從企業(yè)存儲到家庭應用:服務各種存儲應用領域

來自于研發(fā)的強大助推力,讓PROMISE如今能夠滿足從企業(yè)級存儲系統(tǒng)到個人工作室及家庭用戶存儲系統(tǒng)的多種需求,服務各種存儲領域的能力讓PROMISE成為了業(yè)界全面存儲供應商中的代表。

在企業(yè)級應用市場,PROMISE擁有自2004年就開始研發(fā)的Vtrak系列存儲系統(tǒng),該系統(tǒng)的高端型號VTrak Jx30 6Gb/s 系列不僅通過采用業(yè)界先進的6Gb SAS技術帶來極高的系統(tǒng)性能,更支持包括固態(tài)硬盤(SSD)在內的多種業(yè)界創(chuàng)新技術,與VTrak Jx10 系列和VTrak Ex10 系列構成了從高端應用到中端系統(tǒng)的企業(yè)級存儲系統(tǒng)。

而在與之對應的較低端的中小企業(yè)存儲系統(tǒng)中,PROMISE的VessRAID系列系統(tǒng)提供了中小企業(yè)、組織一個價格低廉、功能不打折的入門級磁盤陣列系統(tǒng),為中小企業(yè)、監(jiān)控應用、醫(yī)療機構、政府機關、教育單位提供效能卓越的存儲解決方案——從VessRAID 1000s 系列存儲系統(tǒng)到VessJBOD 1000 系列JBOD擴展,都滿足中小型客戶對存儲系統(tǒng)的需求。

后“云”時代:PROMISE讓概念落地

在IT市場熱議了一年的云計算,自2010年開始便更加務實,不再追求概念的新奇或是獨特的觀點,用戶更加關心如何讓云計算、云存儲所承諾的優(yōu)點盡快地落地,而非聽供應商口若懸河的宣傳云計算、云存儲技術的廣闊前景。

篇7

【關鍵詞】信息化建設;數據存儲;系統(tǒng)構件

隨著信息化的高度發(fā)展,各個行業(yè)對信息系統(tǒng)的依賴性都在逐漸變強,信息風險也在日益增加。一個小故障都可能造成毀滅性的災難,包括網絡中斷,信息丟失,情況嚴重時甚至會導致企業(yè)的無法爭產運行。從目前的經濟發(fā)展狀況來看,一臺計算機的成本對一個企業(yè)來說并不算什么,而計算機中存儲的數據對企業(yè)卻是十分的重要。如何避免人為因素、不可抗拒因素對計算機造成的破壞而引起的數據丟失是從事計算機工作人員需要研究的重要問題。

一、備份存儲數據常見的故障及構建存儲系統(tǒng)的重要性

(一)數據故障

計算機中數據系統(tǒng)經常出現的兩種故障就是邏輯故障和物理故障,他們都會導致數據丟失,并造成數據系統(tǒng)無法使用。

1.邏輯故障,邏輯故障的主要表現形式有以下幾種:

(1)系統(tǒng)雖然還可運行,但實質上系統(tǒng)內部已有損壞,例如程序損壞、文件的丟失等[1]。

(2)系統(tǒng)本身并不存在問題,但系統(tǒng)中使用的數據具有錯誤,這種故障隱蔽性較高,一般情況下難以發(fā)現和修復。

(3)系統(tǒng)中缺少完成操作所需要的必須數據。

(4)系統(tǒng)中的數據雖然完整,但邏輯上存在一定的錯誤。

(5)數據錯誤,這在數據系統(tǒng)中是一種比較特殊的故障,系統(tǒng)中的數據沒有邏輯錯誤,數據也是完整的,但數據同實際之間有所差距。數據的邏輯故障隱蔽性相對較高不容易發(fā)現,往往造成巨大的經濟損失[2]。

2.物理故障,物理故障主要指的是應用程序的損壞、主機故障、操作系統(tǒng)故障、硬盤故障、網絡故障等,這些故障會直接導致系統(tǒng)無法運行,同時也會引發(fā)邏輯故障,如果網絡出現故障將會影響系統(tǒng)中數據的一致性,硬盤故障會導致數據丟失等。常見的幾種故障有:

(1)應用程序故障,程序不完整或文件丟失致使乘務無法正常運行[3]。

(2)主機故障,由火災、地震、掉電等自然災害而導致設備無法正確運行。

(3)操作系統(tǒng)損壞,非法指令造成系統(tǒng)崩潰,系統(tǒng)文件造成系統(tǒng)損壞,導致系統(tǒng)無法正常運行。

(4)硬盤故障,硬盤作為一種精密設備,在安裝過程中的掉電、磕碰以及電流的不穩(wěn)定可能造成硬盤損壞。

(5)網絡故障,網絡傳輸距離過長、移動設備的添加、傳輸介質的老化都會導致故障。一般情況下物理故障容易被發(fā)現[4]。

(二)備份存儲數據的重要性

數據是一個企業(yè)的命脈,對于一個企業(yè)來說網絡數據是否安全對企業(yè)的影響巨大,企業(yè)中的一些重要數據一旦受到破壞將會給企業(yè)造成無法彌補的經濟損失、名譽損失等。當數據發(fā)生損壞時,唯一的解決辦法就是利用現有的技術手段利用發(fā)生損壞之前的備份數據進行恢復。因此,企業(yè)為了保證關鍵業(yè)務不會出現間斷以及數據的安全應當建設數據存儲系統(tǒng)對數據進行可靠、安全、全面的備份[5]。

二、建設數據存儲系統(tǒng)

建設存儲系統(tǒng)應當立足于現在,著眼于未來。這不僅是因為數據存儲系統(tǒng)在計算機中扮演的角色越來越重要,同時也是網絡存儲技術發(fā)展的必然趨勢。因此在項目建設的初期,應當對系統(tǒng)的維護、運行、擴展的階段加以考慮。

Open-e ISCSI是一中比較成熟的存儲系統(tǒng)方案,它將NAS和ISCSI技術進行了有機結合,合理的利用了兩者的優(yōu)點和功能,同時也可將“面向對象”的存儲技術融入進來。Open-e是具有高性能存儲功能的一種平臺,不但可以滿足目前各種項目的建設,同時也為未來的擴展打下了基礎。使用Open-e ISCSI網絡存儲方案具有以下優(yōu)勢。

(一)基于降低成本

系統(tǒng)設計是基于良好的以太網絡環(huán)境上的,這比專用的光線通道成本要低88%以上,而且從長遠角度看,這也符合未來的發(fā)展趨勢。計算機使用的硬盤將會選用技術成熟且先進的串行接口(ATA接口)的硬盤,既保證了硬件的可靠性,也確保了硬件的高性能,同時大大降低了硬盤的成本(部分硬盤的成本可降到50%以上)。

(二)利用先進的技術

Open-e系統(tǒng)是一種基于IP-SAN上的一種系統(tǒng),將目前成熟且先進的NAS和ISCSI技術有機的相結合。系統(tǒng)以千兆以太網存儲陣列作為整個系統(tǒng)的核心,同時將其與千兆以太網絡為交換機,通過這嚴重形式可以將存儲系統(tǒng)同業(yè)內先進的存儲功能管理軟件和存儲功能軟件構成一個配置靈活、性能高、功能全面的存儲平臺。

(三)安裝與管理更加便捷

設備在出廠前應擔提前按在OS以及相關聯的軟件,并對硬件進行設置,確保Open-e ISCSI存儲設備的后期安裝更加便捷,同時在訪問可以通過Web上的GUI對整個系統(tǒng)進行遠程管理,使系統(tǒng)的管理操作變得更加便捷。

(四)基于擴展性

在系統(tǒng)的設計階段,Open-e就應當對系統(tǒng)的擴展性進行充分的考慮,不論在后期的操作過程中是增添新的Open-e存儲單元還是增加新的服務器,工作人員都可以在線完成操作,對服務器空間的發(fā)配也可在線完成,這樣就確保了企業(yè)在增添新有業(yè)務、系統(tǒng)在增添新功能的時候原系統(tǒng)不會受到影響。

(五)基于安全性構建

安全性是每一個系統(tǒng)必須要考慮的,同樣對于數據存儲系統(tǒng)來說也十分重要,將存儲網絡同應用網絡進行適當的隔離,并通過合理的方式在存儲訪問卷等反面對訪問加以控制,確保每次對出數據的訪問及存儲都通過了嚴格的監(jiān)控與權限限制。

圖1 系統(tǒng)的拓撲結構

現在企業(yè)中使用的數據不斷增加,因此更大更安全的存儲空間將會出現在生產以及生活之中,這就需要大量的數據全部體現在同一個存儲平臺上。Open-e方案在對方面都符合這一發(fā)展趨勢,通過IP-SAN網絡存儲技術,使系統(tǒng)具有更強大的擴展性??赏ㄟ^擴展網絡的形式支出新加入的服務器來滿足企業(yè)業(yè)務拓展的需求,同時通過擴展儲存的形式,可以增加系統(tǒng)的輸入輸出處理能力,獲得更大的儲存空間。圖1為系統(tǒng)的拓撲結構。

在Open-e存儲平臺上可以運行管理軟件,利用IP網絡和IP SAN存儲網絡連接,將存儲設備中的數據異步或同步的進行移動或復制到另存儲設備之中,這種移動或復制并不會占用服務器資源。通過這些磁盤陣列的功能軟件,可以實現數據的高效流動和安全備份,使數據的存儲變得更加安全。

三、結束語

信息是每一個企業(yè)的機密,一些重要信息關系到企業(yè)的生死。企業(yè)中的信息主要包括:管理過程中生成的機密文件、數據、客戶資料等等,這些數據的成本要遠高于計算機。建設數據存儲系統(tǒng)就相當于給企業(yè)中重要的信息買了一份保險,這樣的一份保險,能夠將可能丟失的數據進行“一字不漏”的恢復,避免了數據丟失給企業(yè)帶來的巨大經濟損失。

參考文獻

[1]董新慧.電力企業(yè)一線員工技能培訓研究[J].黑龍江科技信息,2012,8(1):8-10.

[2]張耀祥.云計算和虛擬化技術[J].計算機安全,2011, 12(5):31-32.

[3]歐偉新,陳國忠.云計算及其分布式架構[J].電信快報,2012,11(1):27-28.

篇8

近年來的一些統(tǒng)計和預測數據,常常使我們驚詫不已:在中國,每年的數據增長率超過60%,未來10年,數據量將增長50倍;在這些數據中,有90%的數據來自于非結構化數據。數據如此迅猛增長,而存儲管理員卻只增加1.5倍。

因此,自動地、智能化地管理數據便成為大數據時代下的當務之急。

先進技術“流”進戴爾

如果回到三四年前,誰也不會想到戴爾在國內能召開一個有幾百個用戶參加、多家存儲界知名廠商鼎力合作、為期兩天的“戴爾存儲論壇”。這使我們不得不佩服戴爾高層對未來技術發(fā)展的敏銳洞察力。從3年多前戴爾收購EqualLogic開始,一樁接一樁的收購案,使戴爾不斷壯大存儲產品線,增添最新的存儲技術,從iSCSI到FC,從低端到高端,從幫人代銷到“自產自銷”,戴爾正逐漸走進存儲的主流陣營,成功地向存儲轉型。

其實在存儲業(yè)界,近年來收購案此起彼伏,其中不少原本很有名氣的廠商,被收購后,從此銷聲匿跡,再無聲息。不過,我們慶幸地看到,EqualLogic、Compellent這些特點鮮明的廠商在被戴爾攬入懷中后,其品牌依舊保留,特點仍然鮮明,甚至成為戴爾存儲的旗幟。

“流動數據”就是這樣一面旗幟。

戴爾去年年底收購的Compellent公司,以其流動數據技術而著名,它結合了一套強大的數據遷移引擎、智能軟件和模塊化硬件,可降低成本最高至80%。流動數據架構提供數據塊級別的智能技術,它可以自動將數據放在正確的存儲層中,以達到優(yōu)化性能和最大限度節(jié)約成本的目的。戴爾企業(yè)級存儲產品營銷執(zhí)行總監(jiān)Travis Vigil表示,戴爾收購Compellent之后,非常清楚地認識到,流動數據是戴爾存儲的未來方向,就是把正確的數據放在正確的地方,用適合的成本滿足用戶的需求。

Travis Vigil認為,戴爾的“流動數據”理念已經在Compellent的理念之上發(fā)揚光大了,賦予了新的概念,“我們現在不只是做模塊化存儲,也要做并行文件系統(tǒng),未來當我們所有模塊化的數據前端都有并行文件系統(tǒng),在不同的平臺或載體上,我們就能實現數據的流動?!盩ravis Vigil說。

收購多家公司后,如何將它們無縫地融合進公司未來戰(zhàn)略和產品策略中,這是所有收購案之后都會遇到的問題。目前來看,戴爾對EqualLogic和Compellent的收購無疑是成功的,Travis Vigil介紹說,EqualLogic加入戴爾3年后,用戶數增長8倍;Compellent今年上半年的業(yè)績相當于去年全年的業(yè)績,而原來公司員工的98%都選擇留在戴爾?!按鳡柺召徣魏喂竞?,都會加大在研發(fā)方面的投入,比如在過去3年中,EqualLogic的研發(fā)人員就增加了一倍?!盩ravis Vigil說。

數據“流向”云端

戴爾不斷完善流動數據存儲架構,其流動數據解決方案是受客戶啟發(fā)而推出的一項技術,用于無縫、自動化地以最優(yōu)化的方式將數據從服務器移動到存儲和云端,從而幫助用戶在合適的時間、以合適的成本靈活地將合適的數據移動到合適的位置。通過該解決方案,戴爾致力于通過構建一個流動數據架構,解決當今的存儲問題。

根據IDC日前公布的亞太區(qū)外部磁盤存儲市場2011年第一季度報告,戴爾以27.2%的市場份額在大中國區(qū)iSCSI市場排名第一。戴爾中國及香港地區(qū)公共事業(yè)及大型企業(yè)事業(yè)部解決方案部總經理李慧表示,正是EqualLogic的強勢增長,使戴爾領跑iSCSI市場。在日前召開的“戴爾存儲論壇”上,戴爾展出了最新的EqualLogic PS4100/PS6100以及EqualLogic FS7500。這三款產品均使用全新的Firmware 5.1版本,可兼容之前的所有產品,實現無縫擴展,為用戶提供投資保護。李慧介紹說,新產品將專注于幫助客戶更有效地通過自動化管理不斷增長的數據,并實現更高的 IT 效率和靈活性。全新的EqualLogic PS系列平臺提供了一個虛擬化存儲解決方案,為虛擬化環(huán)境帶來了一個無縫的存儲設施,擴展了戴爾在虛擬化和開放系統(tǒng)領域的存儲領先地位。

李慧介紹說,這些新產品的背后,戴爾做了大量的研發(fā)工作,例如EqualLogic FS7500產品,其研發(fā)共工作就來自三個不同的研發(fā)中心,EqualLogic本身的研發(fā)中心在波士頓,硬件平臺FS7500是在位于奧斯汀的研發(fā)中心,而其并行文件系統(tǒng)的技術研發(fā)則是在以色列的研發(fā)中心,三個不同的研發(fā)團隊的密切合作,才有了今天的FS7500。

成功案例首都在線提供云計算平臺

篇9

關鍵詞 云計算;數據存儲;分析;計算機

中圖分類號:TP393 文獻標識碼:A 文章編號:1671-7597(2014)07-0071-02

近年來,云計算越來越多的出現在大家的視野里,人們給予了云計算極大的關注。云計算會代替?zhèn)鹘y(tǒng)的計算機算法,這一理論也被認為是未來發(fā)展的必然趨勢。在傳統(tǒng)的模式下,工作人員為了使信息進行交互,一般都會在本地進行數據的存儲和處理。為了更好的保證數據調取的穩(wěn)定性,企業(yè)需要購買各種硬件、軟件基礎設施,而且還需要對這些設施進行維護。但是由于存儲和處理的數據量在不斷的加大,所需要的存儲空間就越來越大,這樣就會大大提高企業(yè)的成本。但是這些并不是企業(yè)需要直接面對的,為了完成他們需要完成的業(yè)務,卻不得不為此投入大量的成本。

隨著計算機技術,信息處理技術不斷的發(fā)展,人們可以不用把大量的數據技術放在自己的計算機上,可以放在別人的計算機上或者是遠程的服務器上,因此企業(yè)就不需要投入大量的資金購買存儲設備,完全可以通過互聯網根據自己的需求找到存儲在遠程設備上的數據,于是云計算初步模型就出現了。

1 云計算與云儲存

1)云計算。在互聯網的技術條件下提供了云計算的一種技術形式,云計算可以提供動態(tài)變化的能夠伸縮的并且以虛擬為特點的計算模式?!霸啤本褪且环N比喻,是一個抽象的概念,實際上是計算機和互聯網在起作用。

通過云計算把大量的數據都放在計算機上,這個計算機不是指本地的計算機,而是遠程的服務器,企業(yè)可以根據自己的實際需求,對計算機的存儲系統(tǒng)進行訪問,企業(yè)可以把大量的信息資源都轉換到客觀應用上去。也就是說,計算機只是成為了一個簡單的終端,不需要進行任何的計算或者是存儲,直接把主機功能交給云端。

2)云存儲。在云概念的基礎上延伸出了一個新的概念那就是云存儲,云存儲與云概念十分相似,它以分布式文件系統(tǒng)以及網格技術作為基礎,以集群應用,借助應用軟件把計算機中的各種存儲設備進行有效的集中,讓彼此能夠協同合作。它的功能就是對外提供相關的數據存儲以及業(yè)務訪問。本質上說來,對于當前存儲模式的創(chuàng)新就是云存儲。云存儲也是特殊的構架服務,具體來說,一些廣域網或者是互聯網對于應用者來說具有透明性。相關的應用程序軟件是云存儲的關鍵之處,在存儲設備之間進行有機的結合,通過這些有效的軟件使設備與設備之間進行服務的轉變。

2 構建在云環(huán)境下的數據存儲體系

在實際操作的過程中,數據存儲體系包括數據中心和云服務接口以及服務協議等,數據中心是在云環(huán)境下實現數據存儲的基礎,由存儲管理、分布式文件體系和存儲備份組成。云存儲設備既可以是在企業(yè)的發(fā)展過程中所專門應用的存儲設備,也可是PC,這個系統(tǒng)的設計依據的基礎是客戶機和服務器模式。經過檢驗這些確實可以完成大量數據的存儲工作,并且效果也非常理想。

1)服務器的結構。云計算的組成部分中最重要的是存儲服務器架構。在云存儲體系構建之前,應該首先構建云存儲服務器架構,這個可以根據架構技術來實現,這些架構技術是多樣化的。在NAS這個文件存儲系統(tǒng)中,每一個節(jié)點都是一個相互獨立的個體,文件是這個系統(tǒng)中最小的單位。在集群中,如果文件可以完整的保留,那么其數據信息也會有效的保存在集群的特定的點上,文件雖然比較多,但是會被重新定義到一些另外的節(jié)點上,這樣信息就顯得太過繁雜了。在實踐的過程中,人們可以發(fā)現,SNA作為存儲系統(tǒng)的一塊兒,如果有某一個文件發(fā)出請求,每一個節(jié)點都會對該文件的不同數據塊進行訪問,它能夠有效的對用戶的某一種需求進行及時的處理。這種存儲結構比較適合在云服務器當中使用,它可以在一定的范圍內進行擴展,而且傳輸的效率也比較高。

2)服務器之間的數據傳遞。在當前的存儲系統(tǒng)的環(huán)境下,一些存儲系統(tǒng)可以進行數據之間的傳送協議,異構的平臺之間的信息可以進行有效的資源共享。在計算機的網絡系統(tǒng)當中,程序和數據庫的優(yōu)化問題是需要我們共同考慮的。在使用數據庫的時候,存儲過程是必不可少的,它提供了一種更加高級的特性。它可以傳遞一些函數或者是邏輯表達方式,這樣就可以幫助程序人員來處理一些比較復雜的任務。它的存儲過程也比一些別的程序快很多,如果存儲的過程發(fā)生在本地的服務器上,那就可以減少在執(zhí)行和操作過程中的寬帶傳輸和執(zhí)行命令的時間。數據庫系統(tǒng)可以分頁顯示數據,執(zhí)行一個命令會產生幾萬種結果,這些結果是不可能一次性的直接輸出到客戶端上,可以采用分頁顯示來解決這個問題。分頁顯示主要有兩種,一種是在數據庫的查詢所匹配的記錄一下子存儲在內存儲器當中。另一個是根據用戶的需求,從這些匹配的記錄當中顯示指定的記錄。這兩者是有一定的區(qū)別的,前一種是把所有的記錄一次性的寫到內存里,再使用分頁顯示,后一種是指通過指定數量的查詢互相匹配的記錄然后寫入到內存當中,接著分頁顯示。這個系統(tǒng)使每一個要求只需要返回一個頁面的數據,效率大大的提高了。

3 關于企業(yè)的存儲構建方案

1)商業(yè)化的云存儲系統(tǒng)。在一些數據領域數據庫已經研發(fā)出一系列的商業(yè)化存儲產品,主要建立在云存儲的相關理論基礎上。一些最早就致力于云存儲研發(fā)的公司推出數項擁有自主知識產權的存儲技術,而且還提出了云存儲系統(tǒng)的構架方案。從用戶的角度出發(fā),在相關協議下可以實現自身數據的存儲和提取??梢蕴峁┮恍┖唵蔚年犃蟹?,在一些虛擬的主機之間信息可以互相發(fā)送好接收,而且一些支持的服務可以為用戶提供專業(yè)的存儲接口。一些公司希望他們提出的數據庫分布式的編程環(huán)境,可以適用于本公司的具體情況,還可以適用于云存儲的應用開發(fā)商提出的關于存儲的一些應用服務,可以起到一箭雙雕的作用。

2)構建企業(yè)自身的數據中心。對于許多大型企業(yè)來說,數據的安全性是最重要的,數據中包含著許多客戶的信息,這些客戶的信息一定不能泄露,泄露了以后就會面臨重大的信譽問題,這個時候如果選擇的是租用的云存儲服務的話,企業(yè)許多的數據資料都需要存儲在云服務提供的云數據中心,會面臨一定的風險性,所以有一些大型的企業(yè)轉向一些私有的云存儲的云服務提供商提供的云數據的中心,借助這個存儲設備也需要大量的資金投入,它是借助私云存儲提供的存儲設備以及冗余備份系統(tǒng),所以這種結構并不靈活。作為企業(yè)可以選擇混合云存儲方案,可以把與之相關的關鍵性的數據作為首要的存儲,存到私云存儲當中,對于其它的一些數據就可以存儲在租用的云存儲當中,借用這種存儲的方法可以實現存儲效用利用的最大化。

4 云計算的環(huán)境下關于數據安全問題

為了保證數據的安全性能我們可以采用加密的方式,對于加密的方法有兩種:對稱加密和非對稱加密。實踐證明,對稱加密的算法還比較成熟,所以應用的范圍比較廣泛,這種加密的算法、加密和解密都比較容易實現,所以廣泛的應用于大量的數據傳輸,對于非對稱加密來說,可以把傳統(tǒng)的密鑰分為公開密鑰和私有密鑰,把加密算法和解密算法分開控制,這樣可以在計算方法的復雜程度上確保其的安全性。

1)關于加密。當想要對某一個數據進行加密的時候可以通過對稱加密算法密匙生成器,通過密匙生成器來隨機生成含有校驗信息的密匙,再通過非對稱加密算法對所包含的效驗信息的密匙進行加密。這樣就可以把密文統(tǒng)一打包以后發(fā)到用戶端供用戶們使用,這個密文是經過加密算法處理的。除這些以外,對于一些數據量十分大的用戶的數據可以通過對稱的加密算法對其進行加密。但是對于一些數據量用戶較小的用戶可以考慮對一些非對稱算法進行加密,將這兩種密匙和密文數據一塊兒存儲起來放到云存儲中心,對于那些非加密的密匙以及解密的密匙僅僅需要進行保存就行。

2)關于解密。既然可以加密處理,那么就應該對密匙進行解密,這樣密碼的設立才會更有意義。在對數據解密的過程中,用戶首先需要對對稱加密的算法進行解密,這種算法是跟非對稱加密相關的。這樣就可以對密匙進行還原,然后,被還原的密匙根據對稱算法對所提供的數據包進行解密,這樣可以把所需要的文件進行還原。兩種算法需要配合使用,這樣才能最大限度的發(fā)揮各自的優(yōu)點,避免某一種算法的不足導致文件不能安全的進行保密。我們的目的是對數據的安全進行保密,可以通過對稱密匙對所有的數據進行加密也可以利用非對稱密匙僅僅對一部分密匙進行加密。這兩種算法互相結合,有效地解決了云計算中所面臨的安全問題。

5 結束語

在云計算環(huán)境下的數據存儲技術給人們帶了許多的方便,釋放了個人計算機終端的數據存儲任務,優(yōu)化了網絡系統(tǒng)結構。云計算環(huán)境下數據存儲中把對稱密匙和非對稱密匙結合起來使用,為云環(huán)境下的存儲技術帶來了一定的安全性。這是一種解決安全問題比較可行的方法。隨著科技的不斷進步,云計算環(huán)境下的存儲技術一定會有更大的突破,實踐應用也一定會更加廣泛。

參考文獻

[1]李煜民,章才能.謝杰.云計算環(huán)境下的數據存儲[J].電腦知識與技術,2010(5):32-34.

[2]陳鳳萍.云計算環(huán)境下的數據存儲技術分析[J].硅谷,2013(17):43,29.

[3]張慶華.云存儲技術在視頻監(jiān)控中的發(fā)展與應用[J].中國公共安全(綜合版),2013(17):53-54.

篇10

數據的海量和復雜多樣的數據類型是阻礙高管們獲得洞察力的主要困難之一,特別是隨著大數據時代的到來,傳統(tǒng)的信息存儲和分析方法都受到了嚴峻挑戰(zhàn)。統(tǒng)計顯示,當今僅15%的數據是電腦能夠理解的結構化數據,剩余85%的數據存在于音頻、視頻、電子郵件、文本、社交媒體等各種媒介中,而這些非結構化數據中蘊含的思想和理念為企業(yè)提供著更豐富的意義。

基于這樣的市場需求,惠普日前了新一代信息平臺IDOL 10,它能實現海量、結構化和非結構數據的自動統(tǒng)一處理。IDOL 10通過Autonomy 的信息處理平臺與Vertica 的高性能實時分析引擎相結合,使得企業(yè)能夠連貫、統(tǒng)一地分析所有非結構化、半結構化和結構化信息。Autonomy和Vertica都是惠普今年收購的公司。

“Vertica負責15%的結構化數據的實時處理,而Autonomy負責85%的非結構化數據的處理。這就意味著對于非結構化數據和結構化數據,我們把它統(tǒng)一在IDOL的平臺之下,最終實現所有數據的統(tǒng)一、全面的分析處理?!被萜掌煜翧utonomy公司亞太區(qū)副總裁Sanjay Aurora介紹說。