在互聯(lián)網(wǎng)、云計(jì)算、AI、大數(shù)據(jù)等新智能應(yīng)用驅(qū)動的新數(shù)據(jù)時(shí)代下,數(shù)據(jù)存儲作為一切其他數(shù)據(jù)行為的基礎(chǔ),扮演著越來越重要的角色。浪潮軟件定義存儲AS13000通過模塊化定義的方式,基于多源零拷貝技術(shù)實(shí)現(xiàn)多應(yīng)用高效共享一套存儲系統(tǒng),提高數(shù)據(jù)應(yīng)用效率。
云計(jì)算、大數(shù)據(jù)、AI、物聯(lián)網(wǎng)等各種新智能應(yīng)用不斷涌現(xiàn),帶來數(shù)據(jù)需求的改變。文件、對象等數(shù)據(jù)類型需求增多。一方面,傳統(tǒng)的文件系統(tǒng)存儲服務(wù)正被企業(yè)廣泛應(yīng)用;另一方面,有著鮮明的互聯(lián)網(wǎng)、大數(shù)據(jù)時(shí)代特點(diǎn)對象存儲,也越來越受到互聯(lián)網(wǎng)用戶青睞。
每一種存儲分別對應(yīng)不同的訪問協(xié)議,文件存儲主要操作對象是文件和文件夾,例如NFS協(xié)議;對象存儲協(xié)議則主要為S3、Swift。浪潮軟件定義存儲AS13000的優(yōu)勢即在于,通過模塊化定義的方式,實(shí)現(xiàn)了在同一存儲系統(tǒng)中可以同時(shí)支持文件、對象等多種存儲協(xié)議,讓用戶通過一套存儲系統(tǒng)即可支持企業(yè)各種應(yīng)用訪問存儲數(shù)據(jù),大大節(jié)省TCO。
1什么是對象存儲?
對象存儲是一種新的采用扁平數(shù)據(jù)的組織形式,并提供基于HTTP協(xié)議的RESTful接口訪問的分布式存儲系統(tǒng)。它適用于一次寫入,多次讀取的非結(jié)構(gòu)化數(shù)據(jù)存儲的需求場景,例如文檔、圖像、視頻等網(wǎng)絡(luò)媒體文件。在云計(jì)算與大數(shù)據(jù)時(shí)代,對象存儲發(fā)展迅猛。
不過,目前業(yè)界的同類存儲產(chǎn)品,每種存儲系統(tǒng)只能提供1種或2種存儲協(xié)議。對于新增對象存儲需求的用戶,這就要求在多應(yīng)用環(huán)境中必須部署2套或2套以上的存儲系統(tǒng),無疑增加了用戶的初始投資,且增大了后期維護(hù)和管理的難度。
浪潮軟件定義存儲AS13000則通過所提供的多源零拷貝技術(shù),實(shí)現(xiàn)了在線存儲和大數(shù)據(jù)分析存儲的統(tǒng)一融合。企業(yè)的各種應(yīng)用在存取數(shù)據(jù)時(shí),無需在存儲集群間進(jìn)行數(shù)據(jù)拷貝,而是通過文件系統(tǒng)方便地訪問對象存儲的數(shù)據(jù),同時(shí)還可以高效實(shí)現(xiàn)大數(shù)據(jù)的分析和挖掘。
2對象存儲:通過多源零拷貝技術(shù),共享一套存儲
多源零拷貝技術(shù),是通過對NFS協(xié)議、HDFS文件協(xié)議和S3/Swift對象協(xié)議多種存儲協(xié)議的融合,來實(shí)現(xiàn)多應(yīng)用存取數(shù)據(jù)共享一套存儲系統(tǒng)的先進(jìn)技術(shù)。多源零拷貝技術(shù)既避免了數(shù)據(jù)在不同存儲之間來回拷貝的問題,又解決了用戶投資大、維護(hù)和管理難的問題。
多源零拷貝技術(shù)示意圖
浪潮軟件定義存儲AS13000之所以可以同時(shí)支持NFS、S3/Swift、HDFS(Hadoop分布式文件系統(tǒng))訪問底層對象存儲,是因?yàn)椴捎昧艘韵录夹g(shù):
AS13000基于DOS設(shè)計(jì)和實(shí)現(xiàn)S3/Swift接口。它在S3/Swift接口基礎(chǔ)上封裝FS適配器,實(shí)現(xiàn)了HDFS接口和NFS接口的對接,從而實(shí)現(xiàn)大數(shù)據(jù)應(yīng)用程序和NFS應(yīng)用程序?qū)Υ鎯ο到y(tǒng)的訪問。
AS13000的對象應(yīng)用程序通過S3/Swift接口直接調(diào)用底層存儲系統(tǒng),從而實(shí)現(xiàn)對象應(yīng)用程序?qū)ο髷?shù)據(jù)的上傳與下載。AS13000底層存儲是一個(gè)高可用、智能化的分布式對象存儲系統(tǒng),支持自修復(fù)、自管理等底層數(shù)據(jù)管理功能,它向上提供UDOS訪問函數(shù)庫,能夠支持DOS、DFS和DBS等模塊的訪問。3提高對象存儲數(shù)據(jù)訪問效率
浪潮軟件定義存儲AS13000提供的多源零拷貝技術(shù),避免了企業(yè)不同業(yè)務(wù)應(yīng)用數(shù)據(jù)在多存儲系統(tǒng)之間的拷貝,因此可以有效提升數(shù)據(jù)訪問效率,為多場景、多應(yīng)用的“互聯(lián)網(wǎng)+”用戶帶來了優(yōu)勢。
浪潮軟件定義存儲AS13000在醫(yī)療領(lǐng)域慢病跟蹤私有云存儲場景的應(yīng)用
目前,浪潮軟件定義存儲AS13000在各行各業(yè)已經(jīng)有了廣泛應(yīng)用。以醫(yī)療領(lǐng)域應(yīng)用為例,AS13000已經(jīng)應(yīng)用于慢病跟蹤私有云存儲解決方案。系統(tǒng)的數(shù)據(jù)來源包括病人公有云監(jiān)測數(shù)據(jù)、電子病歷文件及數(shù)據(jù)庫、PACS影像數(shù)據(jù)等多種渠道,通過Storming,Spark等流式和批量數(shù)據(jù)分析和運(yùn)算,將HBASE開源數(shù)據(jù)集存儲到AS13000中,然后通過慢病檔案等應(yīng)用,對HBASE結(jié)果數(shù)據(jù)進(jìn)行前端展示,提供輔助治療決策及建議。
浪潮軟件定義存儲AS13000存儲系統(tǒng)的優(yōu)勢在于,支持原生多種文件/對象協(xié)議接口, 通過一套存儲集群,適配多種場景多個(gè)應(yīng)用,給醫(yī)院節(jié)省了硬件成本;與此同時(shí),通過數(shù)據(jù)存儲融合,使得Spark、Storm讀取多源數(shù)據(jù)的效率提升,HBASE存儲數(shù)據(jù)效率也得到相應(yīng)提升,從而提升了整個(gè)存儲系統(tǒng)的訪問效率。
-
云計(jì)算
+關(guān)注
關(guān)注
39文章
8016瀏覽量
144255 -
互聯(lián)網(wǎng)
+關(guān)注
關(guān)注
55文章
11333瀏覽量
109782 -
數(shù)據(jù)存儲
+關(guān)注
關(guān)注
5文章
1023瀏覽量
52927 -
AI
+關(guān)注
關(guān)注
91文章
39505瀏覽量
301045 -
大數(shù)據(jù)
+關(guān)注
關(guān)注
64文章
9056瀏覽量
143628
原文標(biāo)題:多源零拷貝,提升數(shù)據(jù)應(yīng)用效率的核心技術(shù)
文章出處:【微信號:inspurstorage,微信公眾號:浪潮存儲】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。
發(fā)布評論請先 登錄
零碳園區(qū)多源數(shù)據(jù)融合體系的未來發(fā)展方向
西格電力零碳園區(qū)技術(shù)路徑實(shí)施過程中如何保障數(shù)據(jù)安全
芯源半導(dǎo)體安全芯片技術(shù)原理
寬頻CT在減少諧波偏差中起到怎樣的作用?
邊緣計(jì)算網(wǎng)關(guān)在能源數(shù)據(jù)采集監(jiān)控管理系統(tǒng)中的作用
工業(yè)互聯(lián)網(wǎng)中的數(shù)據(jù)中臺有什么作用
PCIe協(xié)議分析儀在數(shù)據(jù)中心中有何作用?
黑芝麻智能一芯多域零拷貝共享內(nèi)存技術(shù):破解車載大數(shù)據(jù)傳輸效能困局
安科瑞ARD系列電動機(jī)保護(hù)器在數(shù)據(jù)中心的UPS系統(tǒng)中具的作用
27MHz HCSL 差分晶體振蕩器在數(shù)據(jù)中心網(wǎng)絡(luò)存儲系統(tǒng)中的應(yīng)用方案
邊緣計(jì)算在智慧路燈桿系統(tǒng)中起到什么作用?
使用串口dma環(huán)形接收+空閑中斷,觸發(fā)空閑中斷后進(jìn)入任務(wù)中拷貝數(shù)據(jù)發(fā)現(xiàn)拷貝的數(shù)據(jù)全為0,怎么處理?
嵌入式學(xué)習(xí)-飛凌嵌入式ElfBoard ELF 1板卡-內(nèi)核空間與用戶空間的數(shù)據(jù)拷貝之數(shù)據(jù)拷貝介紹
飛凌嵌入式ElfBoard ELF 1板卡-內(nèi)核空間與用戶空間的數(shù)據(jù)拷貝之數(shù)據(jù)拷貝介紹
KEPServerEX 數(shù)據(jù)存儲插件
多源零拷貝技術(shù)在數(shù)據(jù)存儲中起到了怎樣的作用?
評論