<del id="aymay"></del> 北京2023年2月2日 /美通社/ -- 數(shù)字時代，數(shù)據共享互通成為剛需
數(shù)字經濟時代，云計算、大數(shù)據、人工智能等新技術快速發(fā)展，非結構化數(shù)據爆發(fā)式增長，數(shù)據類型變得愈發(fā)復雜多樣。在自動駕駛、基因測序、氣象預報等云數(shù)智應用場景中，一次數(shù)據處理可能會涉及到文件、對象、大數(shù)據等多種協(xié)議，數(shù)據間的互通轉換成為數(shù)據存儲中至關重要的一環(huán)，具備平臺化能力的融合存儲成為數(shù)字基礎設施建設的核心。
以基因測序場景為例，一次完整的基因測序涉及到數(shù)據采集、格式化、脫敏、壓縮、分析、發(fā)布等操作，其過程可以大致分為樣本采集、DNA/RNA測序、數(shù)據分析和發(fā)布四個步驟。在不同的處理階段，需要使用不同的數(shù)據協(xié)議進行操作。其中在樣本采集和DNA/RNA測序階段采用NFS文件協(xié)議，數(shù)據分析階段采用HDFS大數(shù)據協(xié)議，數(shù)據發(fā)布階段則是通過公網數(shù)據共享采用S3對象協(xié)議。整個數(shù)據處理過程涉及三種協(xié)議格式，這就意味著完成一次基因的測序流程需要在NFS、HDFS和S3之間進行兩次數(shù)據拷貝和數(shù)據格式的轉換。傳統(tǒng)存儲僅支持單一的訪問協(xié)議，這就會造成兩個問題：一是數(shù)據格式轉換和數(shù)據拷貝會降低整個數(shù)據處理流程的效率；二是多套存儲副本增加存儲空間成本。
基因測序應用需要使用多種數(shù)據協(xié)議
百川入海：浪潮基于一套存儲 承載多樣化數(shù)據
浪潮分布式存儲平臺AS13000基于對非結構化數(shù)據協(xié)議（NFS/CIFS/HDFS/S3）融合互通的研究進行技術創(chuàng)新，采用統(tǒng)一的數(shù)據管理和元數(shù)據管理、統(tǒng)一的增值特性服務、統(tǒng)一的分布式存儲資源池和統(tǒng)一的管理軟件系統(tǒng)，保證各種協(xié)議共享同一份數(shù)據和元數(shù)據。訪問過程中無需數(shù)據轉換和拷貝，并且為每種協(xié)議提供原生語義服務，每種服務均可直接訪問，無需安裝網關、插件或在計算側或應用層進行改造。
AS13000非結構化數(shù)據融合架構
基于"多合一"極簡架構，浪潮分布式存儲得以實現(xiàn)四個"統(tǒng)一"。
首先，提供統(tǒng)一的數(shù)據管理和元數(shù)據管理。
數(shù)據管理和元數(shù)據管理是非結構化數(shù)據存儲的關鍵，浪潮分布式存儲平臺AS13000根據NFS、CIFS、HDFS和S3的語義和元數(shù)據特點，抽象各協(xié)議的數(shù)據和元數(shù)據操作，通過一套統(tǒng)一的非結構化數(shù)據和元數(shù)據管理架構有效地保證各協(xié)議的原生訪問。
其次，提供統(tǒng)一的增值特性服務。
基于統(tǒng)一的數(shù)據訪問接口和元數(shù)據管理的架構設計，浪潮AS13000對外提供統(tǒng)一的增值特性服務，包括統(tǒng)一配額、QoS、加密、壓縮、快照、回收站、分級存儲、遠程復制、元數(shù)據檢索等等。
以下圖為例：同一個元數(shù)據檢索服務ElasticSearch支持NFS、CIFS、S3、HDFS多種協(xié)議，并且各協(xié)議為同一配置入口和查詢入口。
統(tǒng)一增值特性示例：元數(shù)據檢索服務
再次，構建統(tǒng)一的分布式存儲資源池。
AS13000支持NFS/CIFS/HDFS/S3等多種服務協(xié)議共享非結構化存儲資源池，并且同一個文件不同協(xié)議訪問的數(shù)據和元數(shù)據為同一份。例如，通過文件NFS協(xié)議寫入的一個文件，通過對象存儲AWS S3協(xié)議、大數(shù)據HDFS協(xié)議和文件CIFS協(xié)議均可讀取；每個節(jié)點都可以啟動文件NAS、大數(shù)據HDFS和對象存儲S3服務。
最后，打造統(tǒng)一的管理系統(tǒng)。
管理軟件負責集群的安裝、部署、業(yè)務配置、設備管理、監(jiān)控、告警等功能。浪潮分布式存儲平臺AS13000打造了融合互通的管理系統(tǒng)，可同時支持NFS/CIFS/HDFS/S3等多種服務協(xié)議，增值特性通過統(tǒng)一的配置入口對所有非結構化存儲協(xié)議同時生效，減少了企業(yè)的管理成本。
浪潮分布式存儲平臺AS13000通過多年來的持續(xù)技術創(chuàng)新，以一份數(shù)據支持多種協(xié)議訪問，實現(xiàn)了非結構化數(shù)據融合互通，在提升數(shù)據處理效率的同時降低了存儲購置和運維成本，保障各協(xié)議的語義無損和性能無損，構筑了面向"云數(shù)智"應用的融合存儲平臺，助力企業(yè)數(shù)字化轉型，加速釋放數(shù)據價值。
