1. 創(chuàng)業(yè)頭條
  2. 前沿領(lǐng)域
  3. 大數(shù)據(jù)
  4. 正文

大數(shù)據(jù)時(shí)代,西部數(shù)據(jù)的應(yīng)對(duì)之道:創(chuàng)新存儲(chǔ)架構(gòu)

 2021-04-23 15:09  來(lái)源:A5專(zhuān)欄  我來(lái)投稿 撤稿糾錯(cuò)

  域名預(yù)訂/競(jìng)價(jià),好“米”不錯(cuò)過(guò)

在日前于IPF2021浪潮數(shù)據(jù)中心合作伙伴大會(huì)期間舉辦的數(shù)據(jù)存儲(chǔ)論壇上,西部數(shù)據(jù)公司副總裁兼中國(guó)區(qū)業(yè)務(wù)總經(jīng)理劉鋼做了題為“創(chuàng)新存儲(chǔ)架構(gòu),賦能智算浪潮”的主題演講,闡釋了西部數(shù)據(jù)公司在大數(shù)據(jù)時(shí)代的存儲(chǔ)應(yīng)對(duì)之道。

西部數(shù)據(jù)公司副總裁兼中國(guó)區(qū)業(yè)務(wù)總經(jīng)理劉鋼

大數(shù)據(jù)時(shí)代存儲(chǔ)面臨挑戰(zhàn)

在如今的數(shù)字經(jīng)濟(jì)時(shí)代,數(shù)據(jù)作為企業(yè)的寶貴資產(chǎn),已經(jīng)成為驅(qū)動(dòng)企業(yè)發(fā)展的核心生產(chǎn)力要素。伴隨以人工智能、物聯(lián)網(wǎng)、5G等為代表的數(shù)字技術(shù)的不斷發(fā)展和落地,其帶來(lái)的是數(shù)據(jù)量級(jí)的激烈增長(zhǎng)。事實(shí)上,對(duì)于企業(yè)用戶(hù)而言,要存儲(chǔ)這些寶貴資產(chǎn)也面臨著極大挑戰(zhàn)。

劉鋼在演講中談到,如今數(shù)據(jù)的來(lái)源并不僅僅是人,也包含了成千上萬(wàn)的機(jī)器設(shè)備,以及數(shù)據(jù)中心所產(chǎn)生的數(shù)據(jù)。而次生數(shù)據(jù)的放大效應(yīng)也會(huì)產(chǎn)生更巨量的數(shù)據(jù)。在未來(lái)幾年中,這些新增數(shù)據(jù)量加在一起會(huì)達(dá)到驚人的3ZB。

而即便數(shù)據(jù)增長(zhǎng)如此快速,但最終也只有1.5%的數(shù)據(jù)被存儲(chǔ)下來(lái)。因?yàn)閷?duì)于數(shù)據(jù)存儲(chǔ)而言,企業(yè)用戶(hù)既存在海量的存儲(chǔ)需求,也存在快速訪(fǎng)問(wèn)尋求,同時(shí)也對(duì)于存儲(chǔ)的成本和功耗提出更高的要求。

西部數(shù)據(jù)的應(yīng)對(duì)之道:創(chuàng)新存儲(chǔ)架構(gòu)

當(dāng)前數(shù)據(jù)存放的關(guān)鍵技術(shù)基本可分為兩種,其一是HDD,用于存放大數(shù)據(jù);其二是SSD,對(duì)應(yīng)著快數(shù)據(jù)的存放。劉鋼表示,為了應(yīng)對(duì)大數(shù)據(jù)時(shí)代的上述問(wèn)題及挑戰(zhàn),僅憑一種存儲(chǔ)技術(shù)顯然難以做到。西部數(shù)據(jù)所做的是對(duì)存儲(chǔ)架構(gòu)進(jìn)行創(chuàng)新。

由于數(shù)據(jù)對(duì)于存儲(chǔ)的需求并不相同,有著不同的分層。而無(wú)論是SSD還是HDD,當(dāng)對(duì)數(shù)據(jù)進(jìn)行分區(qū),其在存儲(chǔ)盤(pán)中引發(fā)的效應(yīng)就會(huì)增強(qiáng)。在西部數(shù)據(jù)看來(lái),創(chuàng)新的存儲(chǔ)架構(gòu)包括三種:

第一種存儲(chǔ)架構(gòu)是分布式存儲(chǔ)。相對(duì)于傳統(tǒng)中心化的存儲(chǔ)方法WEB2.0,WEB3.0是去中心化的分布式存儲(chǔ)方法。去中心化帶來(lái)新的存儲(chǔ)架構(gòu),同時(shí)也帶來(lái)了存儲(chǔ)在成本和容量方面的優(yōu)勢(shì)。

第二種存儲(chǔ)架構(gòu)是分層存儲(chǔ)。數(shù)據(jù)分為不同層,根據(jù)數(shù)據(jù)對(duì)于存儲(chǔ)的容量、時(shí)延等指標(biāo)的需求,西部數(shù)據(jù)將其分為極熱存儲(chǔ)、熱存儲(chǔ)、溫存儲(chǔ)、冷存儲(chǔ)和極冷存儲(chǔ)五層。不同的數(shù)據(jù)需求需要對(duì)應(yīng)不同的存儲(chǔ)設(shè)備。

例如冷存儲(chǔ)大容量盤(pán)可達(dá)到18TB,極冷存儲(chǔ)則可引入多次讀取等技術(shù);而在快存儲(chǔ)中,用戶(hù)希望快速訪(fǎng)問(wèn)高價(jià)值數(shù)據(jù),進(jìn)行業(yè)務(wù)的預(yù)測(cè)或決策等,因此可以應(yīng)用SSD解決。

值得一提的是,尤其是對(duì)于互聯(lián)網(wǎng)領(lǐng)域云存儲(chǔ)而言,HDD容量密度的提升可以降低整體數(shù)據(jù)中心的部署及運(yùn)營(yíng)成本。比如在配置不變的前提下,將HDD密度從14TB提升至18TB,則可以降低22%的服務(wù)器使用,單位功耗則會(huì)降低21%。因此,許多特別是互聯(lián)網(wǎng)服務(wù)商多會(huì)快速跟進(jìn)最新的存儲(chǔ)容量。

第三種存儲(chǔ)架構(gòu)是分區(qū)存儲(chǔ)。SSD中往往會(huì)設(shè)有一個(gè)預(yù)留空間(7.68TB為7%,6.4TB為28%),其很多時(shí)候會(huì)進(jìn)行數(shù)據(jù)垃圾的收集。而在ZNS SSD中,預(yù)留空間容量為零,但采用了新的技術(shù)進(jìn)行分區(qū)處理。ZNS SSD帶來(lái)的一大好處是,垃圾數(shù)據(jù)收集時(shí)并沒(méi)有拉低整體存儲(chǔ)的性能,同時(shí)也降低了成本。

在美國(guó)健康數(shù)據(jù)管理服務(wù)商Qumulo應(yīng)用案例中,其采用西部數(shù)據(jù)Ultrastar SN640 7.68TB NVMe SSD之后,每日可讀取和分析高達(dá)2PB的數(shù)據(jù),數(shù)據(jù)分析量提升20倍,極大推進(jìn)了疫苗開(kāi)發(fā)工作以及對(duì)疫情的控制。

另外,IPFS通過(guò)采用(4U60+18T) 相比傳統(tǒng)存儲(chǔ)方案(4U36+16T)讓機(jī)柜空間減少46%,電源功耗降低36%,實(shí)現(xiàn)TCO成本的降低。

西部數(shù)據(jù)的三大優(yōu)勢(shì)

應(yīng)該說(shuō),在企業(yè)用戶(hù)的數(shù)據(jù)存儲(chǔ)中,SSD對(duì)于用戶(hù)整體存儲(chǔ)的成本和性能的影響至關(guān)重要。而對(duì)于SSD供應(yīng)商而言,要極大降低SSD成本,擁有自己的大規(guī)模產(chǎn)能非常重要。

會(huì)上,劉鋼強(qiáng)調(diào)了西部數(shù)據(jù)在SSD領(lǐng)域擁有的三大核心優(yōu)勢(shì):

第一, 西部數(shù)據(jù)擁有全球領(lǐng)先的SSD產(chǎn)能優(yōu)勢(shì)。在這方面,西部數(shù)據(jù)與鎧俠可以占到全球產(chǎn)能三分之一的份額。

第二, 西部數(shù)據(jù)擁有領(lǐng)先的SSD技術(shù)優(yōu)勢(shì)。今年2月,西部數(shù)據(jù)發(fā)布了最新第六代162層3D閃存技術(shù)。其橫向單元陣列密度較上一代技術(shù)提高了約10%;與112層堆疊技術(shù)相比,第六代技術(shù)將晶圓尺寸有效減小40%,大大優(yōu)化成本;與上一代產(chǎn)品相比,第六代程序性能提升2.4倍,讀取延遲降低約10%,I/O性能提高約66%。

第三, 西部數(shù)據(jù)擁有垂直企業(yè)級(jí)固態(tài)硬盤(pán)縱向集成優(yōu)勢(shì)。例如在全球最大電商之一應(yīng)用案例中,其對(duì)于穩(wěn)定性的要求是上下10%波動(dòng),而西部數(shù)據(jù)相應(yīng)方案的實(shí)測(cè)波動(dòng)僅為0.11%。

除了全球市場(chǎng),西部數(shù)據(jù)也與中國(guó)企業(yè)巨頭保持了緊密的合作。比如西部數(shù)據(jù)與浪潮一直存在非常多的合作。

劉鋼表示,在面臨大數(shù)據(jù)時(shí)代挑戰(zhàn)時(shí),應(yīng)對(duì)之道是創(chuàng)新的存儲(chǔ)架構(gòu),包括分布式存儲(chǔ)、分層存儲(chǔ)和分區(qū)存儲(chǔ)。西部數(shù)據(jù)不僅提供新的技術(shù)來(lái)不斷創(chuàng)新和優(yōu)化存儲(chǔ)產(chǎn)品及解決方案,也會(huì)攜手合作伙伴共同創(chuàng)新企業(yè)級(jí)存儲(chǔ)市場(chǎng)的未來(lái)。

西部數(shù)據(jù)公司副總裁兼中國(guó)區(qū)業(yè)務(wù)總經(jīng)理劉鋼

“高速發(fā)展的人工智能在對(duì)數(shù)字經(jīng)濟(jì)產(chǎn)生巨大賦能和推動(dòng)的同時(shí),也推動(dòng)整個(gè)計(jì)算產(chǎn)業(yè)向'智慧計(jì)算'方向演進(jìn),巨量模型和海量數(shù)據(jù),對(duì)算力和存儲(chǔ)的需求呈指數(shù)級(jí)增長(zhǎng)。我們很高興能持續(xù)深化與浪潮的合作,結(jié)合雙方前沿科技與產(chǎn)品的獨(dú)特優(yōu)勢(shì),協(xié)力打造出高性能、低成本、且兼具穩(wěn)定性與擴(kuò)展性等特點(diǎn)的卓越解決方案,優(yōu)化資源配置,賦能智慧計(jì)算。未來(lái),西部數(shù)據(jù)將與浪潮加強(qiáng)縱深合作,不斷以創(chuàng)新的數(shù)據(jù)存儲(chǔ)架構(gòu)和解決方案,應(yīng)對(duì)市場(chǎng)多樣化的需求,并攜手生態(tài)系統(tǒng)中的各方伙伴共同推動(dòng)智能產(chǎn)業(yè)的轉(zhuǎn)型與發(fā)展,為行業(yè)用戶(hù)創(chuàng)造更多價(jià)值。”劉鋼如是說(shuō)。

申請(qǐng)創(chuàng)業(yè)報(bào)道,分享創(chuàng)業(yè)好點(diǎn)子。點(diǎn)擊此處,共同探討創(chuàng)業(yè)新機(jī)遇!

相關(guān)標(biāo)簽
大數(shù)據(jù)
西部數(shù)碼

相關(guān)文章

  • 百望云獲評(píng)“中國(guó)大數(shù)據(jù)獨(dú)角獸” 數(shù)實(shí)相融 算啟未來(lái)

    隨著數(shù)字中國(guó)戰(zhàn)略的步步落實(shí),大數(shù)據(jù)已經(jīng)成為錨定戰(zhàn)略定位、搶得市場(chǎng)先機(jī)的重要基礎(chǔ)元素。為彰顯行業(yè)發(fā)展現(xiàn)狀,遴選、推薦優(yōu)秀企業(yè),長(zhǎng)城戰(zhàn)略咨詢(xún)近日在2023中國(guó)國(guó)際大數(shù)據(jù)產(chǎn)業(yè)博覽會(huì)期間,重磅發(fā)布《中國(guó)大數(shù)據(jù)獨(dú)角獸企業(yè)榜單》,根據(jù)獨(dú)角獸企業(yè)國(guó)家推薦性標(biāo)準(zhǔn),篩選出259家2022年中國(guó)大數(shù)據(jù)(潛在)獨(dú)角獸企業(yè)

    標(biāo)簽:
    大數(shù)據(jù)
  • 學(xué)術(shù)引領(lǐng) 數(shù)智健康:2023北京健康醫(yī)療大數(shù)據(jù)論壇六月北京盛大開(kāi)啟

    2023年6月15日至18日,2023北京健康醫(yī)療大數(shù)據(jù)論壇、醫(yī)促會(huì)華夏健康數(shù)據(jù)與數(shù)字醫(yī)學(xué)高峰論壇、第三屆中華預(yù)防醫(yī)學(xué)會(huì)腎臟病預(yù)防與控制專(zhuān)業(yè)委員會(huì)學(xué)術(shù)會(huì)議將同期于北京舉行。論壇以“學(xué)術(shù)引領(lǐng)數(shù)智健康”為主題,著眼國(guó)家戰(zhàn)略需求,聚焦前沿科技在健康醫(yī)療領(lǐng)域的發(fā)展與實(shí)踐,薈萃全球頂尖學(xué)術(shù)觀(guān)點(diǎn),促進(jìn)多方跨界融

    標(biāo)簽:
    大數(shù)據(jù)
  • 擎起科技自強(qiáng)旗幟,引領(lǐng)產(chǎn)業(yè)智造未來(lái)——谷器數(shù)據(jù)入庫(kù)北京市科技型中小企業(yè)

    近日,北京市科學(xué)技術(shù)委員會(huì)、中關(guān)村科技園區(qū)管理委員會(huì)公示了北京市2023年第2批科技型中小企業(yè)名單,谷器數(shù)據(jù)借助優(yōu)秀的科技自主創(chuàng)新能力成功入選。此次評(píng)價(jià)指標(biāo)圍繞科研人員、研發(fā)投入、科技成果等三個(gè)維度,成功入選科技型中小企業(yè)是對(duì)谷器數(shù)據(jù)專(zhuān)業(yè)化發(fā)展、自主創(chuàng)新能力、產(chǎn)品技術(shù)實(shí)力的激勵(lì)與肯定。科技型中小企業(yè)

    標(biāo)簽:
    大數(shù)據(jù)
  • 獲中國(guó)科學(xué)院褒獎(jiǎng) | 谷器數(shù)據(jù)產(chǎn)品榮膺2022年度最佳!

    評(píng)審寄語(yǔ)面向車(chē)間現(xiàn)場(chǎng)生產(chǎn)制造過(guò)程的數(shù)字化管理,谷器數(shù)據(jù)SupplyX·MES通過(guò)推動(dòng)更有效的工廠(chǎng)運(yùn)行和現(xiàn)場(chǎng)效率,提供從接收生產(chǎn)計(jì)劃到制成最終產(chǎn)品全過(guò)程的生產(chǎn)活動(dòng)實(shí)現(xiàn)優(yōu)化的信息,成為新型工業(yè)化的標(biāo)桿力量!近日,由中國(guó)科學(xué)院《互聯(lián)網(wǎng)周刊》、中國(guó)社會(huì)科學(xué)院信息化研究中心等機(jī)構(gòu)聯(lián)合主辦的“2023(第八屆)

    標(biāo)簽:
    大數(shù)據(jù)
  • 四方偉業(yè)優(yōu)秀的大數(shù)據(jù)產(chǎn)品和服務(wù)獲得了行業(yè)榮譽(yù)

    在如今這個(gè)數(shù)字化轉(zhuǎn)型時(shí)代,大數(shù)據(jù)在企業(yè)發(fā)展的過(guò)程中發(fā)揮了至關(guān)重要的作用,大數(shù)據(jù)技術(shù)以更高效和有效的方式提供最好的服務(wù),同時(shí)還可以提高生產(chǎn)力、提高客戶(hù)滿(mǎn)意度和更高效的智慧化運(yùn)營(yíng)。其中,成都四方偉業(yè)軟件股份有限公司(以下簡(jiǎn)稱(chēng)“四方偉業(yè)”)以?xún)?yōu)秀的大數(shù)據(jù)產(chǎn)品和服務(wù)獲得了多項(xiàng)行業(yè)榮譽(yù)。去年,2022數(shù)博會(huì)數(shù)

編輯推薦