QingStor U10000撐起算力半邊天，讓數(shù)據(jù)實現(xiàn)“點石成金”

（魏德齡/文）不知從何時起，智能手表成為了人們?nèi)粘Ｉ畹慕】抵笇В茱@示出每天的卡路里消耗量，提醒你需要站立活動一下，每日的三個圓圈成為了比工作還要認真完成的KPI，甚至遇到突發(fā)事件，如心率不齊、血壓過高還能做出預警。這些量化生活的數(shù)據(jù)正在改善不少人的健康狀態(tài)，其所基于的正是海量的非結(jié)構(gòu)化數(shù)據(jù)，分散的、不同類別、不同來源的數(shù)據(jù)最終交匯在了一起，對于用戶的生理表征做出判斷，通過數(shù)值給出健康指導。有趣的是，實際上這些海量的數(shù)據(jù)，自人類誕生以來，就一直不斷的在一代又一代人身體中流動，但其價值卻長期被人所忽略。

“越來越多的人意識到，只是簡單地把這些海量數(shù)據(jù)存起來，其實并沒有發(fā)揮這些數(shù)據(jù)的價值，或者說靜止的數(shù)據(jù)是沒有多少價值可言的，必須讓數(shù)據(jù)流動起來，讓數(shù)據(jù)完整地或者相對完整地經(jīng)歷生命周期的不同階段，在不同階段為數(shù)字化業(yè)務產(chǎn)生不同的價值，才能充分挖掘整個數(shù)據(jù)的價值?！鼻嘣瓶萍即鎯Ξa(chǎn)品總監(jiān)馮相東表示，如何在數(shù)據(jù)層面實現(xiàn)“點石成金”正是青云存儲多年來的一個研究方向，而量化生活的背后實際上體現(xiàn)出了一場數(shù)據(jù)形態(tài)的變革，青云存儲QingStor U10000則正是為此孕育而生的產(chǎn)品。

量化生活背后的數(shù)據(jù)形態(tài)變革

除了隨時隨地給出建議的可穿戴設備外，很多用戶也發(fā)現(xiàn)自己的體檢報告也正在發(fā)生變化，除了預約和獲取報告都已經(jīng)遷移至線上系統(tǒng)外，個人體檢報告中也可以看到健康的態(tài)勢分析。這背后恰恰離不開數(shù)據(jù)分析平臺的支撐。

與此同時，醫(yī)療機構(gòu)自身也需要對于大量的數(shù)據(jù)進行安全妥善的處理。比如個人用戶產(chǎn)生的CT、核磁、X光等典型的PACS系統(tǒng)的數(shù)據(jù)調(diào)取、長期留存場景。根據(jù)醫(yī)療行業(yè)規(guī)定，門診數(shù)據(jù)保存不低于 15 年，住院數(shù)據(jù)保存不低于 30 年。這些不斷累計的數(shù)據(jù)對如何存儲產(chǎn)生了挑戰(zhàn)。

上述數(shù)據(jù)的爆發(fā)式增長，也反映出了計算形態(tài)的演變。數(shù)據(jù)的量級正在飛速增長，例如一家智慧工廠每天產(chǎn)生的數(shù)據(jù)量都可以達到 PB 級，一輛自動駕駛汽車滿負荷做測試的情況下，每天可以產(chǎn)生的數(shù)據(jù)量可以達到數(shù) TB 甚至數(shù)十TB。同時，這些典型的自動駕駛、物聯(lián)網(wǎng)、AR、5G場景背后所產(chǎn)生的數(shù)據(jù)類型主要以非結(jié)構(gòu)化數(shù)據(jù)為主，包括圖片、音頻、視頻，以及一些日志類的數(shù)據(jù)。

AI的機器學習更是進一步提升了對于“海量小文件場景”下的存儲性能需求，通常情況下，一次訓練的文件數(shù)量要到幾億乃至十幾億的量級，每個文件的大小通常在幾十KB到幾MB之間。但也正是通過這樣的學習過程，才能有了可穿戴設備所能給出的精準量化生活、無人超市中的智能結(jié)算、自動駕駛的物體辨識，以及體檢報告中的健康態(tài)勢分析。

國內(nèi)著名的體檢機構(gòu)慈銘體檢就通過統(tǒng)一影像存儲平臺來打破信息孤島，青云為該醫(yī)療集團業(yè)務的承載提供了云易捷超融合平臺——“輕量級算力平臺+青云存儲”的方案，為數(shù)據(jù)的調(diào)取、PACS數(shù)據(jù)的長期存儲實現(xiàn)了方案性的改進。平臺底層為QingStor 高性能塊存儲平臺，實現(xiàn)PACS系統(tǒng)數(shù)據(jù)的實時調(diào)取和長期存儲，其他業(yè)務系統(tǒng)則通過與U10000的對象存儲做對接，并正在探索基于U10000 協(xié)議互通的能力，實現(xiàn)對象和文件可互通，與 AI醫(yī)療相關的應用能整合出更多的價值。

實際上，在其中發(fā)揮重要作用的U10000正是青云在近期通過全面升級，面向海量非結(jié)構(gòu)化數(shù)據(jù)平臺的存儲產(chǎn)品。

面向海量非結(jié)構(gòu)化數(shù)據(jù)的U10000

青云存儲QingStor U10000是一款面向非結(jié)構(gòu)化數(shù)據(jù)場景的存儲產(chǎn)品，主要包括各種影像數(shù)據(jù)、音視頻數(shù)據(jù)、數(shù)據(jù)湖、大數(shù)據(jù)、物聯(lián)網(wǎng)等場景，同時提供對象、文件、大數(shù)據(jù)接口，不同協(xié)議之間實現(xiàn)數(shù)據(jù)無損訪問互通；單存儲桶支持 100 多億個對象，并且性能不會隨之下降。

“產(chǎn)品設計初衷就是幫助客戶更好實現(xiàn)海量數(shù)據(jù)的價值挖掘?！鼻嘣瓶萍即鎯Ξa(chǎn)品總監(jiān)馮相東表示。除了上述提到的慈銘體檢的案例外，某智能自動駕駛科技公司也正在使用QingStor U10000來提升對于海量地圖數(shù)據(jù)中的分析效率，同時還通過集群私有化滿足了地圖采集數(shù)據(jù)的監(jiān)管需求。蘇州華興源創(chuàng)則通過部署包括 U10000 在內(nèi)的青云全棧存儲能力，構(gòu)建數(shù)據(jù)存儲中臺，助力提供工業(yè)自動化測試設備的整體解決方案。

青云存儲QingStor U10000能夠?qū)崿F(xiàn)對于多個行業(yè)的助力，彰顯了作為一款全面升級型產(chǎn)品的實力。其繼承了原來青云對象存儲、文件存儲的所有能力，并且在多個維度上實現(xiàn)了產(chǎn)品力的增強和迭代。在實現(xiàn)數(shù)據(jù)協(xié)議的互通、功能和性能的增強、算力平臺對接的強化三個方面實現(xiàn)了明顯提升。

也就是說，U10000實現(xiàn)了對于文件、對象的統(tǒng)一，在產(chǎn)品架構(gòu)上可以優(yōu)勢兼得，結(jié)合協(xié)議互通的特性，用戶可以實現(xiàn)數(shù)據(jù)接駁，在文件、對象、大數(shù)據(jù)之間做流轉(zhuǎn)?！拔覀儼盐募蛯ο笕嗪掀饋恚蛻舻捏w驗上會好很多?！鼻嘣瓶萍籍a(chǎn)品技術解決方案總監(jiān)張忠華表示。

從架構(gòu)上看，U10000主要包含三大模塊：一是接入服務層，以文件、對象、大數(shù)據(jù)三種接口的形態(tài)去承載多種業(yè)務的使用，支持兼容標準POSIX訪問語義和標準的SMB接口、NFS接口，同時提供標準的對象 S3 和大數(shù)據(jù)訪問的 HDFS 接口；二是存儲服務層，提供豐富的高級功能特性、多維度資源管理功能以及核心機制，比如糾刪碼、多副本數(shù)據(jù)安全的機制；三是擁有了一個統(tǒng)一的運維管理平臺，為運維或者使用者提供友好的可視化管理界面，實現(xiàn)對存儲集群的各種配置、操作和監(jiān)控。

更值得關注的是，U10000產(chǎn)品在不同維度上均有著極具優(yōu)勢的特點表現(xiàn)，進而為其能在多個行業(yè)領域發(fā)揮重要作用提供了保障。

撐起算力半邊天

“存儲是構(gòu)成算力的一個非常重要的部分，或者說算力的一半要靠存儲。”青云科技產(chǎn)品技術解決方案總監(jiān)張忠華表示，青云的基因是算力，所以對于軟件定義存儲的思考一定不是孤立的，會把核心聚焦在如何滿足算力對存儲需求的維度上，讓存儲更好地為算力做賦能。

這不禁讓人想起了曾經(jīng)PC電腦剛剛用上SSD的時代，確實給當時機械硬盤時代的用戶帶來了前所未有的體驗升級。對于云業(yè)務而言同樣如此，U10000的一個重要特點就是保障卓越性能，并支持海量數(shù)據(jù)存儲。可為海量小文件場景提供卓越的I/O性能，單桶單目錄能支持百億級小文件存儲，并且能做到性能不衰減。同時線性擴展保障了性能和容量的線性增長，用戶還可根據(jù)業(yè)務需求進行靈活的EC配備，得盤率最高可達90%以上。

通過多協(xié)議無損互通，U10000還實現(xiàn)了數(shù)據(jù)訪問和流通的高效。其在技術層面提供了統(tǒng)一的索引架構(gòu)，好處在于讓存儲和讀取數(shù)據(jù)中間無需格式轉(zhuǎn)化，無性能和語義損失。在存儲接口方面，支持POSIX、SMB、NFS、FTP、HDFS、S3、SDK等多種協(xié)議，滿足常見應用，協(xié)議的互通也讓數(shù)據(jù)分析更高效。這種無損互通的優(yōu)勢能在自動駕駛、基因測序的場景中大大提升效率，正常情況下一份數(shù)據(jù)需要四個環(huán)節(jié)的處理才能發(fā)揮其真正的作用，數(shù)據(jù)在不同的環(huán)節(jié)通過不同的協(xié)議進行處理，通過協(xié)議的互通大大提升了數(shù)據(jù)分析的效率。

QingStor U10000還擁有一整套完善的對接機制，提供一系列完善的API、SDK，可以輕松地對接大數(shù)據(jù)平臺、數(shù)據(jù)處理的框架和服務，實現(xiàn)數(shù)據(jù)和算力的高效結(jié)合，涵蓋常見的圖片處理、音視頻轉(zhuǎn)碼、AI大數(shù)據(jù)分析、HPC超算平臺、數(shù)據(jù)備份存檔等應用。

對于目前同樣備受關注的數(shù)據(jù)安全問題，U10000能夠從元數(shù)據(jù)和存儲數(shù)據(jù)的分層設計、多重訪問安全機制、智能預警機制、功能服務的運維監(jiān)控平臺四個維度來保障用戶的數(shù)據(jù)穩(wěn)如泰山。

此外，QingStor U10000還是真正自研的中國存儲。全部為自主設計，沒有繼承任何開源的架構(gòu)，不存在任何知識產(chǎn)權(quán)的風險。青云存儲也完成了對于一系列國產(chǎn)化生態(tài)的匹配，包括從底層的國產(chǎn)芯片、OS、上層PaaS以及SaaS應用，保證了客戶在涉足一些敏感數(shù)據(jù)業(yè)務時滿足監(jiān)管要求，且沒有后顧之憂。

“是金子總會發(fā)光”與“掘地三尺有黃金”作為膾炙人口的話語總是被人反復提及，數(shù)據(jù)的金光已經(jīng)閃現(xiàn)，但需要有好的工具才能不至于在還有“三尺”的時候遺憾放棄。算力保證了業(yè)務“掘金”數(shù)據(jù)的效率，QingStor U10000則撐起了算力的半邊天，讓數(shù)據(jù)實現(xiàn)“點石成金”。

生成海報

免責聲明：本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性，但不保證有關資料的準確性及可靠性，讀者在使用前請進一步核實，并對任何自主決定的行為負責。本網(wǎng)站對有關資料所引致的錯誤、不確或遺漏，概不負任何法律責任。任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時，應及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明，并提供身份證明、權(quán)屬證明及詳細侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后，將會依法盡快聯(lián)系相關文章源頭核實，溝通刪除相關內(nèi)容或斷開相關鏈接。