數據重建異常耗時 深信服EDS存儲通過創(chuàng)新技術提升可靠性
2025-08-08 11:14:07AI云資訊1822
當存儲系統(tǒng)的“體檢報告”頻頻預警——
數據重建進程持續(xù)搶占30%以上業(yè)務帶寬,引發(fā)關鍵業(yè)務響應延遲激增;
修復周期從常規(guī)24小時惡化至72小時+,數據脆弱期風險呈指數級攀升.....
這些異常指標絕非偶然波動!
而是傳統(tǒng)存儲架構在資源調度與可靠性層面的系統(tǒng)性缺陷——修復進程與業(yè)務I/O的資源爭奪直接威脅數據安全,并導致關鍵業(yè)務響應延遲加劇。
如何實現(xiàn)修復效率與業(yè)務穩(wěn)定的“雙贏”,已成為存儲系統(tǒng)演進的核心命題。
為此,EDS存儲提出了「新解法」:
基于SSD與HDD完全解耦的可靠性架構,通過智能QoS調控+全局參與重建,實現(xiàn)修復任務與業(yè)務IO的智能平衡,在保障業(yè)務連續(xù)性的同時,大幅提升修復效率。
架構「新解法」
不僅實現(xiàn)故障隔離與精準修復
還能支持全SSD加速與彈性擴展
傳統(tǒng)Ceph方案存在致命缺陷,通常采用SSD與HDD混合加速方案:將存儲池按冗余策略(如EC4+2)劃分為多個分組,每個分組綁定一塊SSD,并將該SSD劃分為多個獨立分區(qū),每個分區(qū)專用于加速組內一塊HDD。
以EC4+2冗余策略為例
Ceph系架構通過SSD加速存儲池性能方案在提升I/O效率的同時,帶來了以下問題:
交叉故障風險:單塊SSD故障導致整組HDD不可用,疊加其他故障時數據丟失風險增加。
修復效率低下:單塊SSD故障需重建144TB數據(以SSD:HDD=1:9,HDD容量為16T為例),理想狀態(tài)下修復時間也需要72小時。
擴展僵化:SSD與HDD需按比例擴容,無法獨立擴展SSD提升性能。
針對上述問題,EDS存儲在架構上將SSD與HDD完全解耦,通過數據熱度動態(tài)遷移與跨層異步IO調度,實現(xiàn)性能與容量的彈性平衡,規(guī)避傳統(tǒng)方案中SSD-HDD綁定的數據可靠性風險與緩存層擴展性問題。
1.跨層故障隔離
SSD與HDD完全解耦,SSD故障僅影響自身數據副本,HDD層數據完整可用且無需重建,徹底規(guī)避傳統(tǒng)方案中SSD故障造成的全磁盤組數據失效風險,以及SSD-HDD交叉故障導致的數據風險。
2.字節(jié)級精準重建
SSD層采用獨立冗余策略(如3副本),SSD單盤故障時僅需重建該SSD數據上的臟數據(分鐘級內可完成),數據修復范圍可精準到字節(jié)級別,相比傳統(tǒng)磁盤組方案,修復時間可縮短99%,窗口期數據丟失風險接近于零。
3.全SSD高性能引擎
前端業(yè)務讀寫100%由SSD性能層承載,基于熱力圖智能識別熱數據,確保高頻I/O全閃存響應,隨機讀寫性能提升10倍以上,時延降至亞毫秒級。
數據異步下沉至HDD容量層,通過智能回刷機制規(guī)避HDD寫入瓶頸,業(yè)務高峰期仍可保持穩(wěn)定吞吐。
4.性能層彈性擴展
緩存層、持久化存儲層無綁定比例限制,單節(jié)點擴容一塊SSD即可線性提升全局緩存層容量,無需同步擴容HDD,實現(xiàn)“按需投資,即時生效”的性能升級。
數據修復「新解法」
智能QoS調控+全局參與重建
1.智能QoS調控、修復不搶業(yè)務資源
通過秒級精度監(jiān)控業(yè)務IO流量、延遲及帶寬利用率,精準判斷業(yè)務壓力等級,實現(xiàn)動態(tài)感知業(yè)務負載。
自適應限速策略
業(yè)務高峰期:自動降低數據重建的任務并發(fā)數和任務優(yōu)先級,優(yōu)先保障業(yè)務資源供給,避免性能波動。
業(yè)務低谷期:提升重建任務的并發(fā)數與優(yōu)先級,充分利用閑置資源,修復效率提升3倍。
2.全局參與重建,修復速度質的飛躍
全局參與重建技術通過創(chuàng)新的多源并行機制徹底改變了傳統(tǒng)數據修復模式,有效解決了傳統(tǒng)存儲系統(tǒng)在重建過程中面臨的資源利用率低下問題。
核心原理
一方面采用多源讀取策略,基于EC分片分布從多個健康故障域同時獲取數據分片,使聚合帶寬提升2-3倍,實現(xiàn)全局存儲資源的高效利用。
另一方面通過多目的端寫入技術,將恢復數據分塊并行寫入多塊磁盤,充分調用目標端磁盤IO與網絡帶寬資源,形成端到端的并行加速通道,從而大幅提升數據重建效率。
流程詳解
1. 選擇與故障盤不屬于同一故障域的完好硬盤作為數據源。
2. 通過跨域數據重構,將數據恢復至原故障盤所屬故障域內的其他正常硬盤(如修復數據1、數據a)。
深信服EDS存儲通過SSD與HDD解耦架構實現(xiàn)性能與容量的彈性平衡,結合智能QoS調控與全局參與重建技術,讓數據修復“隱身運行”!深信服EDS存儲希望通過持續(xù)的技術創(chuàng)新,為用戶的數字化轉型提供堅實的存儲底座。
相關文章
- 2025 深信服峰會北京站:智能體與深信服EDS 存儲,中科大洋的媒資革新實踐
- IDC 2025年第一季度全棧超融合市場:深信服第一
- 深信服AI創(chuàng)新平臺全新升級,不斷降低端到端AI應用建設TCO
- 大模型API服務性能測試標準正式發(fā)布,深信服為核心參編
- SASE國內市場第一!企業(yè)辦公安全升級為何選擇深信服
- 深信服攜手用戶共謀數智化創(chuàng)新,以「AI+云化」破局業(yè)務安全建設
- 政務數據安全領域重要國家標準正式發(fā)布!深信服深度參編
- IDC發(fā)布2024中國應用交付市場報告,深信服AD蟬聯(lián)第一!
- DeepSeek如何落地,深信服總結全面的AI建設規(guī)劃指南
- “AI大模型+云化”讓傳統(tǒng)設備不再吃灰,深信服以AI賦能防火墻
- 深信服受邀參加第39屆全國計算機安全學術交流會:大模型技術引領構建網絡安全智能體
- 天維信通CBC Tech與深信服宣布建立戰(zhàn)略合作伙伴關系,推進云網安一體化發(fā)展
- IDC發(fā)布《中國應用交付市場季度跟蹤報告,2024Q2》,深信服AD穩(wěn)居第一
- 深信服科技再度位居IDC MarketScape 零信任網絡訪問解決方案市場「領導者」類別
- 深信服與Veritas達成戰(zhàn)略合作,共同構筑云平臺數據安全防線
- 云原生領域首個國標發(fā)布!深信服全程參與編寫
人工智能企業(yè)
更多>>人工智能硬件
更多>>- 從心出發(fā),新品與新技術雙重進化,技嘉2025線下產品發(fā)布會強勢來襲
- 當“銀發(fā)”遇見“智眼”——神眸亮相2025深圳智慧養(yǎng)老展
- 訊飛同傳助力亞布力夏季年會,打破語言壁壘促全球對話
- 低空賦能,跨越山河,大疆運載無人機的甘孜答卷
- 預制菜又吵起來了?優(yōu)特智廚炒菜機新品發(fā)布會掀起中餐“現(xiàn)炒”熱潮
- 場景化落地部署人形機器人將超2000臺,眾擎機器人與多倫科技達成戰(zhàn)略合作
- 275W極限性能+第二代乾坤散熱!拯救者R9000P 2025至尊版成就電競創(chuàng)作雙巔峰
- 百年聲學品牌再創(chuàng)新!拜雅新品AMIRON 200 & AMIRON ZERO定義開放聆聽新方式
人工智能產業(yè)
更多>>- 人機共生 · 智啟未來——2025高交會亞洲人工智能與機器人產業(yè)鏈展主題發(fā)布
- 北京數基建發(fā)布“知行IntAct”混合智能體產品,以AI定義城市治理新范式
- 新時達“精耕小腦”,與大腦協(xié)同,加速具身智能垂直落地
- 亞洲愿景論壇 東軟蓋龍佳談AI與數據價值化重構醫(yī)療未來
- 破解AI落地難題!北大這場特訓營,為企業(yè)找到轉型“最優(yōu)解”
- 腦神經成像提速數倍、AI練就“遺忘術”!2025螞蟻InTech獎頒發(fā)
- 一句話生成圖表!天禧智能體接入ChatExcel MCP Server讓數據處理變得如此簡單
- 外灘大會重磅發(fā)布:螞蟻百寶箱Tbox超級智能體亮相,實現(xiàn)分鐘級專業(yè)軟件交付
人工智能技術
更多>>- 外灘大會首發(fā)! 螞蟻密算推出AI密態(tài)升級卡 實現(xiàn)零改動“即插即用”
- 騰訊優(yōu)圖攜Youtu-Agent開源項目亮相上海創(chuàng)智學院首屆TechFest大會
- 2025外灘大會:王堅暢談AI變革,普天科技錨定空天算力新賽道
- 騰訊正式開源Youtu-GraphRAG,圖檢索增強技術迎來落地新突破
- 聲網兄弟公司 Agora與OpenAI 攜手 助力多模態(tài) AI 智能體實現(xiàn)實時交互
- Qwen-Image-Edit 模型上線基石智算,圖像編輯更精準
- 火山引擎多模態(tài)數據湖落地深勢科技,提升科研數據處理效能
- 斑馬AI大模型:為每個孩子提供專屬學習方案