西部数据分层存储架构,实现最佳存储效果

SSDFans 2021-01-20 00:00


点击蓝字
关注我们



2021年1月14日,西部数据以“引领云端存储,改变无限可能”为主题的云存储峰会在线上举行。为我们介绍了随着数据的爆炸式增长和存储需求的巨变,西部数据作为基础架构供应商,如何为存储赋能。提出创新性解决方案,满足不同场景下的存储需求。


一、快速演进的数据存储需求


随着第三平台技术的发展和应用,云数据中心产生的数据呈现爆炸式增长,同时,未来还会有更多的边缘数据中心出现。随着智能IoT设备使用频率的增加,智能家居、自动驾驶汽车、物联网等将越来越普及,机器将产生90%的数据,而产生的数据量将在2023年超过102个ZB。这些快速演进的数据存储场景加快了存储步入ZB级时代的步伐。


在大数据时代,面临数据量的更大规模爆发,企业级存储需求大规模增长。



企业级存储市场需求趋势图


企业级固态硬盘市场趋势


据称,PCIe 会以40%以上的年增长率增长,主流服务器在2021年仍然会以PCIe Gen3为主。和SAS/SATA相比,PCIe Gen3具有优越的性能和低延迟,在替代SAS/SATA中会扮演主要角色。

 

数据的大规模增长也对企业级存储提出了更大的挑战:


  • 数据增长迅速:更多的数据来源,更大的容量需求;

  • 存储性能需求倍增:更低延时,更高IO,更高带宽;

  • 追求极致TCO:更低的单位容量成本,更低的管理维护成本 ;

  • 构建绿色能耗体系 :更低W/IO & W/TB, 更低PUE。


西部数据公司技术及战略总裁Siva Sivaram博士提出在闪存中还没有碰到摩尔定律的天花板,因为我们可以从不同维度扩展缓存。



为了保证数据存储的速度需求和安全要求,西部数据革命性地将存储核心优势应用于围绕数据的其他应用程序。


二、创新存储架构


西部数据公司高级副总裁兼中国及亚太地区总经理 Steven Craig表示:面对全球市场需求更迭及随之而来的诸多挑战,西部数据作为数据基础架构供应商,半个世纪以来不断缔造创新、不断突破技术的界限,持续为客户提供先进的解决方案。我们以行业领先技术、独有优势、定制化服务及解决方案为存储赋能,满足客户各项数据存储需求,在数字化时代下与客户及各界合作伙伴一同拥抱机遇,实现共赢。针对企业级用户,我们建议以极热存储、热存储、温存储、冷存储和极冷存储划分数据,对不同特性的数据进行相对应的分层存储,从而满足数据存储在容量、性能、成本及能耗等方面的多样化需求。



  • 极热存储:需要使用DRAM实现,面向OLTP、DSP、自动驾驶等应用场景。

  • 热存储:使用高性能SSD满足热存储的需求,典型应用场景包括OLTP、DSP和自动驾驶等。

  • 温存储:面向传统企业应用,典型应用场景包括OLAP、AI 训练等。使用主流SSD或HDD。

  • 冷存储:面向备份,大数据分析,AI训练等领域。使用CMR HDD。

  • 极冷存储:面向金融数据、基本医疗资料、广电行业等历史数据长期存档需求。使用SMR HDD。


西部数据公司副总裁兼中国区业务总经理刘钢发表了题为“创新存储架构,迎接数智未来”的精彩演讲。他表示分层存储架构是大势所趋,在数据爆发式增长的时代,需要根据不同的应用场景和需求提供不同的存储解决方案,西部数据分层存储的创新架构有效实现了降本增效,以业界领先的技术和产品满足客户伙伴对于数据存储多样化的需求。



西部数据拥有市面上容量领先的HDD,面向的目标市场包括超大规模数据中心和云计算。2019年9月,西部数据发布了20TB Ultrastar DCHC650主机管理SMR HDD和16TB与18TB Ultrastar DCHC550 CMR HDD,且现已出货,是优先进入商业化实施阶段的EAMR技术。凭借西部数据HelioSeal技术提供的出色功耗以及机械创新(例如提高磁头定位精度并提供更大容量功能的TSA),这些HDD可提供领先的面密度,九磁碟硬盘还使客户能够更有效地配置和扩展数据中心环境,同时降低总成本。


(从左到右依次为:西部数据Ultrastar DC HC550 HDD 16TB、Ultrastar DC HC550 HDD 18TB和Ultrastar DC HC650 HDD 20TB )


  • 西部数据将市场领先的硬盘创新技术——包括能量辅助磁记录(EAMR)技术、业界领先的三阶寻轨定位系统(TSA) 以及第六代HelioSeal技术扩展到强大的数据中心产品组合中,旨在提供更高的面密度和更低的总体成本 (TCO),以满足客户和市场的多样化需求;

  • 自2020年3月份开始,新款16TB和18TB Ultrastar DC HC550 CMR HDD已经向部分超大规模数据中心和企业级OEM客户发货。西部数据目前已经向云计算、大型企业级客户及其他数据中心架构师开放供货,以助力其实现大容量、低功耗的高效基础架构设计;


西部数据的固态硬盘产品组合可以为客户提供更优的存储解决方案,从SN640的主流工作负载,到近期发布的新款Ultrastar DC SN840 NVMe固态硬盘都具有最佳的计算存储和缓存性能。其数据中心产品组合的深度和广度使西部数据能够在合适的时间提供所需的解决方案,帮助所有数据中心客户有效应对他们的数据基础架构挑战。



(从左到右依次为:西部数据Ultrastar DC SN640 NVMe SSD以及Ultrastar DC SN840 NVMe SSD)


  • Ultrastar DC SN640 NVMe SSD:用于服务器和云,高达469K IOPS,适用于70%读30%写混合工作负载;

  • Ultrastar DC SN840 NVMe SSD:最高可达50%读50%写的工作负载,计算高达780K IOPS,旨在加速云计算、确保负载着关键业务应用的服务器运行。


三、用技术控制成本


任何产品都需要考虑成本问题,西部数据公司副总裁兼中国区业务总经理刘钢表示要用技术控制总成本。构建现代云数据中心的一个考量核心是单位TB价格( $/TB),而TCO则更能体现准确的数据中心运营成本:TCO 的降低并不限于降低 $/TB。每个硬盘的容量越大,意味着更少的服务器拥有更大的储存容量,从而节省资本支出和运营成本。例如从14TB迁移到18TB呈现出显著的TCO收益:服务器减少了22%;TCO降低了11%。鉴于数据中心占用空间有限,通过更高的HDD容量进行更密集的存储部署,还可以产生更多的收入。



存储服务器的成本通常要求控制在数据中心总体运营成本的60%以内。而更高容量的HDD可以更有效地平衡这一需求。西部数据持续进行多项技术的创新,例如能量辅助、机械设计、材料和记录技术,帮助所有数据中心客户,无论是超大规模云客户、大型企业还是中小企业来有效应对他们的数据基础架构挑战。


西部数据提出,eSSD或将很快取代PE HDD。从性能上看,eSSD的顺序读写速度都比PE HDD高得多,其中,顺序读速度比PE HDD高出十倍。从2020年第二季度到第三季度,在数量上,PE HDD的市场下降13%。eSSD将成为更好的技术选择。



四、合作赋能未来


会上,西部数据还邀请了行业合作伙伴杉岩数据和UCloud进行案例分享。


杉岩数据成立于2014年,经过六年多时间的发展,无论是在产品的竞争力,还是在市场的覆盖方面,都取得了较好的成果。目前在资本市场做完了四轮融资,已经累计融资金额超过3个亿。杉岩数据主要面向两个大的市场,一个是云计算市场,一个是大数据市场,来打造其产品矩阵。2017年,杉岩数据就与西部数据联合成立了“紫光西数&杉岩数据联合创新实验室”。


杉岩数据CEO陈坚表示,杉岩数据和西部数据的合作重点是SSD,因为SSD已经成为了主打性能场景下存储解决方案必须的一种介质。杉岩数据很在乎对SSD benchmark的测试,主要是指性能和QoS,还有IO一致性,基于此和西部数据合作,共同打造全闪存云存储解决方案在杉岩数据&西部数据技术方案合作全闪存云存储解决方案中,搭配24片西部数据Ultrastar DC SN640 NVMe SSD产品,为前端云主机提供高带宽低延迟的全闪存储资源,成功实现了弹性扩容、高可靠性和低成本的客户收益。


杉岩数据采用了西部数据JBOD的方案来解决大数据场景,这是很高密的存储盒子,把NVMe的SSD的资源进行池化。实际上把磁盘采用JBOD的方式,也可以做很高密度资源的池化。再通过杉岩的软件定义存储的软件,把多个盒子(至少是100个以上的盒子)聚合起来形成更大存储的资源池,从小的资源池分层到更大的存储资源池。为用户提供了真正能够做到很高密度、很高性价比的IPFS存储的解决方案,这一点杉岩数据跟西部数据都表示非常有信心,也会给客户主推的方案。


UCloud是一家中立、安全的云计算服务提供商,深度了解政府、传统企业、互联网等领域客户需求及业务场景,提供公有云、混合云、私有云、专有云,以及数据开放平台、AI平台在内的综合性行业解决方案。目前已经服务了上万家企业客户,200多家上市公司,遍及政府、教育、医疗、金融、制造、互联网等领域。


UCloud 系统工程师周庆介绍,UCloud新一代归档存储在国内率先采用了西部数据的高密JBOD机型和SMR盘为存储底层提供硬件支持。与36盘传统机型相比,采用高密机型SMR盘后,单位机架的存储容量提升5.375倍,硬盘数量增加59%,单块硬盘存储空间提升150%。西部数据将其领先的硬盘创新技术——包括能量辅助磁记录(EAMR)技术、三阶寻轨定位系统(TSA) 以及第六代HelioSeal™技术扩展到强大的数据中心产品组合中,帮UCloud获得了更高的面密度和更低的成本(TCO),满足了UCloud在性能、容量、TCO层面的多样化需求。


UCloud也表示,未来将继续深化与西部数据在云存储领域的业务合作,持续致力于数据基础架构的发展,共同推动云存储生态圈的建设与繁荣,为社会经济的数字转型升级贡献力量。


五、应对挑战,迎接未来


作为领先的数据基础架构公司,西部数据拥有从芯片到系统的全线存储方案。为客户提供获取、保存、访问和转换数据的解决方案。西部数据拥有独特的设计、调试和优化能力,覆盖各个产品线和技术堆栈,通过不断扩展创新领域,推出针对性设计的产品,更充分地满足在当下和未来以数据为中心的环境,对性能、可靠性、总体成本和可持续性的需求。




为了更加靠近中国乃至整个亚洲市场用户,西部数据还成立了上海实验技术中心,这是一个提供本地化服务的机构,它能为用户提供一个环境、设备良好的场所,帮助用户完成前端测试、验证,评估产品的性能,完成不同重复实验,最终帮助用户更快地把西部数据产品投入运营当中。


西部数据作为数据基础架构供应商,是数字化进程中的基石企业,一直基于创造数据繁荣的愿景,积极探索创新,突破科技边界。西部数据将不断以更为创新、高效的存储解决方案,持续满足多元、快速变化的需求,积极携手各界的业务合作伙伴拥抱新常态下的新需求、新趋势,协力创造和迎接美好的数字化未来。



高端微信群介绍

创业投资群


AI、IOT、芯片创始人、投资人、分析师、券商

闪存群


覆盖5000多位全球华人闪存、存储芯片精英

云计算群


全闪存、软件定义存储SDS、超融合等公有云和私有云讨论

AI芯片群


讨论AI芯片和GPU、FPGA、CPU异构计算

5G群


物联网、5G芯片讨论

第三代半导体群

氮化镓、碳化硅等化合物半导体讨论

储芯片群

DRAM、NAND、3D XPoint等各类存储介质和主控讨论

汽车电子群

MCU、电源、传感器等汽车电子讨论

光电器件群

光通信、激光器、ToF、AR、VCSEL等光电器件讨论

渠道群

存储和芯片产品报价、行情、渠道、供应链




< 长按识别二维码添加好友 >

加入上述群聊




长按并关注

带你走进万物存储、万物智能、

万物互联信息革命新时代

微信号:SSDFans
SSDFans AI+IOT+闪存,万物存储、万物智能、万物互联的闪存2.0时代即将到来,你,准备好了吗?
评论
  • 2024年是很平淡的一年,能保住饭碗就是万幸了,公司业绩不好,跳槽又不敢跳,还有一个原因就是老板对我们这些员工还是很好的,碍于人情也不能在公司困难时去雪上加霜。在工作其间遇到的大问题没有,小问题还是有不少,这里就举一两个来说一下。第一个就是,先看下下面的这个封装,你能猜出它的引脚间距是多少吗?这种排线座比较常规的是0.6mm间距(即排线是0.3mm间距)的,而这个规格也是我们用得最多的,所以我们按惯性思维来看的话,就会认为这个座子就是0.6mm间距的,这样往往就不会去细看规格书了,所以这次的运气
    wuliangu 2025-01-21 00:15 581浏览
  •     IPC-2581是基于ODB++标准、结合PCB行业特点而指定的PCB加工文件规范。    IPC-2581旨在替代CAM350格式,成为PCB加工行业的新的工业规范。    有一些免费软件,可以查看(不可修改)IPC-2581数据文件。这些软件典型用途是工艺校核。    1. Vu2581        出品:Downstream     
    电子知识打边炉 2025-01-22 11:12 289浏览
  • 数字隔离芯片是一种实现电气隔离功能的集成电路,在工业自动化、汽车电子、光伏储能与电力通信等领域的电气系统中发挥着至关重要的作用。其不仅可令高、低压系统之间相互独立,提高低压系统的抗干扰能力,同时还可确保高、低压系统之间的安全交互,使系统稳定工作,并避免操作者遭受来自高压系统的电击伤害。典型数字隔离芯片的简化原理图值得一提的是,数字隔离芯片历经多年发展,其应用范围已十分广泛,凡涉及到在高、低压系统之间进行信号传输的场景中基本都需要应用到此种芯片。那么,电气工程师在进行电路设计时到底该如何评估选择一
    华普微HOPERF 2025-01-20 16:50 178浏览
  • 嘿,咱来聊聊RISC-V MCU技术哈。 这RISC-V MCU技术呢,简单来说就是基于一个叫RISC-V的指令集架构做出的微控制器技术。RISC-V这个啊,2010年的时候,是加州大学伯克利分校的研究团队弄出来的,目的就是想搞个新的、开放的指令集架构,能跟上现代计算的需要。到了2015年,专门成立了个RISC-V基金会,让这个架构更标准,也更好地推广开了。这几年啊,这个RISC-V的生态系统发展得可快了,好多公司和机构都加入了RISC-V International,还推出了不少RISC-V
    丙丁先生 2025-01-21 12:10 1112浏览
  • 不让汽车专美于前,近年来哈雷(Harley-Davidson)和本田(Honda)等大型重型机车大厂的旗下车款皆已陆续配备车载娱乐系统与语音助理,在路上也有越来越多的普通机车车主开始使用安全帽麦克风,在骑车时透过蓝牙连线执行语音搜寻地点导航、音乐播放控制或免持拨打接听电话等各种「机车语音助理」功能。客户背景与面临的挑战以本次分享的客户个案为例,该客户是一个跨国车用语音软件供货商,过往是与车厂合作开发前装车机为主,且有着多年的「汽车语音助理」产品经验。由于客户这次是首度跨足「机车语音助理」产品,因
    百佳泰测试实验室 2025-01-24 17:00 135浏览
  • 飞凌嵌入式基于瑞芯微RK3562系列处理器打造的FET3562J-C全国产核心板,是一款专为工业自动化及消费类电子设备设计的产品,凭借其强大的功能和灵活性,自上市以来得到了各行业客户的广泛关注。本文将详细介绍如何启动并测试RK3562J处理器的MCU,通过实际操作步骤,帮助各位工程师朋友更好地了解这款芯片。1、RK3562J处理器概述RK3562J处理器采用了4*Cortex-A53@1.8GHz+Cortex-M0@200MHz架构。其中,4个Cortex-A53核心作为主要核心,负责处理复杂
    飞凌嵌入式 2025-01-24 11:21 201浏览
  • 书接上回:【2022年终总结】阳光总在风雨后,启航2023-面包板社区  https://mbb.eet-china.com/blog/468701-438244.html 总结2019,松山湖有个欧洲小镇-面包板社区  https://mbb.eet-china.com/blog/468701-413397.html        2025年该是总结下2024年的喜怒哀乐,有个好的开始,才能更好的面对2025年即将
    liweicheng 2025-01-24 23:18 216浏览
  • 临近春节,各方社交及应酬也变得多起来了,甚至一月份就排满了各式约见。有的是关系好的专业朋友的周末“恳谈会”,基本是关于2025年经济预判的话题,以及如何稳定工作等话题;但更多的预约是来自几个客户老板及副总裁们的见面,他们为今年的经济预判与企业发展焦虑而来。在聊天过程中,我发现今年的聊天有个很有意思的“点”,挺多人尤其关心我到底是怎么成长成现在的多领域风格的,还能掌握一些经济趋势的分析能力,到底学过哪些专业、在企业管过哪些具体事情?单单就这个一个月内,我就重复了数次“为什么”,再辅以我上次写的:《
    牛言喵语 2025-01-22 17:10 368浏览
  • 故障现象 一辆2007款日产天籁车,搭载VQ23发动机(气缸编号如图1所示,点火顺序为1-2-3-4-5-6),累计行驶里程约为21万km。车主反映,该车起步加速时偶尔抖动,且行驶中加速无力。 图1 VQ23发动机的气缸编号 故障诊断接车后试车,发动机怠速运转平稳,但只要换挡起步,稍微踩下一点加速踏板,就能感觉到车身明显抖动。用故障检测仪检测,发动机控制模块(ECM)无故障代码存储,且无失火数据流。用虹科Pico汽车示波器测量气缸1点火信号(COP点火信号)和曲轴位置传感器信
    虹科Pico汽车示波器 2025-01-23 10:46 224浏览
  •  万万没想到!科幻电影中的人形机器人,正在一步步走进我们人类的日常生活中来了。1月17日,乐聚将第100台全尺寸人形机器人交付北汽越野车,再次吹响了人形机器人疯狂进厂打工的号角。无独有尔,银河通用机器人作为一家成立不到两年时间的创业公司,在短短一年多时间内推出革命性的第一代产品Galbot G1,这是一款轮式、双臂、身体可折叠的人形机器人,得到了美团战投、经纬创投、IDG资本等众多投资方的认可。作为一家成立仅仅只有两年多时间的企业,智元机器人也把机器人从梦想带进了现实。2024年8月1
    刘旷 2025-01-21 11:15 880浏览
  • 随着AI大模型训练和推理对计算能力的需求呈指数级增长,AI数据中心的网络带宽需求大幅提升,推动了高速光模块的发展。光模块作为数据中心和高性能计算系统中的关键器件,主要用于提供高速和大容量的数据传输服务。 光模块提升带宽的方法有两种:1)提高每个通道的比特速率,如直接提升波特率,或者保持波特率不变,使用复杂的调制解调方式(如PAM4);2)增加通道数,如提升并行光纤数量,或采用波分复用(CWDM、LWDM)。按照传输模式,光模块可分为并行和波分两种类型,其中并行方案主要应用在中短距传输场景中成本
    hycsystembella 2025-01-25 17:24 228浏览
  • 项目展示①正面、反面②左侧、右侧项目源码:https://mbb.eet-china.com/download/316656.html前言为什么想到要做这个小玩意呢,作为一个死宅,懒得看手机,但又想要抬头就能看见时间和天气信息,于是就做个这么个小东西,放在示波器上面正好(示波器外壳有个小槽,刚好可以卡住)功能主要有,获取国家气象局的天气信息,还有实时的温湿度,主控采用ESP32,所以后续还可以开放更多奇奇怪怪的功能,比如油价信息、股票信息之类的,反正能联网可操作性就大多了原理图、PCB、面板设计
    小恶魔owo 2025-01-25 22:09 299浏览
  • 前篇文章中『服务器散热效能不佳有解吗?』提到气冷式的服务器其散热效能对于系统稳定度是非常重要的关键因素,同时也说明了百佳泰对于散热效能能提供的协助与服务。本篇将为您延伸说明我们如何进行评估,同时也会举例在测试过程中发现的问题及改善后的数据。AI服务器的散热架构三大重点:GPU导风罩:尝试不同的GPU导风罩架构,用以集中服务器进风量,加强对GPU的降温效果。GPU托盘:改动GPU托盘架构,验证出风面积大小对GPU散热的影想程度。CPU导风罩:尝试封闭CPU导风罩间隙,集中风流,验证CPU降温效果。
    百佳泰测试实验室 2025-01-24 16:58 100浏览
  • 高速先生成员--黄刚这不马上就要过年了嘛,高速先生就不打算给大家上难度了,整一篇简单但很实用的文章给大伙瞧瞧好了。相信这个标题一出来,尤其对于PCB设计工程师来说,心就立马凉了半截。他们辛辛苦苦进行PCB的过孔设计,高速先生居然说设计多大的过孔他们不关心!另外估计这时候就跳出很多“挑刺”的粉丝了哈,因为翻看很多以往的文章,高速先生都表达了过孔孔径对高速性能的影响是很大的哦!咋滴,今天居然说孔径不关心了?别,别急哈,听高速先生在这篇文章中娓娓道来。首先还是要对各位设计工程师的设计表示肯定,毕竟像我
    一博科技 2025-01-21 16:17 204浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦