主页 > imtoken钱包苹果版怎么用 > 创新存储架构突破IPFS算力瓶颈 西部数据技术探索

创新存储架构突破IPFS算力瓶颈 西部数据技术探索

imtoken钱包苹果版怎么用 2023-09-03 05:08:12

项目投资找A5快速获取精准代理商名单

随着疫情趋于稳定,2021 CITE也于上周五在中国创新之都深圳国家会展中心拉开帷幕。一场罕见的全球疫情过后,数据的价值被进一步放大。在大数据强大算力的支撑下,智慧医疗、AI分发、在线教育、云监管等一系列基于数据存储的服务都在疫情中。它实现了爆发式增长,让越来越多的从业者认识到数据的真正含义。

在此背景下,全球各大数据存储企业齐聚深圳CITE,出席深圳国际大数据与存储峰会,分享大数据与存储行业的行业发展和行业趋势。作为数据基础设施提供商,西部数据也与众多合作伙伴一同出席了此次峰会。同时,西部数据副总裁、中国业务总经理刘刚先生发表了《创新存储架构突破IPFS算力瓶颈》的主题演讲,引发业界热议。

01 迭代存储架构高效存储数据,撬动数字经济新动能

刘刚先生一上台,就以一组数据作为介绍,与在场的观众分享了大数据存储当前和未来的发展趋势。

通过数据表可以发现几个有趣的现象小份额算力,在HDD方面,“2024年,以HDD为代表的大数据预计增长到1.62ZB,从现在到2024年,年增长率为30%左右”,“以SSD为代表的快数据方面,预计2024年快数据存储量将达到333EB,年增长率接近50%。” 数据或快速数据具有相当大的生命力和潜力。

每年产生的数据如此之多,堪比石油和黄金,有多少是安全有效地存储的?答案大约是1.5%,“因为2024年产生了143ZB的数据,大数据只存储了1.62ZB和333EB(0.333ZB)的快数据,所以总量不到当年生成数据的1.5%。”

那么为什么剩下的 98% 以上的数据不能安全高效地存储呢?原因是存储架构过时,存储技术过时。刘刚先生表示小份额算力,我们需要创新存储架构,存储和挖掘更多海量数据。只有这样,才能更好地利用数据,发挥数据经济的新动能。

02 去中心化IPFS架构降低存储成本创新存储架构

面对新兴的存储需求,存储架构的迭代创新也面临诸多挑战,刘刚先生总结道,“综上所述,创新存储架构的挑战在于用户既需要大容量、快速访问、又需要低成本“成本,低功耗。那么有没有一种存储设备或者存储介质可以同时满足这四个方面的需求呢?”

事实上,无论是存储设备还是存储介质,都几乎很难找到一个完美的解决方案,能够满足这四个方面的需求。但是当你从一些存储设备和介质中分离出来,回归到存储架构的整体或系统创新上时,你会发现这个棘手的问题是有可能解决的。

其中,以去中心化为特征的IPFS存储架构,与传统的中心化云存储服务商相比,可以显着节省其服务提供成本,从而降低整个系统的存储成本。

03 大数据存储解决方案:企业级高密硬盘

接下来,刘刚从传统大数据存储和新兴快速数据存储两个方面为在场的业内同仁分享了西部数据的一些技术探索。

在分享技术探索之前,刘刚还介绍了一个新的概念和理解,他说,“数据是有价值的,数据也是分层的。我们简单地把它分为五层,包括极热数据、热数据、暖数据、冷数据。”数据和极冷的数据。”

根据不同的数据层,在数据时延、应用场景和成本制造等方面存在明显差异。就大数据存储而言,基于其写入量小、读取量大、数据量大的应用特点,西部数据将其划分为极冷数据和冷数据类别,提供Ultrastar DC HC650业界最高单盘2.2TB,总容量20TB,定位极冷数据的SMR HDD,更低的TCO&Watt/TB,更小的体积可以大大节省大企业的采购和运维成本数据存储。

当然,对于对硬盘有一定性能要求的数据中心,西部数据也提供了性能更强的Ultrastar DC HC550,存储容量依然夸张。该硬盘采用CMR架构,并通过三级磁臂设计进一步改进。硬盘性能和容量也达到了18TB,可以满足以IPFS为代表的众多服务商的存储需求。

无论是18TB还是20TB,西部数据提供的更大容量的单盘HDD都能显着提高单位功耗,降低服务器基准成本和服务器总拥有成本,并且还率先得到了包括云服务提供商在内的云服务商的验证和验证投递箱。适用。

04 快速数据存储解决方案:闪存优势+垂直整合

对于追求高性能计算的基于SSD的密集型工作负载,或主流的读写平衡工作负载,西部数据仍有一系列针对性的解决方案。

无论是密集型还是平衡型混合,背后都需要高性能SSD的硬件支持。西部数据在SSD领域拥有多年的研发经验和深厚的技术积累。

首先是关于SSD中NAND闪存的输出。SSD的核心成本在于NAND闪存,西部数据作为全球领先的NAND原厂,与合作伙伴铠侠一起占据全球三分之一的原厂份额,西部数据稳占NAND行业领先地位NAND技术投资承诺使其在NAND闪存的制造和生产能力方面拥有绝对的话语权。

其次,在闪存技术方面,刘刚先生表示,“我们刚刚发布了第6代3D闪存技术,162层3D闪存技术,将进一步缩小芯片尺寸,降低成本,提高性能。其程序性能可提升两倍以上,输入输出IOPS提升约66%”,随着第六代3D闪存的问世,西部数据将继续保持在NAND领域的领先地位。

最后,更关键的是垂直整合优势。SSD作为一款高度集成的产品,不仅要求每个组件都具有高品质和高性能,还需要出色可靠的校准和优化,以发挥所有组件的潜力。西部数据将完全独立的NAND芯片、SSD主控和固件合二为一,可以轻松完成产品校准和优化,进一步提升SSD产品的性能和稳定性。

因此,无论是读写均衡的混合型工作负载,还是密集型工作负载,西部数据都有能力匹配并提供相应的SSD来满足客户的需求。

05 IPFS存储创新解决方案及合作伙伴解读

如果将上述存储技术和存储架构应用到IPFS领域,又能产生哪些新的应用呢?刘刚分享道,“目前,IPFS服务商的存储痛点主要包括数据吞吐量低、空间利用率低、扩容困难、总体拥有成本高、运维效率低、故障惩罚高,但通过一个西部数据提供的一系列新的存储架构和新的存储产品,可以有针对性地解决上述许多问题。”

刘刚再次分享并推荐了众多与西部数据共同搭建展览的IPFS合作伙伴,并通过他们的案例为从业者提供了相应的IPFS存储解决方案。

首先是西部数据、星辰天合、浪潮联合推出的IPFS解决方案。通过部署西部数据Ultrastar DC HC550 18TB硬盘,存储容量显着提升,集群节点数量减少的同时,也节省了相应的能耗、机柜空间等成本。;

其次,西部数据与山岩数据联手赋能IPFS存储。西部数据与山岩数据联合推出了集山岩MOS、Ultrastar DC SN840/640、Ultrastar DC HC550和JBOD存储于一体的海量对象存储系统。该平台的 IPFS 解决方案。通过构建高性能、大容量、低成本、运维简单的存储解决方案,大大降低IPFS服务的总拥有成本,全面提升经济效益。

<西部数据Ultrastar DC SN840 NVMe SSD和西部数据Ultrastar DC HC550 18TB HDD>

最后,西部数据还携手长城超云,打造IPFS“新范式”,携手Smart Company提供西部数据存储解决方案,进一步提升用户效果。

“所以总结一下,对于Web3.0或者IPFS的基础架构,对于它的存储集群,我们有高密度磁盘扩展柜、大容量18T硬盘、Ultrastar DC SN640 NVMe SSD。一个缓存。

对于其计算集群,我们有 Ultrastar DC SN640 NVMe SSD 和 Ultrastar DC SN840 NVMe SSD 写入密集型 SSD。"

在主题演讲的最后,刘刚得出结论,西部数据可以为不同的用户群体提供多样化的存储解决方案。同时,西部数据还可以在IPFS计算和存储优化方面进行更多的技术合作,共同推动未来数据存储架构的激活和发展。

申请创业报告,分享创业好点子。点击这里一起讨论新的商机!