科技加速器 2020闪存峰会
查看更多
帖子

存储处理器释放闪存存储的全部潜力

现在是时候简化基础设施,停止在存储方面的过度投资,并更有效地扩大规模。这里有一些见解,以帮助您释放您的闪存投资的全部潜力。

下载演示:释放闪存的全部潜力

00:04史蒂夫·芬格赫特:谢谢你今天加入我们。我是普遍总统和首席商务官Steve Fingerhut。我很高兴帮助您释放您以数据为中心的ERA闪存存储。为了介绍普遍术,请符合首席执行官王子耶利弗勒。

00:21 Uri Beitler:谢谢你,史蒂夫。在创建Pliops的时候,我们仔细分析了计算、网络和存储三角关系中出现的关键数据中心趋势,意识到它们是一个碰撞的过程。如今,这些趋势正在加速,限制了数据中心的可伸缩性,并导致在低效的基础设施上花费数十亿美元的过度成本。Pliops已经开发了一种革命性的存储处理器,为今天和下一代数据中心弥补了这一差距,使…进化。

第一个重要趋势是采用flash,起飞与六倍flash用于数据中心今天比2015年,但这只是冰山一角随着指数的持续增长,直到2030年预计将增长超过40倍,占50%的存储,但这种容量只是等式的一部分,因为NVMe ssd提供的性能级别比hdd快三个数量级以上。

01:26乌兰巴托:当我们正在经历数据容量和性能的巨大增长时,应用程序也正在成为数据驱动的,并需要越来越多的数据。然而,通用cpu却停滞不前摩尔定律的下降未能提供所需的性能。基本的加速器已经存在用于分析和I/O闪存阵列,在Pliops中,我们将其提升到下一个层次,并发明了超快的键值加速引擎作为存储处理的基础,这消除了存储和数据库堆栈中的冗余。实时存储处理器是帮助现有和新兴存储系统架构解决主要数据中心挑战的关键组件。我们准备了一个短片来解释这些挑战的来源。

02:16说话者3(视频):SQL和NoSQL数据库等应用程序使用键值存储引擎来启用可变大小的对象。虽然在硬盘驱动器上没有计算上的挑战,但能够达到500K IOPS的SSD则是另一回事。考虑到flash的开销及其持久写入限制,压缩flash驻留数据的动机很强,但压缩和管理数据的计算成本都很高。Pliops storage Processor通过将键值存储卸载到专用硬件设备上的优化架构,通过将CPU利用率降低到典型软件解决方案需求的一小部分来降低效率并提高性能。Pliops加速了计算密集型功能,消除了瓶颈,结束了存储浪费,让您充分利用闪存投资。

03:14乌兰巴托:这些挑战不会消失,我们需要现在就解决它们,因为它们会导致整个堆栈的效率低下。我们今天看到的情况是,存储处于闲置状态,而所有者已达到最大限度,为了保持性能,软件采取捷径,将数据的读、写和存储放大到两个数量级。由于性能损失,许多公司避免使用高级数据保护和削减方案。

我们经常从客户那里听到的另一个例子是,为了克服性能问题,存储被过度供应,更不用说服务器的过度成本和维护了,我们也将这些负担转移到了处理器上。

03:53乌兰巴托:我们来看看它是如何相乘的。从数据开始,然后添加由于不理想的打包和合并而导致的碎片。另一层冗余来自于存储策略,这些存储策略要求在卷级为数据增长留出空间,然后将数据复制到A10,那么即使在考虑节点之间的镜像和复制之前,您也很容易获得比数据多6倍的物理存储。自然,存储架构师和他们的首席财务官们要求更好的方法。现在是释放你的SSD存储的全部潜力的时候了,Pliops在这里让它发生。

Pliops存储处理器优化了数据存储、管理、访问、分析和保护的方式,从而大大提高了性能、成本、持久性和功耗。Pliops存储处理器提供了适用于各种应用程序的通用价值,具有一体机式的加速。这使得跨数据中心部署它很有价值,也很容易。史蒂夫将更详细地解释存储处理器。把它拿走,史蒂夫。

05:02 SF:由于Uri。这是前面Uri提出的一个镜像,我们从低效、臃肿的SSD配置和Pliops数据保护开始,消除了镜像带来的浪费,并引入了高级的配置,以减少安全裕度和过度分配的层次,特别是在多租户环境中。最后,Pliops内嵌透明压缩将数据压缩到磁盘上的一小部分。

听起来像魔法吗?很接近,但它是真实的。让我们看看引擎盖下面。核心创新是基于硬件的键值存储。键值存储用于几乎所有的数据库,分析和软件定义的存储应用程序,它是一个复杂的软件来管理我们在早期动画中看到的:压缩,打包和合并,垃圾收集。这是非常复杂和低效的。

05:54科幻小说:Pliops已经开发出突破性的数据结构和算法,可以交付相当于数百个主机软件核心的数据。通过块接口可访问,这字面上作为一个块设备出现在系统中,这意味着这将加速任何应用程序。为了摆脱几十年的传统软件,Pliops提供了一个直接的KV接口,使用与您的软件相同的api。这是一个很容易的改变来增强你的软件。我们已经与合作伙伴合作,为几个应用程序做到这一点,这很容易,KV接口使用相同的api作为软件。让我们看看实际效果如何。

06:31 S3:键值存储在几乎所有数据库,分析和软件定义的存储应用程序中使用。运行此复杂软件时,通过CPU和系统资源过度使用。这导致不充分利用SSD存储能力的应用。当用超高效的KV发动机卸载到PLIOPS存储处理器时,图片显着提高。这将使系统资源能够以SSD从SSD提供更多的容量,而数据受到保护和加密。PLIOPS存储处理器可提供显着更高的性能,允许更多应用程序在主机上运行。

07:15科幻:PLIOPS存储处理器也很容易在您的首选系统中部署。我们的低调卡适合任何标准服务器。它适用于任何SSD,直接附加或分列。没有特殊的硬件要求,如对等支持或直接布线。简单。并且性能关闭了图表。在核心块I / O中,PLIOPS存储处理器提供大量性能并轻松处理随机写入。使用像MySQL,MongoDB和Cassandra这样的数据库,PLIOPS在降低延迟的同时,Pliops在实例密度下发挥着重大增加,因此您可以将系统推向最大,并仍提供极大的用户体验。

我们有一位特别嘉宾,彼得·扎伊采夫,Percona的首席执行官。彼得,你对Pliops存储处理器有什么看法?

08:07 Peter Zaitsev:现在,十多年来,我们一直在帮助许多领先的企业和互联网巨头在他们的开源数据库上取得成功。在这个行业中,有一件事一直在发生,而且还在继续发生,那就是数据的绝对爆炸。这意味着有很多关于如何以良好的性能和很高的效率处理这些数据的担忧。我认为这就是Pliops的创新之处。

现在,在过去十年左右的时间里,我们已经看到了从旋转硬盘到闪存和其他设备的转变固态存储的类型,对吧?这种转变带来了巨大的性能提升,对吧?但很多已经稳定了,因为我们仍然把这些存储设备当作哑块设备,这对数据库工作负载并没有太大帮助。我认为这是一个伟大的创新,Pliops带来,而闪存是愚蠢的,它实际上是聪明,它能够带一些数据库的处理需求与提供他们自己的键值界面,数据库可以使用,而不是一个愚蠢的块存储接口。

11 PZ:如果你认为一个人可能对数据库有什么担忧,特别是在闪存上,我看到他们有三个不同的桶。第一,当然是性能,响应时间,这些都是数据库用户所关心的。其次是空间利用率,因为闪存往往很昂贵。第三个,是flash特有的,写持久度或写放大度,因为flash能够处理的写操作越多,它的成本就越高。

普遍存储处理器是独一无二的,它能够帮助所有这些三个组件。根据我们的基准,它提供了更好的性能,随着吞吐量和降低延迟,它提供了更好的压缩,原生MySQL解决方案降低了存储要求,以及其减少的写入放大,这意味着相同的存储器将持续相同的存储更长,或者您可以将繁重的写作工作负载放在同一存储器上,而不会降低其寿命。

11:44科幻小说:谢谢你,彼得。复述,是一个极其流行的内存数据服务。挑战是,它需要所有数据的DRAM,这很昂贵。我们将性能与DRAM进行了比较,每个系统,Redis提供900,000 IOPS和1毫秒的四九个延迟。使用Flash版本,性能下降90%,延迟增长9次。

使用低成本数据中心SSD的PLIOPS,符合DRAM的性能和延迟,在第七次成本。通过利用PLIOPS的高性能和闪光灯的高容量,PLIOPS实现10-1服务器整合。这不是缓存的结果。在使用的测试中,从闪光灯提供90%的I / O.客户有兴趣使用VIOPS扩展,从内存速度访问几个数据到数百个Tberabytes。但是,请不要只是为了它,欢迎来到日本最大的托管服务产品开发副经理Takeshi Hasegawa。

51武长谷川:大家好,我是长谷川武。我之前在Fusion-io做过销售工程师。今天,我想分享我通过评估Pliops Storage Controller的发现。作为云计算提供商,毫无疑问,flash成本将占据系统的大部分。Pliops可以提高投资的利用率和性能,支持来自相同驱动器的可预测响应的更多并发用户。

22届:数据是透明压缩的,因此我们将有额外的可用容量。它还减少了写放大,后端flash持续时间更长。我们的一些客户有更好的NVMe flash服务器,但他们仍然希望提高数据库性能。他们可以升级什么?

根据我的基准测试结果,Pliops设备处理器是最好的,这要归功于它卓越的架构RAID 5执行优于典型的RAID 0配置。10年前,除了闪电侠,我从未见过这样的结果。Sakura有一个附属的软件定义存储公司,我们正在讨论恢复Pliops。我们看到了前面提到的好处,我们还研究了Pliops的键值存储API接口。一旦我们绕过6个文件系统和中断的接口移动了我们的原语,就能够在元数据处理上获得巨大的性能改进。我个人也很享受与Pliops团队一起工作的时光,并期待着部署。谢谢你!

十四37科幻小说:谢谢Havegawa San。我们刚刚开始了。PLIOPS存储处理器的一个主要好处是它将写入SSD的写入达到高达90%。对于QLC,关键挑战是它们有限的随机写性能和写入耐力。通过70/30工作负载,PLIOPS仅提供18倍的软件性能,无论是TLC还是QLC都将与PLIOPS执行相同,并增加高达10次的耐用性。PLIOPS还可以利用QLC SSD中的最低成本分区名称空间,无需软件更改。Optane具有惊人的性能和延迟,但PLIOPS不仅可以提高性能并降低延迟,它大大提高了每个核心的性能,从而为您的投资提供更多扩展。

15:34科幻小说:所有这些结果都具有高性能的内联压缩,因此您可以存储多达四倍的optane数据,将每GB的美元减少75%或更多。PLIOPS的创新架构使得驱动器失效保护在性能方面取得突破,消除了今天存在的权衡。不需要热备件,因此您可以获得完整的性能和投资耐力。

带ssd的RAID 5的另一个障碍是,当驱动器在降级模式和重建期间发生故障时,性能会受到巨大的打击。Pliops解决了这个问题,在驱动器故障和重构期间保持非常高的性能。

十六13科幻小说:这使得驱动器故障保护与使用RAID 10或放弃使用RAID 0相关。分布式存储系统还可以提高可靠性,消除故障驱动器的网络重建流量。

RAID 5最糟糕的部分是在降级模式下的性能,以及在重建故障驱动器时的性能。不仅存储性能低得多,CPU也很忙,占用了主机应用。Pliops实际上消除了这些权衡,因此存储性能仍然很高,并且您拥有CPU的全部性能。

现在,我很高兴地欢迎我们的主席阿里耶·梅吉。他是M-Systems的联合创始人,M-Systems是ssd的发明者,XtremIO是全闪存阵列的先驱。两年前,Aryeh获得了闪存峰会终身成就奖,因为他在突破性创新方面的工作,帮助闪存行业取得了今天的成就。

17:15 Aryeh Mergi:我希望你们和我一样对Pliops团队今天展示给你们的令人惊叹的技术和价值感到兴奋。在M-Systems和XtremIO,我们发明了关键的SSD技术,并率先将全闪存阵列引入数据中心。每个人都以自己的方式将flash行业带到许多业内人士认为不可能达到的新水平。

在闪存出现的最初几年,整个行业都在忙着解决闪存在现有和新应用中作为硬盘驱动器的伟大和更快的替代所面临的挑战。与的闪光而爆炸需要速度和密度,闪光不再是瓶颈。CPU和硬盘驱动器导出块API现在停止闪存从提供给他们的功能。

上午18:12:今天,有了Pliops,我们正在突破这些瓶颈,开发出新的存储计算加速技术,使性能达到新的水平,我们相信这将是所有下一代存储系统的关键组件。Pliops存储处理器与SSD和全闪存阵列在开始时共享许多相同的值。专注于易用性和交付突破性水平的客户利益。我邀请你加入我们的旅程,为以数据为中心的时代释放闪存的力量。

18:52 SF:还有很多东西要学。参加我们的会议。访问我们的虚拟展位,并访问pliops.com获取更多信息。谢谢你!

深入挖掘闪存

搜索灾难恢复
搜索数据备份
搜索聚合基础设施
关闭
Baidu