看不到的技术仍在发展。在这样一个深海领域,一旦破坏性创新发生,它将带来新的浪潮。
“十年之前如果谁说,以后 PC 里不会有硬盘,可能没有人会相信。但事实上现在的 PC 很多都没有硬盘,而是 SSD。我认为五年之后 PC 里可能连 SSD 都没有了,全部会变成内存。”
“大内存”软件公司MemVerge的首席执行官范成功预测,该公司将于今年5月宣布新一轮战略融资。投资者包括英特尔,思科和其他行业巨头。融资金额为1900万美元。
范成功口中的“大内存”对于许多人来说也许是陌生的,但它与每个人都息息相关。它是MemVerge提出的有关计算新时代的概念。
要了解大内存,我们必须首先了解计算机的体系结构。简而言之,计算机中的数据存储是分级的。经常使用的数据放置在更昂贵的内存中,而不经常使用的数据放置在较便宜的硬件设备(例如硬盘和SSD)中(这些设备被专业人员统称为“存储”,与内存相对应)。原因很简单,无非就是“使计算更经济”。
内存很昂贵,因为它具有快速的访问速度,并且适合放置在cpu附近,以便cpu读取和写入常用数据。但是,用于制造内存的介质是易失性的,因此不能用作永久数据存储硬件。尽管存储访问速度很慢,但价格便宜并且可以永久保存数据。因此,它适合于存储不经常使用的数据。当CPU要访问存储中的数据时,存储将数据移交给内存,然后将内存移交给CPU。
大内存的来源是称为PMem(持久内存)的存储介质的诞生。用这种介质制成的硬件可以很好地集成内存和存储的优点。它具有低延迟和快速访问,并且不容易断电。与内存相比,相同大小的数据存储更便宜。这样,PMem硬件既可以执行计算,又可以承担存储责任。
可以预见,在未来的存储体系结构中,PMem媒体硬件将取代内存并压缩存储的价值,MemVerge称其为大内存时代。范成功预测,将来,应用程序都将在大内存上运行,并且存储可能很少使用。
英特尔是PMem的先驱。它早在20年前就开始进行试验,并于2019年推出了基于PMem的硬件“奥腾”。英特尔并不是一个孤独的早期采用者。除英特尔外,美光,海力士和其他硬件公司也在加紧布局。由于竞争条款的限制或研发周期的原因,目前市场上只有一个英特尔公司,但预计PMem硬件市场将在两年内迎来新一轮的竞争。
MemVerge的软件服务于这种爆炸性趋势。更准确地说,MemVerge为PMem数据中心提供了企业级解决方案,使现有软件可以在即将到来的新内存架构上更好地运行。
范成功认为,首先,新硬件需要一种新的编程模式,但是对于现有的企业级软件而言,重写的成本很高,因此需要用于中间层的迁移工具。第二,虽然当前的PMem媒体可以提供更大的容量,但是要完全有能力存储大规模数据,仍然需要跨机器链接,因此需要软件来合并硬件。此外,基于存储的数据服务一直是存储行业的重要组成部分,是新体系结构的重要要求。
为了对上述三个要求进行基准测试,MemVerge发布了一种称为“内存机”的产品,该产品为基于IntelOptane硬件的企业提供软件服务。目前,MemoryMachine已被金融和AI领域的一些客户使用。
对于企业而言,尝试新技术的动机通常源于实际业务中的痛点,尤其是在诸如大型内存之类的新架构上。MemVerge的客户之一是位于华尔街的一家投资银行。
在每日的股票市场中,该投资银行以每秒50,000次交易的平均频率进行股票交易。这些交易数据需要实时分发到200多个帐户中。其中一些帐户与交易相关,例如对冲基金,银行,他的一些交易员与系统相关,例如合法化的管理和风险评估。
在投资银行的这项业务中,系统延迟会影响真实货币的损益,因此他们不遗余力地减少了延迟。在Optane出现之前,银行系统中存在一种非常成熟的解决方案,称为“Pub/Sub”(Pub/Sub),该解决方案通过SSD添加了传统的网络解决方案,其延迟约为数百微秒。MemVerge为此存储库构建了OptaneRDMA解决方案,借助MemoryMachine的软件技术,它可以将延迟减少到大约3微秒。
同样在金融领域,数据中心停机时间恢复一直是令人头疼的问题。由于实时性高并发性,目前,在交易过程中,数据难以实时存储在非易失性存储器中,通常被称为“难以放置”,但被临时存储在记忆,等待交易日结束后,订单将被均匀放置。
出于安全原因,在事务期间仅放置一个日志。这样,如果系统在事务处理期间发生故障,并且内存中的数据丢失,则要恢复该数据,您需要根据日志从上次“公开”的时间点回滚,即前一天晚上。这种停机时间恢复通常是在小时级别,而事务是在数分钟内完成的。
PMem介质的存储可以有效解决此问题,因为所有数据都存储在大内存中,而且电源不易丢失,因此没有放置磁盘的操作。快速回滚高频快照,以解决数分钟内停机造成的数据恢复问题。
此外,在近年来炙手可热的AI领域,大内存也可以发挥作用。范成功介绍,在深度学习模型训练中,当模型的大小大于内存的大小时,AI模型的训练速度将受到数据传输速度的限制。这同样适用于影视动画,游戏等行业,可以有效解决大内存的应用。
目前,在MemVerge的客户中,除了金融机构外,还有诸如LinkedIn和TencentCloud之类的互联网公司,以及一些AI公司。这些对计算效率和可靠性有要求的公司已成为大内存时代的早期采用者。
在存储架构升级带来的变化中,MemVerge的业务只是其中的一小部分。基于新架构的数据服务和网络服务仍处于蓝海阶段。此外,存储体系结构的升级还为应用程序级别提供了更多的想象力。例如,更快的游戏体验是否可以产生新的游戏类别;AI计算速度的提高是否带来了成本的降低,以及是否将有助于AI技术在业界的普及。
普通消费者看不见的诸如存储介质之类的技术仍在发展。在这样一个深海领域,一旦破坏性创新发生,它将带来新的浪潮。就像移动互联网的诞生源于电容屏的发明一样,冯·诺依曼架构瓶颈的突破也使AI的广泛应用受益。PMem媒体存储器带来的惊喜尚未发现,隐藏的机会也在等待它打开。
uc电脑园提供的技术方案或与您产品的实际情况有所差异,您需在完整阅读方案并知晓其提示风险的情况下谨慎操作,避免造成任何损失。
浏览次数 28759
浏览次数 10632
浏览次数 8952
浏览次数 8110
浏览次数 5227
未知的网友