日本富士通实验室（Fujitsu Laboratories）正试图解决处理分析工作量的大数据系统对更快处理的需求。今天，这家日本公司表示，他们发明了一种新技术，可以帮助在分布式存储系统中高速处理大数据，在分布式存储系统中，信息存储在多个驱动器上。这项新技术是在开源的Ceph分布式存储框架上实现的，富士通认为它运行良好，可以消除服务器试图从此类存储系统读取数据时出现的瓶颈。富士通的工程师在一篇博客文章中概述了它所称的"数据流计算"，称在存储和服务器之间流动的大量数据是导致分析系统延迟的主要原因。但通过在存储中处理这些数据，他们认为可以加快速度，因为一开始就不需要移动这些数据。Dataffinic计算通过网络连接多个服务器，同时保持原始存储功能。富士通说，这种方法将非结构化的视频和日志数据分解，并将其存储在一种可以更方便地访问和处理的状态下。富士通的工程师声称："这意味着分散在分布式存储中的数据片段可以单独处理，从而保持访问性能的可伸缩性，并从整体上提高系统性能。"。富士通的系统还可以预测数据分析时维护所需的存储资源需求。富士通的工程师写道："为了安全维护数据，存储节点面临各种系统负载，包括出错后的自动恢复处理、添加更多存储容量后的数据重新分配处理以及作为预防性维护一部分的磁盘检查处理。"这项技术对存储系统中发生的系统负载类型进行建模，预测在不久的将来将需要哪些资源。基于此，该技术控制数据处理资源及其分配，从而不会降低系统存储功能的性能。"富士通表示，其Dataffic系统的原型由5个存储节点和5个服务器组成，这些服务器通过每秒1千兆的网络连接起来。工程师们通过从50G的视频数据中提取人和车等对象来衡量它的数据处理性能。工程师们说，Dataffic系统只需50秒就可以处理这些数据，这比使用传统方法处理数据所用的500秒增加了10倍。富士通公司的工程师说："这项技术使爆炸性增长的数据得到可扩展和高效的处理。"。Constellation Research Inc.的分析师霍尔格·穆勒（Holger Mueller）说，富士通的新技术可能有用，因为存储是依赖大数据的下一代软件应用的关键。穆勒说："企业需要为时间分析、记录保存和法律监管保留数据。"因此，对于存储硬件制造商来说，创新和处理必须存储和处理的越来越多的数据是关键。很高兴看到研发投资在新的高性能存储选项中产生收益。"下一步将在商业应用中验证这项技术。如果它能可靠地工作，富士通计划在2019年之前将基于这种架构的新产品推向市场。资料图：富士通既然你来了…点击订阅我们的YouTube频道（见下文），显示您对我们使命的支持。我们的订户越多，YouTube就越会向你推荐相关的企业和新兴技术内容。谢谢！支持我们的使命：>>>>>立即订阅我们的YouTube频道。……我们还想告诉你我们的使命，以及你如何帮助我们完成它。SiliconANGLE Media Inc.的商业模式是基于内容的内在价值，而不是广告。与许多在线出版物不同的是，我们没有付费墙或横幅广告，因为我们想让我们的新闻保持开放，不受影响，也不需要追逐交通。那个新闻、报道和评论SiliconANGLE——以及现场报道，我们的硅谷工作室和cube环球巡演的视频团队提供的未经剪辑的视频需要大量的辛勤工作、时间和金钱。保持高质量需要赞助商的支持，他们与我们的无广告新闻内容的愿景一致。如果你喜欢这里的报道，视频采访和其他无广告内容，请花点时间看看我们的赞助商支持的视频内容样本，在推特上表达你的支持，然后继续回到SiliconANGLE。