如何评估大数据应用的存储系统

日期: 2013-01-16 作者:John Webster翻译:刘前程 来源:TechTarget中国 英文

应该怎样评估大数据应用的存储系统?

    分析师John Webster表示,有两种大数据应用程序。一种是用于工业上的大容量应用程序的存储,比如媒体和娱乐、石油和天然气勘探以及生命科学;另一种是分析应用程序。对于大容量应用程序,有两个主要的问题:带宽需要传送通常在这种环境里发现的大文件,还要能够在文件数量增长而又不减慢访问进程的情况下支持大量的文件。带宽问题是由传送单一文件所需的带宽和传送很多文件所需的总带宽来衡量的。对于超大容量的环境(至少在数百TB级别以上),可能有成百上千的文件。在一些文件系统中,随着文件数量的增长,又由于所用的表结构,访问进程会减慢。当选择存储文件系统时,无论是附属SAN存储服务器还是横向扩展NAS服务器,重要的是要知道在不影响性能的情况下,能够支持的文件的最大数量。

    大数据更普遍应用于分析。Hadoop是经常被提及的大数据分析平台。对于这些应用程序,强调的是信息分析的速度和实时性。从存储系统的角度来看,首先关注的应该是一个分析系统用户体验的响应时间。其中响应时间应该是从存储设备开始传送和传送到存储设备的总时间。仅使用存储系统中的缓存的方法不应该再用了;真正的工作是把数据存储到设备和从设备中检索。使用缓存就能完成很多IPOS计算。当然,关于容量和吞吐量(持续带宽)的其它要求也很重要。

我们一直都在努力坚持原创.......请不要一声不吭,就悄悄拿走。

我原创,你原创,我们的内容世界才会更加精彩!

【所有原创内容版权均属TechTarget,欢迎大家转发分享。但未经授权,严禁任何媒体(平面媒体、网络媒体、自媒体等)以及微信公众号复制、转载、摘编或以其他方式进行使用。】

微信公众号

TechTarget微信公众号二维码

TechTarget

官方微博

TechTarget中国官方微博二维码

TechTarget中国

电子邮件地址不会被公开。 必填项已用*标注

敬请读者发表评论,本站保留删除与本文无关和不雅评论的权力。

翻译

刘前程
刘前程

TechTarget网站编辑

相关推荐

  • 大数据给数据中心带来哪些改变?

    大数据时代的来临首先对数据中心行业产生巨大影响。企业需要的是可扩展的存储解决方案,并且与业务一起发展,另外,安全问题已提上日程。

  • 大数据时代的Lambdas

    事件触发式的计算功能融入到数据中心存储中,这加快了智能化的发展。很快人工智能技术就会告诉我们如何实现基础架构的自我生命周期管理。

  • 是你吗?!细数2017年数据存储领域最值得关注的潜力股(十四)

    SearchStorage发布本年度存储领域最有前途的创业公司排行榜,印证了我们在与数据中心管理员和供应商们的讨论中感受到的趋势。我们评选出的存储新人最终名单中的大多数都是在过去一个日历年年诞生的。虽然这些初创公司形势看好,但未来的路仍然艰辛难料。

  • 触手可及的云

    今天,中国的云计算技术发展到了哪一阶段?如果你在近期参加了在上海国际会议中心举办的“全球云计算大会—上海站”,一定会有所感悟。