美打破“太字节障碍” 创数据分类速度纪录
时间:2017-12-07

  科学网 - 美国打破“太字节屏障”记录数据分类速度纪录

  加利福尼亚大学洛杉矶分校的计算机科学家在60秒内创建了超过TB级数据的世界纪录,打破了Terabyte的障碍。他们还将世界纪录与世界杯数据类别基准赛中的最快数据分类率绑定在一起,在172分钟内得到1TB的数据分类,但只使用计算机资源的原始记录四分之一的计算机资源。

  寻求新趋势,效率和其他竞争优势的公司致力于开发一种对大量数据进行分类的方法,通常需要一个非常强大的数据中心。互联网的运作表明了数据分类的重要性。来自社交网络的广告,亚马逊网站的建议和谷歌的搜索结果都来自高达PB级数据集的分类,1个节拍字节等于1000兆兆字节。

  加州大学圣地亚哥分校研究项目负责人兼计算机科学教授Amin Vaidat表示,如果一家大公司需要查找所有相关的网页或产品销售情况,则需要对数据集进行排序击败字节,数据集本身可以每天以千兆字节增长。公司正在不断地将数据分类的数量和速度推到极限。 Watard认为实时数据分析需要更好的分类技术。在数据中心,分类往往是许多更高级活动的瓶颈。

  计算机科学家的数据调度之间的最大区别与其他使用现成的数据库软件的游戏不同,它们之间最大的区别在于,在TB和beat-byte类中,数据远远超过了计算机必须对容量进行分类的内存。为了建立自己的大量数据分类系统,Wadat设计了一个高速平衡的计算机系统。所谓平衡系统是指系统的内存,存储和网络带宽等技术资源得到充分利用,以免浪费。

  为了突破TB,Vaadat构建了一个包含52个计算节点的计算机系统,每个具有两个4核处理器的服务器,一个24千兆字节内存,一个每块500GB硬盘的16个块构成了存储空间。作为合作者,美国的思科系统公司向研究团队提供了Nexus 5020交换机。

  美国加州大学圣地亚哥分校(英语)

  美国零排放电动摩托车速度240公里的速度纪录

  英国汽车每百公里225公里的速度突破速度纪录

  自然方法论:蛋白质结构分析和速度测定的新纪录

  特别声明:本文仅为传播信息的目的转载,并不代表本网站或其内容的真实性;如从本网站转载的其他媒体,网站或个人将被保留在本网站上,并对版权拥有法律责任;如果您不希望被转载或联系转载稿费等事宜,请与我们联系。