Twitter开放实时数据处理平台Storm源代码
时间:2011-08-05 来源:开源中国社区
【搜狐IT消息】北京时间8月5日消息,据国外媒体报道,Twitter周四宣布,公司将开放其实时数据处理平台Storm源代码,按计划将在9月19日圣路易斯市举行的Strange Loop会议上公布此代码。
据了解,Storm代码来自于Twitter上月收购的BackType,业内普遍认为这是Twitter为方便用户解析数据所作出的努力。来 自Twitter的尼森•马拉兹(Nathan Marz)在博客上表示:“这是一件非常重大的事情,至少对使用大量数据的极客来说是如此,因为相比大多数企业,Twitter要处理更多的实时数据。” 除此之外,马拉兹还指出Storm在业内有着相当广阔的使用前景,比如流处理、持续演算及远程处理命令等。
现在,Storm的发展势头相当强劲,Twitter开发的相应工具已使其功能变得更加强大。Storm类似于另一个开源数据操作平台 Hadoop,Storm也可能成为一项重要业务。据悉,雅虎正在考虑将Hadoop分拆以打造一个规模高达数十亿美元的业务。(凯文)
相关阅读 更多 +