文章详情

  • 游戏榜单
  • 软件榜单
关闭导航
热搜榜
热门下载
热门标签
php爱好者> 资讯>Twitter即将开源即时数据处理工具Storm

Twitter即将开源即时数据处理工具Storm

时间:2011-08-05  来源:cnblogs

  开发者的好消息:Twitter刚刚在博客上宣布将在9月19日的Strange Loop大会上公布Storm的代码。这个类似于Hadoop的即时数据处理工具是BackType开发的,后来被Twitter收购用于Twitter。

  Twitter列举了Storm的三大类应用:

  • 信息流处理{Stream processing}: Storm可用来实时处理新数据和更新数据库,兼具容错性和可扩展性。
  • 连续计算{Continuous computation}: Storm可进行连续查询并把结果即时反馈给客户端。比如把Twitter上的热门话题发送到浏览器中。
  • 分布式远程程序调用{Distributed RPC}: Storm可用来并行处理密集查询。Storm的拓扑结构是一个等待调用信息的分布函数,当它收到一条调用信息后,会对查询进行计算,并返回查询结果。

  目前即时数据处理工具已经不少了,比如HStreaming(使用Hadoop),开源的S4和StreamBase,人们还需要一个开源的Storm吗?


  

相关阅读 更多 +
排行榜 更多 +
辰域智控app

辰域智控app

系统工具 下载
网医联盟app

网医联盟app

运动健身 下载
汇丰汇选App

汇丰汇选App

金融理财 下载