设为首页收藏本站

LUPA开源社区

 找回密码
 注册
文章 帖子 博客
LUPA开源社区 首页 业界资讯 开源资讯 查看内容

继Storm和Spark之后,Hortonworks添加对Kafka的支持

2014-9-1 15:20| 发布者: joejoe0332| 查看: 2986| 评论: 0|原作者: 仲浩|来自: CSDN

摘要: 据Gigaom消息,Hortonworks已经将Apache Kafka加入其Hadoop软件平台的技术预览版中。对比Spark,Kafka的在流行度上可能稍有逊色,但是却被广泛运用于一些大型网络公司的应用架构中。Kafka最初是由LinkedIn设计的实时 ...
  据Gigaom消息,Hortonworks已经将Apache Kafka加入其Hadoop软件平台的技术预览版中。对比Spark,Kafka的在流行度上可能稍有逊色,但是却被广泛运用于一些大型网络公司的应用架构中。Kafka最初是由LinkedIn设计的实时消息系统,当下已经被很多网络公司用于将Web应用消息快速传递到合适的数据服务中。

 

Kafka如何和其他服务整合


  除了Kafka之外,Hortonworks已经分别整合了Spark与Storm。在2013年底,Hortonworks宣布在收到大量的客户请求后,Hortonworks决定开始将Sotrm流处理引擎整合到该公司的Hadoop产品中。考虑到Hadoop的批处理设计,这项工作确实有着重要的意义。Hortonworks产品副总裁Bob Page表示:“ Storm在近日成为Apache软件基金会的孵化项目后,已然值得Hortonworks投资。”


 


  在Spark上,Hortonworks CTO Eric Baldeschwieler表示,Spark在不久的将来会取代Hadoop MapReduce,成为大数据生态圈内编写和分享算法的标准平台。


Eric在Spark Summit 2014上的讲义


  当然,除了Hortonworks,其直接对手Cloudera及MapR也有类似的操作。但是区别就在于,Cloudera等产品方式偏向于许可付费,而Hortonworks更像增值付费——提供了产品的开源版本,但是如果部署过大以致机构无法独立完成,那么可以寻求付费版帮助。(文/仲浩 审校/魏伟)


酷毙

雷人

鲜花

鸡蛋

漂亮
  • 快毕业了,没工作经验,
    找份工作好难啊?
    赶紧去人才芯片公司磨练吧!!

最新评论

关于LUPA|人才芯片工程|人才招聘|LUPA认证|LUPA教育|LUPA开源社区 ( 浙B2-20090187 浙公网安备 33010602006705号   

返回顶部