Cloudera为企业准备Hadoop

Cloudera扩展了其商业Hadoop包

本周二,Cloudera宣布推出了一套新的Hadoop管理工具,名为Cloudera Enterprise,公司将收取年费。它还更新了Hadoop的开源发行包。

这两个新版本,以及几家与数据管理软件供应商的新合作,表明该公司正准备向企业市场提供新兴的数据库技术,作为关系数据库的替代品。目前谷歌和雅虎等网络巨头大多使用这种技术。

Cloudera的首席执行官Mike Olson说:“我们相信不仅是大型网络公司,银行、医院和保险公司也会发现他们需要一起分析复杂的结构化数据,Hadoop就是为此而生的。”“Hadoop以一种新的方式解决了一个新问题。”

越来越多的非sql或NoSQLHadoop基于谷歌MapReduce,这是一个用于在大量计算机节点上并行处理数据的框架。Hadoop目前正作为一个开源项目由Apache软件基金会开发,它提供了传统关系数据库的替代方案,至少在分析大型、快速变化的数据集的情况下是这样。

Olson说,它既可以处理SQL数据,也可以处理非SQL数据,而且在服务器故障时比关系数据库更有弹性。

Cloudera正在为中层组织打包Hadoop,包括其Hadoop发行版和其新发布的管理工具集。Olson说,这两种包都可以让没有很多Hadoop深度技术经验的组织运行该软件。“有一种说法是,如果你有谷歌规模的数据,Hadoop就可以使用。很多用户只有几兆兆字节的数据需要分析。

Cloudera的Hadoop分发版(鼎晖)是一个预先集成的软件程序的开源包Hadoop常见,原名Hadoop Core。该包包括:Hive,提供数据仓库基础架构;HBase, Hadoop底层的数据库;用于map-reduce程序的编译器Pig;zookeeper是一种用于跨多个服务器运行应用程序的调度程序,还有MapReduce。

在最新发布的第3版中,该软件包包括三个公司在Apache V2开源许可下作为开源项目发布的程序。一个是Flume,它可以帮助将数据加载到Hadoop中。另一个新增加的是Oozie,这是一个工作流管理软件。最后是Hadoop User Environment (HUE)代码,它提供了一个管理Hadoop的用户界面。

HUE允许任何人构建针对分析师的应用程序。它知道如何与Hadoop集群对话,”Olson说。

Cloudera Enterprise包用额外的管理工具增强了CDH版本3。这个新软件不是开源的,它允许管理员通过使用轻量级目录访问协议来控制访问管理。还提供了用于提供资源、进行配置和性能监视的程序。

奥尔森不愿透露到目前为止,Cloudera从订阅费和咨询费中获得了多少收入,但他指出,该公司2010年第一季度的收入相当于2009年上半年的收入。奥尔森说,在不同的行业中,金融服务、电信、零售、政府和网络商务公司都对这项技术表现出了兴趣。

“各公司使用Hadoop做的事情各不相同。一般来说,这些人从很多地方获取大量数据,需要对其进行复杂的分析,”奥尔森说。“金融服务对使用Hadoop进行欺诈检测很感兴趣。在电信行业,确实需要优化网络,减少客户流失。”

除了提供这些软件包,Cloudera还一直在争取商业智能(BI)和数据管理软件供应商对Hadoop的支持。

奥尔森计划在他的主题演讲中宣布Hadoop峰会2010BI供应商MicroStrategy将支持Hadoop的使用。

另一个新的合作伙伴是Talend,一个开源数据集成软件供应商。该公司已经将其Talend集成套件扩展到与Hadoop数据库的接口。它的套件允许管理员从单个控制台管理和聚合多个数据源。Talend营销副总裁Yves de Montcheuil表示,使用Hadoop,该软件“可以本地插入或检索数据,并在Hadoop架构内处理数据”。

越来越多的公司正在为Hadoop准备开源或商业管理工具,Microstrategy和Talend也加入其中。上周,克劳德拉和奎斯特开始该项目旨在构建连接Hadoop和Oracle数据库的软件。5月,开放源代码的商业智能公司Pentaho宣布它的BI套件可以与Hadoop数据库兼容。

在IDG新闻服务的单独采访中,雅虎首席技术官Raymie Stata指出,Hadoop可以减少对Hadoop的需求建筑用于分析大型数据集的超级计算机。传统上,大数据集从存储器转移到超级计算机,这是一组服务器池,以供分析。相比之下,Hadoop将分析计算转移到数据所在的位置,消除了对中央的、巨大的数字计算机器的需要。雅虎是Hadoop的早期主要贡献者。

除了Cloudera的产品外,IBM最近也开始将Hadoop商业化提供一组使用该技术的分析服务。

约押杰克逊涵盖企业软件和通用技术突发新闻IDG新闻服务.请在Twitter上关注约押@Joab_Jackson.约押的电子邮件地址是Joab_Jackson@idg.com

加入网络世界社区有个足球雷竞技app脸谱网LinkedIn对自己最关心的话题发表评论。

版权所有©2010 IDG ComRaybet2munications, Inc.

SD-WAN买家指南:向供应商(和您自己)提出的关键问题