Arun C Murthy(Hortonworks创始人,Hadoop 2开发的领军者)在邮件列表中发布了这一消息。很快,他又在Hortonworks的官方博客发表文章,做了更详细的说明。
Hadoop 2.x是这个大数据核心平台的一次重大改版,将原来HDFS+MapReduce的架构重构为HDFS2+YARN(集群资源管理中间层)+上层服务(包括MapReduce, Tez, HBase on YARN (HOYA), Storm-on-YARN, Samza, Spark, OpenMPI等等)。
如今,作为Hadoop 2.x的第一个beta版,Apache Hadoop 2.1.0-beta的发布,意味着Hadoop 2.x的正式版也不远了(Murthy已经明确表示解决最后遗留的7个问题,还需要数周时间,希望能在9月中旬发布GA版)。官方发布公告表示,鼓励用户立即迁移到这一版本,因为稳定性大大提高,而且API和连接协议(wire protocol)都经过考验,会与未来兼容。
重要更新包括:
- HDFS和YARN的API都已经稳定(详情参见HADOOP-8990和YARN-386)
- 实现了与Hadoop 1.x MapReduce应用的二进制兼容(详情参见MAPREDUCE-5108)
- 支持在Windows 上运行Hadoop(详情参见HADOOP-8562)
- HDFS瞬像(详情参见HDFS-2802)
- HDFS支持NFS-v3访问(详情参见HDFS-4750)
- YARN应用开发者的客户端API(详情参见YARN-418)
- 与Hadoop生态系统中系统项目(Apache HBase, Apache Pig, Apache Hive)之间做了大量集成测试
详细的版本发布说明在这里。
我们一直都在努力坚持原创.......请不要一声不吭,就悄悄拿走。
我原创,你原创,我们的内容世界才会更加精彩!
【所有原创内容版权均属TechTarget,欢迎大家转发分享。但未经授权,严禁任何媒体(平面媒体、网络媒体、自媒体等)以及微信公众号复制、转载、摘编或以其他方式进行使用。】
微信公众号
TechTarget
官方微博
TechTarget中国
相关推荐
-
Cloudera-Hortonworks合并或将减少Hadoop用户的选择
近日大数据领域两家顶级供应商达成交易协议,这可能会影响Hadoop和其他开源数据处理框架,并使大数据用户的技术 […]
-
采矿设备制造商利用BI on Hadoop来挖掘数据
如果大数据要取得巨大成功,则需要提供给更多的最终用户群组。但广泛使用的商业智能工具尚不能轻松分析最大的大数据, […]
-
新Qlik Sense功能可用于云计算、AI和大数据
一年前,Qlik公司公布其长期计划,即将高级云计算、AI和大数据功能添加到其自助式BI和数据可视化软件中。现在 […]
-
Cambridge Analytica秘密收集Facebook数据表明对道德数据挖掘的需求
当有关Cambridge Analytica公司秘密收集Facebook数据的消息传出时,这暴露了一个薄弱环节 […]