阅读更多

7顶
0踩

开源软件

原创新闻 Hadoop v2 时代正式到来

2013-10-21 15:12 by 副主编 wangguo 评论(10) 有18502人浏览
Apache基金会近日正式发布了Hadoop 2.2版本,该版本是Hadoop 2.x分支中的首个稳定版本(2.0.x为alpha版本,2.1.x为beta版本),标志着Hadoop 2时代的正式到来。


Apache建议用户升级至最新版本,因为这个版本更加稳定,并保持与之前版本API和相关协议条款的兼容。与Hadoop 1.x相比,Hadoop 2的主要亮点如下:

  • 新的Hadoop MapReduce框架YARN
  • HDFS高可用性
  • HDFS Federation(HDFS联盟):使得HDFS支持多个命名空间,并且允许在HDFS中同时存在多个Name Node
  • HDFS快照
  • NFSv3可访问HDFS中的数据
  • 支持在Windows平台上运行Hadoop
  • 兼容基于Hadoop 1.x构建的MapReduce应用
  • 大量针对生态系统中其他项目的集成测试
此外,从Hadoop 1.x升级到2.2需要注意以下事情:

  • HDFS社区建议将symlinks功能从2.3版本中移除,目前该功能已停用
  • 在新的YARN/MapReduce中,用户需要更改ShuffleHandler服务名称——需要将mapreduce.shuffle改为mapreduce_shuffle
详细信息Hadoop 2.2.0发行说明

官网http://hadoop.apache.org/

相关阅读:

  • 大小: 9.2 KB
7
0
评论 共 10 条 请登录后发表评论
10 楼 ironsabre 2013-10-25 17:08
dieslrae 写道
可以用这货来处理那2000w条数据


到2000亿再用Hadoop吧。
9 楼 laosu 2013-10-24 18:36
hadoop2.2的Eclipse插件怎么生成了?
8 楼 dsjt 2013-10-24 09:54
gxz1989611 写道
X_Goder 写道
gxz1989611 写道
dieslrae 写道
可以用这货来处理那2000w条数据

才2000W。。太少了

。。。所谓的“2000W”你不懂。。。

某酒店数据2000W。。。,怎么可能不知道呢


哪里可以下载那2000w
7 楼 white_crucifix 2013-10-22 18:17
hadoop啥时候去和evernote做朋友
6 楼 gxz1989611 2013-10-22 15:21
X_Goder 写道
gxz1989611 写道
dieslrae 写道
可以用这货来处理那2000w条数据

才2000W。。太少了

。。。所谓的“2000W”你不懂。。。

某酒店数据2000W。。。,怎么可能不知道呢
5 楼 X_Goder 2013-10-22 14:43
gxz1989611 写道
dieslrae 写道
可以用这货来处理那2000w条数据

才2000W。。太少了

。。。所谓的“2000W”你不懂。。。
4 楼 kingsfighter 2013-10-22 10:16
工作中一直没有遇到的场景啊。
3 楼 gxz1989611 2013-10-22 08:52
dieslrae 写道
可以用这货来处理那2000w条数据

才2000W。。太少了
2 楼 dieslrae 2013-10-21 17:53
可以用这货来处理那2000w条数据
1 楼 greatwqs 2013-10-21 17:40
多个Name Node
windows 运行
做了很多工作..创新了..

发表评论

您还没有登录,请您登录后再发表评论

相关推荐

Global site tag (gtag.js) - Google Analytics