Spring Hadoop - 在 Spring 框架下编写 Hadoop 应用的支持。

openkk 12年前

在Spring框架下支持编写 Hadoop 应用。Spring Hadoop使MapReduce、Streaming、Hive、Pig和级联工作能够通过Spring容器执行。Hadoop分布式文件系统的数据访问是通过JVM的脚本语言,如Groovy和JRuby启用。此外,还计划支持Hadoop包括FsShell和DistCp等工具。功能特性:

  • 扩展Spring Batch来支持创建一个点对点的数据管道解决方案
  • 简化HDFS的读写
  • Spring Batch Tasklets for Map-Reduce an Streaming Jobs
  • 与 Cascading, HBase, Hive 和 Pig

项目主页:http://www.open-open.com/lib/view/home/1339293742959