MapR发布新版Hadoop 支持跨数据中心复制

jopen 9年前

原文  http://www.36dsj.com/archives/24709

MapR发布新版Hadoop 支持跨数据中心复制

Hadoop供应商MapR最近宣布,新版的Hadoop软件发行版包括POSIX代理、为C语言开发者准备的API和针对MapR数据库的跨数 据中心表复制。4.1版本是MapR和其他伙伴合作,共同开发Myriad开源项目的结晶,希望在数据中心为大数据负载协作提供有效的工具。

MapR升级的表复制功能意在告诉Hadoop用户,开源分布式处理框架的部署不必局限在一个数据中心。

美国线上广告平台开发公司Altitude Digital的CTO Manny Puentes是一名MapR用户,也是新版本的早期评估者,他表示,数据复制需要大量人力,自动化程度很低,MapR Hadoop 4.1发行版简化了这一流程。

因为Altitude Digital这样的公司需要根据不断增加的用户数据量快速为网站浏览者提供在线广告,所以跨数据中心复制对它们来说非常重要。Puentes表示:“无 论访问什么数据中心都能得到相同的信息,对实时分析很有帮助。” Puentes之前在另一家公司的时候也部署了MapR的软件。

MapR的首席市场官CMO Jack Norris认为,Myriad项目也在寻求其他的提升数据中心Hadoop使用的方法。

这种软件目前还在早期研发阶段,它将把Hadoop YARN集群资源管理器,任务调度程序和新兴管理框架Apache Mesos结合起来,Mesos能够使多种工作负载在一个数据中心里同时运行。Myriad项目是由MapR、eBay和Mesosphere合作完成 的,其中Mesosphere提供了系统硬件。

Norris表示,Myriad允许Hadoop用户同时运行YARN和Mesos。如果Hadoop想在主流计算应用中找到更多的应用程序,这种结合是很必要的。

作者:Jack Vaughan  译者:陈洪钰 via:TechTarget中国

End