可视化和实时监控平台:Ambrose

juio 9年前

推ter Ambrose 是 MapReduce 数据流的可视化和实时监控平台。只要你提交 job 到 Hadoop 集群上执行,则 Ambrose 将实时更新可视化界面来反映 job 的最新状态。

Ambrose 提供了下面的 Web 用户界面:

  • 工作流进度条——显示完成工作进度的百分比

  • 所有工作流工作的可视视图,还有当前状态

  • 描述工作相关性和度量的图表

    • 基于资源消耗的工作可视化权重(Visual weighting) 

    • 基于数据流的工作相关性可视化权重

  • 脚本可视图,具有行高亮功能 (Pig only)

  • </ul>

    ambrose-demo.gifAmbrose 是基于以下前端技术构建的:

    • jQuery, UnderscoreJS, RequireJS - 核心 javascript 库和 JS 模块定义

    • D3.js - 支持图表生成

    • Bootstrap - 支持布局和 CSS

    Ambrose 旨在支持任何在运行时的工作流。支持以下情况:

    • Pig - See pig/README.md

    • Hive - See hive/README.md

    • Cascading - See cascading/README.md

    • Scalding - See scalding/README.md

    • Cascalog - future work