hadoop大数据开放平台建设


http://www.xfyun.cn/ 大数据技术发展 一头奔跑的大象,不断进化 YARN 架构不断优化 不断完善的生态系统 运维管理工具 大数据技术发展 Apache Hadoop Ecosystem Doug Cutting Cloudera & Apache Maple Maple 大数据开放平台 大数据全新应用体验Evolution 基础集群Maple- SDK Maple- BDWS 讯飞大数据开放平台-架构图 Flume-ng Sqoop ETL Hadoop(存储&计算) Storm&SparkHive&Pig Hbase Redis 缓存 搜索引擎 数据库 语音云 应用层 Apps Maple - SDK Maple - BDWS Maple- BDWS Maple-SDK SDK For Integration Technical Maple- SDK 基本属性 用大数据的眼光看数据-DataSource 数据格式 文本格式 Avro格式 列存储格式 数据库文件 存储位置 HDFS LocalFs DataBase Memory 用大数据的眼光看数据-Data Source 围绕DataSourcce建立的数据导向API MERGERS & JOIN HiveQL On Source SharkQL On SourceSpark Load Source Impala On Source Pig On Source Avro在讯飞大数据开放平台的应用 结 构 化 日 志 多 点 监 控 云知道数据流程图 云知道 •目前每天日志索引记 录15亿+ •支持检索几个月数据, 索 http://www.xfyun.cn/services/analysis/mobileapp 讯飞开放平台统计分析 七大类,50多个小类统 计分析功能,综合指标 上千个 日2亿次PV,在语音重 度服务下,日志量进千 亿条 Maple- Report Maple http://www.xfyun.cn/
还剩35页未读

继续阅读

下载pdf到电脑,查找使用更方便

pdf的实际排版效果,会与网站的显示效果略有不同!!

需要 10 金币 [ 分享pdf获得金币 ] 0 人已下载

下载pdf

pdf贡献者

RKylin

贡献于2016-06-08

下载需要 10 金币 [金币充值 ]
亲,您也可以通过 分享原创pdf 来获得金币奖励!
下载pdf