P21

  移动大数据平台的一些实践经验 文档

ProtobufOrdered ProtobufApp IndexReader 15. 需求驱动!如何更好地利用集群资源? HADOOP/HBASE源码级改造 动态选择磁盘空间宽裕的机器执行任务 Tasktracker的map,reduce槽位混用

cpp45 2015-02-06   548   0
P23

  芒果TV ELK 日志系统实践 -刘波涛 文档

一旦crashes能够马上重启传输方式由TCP改为UDP(恶性循环) 9. Kafka强大消息堆积能力日志领域高度成熟支持Hadoop数据并行加载高性能(顺序写单机写入TPS约在百万秒/s)Kafka vs Redis 10.

bger 2015-10-28   642   0
P12

  nutch1.4 Windows Eclipse配置和使用 文档

arguments 中填写 -Dhadoop.log.dir=logs -Dhadoop.log.file=hadoop.log 单击run即可看到运行效果 我这在笔记本上运行出现了错误 在VM arguments

w523399859 2013-08-30   3058   0
P16

  (7)RDDs基本操作之Actions 文档

大数据学习网介绍我们的网址是:bigdatastudy.cn 我们提供专业的大数据学习视频,包括Hadoop,Spark,Storm,Mahout,机器学习等。 我们定价合理,让每个人都学得起大数据。 3

ngn6 2015-08-12   1858   0
P15

  (3)Spark开发环境搭建 文档

大数据学习网介绍我们的网址是:bigdatastudy.cn 我们提供专业的大数据学习视频,包括Hadoop,Spark,Storm,Mahout,机器学习等。 我们定价合理,让每个人都学得起大数据。 3

ngn6 2015-08-12   2984   0
P13

  (10)KeyValue对RDDs(二) 文档

大数据学习网介绍我们的网址是:bigdatastudy.cn 我们提供专业的大数据学习视频,包括Hadoop,Spark,Storm,Mahout,机器学习等。 我们定价合理,让每个人都学得起大数据。 3

ngn6 2015-08-12   1224   0
P31

  大数据模型构建平台介绍v1.0 文档

表、字段自动规范命名,字段词义解析,并能不断积累完善模型转换自动化 逻辑模型设计完成,依据指定模型层次、主题、平台(DB2及Hadoop),自动生成物理模型 8. 目录|CONTENTS背景1234567定位亮点系统架构方法论功能架构开发现状

cqupt1987 2015-10-10   2002   0
方案   SQL  
P13

  国外程序员整理的系统管理员资源大全 文档

GlusterFS - 可扩展,网络附加存储文件系统。 · HDFS - Java编写的,用于Hadoop框架的分布式、可伸缩、可移植文件系统 · Lustre -一种并行分布式文件系统,一般用于大规模集群计算。

itudoumao 2015-03-31   4235   0
P48

  Lucene学习总结之一:全文检索的基本原理一 文档

举个例子,用户输入语句:lucene AND learned NOT hadoop。 说明用户想找一个包含lucene和learned然而不包括hadoop的文档。 第二步:对查询语句进行词法分析,语法分析,及语言处理。

sylixd 2011-12-05   453   0
P21

  JSF2 系列教程 文档

2,primefaces,弹簧,Hibernate,RESTful Web服务,Android,Hadoop,Java 7和Java 8的培训课程定期安排太少,开发商 为现场的人。对, 各种可用的其他课程的描述,请参阅Java

hwenqq97 2015-07-10   1881   0
P51

  kafka深度解析 文档

,自动实现复杂均衡;支持Hadoop数据并行加载,对于像Hadoop的一样的日志数据和离线分析系统,但又要求实时处理的限制,这是一个可行的解决方案。Kafka通过Hadoop的并行加载机制来统一了在线

cador 2017-03-14   7303   1
P136

  《中国电信eda总体规范-技术与架构分册》初稿 文档

库架构或hadoop架构的数据存储管理方式,存储了诸如用户话单、DPI等数据信息;消息类流数据采用流处理的数据处理方式,实时处理,实时对外共享结果,一般不做存储要求。大数据平台通过hadoop等技术对

allenlei 2016-09-13   1864   1
P30

  百度Elasticsearch实践-高攀 文档

aLogStashElasticsearchAPIAppApp···webMysqlOS···Hadoop ClientHDFSHive 8. 典型应用场景一:云分析业务主要挑战 大量文本数据的分词及建立索引

bger 2015-10-28   1636   0
P24

  YAFIM:基于spark的并行化频繁项集挖掘算法 文档

Efficient Implementation of Apriori Algorithm Based on Hadoop-MapReduce Model (2012) The Strategy of Mining Association

aacall 2014-06-25   592   0
P7

  linux服务器命令 文档

查看进程打开文件数 lsof -p 13475 |wc -l 查看临时目录某个文件大小 du -sh /tmp/hadoop-idcmonitor crontab 命令: crontab –e 编辑 crontab -l

wangzhao 2012-11-12   2660   0
Linux  
P28

  大数据统计分析平台架构故事---TalkingData数据库架构变迁 文档

清晰计算模型青铜时代支持业务横向扩展 数据量支持亿级表2011201220132014 8. 青铜时代基于Hadoop生态的批处理系统数据库批量Insert/Update,压力大数据库读压力小Schema 更新多

c6g3 2015-02-25   5670   0
方案   SQL  
P15

  ImDFS 存储解决方案 文档

server是互备关系,一个组有两台storage server,即可做到互备。一个组当然也可以有3台甚至更多,这个设计跟hadoop设计相同 文件标识:包括两部分:组名和文件名(包含路径) meta data:文件相关属性,键值对(Key

akunmath 2012-04-19   4087   0
P2

  分布式并行数据库学习记录 文档

的运行速度。 Greenplum支持50PB(1PB=1000TB)级海量数据的存储和处理 àHadoop DB àPivotal HD 结构化数据: 即行数据,存储在数据库里,可以用二维表结构来逻辑表达实现的数据

hrfsun 2015-10-19   1456   0
P30

  浅谈容器集群管理-从Mesos到Kubernetes 文档

Mesos 适用于多种框架和应用, 分布式系统内核, 构建一个巨大的静态的计算集群, 资源池, Hadoop、Kafka、Spark等众多framework作为数据处理插件 Kubernetes 专门针对容器集群

dmc3 2015-07-26   633   0
虚拟化   方案   Apache   Nginx   Go  
P3

  Flume 性能测试 文档

.java:195)] Reloading configuration file:/home/hadoop/flume/conf/example.conf 2012-11-29 10:18:12,130

yugouai 2012-12-19   16567   0
1 2 3 4 5 6 7 8 9 10