Map Reduce - the Free Lunch is not over? 博客

记着我大二的时候曾经做过一个五子棋的程序,当时的算法就是预先设计一些棋型(有优先级),然后扫描棋盘,对形势进 行分析,看看当前走哪部对自己最重要。当然下棋还要堵别人,这就需要互换双方的棋型再计算。如果只算一步,很可

Hadoopp 2012-09-28   1000   0
P22

  新浪云计算sae技术微博精选(6月) 文档

CSS3 和 JavaScript 开发完整的Win8应用》 《MemSQL,号称世界上最快的分布式关系型数据库》 《由linkedin数据库泄漏引发的思考》 《Arduino,一个开源的软硬件平台》

penglzy 2012-08-07   2250   0
CSS   HTML   Java   C/C++   Go  

我在mesos上运行docker的经验 资讯

er容器来运行分析作业。该技术我们在 Zions 研究的是在 MapR 平台和 MapR-FS 之上运行的 Apache Mesos.我的目标是尝试构建一个无处不在的计算平台。为了分析,我运行Spark和

jopen 2015-07-07   7919   0
Mesos  

CCF大数据专家委员会:2016年大数据发展趋势预测解读与行动建议 资讯

者也能够更好地理解大数据及其分析的效果和价值,从而可以从国计、民生两方面都充分发挥大数据的价值。 可视化是通过把复杂的数据转化为可以交互的图形,帮助用户更好地理解分析数据对象,发现、洞察其内在规律

jopen 2016-02-17   37372   0
P15

  LVS集群技术及简明配置 文档

共享存储通常是数据库、网络文件系统或者分布式文件系统。服务器结点需要动态更新的数据一般存储在数据库系统中,同时数据库会保证并发访问时数据的一致性。静态的数据可以存储在网络文件系统(如NFS/CIFS)中

zhouyunmin 2011-12-08   3880   0
P57

  常用默认端口号 文档

pop3 邮局协议版本3 111 sunrpc 用于远程命令执行的远程过程调用(RPC)协议,被网络文件系统(NFS)使用 113 auth 验证和身份识别协议 115 sftp 安全文件传输协议(SFTP)服务

hamman2046 2013-07-22   3024   0
P2

  服务总体架构规划 文档

数据库服务 mysql MYSQL-5.5.13 php服务 php php- 5.3.6 分布式文件系统服务 NFS-4.0 负载均衡LVS+Keepalived ipvsadm-1.26 keepalived-1

cndkei 2016-02-09   7221   0

Docker周报第18期 资讯

ker创业公司将如何利用这一支点来撬动新的市场。 InfoQ Docker新闻 Docker发布分布式应用编排工具 2月26日,Docker在其官方博客发布之前在DockerCon上提到的三个编排工具:Machine、Swarm和

jopen 2015-03-01   14438   0
Docker  

VMware发布Serengeti项目,支持云中部署Hadoop 资讯

的高可用性、容错性和现场迁移能力,从而实现Hadoop集群 的可用性和可管理性。 OVUM首席分析师Tony Baer表示:“要想成为企业IT基础架构中的佼佼者,Hadoop必须符合企业IT部门的

openkk 2012-06-15   17172   1
Hadoop  

Hadoop工具在其不断进化中披荆斩棘 资讯

能很好的对云环境提供支持。 三种支持Hadoop的脚本语言 把数据移入和移出Hadoop分布式文件系统(HDFS)对于使用Hadoop的大部分管理员来说很常见。一些云管理员用他们偏好的编程语言来编

jopen 2014-12-17   9930   0
Hadoop  

Docker周报:Docker收购CI服务商Koality 资讯

Engine等。0.13版本中,Deis携手Ceph以提高可用性。Ceph是新一代的自由软件分布式文件系统。 《Docker时代,公有云面临的挑战和机遇》 :Docker 技术出来之前,其实Conta

jopen 2014-10-10   24479   0
Docker  

一个Hadoop老兵的自白 资讯

Cloudera 。他发现,Apache Hadoop 平台存在一些固有的设计缺陷。近日,他从以下几个方面 分析了这些缺陷,并介绍了 MapR 的解决方案 。 Append-only文件访问方式 HDFS 的

jopen 2015-11-27   6478   0
Hadoop  

助人就是助己:IBM宣布大规模资助开源大数据项目Spark 资讯

http://36kr.com/p/533859.html 本周一,IBM 宣布 将对开源实时大数据分析项目Apache Spark进行大规模资助,蓝色巨人宣称,其资助的力度之大相当于每年数亿美元的投入。

jopen 2015-06-15   18185   0
Spark  
P26

  Facebook 海量数据处理论文 文档

性的模型。   关键词 数据 可扩展性 资源共享 分布式文件系统 Hadoop Hive HBase Facebook Scribe 日志聚合 分布式系统 1.导引 Apache Hadoop是一个顶

huafenged 2012-07-11   532   0
P16

  Google Map-Reduce 中文版 文档

中计算机之间必要的通信。采用Map-Reduce架构可以使那些没有并行计算和分布式处理系统开发经验的 程序员有效利用分布式系统的丰富资源。 我们的Map-Reduce实现运行在规模可以灵活调整的由普通

hadooper 2013-05-30   2639   0
P34

  HBASE 的原理与实验 文档

HBase与 HDFS HBase的对外接口 3. 引入HBASE的原因数据库系统已无法适应大型分布式数据存储的需要 改良的关系数据库(副本、分区等)难于安装与维护 关系模型对数据的操作使数据的存贮变得复杂

liu2511981 2012-05-17   582   0

消息系统kafka及其变种Jafka、Metamorphosis (MetaQ) 经验

-------------------- 以下内容来自oschina的介绍 kafka是一种高吞吐量的分布式发布订阅消息系统,她有如下特性: 通过O(1)的磁盘数据结构提供消息的持久化,这种结构对于即使

jopen 2016-01-05   10274   0

Hadoop 的生态系统 资讯

ecosystem table 。 Map Reduce -MapReduce 是使用集群的并行,分布式算法处理大数据集的可编程模型。Apache MapReduce 是从 Google MapReduce

jopen 2015-07-29   13930   0
Hadoop  
P36

  DUBBO 开源 文档

1. DUBBO开源梁飞1 2. 什么是Dubbo?分布式服务框架 远程服务调用 Netty/Mina/Grizzly RMI/Hessian/WebService 服务动态发现 Zookeeper/Redis

dos200 2015-11-03   369   0
P36

  DUBBO 开源 文档

1. DUBBO开源梁飞1 2. 什么是Dubbo?分布式服务框架 远程服务调用 Netty/Mina/Grizzly RMI/Hessian/WebService 服务动态发现 Zookeeper/Redis

patrick002 2015-01-10   4796   0
Protocol   Go  
1 2 3 4 5 6 7 8 9 10