这九大技术将在2015年或未来大行其道 资讯

管理和编排工具将帮助你装配和迁移复杂的 App。Docker 顶级项目包括 Kubernetes、 Mesos 、StackEngine、 Google Cloud Platform 和 AWS 上个月添加了他们自己的容器管理系统。

jopen 2014-12-03   15447   0
技术  

大数据全栈式开发语言 – Python 资讯

的替代品,比如 GlusterFS, Ceph 等,都是直接提供 Python 支持。Yarn 的替代者, Mesos 是 C++ 实现,除 C++ 外,提供了 Java 和 Python 的支持包。 DevOps

pm45e 2015-08-03   38813   1
Python  

对PHP项目在Docker上运行的一些探索 资讯

六、继续探索 后面打算用Docker Swarm来简单做下集群管理,未来对调度需求比较大时可能会尝试下Mesos或者Kubernetes。不过关于容器的生态链都发展的非常快,可能等需要的时候又有更好的方案了吧。

jopen 2016-02-20   11299   0
Docker   PHP  

Docker生态系统系列之一:常用组件介绍 经验

调度器和集群管理工具 marathon :调度器和集群管理工具 Swarm :调度器和集群管理工具 mesos :宿主机抽象服务,用于为调度器联合宿主机资源 kubernetes :一个管理容器组的工具,具有先进的调度能力

jopen 2015-02-13   20328   0
Docker  

Spark初探 经验

Standalone :独立模式 Spark on yarn :最有前景的模式 Spark on Mesos :官方推荐 Amazon EC2 Spark runtime Spark运行时

jopen 2015-01-13   58340   0

微服务架构云端应用 经验

在实际场景中,使用业务监控可以替代技术监控,而且更加简单容易理解。 Q&A Q:请问你是基于Docker和Mesos吗? A:用了Docker。 Q:是混合云架构吗? A:是的,也可用在私有云。 Q:微服务是谁发布哪?

jopen 2015-12-06   53200   0
P6

  大数据架构师基础:hadoop家族,Cloudera产品系列等各种技术 文档

是为了支持分布式数据集上的迭代作业,但是实际上它是对 Hadoop 的补充,可以在 Hadoo 文件系统中并行运行。通过名为 Mesos 的第三方集群框架可以支持此行为。Spark 由加州大学伯克利分校 AMP 实验室 (Algorithms

tony2007 2015-06-19   2795   0
P25

  Apache Hadoop2.0 下一代数据处理框架介绍 文档

可为每个节点单独配置可用内存,采用线程监控的方案控制内存使用,发现任务超过约定的资源量会将其杀死 Mesos等资源管理软件 5.    // Priority for worker containers -

pnx8 2014-08-17   3282   0
P17

  如何让SQL在Spark上运行的更快 文档

Spark生态系统的演变2009年-2012年 @AMP lab of UC Berkeley, Spark作为Mesos的一个测试项目开发,主要由 AMP Lab开发、完善和推广 2013年 Spark成为Apache项目,被大部分人接受。

nn34 2014-12-16   6216   0

Golang的包管理之道 经验

肖德时,北京数人科技有限公司CTO,负责云计算的研发及架构设计工作。关注领域包括Docker,Mesos集群, 云计算等领域。 肖德时之前为红帽Engineering Service部门内部工具组Team

1928038 2016-02-14   39453   0

深入浅出CoreOS 经验

务,再分离出一个单独固定数量的机器专门用于分布式应用控制,例如Deis,kubernetes,Mesos,OpenStack等。 分离出这些服务到固定数量的机器,可以确保它们能跨数据中心和可用区域分配,设置的静态网络允许简单启动。

hulemuqbuby773 2016-02-20   12815   0
CoreOS   Linux  

如何用Consul打造弹性可扩展的PaaS平台 资讯

现在,有了服务发现,一切都变得简单有趣。增减服务节点可以自动更新Nginx/LVS的配置文件;DNS丢一边吧!用IP就好;接入Mesos+Docker玩弹性扩展。 为什么选择 Consul 已经有很多文章对Zookeeper、e

jopen 2016-01-27   13136   0
Consul  
P31

  内存计算Spark和 SQL on Hadoop 文档

安装配置与简介资源管理与作业调度Spark对于资源管理与作业调度可以使用Standalone(独立模式),Apache Mesos及Hadoop YARN来实现,Spark on YARN如下: 15. 安装配置与简介资源管理

pnx8 2014-08-17   756   0

说说Kubernetes是怎么来的,又是怎么没的 经验

二、容器编排 在Docker流行之后,一大批开源项目和专有平台纷纷出现,以解决容器编排的问题。 Mesos、Docker Swarm和Kubernetes均提供了不同的抽象来管理容器。Amazon EC

gw23e 2018-01-23   31024   0

大数据相关技术、Hadoop生态、LinkedIn内部实战 经验

Horowitz的 注资 AMPLab这个实验室非常厉害,做大数据,云计算,跟工业界结合很紧密,之前就是他们做mesos,hadoop online, 在2013年,这些大牛(Berkeley系主任,MIT最年轻的助理教授)从Berkeley

jopen 2015-01-26   192894   0

Java资源大全中文版(Awesome最新版) 经验

Aurora:Apache Aurora是一个Mesos框架,用于长时间运行服务和定时任务(cron job)。 官网 Singularity :Singularity是一个Mesos框架,方便部署和操作。它支持Web

awzebr76hj 2016-09-18   10317   0

Java资源大全中文版 经验

:Apache Aurora是一个Mesos框架,用于长时间运行服务和定时任务(cron job)。 Singularity :Singularity是一个Mesos框架,方便部署和操作。它支持Web

jopen 2015-11-03   117384   0

后台程序员转算法的参考秘籍:大规模机器学习框架的四重境界 经验

manager 可以先放一放,因为实际系统中这部分往往是复用现有的资源管理系统,比如 yarn 或者 mesos;底下的 training data 毋庸置疑的需要类似 GFS 的分布式文件系统的支持;剩下的部分就是参数服务器的核心组件了。

TraceyVang 2017-10-09   42260   0

讲给硅谷创业者的大数据精华集合 经验

 注资 AMPLab这个实验室非常厉害,做大数据,云计算,跟工业界结合很紧密,之前就是 他们做mesos,hadoop online, 在2013年,这些大牛(Berkeley系主任,MIT最年轻的助理教授)从

jopen 2015-01-25   84829   0

分布式系统的特点以及设计理念 资讯

些分布式系统,使得Google可以处理高并发请求响应以及海量数据处理等。Apache旗下的Hadoop、Spark、Mesos等分布式系统,把大 数据处理相关技术变得非常亲民,让更多企业客户体会到了分布式系统的便利。 一、分布式系统的特点

jopen 2015-06-13   13309   1
1 2 3 4 5 6 7 8 9 10