P2

  openfire+smack_简单的_发送消息_demo及各种错误解决方案 文档

昨天搭建好了,openfire准备用写一个smack写一个发送消息的demo,为了方便接收端使用Spark。 使用eclipse的同学注意,创建项目时注意要吧smack与smackx两个包都导进来,只导入smack的话会出现一个

hazhangha 2013-05-06   5215   0

IBM 推出开源项目门户,将开源 50个项目 资讯

Metrics —— 一个用于监控 Node.js 应用的工具 Spark Kernel —— 能让交互和远程应用访问 Spark 集群 门户网站包含了 IBM Bluemix Mobile Services

jopen 2015-07-26   12947   0
IBM  

计算无敌!阿里云377秒完成100TB数据排序:秒三星百度 资讯

年排序竞赛的最终成绩。其中,阿里云用不到 7 分钟(377 秒)就完成了 100TB 的数据排序,打破了 Apache Spark 的纪录 23.4 分钟。Sort Benchmark 有全球科技公司“计算奥运会”之称,更早之前

jopen 2015-10-28   5609   0

开源大数据处理工具汇总(上) 经验

四、Shark 简介 :Shark即Hive on Spark,本质上是通过Hive的HQL解析,把HQL翻译成Spark上的RDD操作,然后通过Hive的metadata获取数据库里的表信息,实

jopen 2016-01-05   78569   0

Mercury:唯品会全链路应用监控系统解决方案详解(含 PPT) 经验

建设一个完整的全链路监控体系是需要考虑以上这几个过程。 全链路监控技术栈 技术栈,我们的体系有用了很多的技术,Spark 、 Open  TSDB  、HBase  、Elastic Search,Kafka,Flume,Python

x609726871 2016-08-09   121191   0

Akka 使用系列之一: 快速入门 经验

Akka 是 Spark 实现内部通讯的组件,Spark 启动过程的第一步便是建立 Akka 的 ActorSystem。因此看了有几篇文章学习了下 Akka 相关知识。 1 Actor 模型和 Akka

UXGFos 2016-12-26   15635   0
AKKA  

[从0到1]关于深度学习,这里比你想的还要全 经验

习应用,计算集群Spark等相关架构技术则应该是必备的技能。 Spark的官方api文档,支持java,scala,R,python四种语言,供参考: http://spark.apache.org/docs/latest/api

youhaofy 2017-03-07   22202   0
P2

  mongodb数据库正确安装的步骤 文档

cn,请大家赏析,前台使用mvc2.0,spark引擎,Entity Framework,当然还有jQuery 这篇写完,这周再出个简单用C#操作MongoDB的增删改查,Demo将会以MVC+SPARK的方式出现,哎,为

sphil 2013-07-11   390   0

为什么我要用Yarn来做Docker容器调度引擎 经验

目,所以在大数据领域具有先天优势。 底层天然就是分布式存储系统HDFS,稳定高效。 其上支撑了Spark、MR等大数据领域的扛顶之座,久经考验。 社区强大,最近发布版本也明显加快,对于长任务的支持也越来越优秀。

ioriren 2016-02-16   9506   0
YARN   Docker  

Mesosphere 携手Kubernetes 拥抱Google Cloud Platform 资讯

例如可以 在同一个集群上运行像 Marathon 、 Chronos 、 Hadoop 以及 Spark 这 样的分布式服务。Mesosphere基于开源软件Apache Mesos分布式系统内核所构建,

jopen 2015-01-21   11116   0

八大工具,透析Python数据生态圈最新趋势! 资讯

p的MapReduce功能,这就造成它和Aphache Spark非常相像。 虽然API很像,但两者处理数据的方式有着很大差别。Spark处理数据流时其实进行的是批处理,所以其实只是流处理的一个近

jopen 2015-08-28   16610   0
Python  

18个最热深度学习Github项目逐一介绍 经验

 这是个很新的实现, 是基于spark的。语言是Java。除了spark还用到了Mallet机器学习包和JBlas线性代数包。 http://bigdata.memect.com/?p=10345 更多spark参考请看大数据精华区的专题

jopen 2014-11-06   385978   0
P5

  android基于xmpp协议的数据推送技术 文档

本文主要讲解在android使用xmpp协议进行即时通信,所涉及3个主要的东西,它们是openfire、smack和spark,这个三个东东结合起来就是完整的xmpp IM实现,这里简单介绍一下这3个东东在下文的作用: o

hazhangha 2013-05-06   8491   0

Hadoop平台架构 经验

,一个系统中既有离线任务(mr,hive), 也有基于内存计算(hbase,impala,spark),流计算(storm,sparkstreaming)等多种类型 的作业,长ETL任务,短SQL-on-Hadoop任务

dongpo 2016-01-27   21195   0
P4

  2016年大数据和分析市场的21个趋势预测 文档

商。 • Apache Spark进一步用于大数据分析。Apache Spark已经从Hadoop系统的一个组件成为了不少企业大数据平台的选择了。“较之Hadoop,Spark为数据处理速度带来了大幅

为什么Google用Apache Beam彻底替换掉MapReduce 经验

Cutting大神根据谷歌的论文实现出Hadoop+MapReduce的雏形,到Hadoop生态圈各种衍生产品的蓬勃发展,再到后来的Spark、流式计算等等,所有的一切都要归功于、源自这三篇论文。可惜谷歌虽然开启了这个伟大的时代,却始终仅

TiDB 在摩拜单车在线数据业务的应用和实践 经验

Hive 里的那些问题。同时有 TiSpark 项目,数据进入 TiDB 以后,可以直接通过 Spark 进行非常复杂的 OLAP 查询。有了这套系统,运营部门提出的一些复杂在线需求,都能够快速简洁的完成交付,这些在

GarfieldN40 2017-12-26   39865   0
TiDB  

108个大数据文档PDF开放下载 资讯

24、微博技术架构发展历程 下载: 微博技术架构发展历程 .pdf 25、Spark 介绍与应用案例分析 .pdf 下载 : Spark 介绍与应用案例分析 .pdf 26、OCP 中的存储 下载

b4c2 2015-01-29   51827   0

Apache Beam的前世今生 经验

Cutting大神根据谷歌的论文实现出Hadoop+MapReduce的雏形,到Hadoop生态圈各种衍生产品的蓬勃发展,再到后来的Spark、流式计算等等,所有的一切都要归功于、源自这三篇论文。 可惜谷歌虽然开启了这个伟大的时代,却

fangfang27 2017-02-05   14266   0

Apache Beam:一个开源的统一的分布式数据处理编程库 经验

层执行环境支持主流的计算平台:Apache Apex、Apache Flink、Apache Spark、Google Cloud Dataflow。实际上,Apache Beam的这种统一编程模型,可以支持任意的计算引擎,通过Data

1 2 3 4 5 6 7 8 9 10