分布式数据处理引擎Apache Flink v1.1.0发布 资讯

Flink 可以定制化内存管理。在这点,如果要对比 Flink 和 Spark 的话,Flink 并没有将内存完全交给应用层。这也是为什么 Spark 相对于 Flink,更容易出现 OOM 的原因(out of

jopen 2016-08-04   9108   0

Java中更好的bitmaps压缩类库:RoaringBitmap 经验

bitmaps可以是几百倍更快的速度,它们通常提供显著更好的压缩。这个类库已经在 Apache Spark ( https://spark.apache.org/ ) 和 Druid.io ( http://druid

jopen 2014-12-25   48953   0

机器学习语言:SystemML 经验

与众不同的是: (1) 可定制算法 (2) 多个执行模式,包括单个,Hadoop 批量和 Spark 批量, (3) 自动优化 SystemML 先进的机器学习主要基于两方面: SystemML

jopen 2015-11-05   10110   0

分布式数据处理引擎Apache Flink v1.1.1发布 资讯

Flink 可以定制化内存管理。在这点,如果要对比 Flink 和 Spark 的话,Flink 并没有将内存完全交给应用层。这也是为什么 Spark 相对于 Flink,更容易出现 OOM 的原因(out of

jopen 2016-08-11   14734   0

数据科学家调查:受挫数据多样性,吐槽 Hadoop 资讯

挑战。 值得注意的是,只有48%的受访数据科学家表示他们在工作中曾使用过Hadoop或者 Spark,高达76%的数据科学家抱怨Hadoop太慢,编程速度过慢,以及其他一些局限性。(参考阅读: Hadoop真特么难用

jopen 2014-07-30   5848   0
Hadoop   Spark  

使用Docker进行Java开发 经验

Web框架,但我这里并不打算使用它们。我只想要的是一个小的框架所以我选择了Spark,它是一个基于Java 8的极小的框架。Spark使用Maven作为构建工具。 源代码和配置文件 在这个例子中你要增加三个文件:

jopen 2014-12-23   54912   0
Docker  

如何使用Docker进行Java入门级开发 经验

Web框架,但我这里并不打算使用它们。我只想要的是一个小的框架所以我选择了Spark,它是一个基于Java 8的极小的框架。Spark使用Maven作为构建工具。 源代码和配置文件 在这个例子中你要增加三个文件:

jopen 2015-02-01   20630   0
Docker  

不得不了解的Hadoop知识 经验

如果之前大家没有听从我的建议学习一些Spark和Storm的知识,那么现在还来得及(注:你可以忘记Shark,转而学习Spark SQL)。如今Spark正逐步被接受。当人们在同一句话中提及“实时

fn67 2015-03-21   15211   0

MapReduce朝不保夕的江湖地位 资讯

adoop工具,让用户编写针对Hadoop数据分析查询的标准SQL,以代替MapReduce。Spark 处理引擎也应运而生,其支持者声称它运行批处理作业的速度比MapReduce快100多倍,并且支

jopen 2016-02-24   11693   0
Hadoop  

推荐系统资源列表(List of Recommender Systems) 经验

are: PredictionIO is built on technologies Apache Spark , Apache HBase and Spray . It is a machine learning

jopen 2015-06-18   18486   0

大数据基础架构总结 经验

派也开始发力了,加州大学伯克利分校开发出来了Spark来做实时查询处理,刚开始Spark的语法 好诡异,后来慢慢出现了Shark项目,渐渐的使得Spark向SQL语法靠近。 未来的发展趋势: 时代的发

jopen 2015-01-28   48655   0

每个Java程序员需要了解的8个Java开发工具 资讯

这是一款体形轻巧,功能强大的 Web 应用框架。Spark 拥有简单而直接的方法。您可以通过一些繁琐的 XML 配置来使用 Spark 框架编写应用程序。Spark 能让你花费最少的精力来开发 Java 的

jopen 2015-03-10   24188   0
Java  

Java工程师如何在Docker上进行开发 资讯

现在有很多的Java Web框架,挑选一个非常小的框架,选择Spark吧!它是一款基于Java-8的微型Sinatra框架。如果你去阅读Spark的说明文档,会了解它是用Maven作为其构建工具。 在

jopen 2015-12-04   13962   0
Docker  

物联网技术周报第29期:Window 10 IoT和树莓派2打造六足机器人 资讯

编程语言快速开发嵌入式应用,它支持大多数的微处理器架构。 Spark Server 是由Spark(原Particle)团队推出的Spark协议(基于CoAP协议)的开源服务端 软件。它使用的是Node

jopen 2016-01-18   12640   0

一个电话 改变大数据命运的故事 资讯

确定使用后,许多新的软件也开始被创建出来进一步补充 Hadoop。比如 Twitter 使用 Spark 用来实时处理数据;雅虎使用 Spark 用来处理存储的数据。Cloudera 创建了 Impala 提高了查询 Hadoop

jopen 2013-07-04   6842   0

5 个第三方可选的 ASP.NET MVC 视图引擎 资讯

“ASPX View”。 在这篇文章中,我们将介绍另外5 个不同的第三方视图引擎。 1. Spark Spark 是ASP.NET MVC项目和Castle MonoRail框架项目一个开源视图引擎。

jopen 2013-03-12   13870   0
ASP.NET  

利用Electron(原来叫atom-shell)创建App的一些实用资源:Awesome Electron 经验

- Mobile interaction designer. Spark Dev - Professional IDE for Spark. Visual Studio Code - Free cross-platform

jopen 2015-05-12   103117   0

机器学习库,Apache Mahout 0.11.1 发布 资讯

11.0 扩展了与 Spark 版本的兼容性,引入了一些新特性和 bug 修复。 Mahout 0.11.1 相比 Mahout 0.11.0 改进如下: Spark 1.4+ 支持 Dot

jopen 2015-11-08   7694   0

HDFS Federation在美团点评的应用与改进 经验

1,使用了Kerberos作为认证支持;相关技术栈中,Spark应用版本包含1.1、1.3、1.4、1.5,同时使用了Zeppelin作为Spark notebook的开发工具;在查询引擎方面Hive有0

juce7588 2017-04-11   36681   0

你不应错过的 18 款 iOS 效率工具 App | 2015 年度盘点 资讯

平台效率类工具全面开花的一年,老牌的效率工具 Due 、 MindNode 等在今年都有重大更新,新秀也层出不穷,如邮箱客户端 Spark 、上网调试工具 Surge 等,涵盖了时间管理、邮件处理、搜索、书签管理、图片标记等方方面面。

jopen 2015-12-24   243626   0
APP  
1 2 3 4 5 6 7 8 9 10