Java爬虫框架,WebMagic 0.4.0 发布 资讯

在http请求中主动开启gzip,降低传输开销 #31 。 修复0.3.2及之前版本连接池不生效的问题 #30 ,使用 HttpClient 4.3.1 新的连接池机制,实现连接复用功能。 经测试,下载速度可达到90%左右的提升。测试代码:

jopen 2013-11-07   20176   0

JDBC组件 Druid 0.1.9发布 资讯

代理Driver,能够提供基于Filter-Chain模式的插件体系。 DruidDataSource 高效可管理的数据库连接池。 SQLParser Druid可以做什么? 1) 可以监控数据库访问性能,Druid内

openkk 2011-09-15   12757   0
JDBC  

JDBC组件 Druid 0.1.18 发布,优化对Oracle的支持 资讯

代理Driver,能够提供基于Filter-Chain模式的插件体系。 DruidDataSource 高效可管理的数据库连接池。 SQLParser Druid可以做什么? 1) 可以监控数据库访问性能,Druid内

proxymail 2012-01-12   28459   0
JDBC   Druid  

高性能Node.js开发框架 rrestjs 经验

上+enter,监听指定文件夹(包括其子文件),当发生文件改变自动重启子进程 8、数据库连接池,封装了mongodb的数据库连接池,方便高效的操作mongodb数据库 9、增加日志系统,利用log4js可以根据需要分级,分文件的存储日志

openkk 2012-08-12   81439   0
P11

  SSM 快速整合 文档

引入支持applicationContext.xml的约束头文件 配置dataSource,这里采用的是BoneCP连接池,性能上其比C3P0连接池要更高一些(可以网上搜索进行了解) 以上spring配置就完成了! 5.配置mybaits相关配置

企鹅你生气 2015-08-30   8259   0
P3

  java分布式事务概念与实现示例 文档

在WebLogic里配置DataSource 1.2.1. 配置连接池,注意这里应该选择驱动是Thin XA而不是Thin 1.2.2. 配置数据源,使用前面配好的XA的连接池 2. 程序实现 2.1. 实现自己的Xid

why0806 2013-02-19   4754   0
P5

  WebSphere监控使用 文档

将鼠标移动到参数名称右边的小问号上面,即可弹出该参数所对应的意义解释。 7. 各常用指标参数所在位置 jdbc连接池: 位于 性能模块-》JDBC连接池-》JDBC provider名称-》JNDI名称(斜体部分为具体的配置名称) WebContainer:

sixfeeling 2011-12-08   3960   0
P9

  基于CXF的WebService开发介绍 文档

jackson-mapper-asl 1.7.5 test 附件 这是我写的例子的源代码,里面也含有thrift的例子有兴趣的也可以看看

Stupid 2012-05-10   4828   0

Facebook欲做最大开源公司:不会靠卖软件赚钱 资讯

的开源项目总数达到了 225 项。 Apache Cassandra(一种 NoSQL 数据库)、Thrift(为扩展性跨语言服务提供框架)、Apache Hive(建立在 Hadoop 顶端的数据仓库基础结构)及其他很多项目,都属于

jopen 2014-12-21   5797   0

Hadoop Sentry 学习 经验

图为Sentry的基本架构,目前Sentry支持 Hive(凭借HiveServer2的基于thrift 的RPC 接口) 和Impala 。但是Sentry 具有高度模块化和可扩展的机制,它可以扩

jopen 2014-08-16   32366   0

生成Java JDBC访问代码,从SQL文件 经验

plate(Spring),等等。这几种,各有各的优势, 也有很多用户。 最近在项目中,受Thrift,以及其它一些项目启发,试着写了一个程序,来自动生成JDBC的访问代码。 SQL,简洁,表达力强

jopen 2014-11-30   20266   0

大数据(二) - HDFS 经验

Fuse:实现了fuse协议 HDFS lib hdfs:C/C++访问接口 HDFS 其他语言编程API 使用thrift实现 支持C++、Python、php、C#等语言 HDFS2.0新特性(还没有完全实现,谨慎使用)

jopen 2016-01-20   24633   0

存储图数据的数据库 FlockDB 经验

pps与数据库独立,随着查询负载增加,我们可以增加更多的flapps。Flapps暴露了很少的thrift API给客户端,我们写的Ruby客户端包含更丰富的接口。 我们使用Gizzard

openkk 2011-12-01   16602   0

爬虫框架设计 经验

lave可以有多个,主要负责爬取网页内容,以及对爬取下来的网页内容进行持久化的工作。整个项目用Thrift作为RPC通信框架。 1. 爬虫流程 如果是一个单机版的爬虫,其实代码非常简单: Initialize:

jopen 2016-01-11   16477   0

国内 Top500Android 应用分析报告 经验

Name Users NineOldAndroids 150 zxing 121 okio 119 thrift 97 bolts 76 android-gif-drawable 72 spdy 63 photoview

AleNgabidj 2016-07-11   18279   0

Hadoop Distributed System (HDFS) 写入和读取流程 经验

同时写和任意的文件修改,则并不是十分适合。 目前HDFS支持的使用接口除了Java的还有,Thrift、C、FUSE、WebDAV、HTTP等。HDFS是以block-sized chunk组织其

fmms 2012-02-21   56900   0

Storm快速理解 经验

Programming language agnostic :支持多语言编程,个人理解就是使用 thrift 生成 server/Client/Topology 的各个组件的接口,可以使用多种语言去具体实现。

jopen 2014-03-31   15890   0

11 个开源的NoSQL面向文档的数据库 资讯

set of simple services built on top of the Apache Thrift framework that provides indexing and document storage

jopen 2012-07-23   11145   0
NOSQL  

微软开源 rDSN 分布式系统开发框架 资讯

敏捷性,性能以及鲁棒性。rDSN最简单的用法可以看成是一个和主流RPC框架(比如Apache Thrift)等兼容的升级版RPC框架,或者是一个采用基于事件编程的高性能任务库。开发者设置rDSN为测试

码头工人 2015-06-01   11593   0
微软  

VMware在DockerCon EU宣布开源“Photon Controller”基础设施控制器 资讯

每个由Photon Controller控制的物理宿主都有一个代理在其之上运行,提供用 Apache Thrift 实现的RPC接口,被其他所有部件用于与宿主交流。有很多特殊的部件用于监督其他部件的运行状况和

jopen 2015-12-02   15372   0
1 2 3 4 5 6 7 8 9 10