Hadoop综述主要内容*第一篇HDFS分布式文件系统第二篇MapReduce第三篇Hbase简单介绍第一篇HDFS*一：TheDesignofHDFS二：HDFSConcepts三：应用程序示例四：DataFlow第二篇MapReduce*一：MapReduce基础二：MapReduce数据流三：MapReduce工作原理第三篇Hbase简单介绍*一：简介二：数据模型三：行、列、时间戳、API第

参考资料Google的核心技术Google的十个核心技术，而且可以分为四大类：分布式基础设施：GFS、Chubby和ProtocolBuffer。分布式大规模数据处理：MapReduce和Sawzall。分布式数据库技术：BigTable和数据库Sharding。数据中心优化技术：数据中心高温化、12V电池和服务器整合。Google的核心技术分布式基础设施GFS由于搜索引擎需要处理海量的数据，所以Google的两位创始人LarryPage和SergeyBrin在创业初期设计一套名为"BigFiles"的文件系统，而GFS（全称为"GoogleFileSystem"）这套分布式文件系统则是"BigFiles"的延续。

内存计算Spark和SQL on Hadoop黄永卿解决方案中心目录安装配置与简介为什么需要Spark Hadoop(MapReduce)极大的简化了大数据分析但是，随着大数据需求和使用模式的扩大，用户的需求也越来越多：>>更复杂的多重处理需求（比如迭代计算,ML,Graph）>>低延迟的交互式查询需求（比如ad-hocquery）MapReduce计算模型的架构导致上述两类应用先天缓慢，用户迫切需要一种更快的计算模型，来补充MapReduce的先天不足。

selenium 的特点.开源，免费 多浏览器支持：firefox、chrome、IE 多平台支持：linux 、windows、MAC 多语言支持：java、python、ruby、php、C#、 对web页面有良好的支持 简单（API 简单）、灵活（用开发语言驱动） 支持分布式测试用例执行

目录4.1.项目质量管理管控原则：在本项目中，主要通过交付作品质量管理、项目审核、测试、质量保障和风险控制、变更控制、培训等几个方面的活动，以达到项目质量的要求；本质量管理计划适用于本项目的规划、执行与控制及收尾全过程；质量管理主要活动：交付作品的质量管理，重点包括：制定标准和指引(例如：文档命名标准、文档编制工具规范、文档标准模板等)和交付件的验收流程和标准；项目审核，重点包括：阶段完成/里程碑就绪程度检核、定期健康检查、项目正式报告/会议等；

开源软件,UC Berkeley可扩展的分布式监控系统可以监控多个集群和节点使用多种协议传输信息使用开源标准XML,XDR，RRDTool APR Apache Httpd server PHP web前端组成部分Gmond在被监控节点上采集信息Gmetad收集gmond采集的信息,存入RRD中,为前端提供查询服务ApachehtttpdServer+php页面展示特点Multicast模式下,集群中所有的gmond节点都可以接收/发送监控信息.

浅谈云计算云计算总体架构IDC云虚拟桌面业务数据挖掘云端游戏网盘业务云端搜索呼叫中心云服务云端在线视频M2M云服务IPTV云服务业务应用层协同办公云统一通信云PaaS能力聚合与开放物联网能力

性能测试监控分析—linux监控分析目录:Linux硬件基础Linux监控命令Linux其他图形化监控工具Linux分析调优基于web应用的性能分析以及优化案例硬件基础CPU：就像人的大脑，主要负责相关事情的判断以及实际处理的机制。查询指令：cat/proc/cpuinfo内存：大脑中的记忆区块，将皮肤、眼睛等所收集到的信息记录起来的地方，以供CPU进行判断。查询指令：cat/proc/meminfo硬盘：大脑中的记忆区块，将重要的数据记录起来，以便未来再次使用这些数据。

引言《纽约时报》租用亚马逊的云计算服务，使用基于云计算的开源软件Hadoop，将其自1851年以来的1100万份报道转变成可搜索的数字化文档，耗时仅一天。如果用传统方法，这项工作可能要数月才能完成。最近兴起的云计算甚至可以让你体验每秒10万亿次的运算能力，拥有这么强大的计算能力可以模拟核爆炸、预测气候变化和市场发展趋势。云计算——方便您的生活数据中心（多终端同步-透明）PC/笔记本客户端浏览器PDA/手机/相机电子相册电视运算中心拍出的相片立即编辑修改在线编写文档、报告随时随地写日志随时随地的身体健康状况监控云计算云——提供超大规模计算资源的服务器集群超大规模虚拟化（透明）云云计算的产生和演进计算能力的需求的增长并行计算、分布式计算和网格计算

云计算臧斌宇复旦大学何谓云计算？一种基于Internet网的计算服务模型云使用者:自由的使用资源和获取信息云提供者:提供高效可靠的服务云构建者:构建服务平台，整合计算资源云计算vs电力网LowVoltageHighVoltageWirelessEthernet多种接入设备，随时随地使用，按需付费，易管理，负载平衡，基础设施多样计算模型的变迁科学计算科研，军用商用计算银行，航空个人计算办公，游戏互联网计算搜索，电子商务.

目录11.1云计算的起源1.2云计算的主流定义1.3云计算带给我们的1.4云计算市场展望1.5云计算的发展推动力1.6云计算的优势与挑战什么是云计算云计算特征/模式/主流平台国内运营商的云计算规划附录云计算的起源“它起源于我们将互联网视为云的时候…我们不关心消息去往何处…云为我们屏蔽了复杂性”KevinMarks,Google“融合的云是对服务器，应用，数据，基础设施的复杂性和异构平台的简化抽象”Amazon’sCEOJeffBezos云计算的理想

Kettle培训内容Kettle功能与产品介绍Kettle控件介绍Kettle案例演示Kettle调度Kettle介绍Kettle是一款开源的、元数据驱动的ETL工具集，是开源ETL工具里功能比较强大的一个。Kettle是”KettleE.T.T.L.Envirnonment”只取首字母的缩写，这意味着它被设计用来帮助你实现你的ETTL需要：抽取、转换、装入和加载数据； Kettl

监听器监听器就是一个实现特定接口的普通java程序，这个程序专门用于监听一个java对象的方法调用或属性改变，当被监听对象发生上述事件后，监听器某个方法将立即被执行。监听器典型案例：监听window窗口的事件监听操作事件源被监听对象(俗称事件源)事件对象(封装事件源及动作)监听器对象voiddo***(Evente){}通过e对象可以得到事件源。

Filter也称之为过滤器，它是Servlet技术中最激动人心的技术，WEB开发人员通过Filter技术，对web服务器管理的所有web资源：例如Jsp, Servlet, 静态图片文件或静态 html 文件等进行拦截，从而实现一些特殊的功能。例如实现URL级别的权限访问控制、过滤敏感词汇、压缩响应信息等一些高级功能。

学习javamail主要包括两部分：生成邮件和发送接收邮件。 效果演示： 可以编写程序代码生成一封带内嵌图片的邮件 可以编写程序生成一封即带附件又带图片的复杂邮件 可以编写java邮件发送程序发送邮件 实现类似sina、sohu的web邮件发送程序 邮件开发过程中的一些常见问题 中文名的邮件附件的乱码问题 Tomcat中Javamail支持与冲突问题 如何实现邮件群发

为什么要学习邮件开发许多办公自动化项目（OA）中都要附带发送邮件的功能.在许多网站项目中也都需要附带发送邮件的功能，即要求软件开发人员在WEB应用中编写相应的邮件处理程序。

Tomcat是在SUN公司推出的小型Servlet/JSP调试工具的基础上发展起来的一个优秀的Servlet容器，Tomcat本身完全用Java语言编写。目前是Apache开源软件组织的一个软件项目 。得到了广大开源代码志愿者的大力支持，且可以和目前大部分的主流Web服务器(IIS、Apache服务器)一起工作，它运行稳定、可靠且高效。已成为目前开发企业JavaWeb应用的最佳Servlet容器选择之一。

编写连接池需实现java.sql.DataSource接口。DataSource接口中定义了两个重载的getConnection方法： Connection getConnection() Connection getConnection(String username, String password) 实现DataSource接口，并实现连接池功能的步骤： 在DataSource构造函数中批量创建与数据库的连接，并把创建的连接加入LinkedList对象中。 实现getConnection方法，让getConnection方法每次调用时，从LinkedList中取一个Connection返回给用户。 当用户使用完Connection，调用Connection.close()方法时，Collection对象应保证将自己返回到LinkedList中,而不要把conn还给数据库。

SUN公司为了简化、统一对数据库的操作，定义了一套Java操作数据库的规范，称之为JDBC。 JDBC全称为：Java Data Base Connectivity（java数据库连接），它主要由接口组成。 组成JDBC的２个包： 　java.sql 　javax.sql 开发JDBC应用需要以上2个包的支持外，还需要导入相应JDBC的数据库实现(即数据库驱动)。

Servlet是sun公司提供的一门用于开发动态web资源的技术。 Sun公司在其API中提供了一个servlet接口，用户若想用发一个动态web资源(即开发一个Java程序向浏览器输出数据)，需要完成以下2个步骤： 编写一个Java类，实现servlet接口。 把开发好的Java类部署到web服务器中。 快速入门，用servlet向浏览器输出“hello servlet”。 阅读Servlet API，解决两个问题： 输出hello servlet的java代码应该写在servlet的哪个方法内？ 如何向IE浏览器输出数据？