P31

  Storm对于交通数据的处理 文档

Storm及交通实时数据处理报告人:汪杰宇绪论知识Storm架构一个简单的Storm例子Storm在交通数据处理中的应用目录背景:大数据的产生GBTBPBEBZB数据量的增长:在2006年,个人用户才刚刚迈进TB时代,全球一共新产生了约180EB的数据;在2011年,这个数字达到了1.8ZB。有市场研究机构预测(2009年):到2020年,整个世界的数据总量将会增长44倍,达到35.2ZB(1ZB=10亿TB)!1GB=2^30字节1TB=2^40字节1PB=2^50字节1EB=2^60字节1ZB=2^70字节背景:大数据处理模式主要的处理模式可以分为流处理(streamprocessing)和批处理(batchprocessing)两种。批处理是先存储后处理(store-process),而流处理则是直接处理(straight-throughprocess)。(有时也分为在线、离线、近线三种)

nd7b 2015-12-09   6303   0
P15

  SearchPlanner-技术报告 文档

SearchPlanner-搜索共享业务平台亚夫曾经的淘宝搜索系统架构100+个不同应用调用搜索服务20+个不同功能的子系统构成了淘宝的搜索系统存在的问题:无法提供完整的搜索服务用户体验不一致,算法团队的各种创新成果不能共享存在严重的安全隐患引擎及其它系统更新换代困难各应用重复工作,效率低下现在的淘宝搜索系统架构解决了旧架构的各种不足,将N*M的复杂关系,变为了N+M各业务在SearchPlanner平台上互相融合,涌现出了一系列创新型业务,成为了一个创新支撑平台面临的技术挑战:稳定性开发效率数据驱动的业务快速迭代SearchPlanner整体架构提供三个层次的服务:完整的搜索业务服务搜索的基础服务平台的基础服务

defeqw 2015-12-01   1677   0
P33

  淘宝搜索离线系统介绍-技术报告 文档

淘宝搜索离线系统介绍一淘搜索事业部淘宝搜索dump中心木桑概要淘宝搜索的离线场景计算需求存储需求全量流程&增量流程集群运维开发管理展望Q&A淘宝搜索的离线场景离线场景约束条件结构化数据的完整性\准确性:数据量大而又要完整、准确,更新及时性:更新多源头又要同步,更新数据量大而又要实时性架构业务逻辑友好性:全量增量流程不同而又要业务代码一致等淘宝搜索业务简介09年前架构Dumpserver……Dumpserver07年:12台08年:48台OracleSearchEngineXML09年架构-引入map/reduce09年架构–job序列计算需求-09年架构的问题Job链太长;多次重复数据I/O;问题不好查;对数据库压力大;业务逻辑分散,开发效率不高;Job数量跟随业务膨胀;hdfs只有顺序写能力,没有随机读写;增量任务速度慢;计算需求-理想状态和数据库关联少;全量时间控制在2小时内,每天做一次全量(join)计算;

defeqw 2015-11-30   2271   0
P77

  WebSphereMQ 教程 文档

*WebSphereMQ教程*提要WebsphereMQ介绍安装和配置WebsphereMQWebsphereMQ集群WebsphereMQ分布式队列管理WebsphereMQ故障诊断*议程MQ概念中间件MOM异步通信消息原理MQ对象演示Reference(备用)应用案例*MQ简史1992SSI(ServerSideIncludes,服务器端包含),开发了消息产品ezBridge;IBM为网络通信定义了3个API标准:CPI-C,RPC,MQI1992-3IBM开发消息产品(代码Victory)1993IBM从SSI那里购买了ezBridge的版权之后MQSeriesversion1产生(主要运行在大型机上)1994/1995IBM发布三个平台的MQ:AIX,OS/2,和AS/400.到MQSeries5.3(WebSphereMQ5.3)已支持超过35个平台Windows,Linux,多个Unix,……2006年初WebSphereMQ6发布CPI-C(CommonProgrammingInterfaceCommunication,IBM公共通信编程接口)是一个与平台无关的API,它与一套公用的APPC(高级程序间通信)接口。简单直接,在支持CPI-C的所有平台上都可移植。

aihouhen 2015-11-25   2620   0
P22

  朴实前行--模块化重构之旅 文档

朴实前行模块化重构之旅技术中心-网站研发部-前端报告人:刘畅临目录第一部分背景第二部分解决方案第三部分总结与展望第一部分背景1.现有架构1.1.自动化构建工具ClosureCompiler、cssmin、imagemin……第一部分背景1.现有架构1.2.代码include共用业务通用组件业务脚本第一部分背景2.问题大第一部分背景2.问题重复依赖层次不清晰内容规划欠妥乱第一部分背景2.问题开发环境复杂用例生成步骤繁琐我们在这里杂目录第三部分总结与展望第二部分解决方案第一部分背景第二部分解决方案使用新的高大上的框架X第二部分解决方案不用怂!就是干!

koel 2015-11-22   2375   0
P150

  project在项目进度管理中的使用 文档

项目进度管理是项目管理重要的环节,项目经理的一个重要任度就是制定项目进度计划,它贯穿了项目管理的全部过程。如何做好项目管理,特别采用软件做好管理,是项目经理的基本功。 时间管理的特殊性 宁可信其无,不可信其有 工作完成情况的百分比表示方法 时间衡量的详细程度应充分结合管理的有效性

ddxkj 2015-11-16   757   0
P150

  Linux 基础教程(清华课件) 文档

总目录第1部分Linux操作系统第1章操作系统概述第2章处理机管理第3章存储管理第4章调度第5章设备第6章文件系统第2部分操作系统命令及shell编程第7章Linux基本命令第8章使用vi编辑文件第9章shell编程第3部分系统管理第10章Linux系统软件的获取和安装第11章账号管理第12章文件系统管理第13章TCP/IP网络管理第14章备份与恢复第15章XWindow及Genie应用程序第1部分Linux操作系统第1章操作系统概述1.1操作系统简介1.2操作系统接口1.3操作系统功能1.4操作系统结构1.5Linux操作系统介绍1.6Linux的内核特征1.7Linux的发展及展望1.8小结习题操作系统是计算机系统的基本系统软件。软件系统中操作系统是所有软件的核心。操作系统负责控制、管理计算机的所有软件、硬件资源,是惟一直接和硬件系统打交道的软件,是整个软件系统的基础部分,同时还为计算机用户提供良好的界面。

king2015 2015-11-15   3838   0
Linux   方案   报告   手册   Apache  
P20

  多租户Saas应用 文档

1.什么是多租户多租户是一种结构---服务提供节点提供一个应用程序实例,多租户共同访问该实例。2.多租户的好处在服务端,应用的部署变的简单了。因为我们只需部署一个实例即可。高效地利用硬件,节省成本。特别是对中、小企业有吸引力。3.多租户模式的困难企业担心初始成本过大。现有的单租户程序如何迁移到多租户程序。用户担心维护时,需要复杂地定制,维护成本高。4.1多租户的定义多租户应用---多个租户共享硬件资源,硬件资源提供一个共享的应用和数据库实例。每个租户认为自己独占资源,因为实例提供高度的定制以满足租户所需。租户---是指求租SaaS解决方案的企业实体。一个租户一般会有多个用户。

xrogzu 2015-11-13   810   0
方案   报告  
P12

  Linux操作系统漏洞扫描和分析实验报告 文档

1、学习虚拟机VMware的使用 2、熟悉Linux操作系统的安装和使用 3、了解Linux操作系统下软件的安装和配置 4、通过漏洞扫描实验了解Linux操作系统的安全性

yuelu2006 2015-11-02   3898   0
Linux   报告  
P25

  单元测试交流 文档

目录测试概念交流如何确定测试范围如何实施测试测试概念-概念单元测试是面向程序设计的测试,测试对象为单个程序单元或几个程序单元构成一个小的功能单元的测试(IEEE)。接口测试是测试系统组件间接口的一种测试。接口测试主要用于检测外部系统与系统之间以及内部各个子系统之间的交互点。测试的重点是要检查数据的交换,传递和控制管理过程,以及系统间的相互逻辑依赖关系等。--百度概念接口测试是测试组件或服务通过接口的方式退外提供的功能正确性的测试,它是集成测试阶段的一种测试手段.

gcf 2015-10-21   711   0
P44

  数据结构实验报告 文档

需求分析1.问题描述为学校来访者提供各种信息查询服务,设计校园导游咨询系统,方便查找学校主要单位、校园景点之间最短距离,并能及时对该图进行更新。2、基本需求(1)键盘输入存放各地点名称、代号、简介等信息。(2)输出每两个位置有直接路径的距离。(3)查询任意两个点之间的一条最短路径的长度及途经地点。(4)对于给定任意位置,到其他任意位置的最短路径。(5)完成修改、插入、删除,重新输出有直接路径的每两个位置的距离。二、程序的主要功能该校园导游程序共有6个主要功能:功能一:查询景点的信息;功能二:查询任意两景点之间的最短路径及路径长度;

1826175177 2015-10-12   1711   0
报告  
P150

  《EJB3.0入门经典》总结 文档

第2章会话Bean(SessionBean)第3章实体Bean(EntityBean)第6章Web服务(WebService)*题型读程序,写结果;编程;写操作步骤。*2.1.2开发只实现Local接口的无状态SessionBean开发只有Local接口的无状态会话SessionBean,使用@Local注释声明接口是本地接口。开发只有Remote接口的无状态会话SessionBean,使用@Remote注释声明接口是远程接口。当@Local和@Remote注释都不存在时,容器会将Beanclass实现的接口默认为Local接口。如果EJB与客户端部署在同一个应用服务器,采用Local接口访问EJB优于Remote接口。

liuyb123 2015-08-24   2377   0
JEE框架   报告   答辩   Java   ini  
P45

  基于Hadoop的大数据应用分析 文档

基于Hadoop的大数据应用分析5.东软基于HADOOP的大数据应用建议内容提要1.大数据背景介绍2.HADOOP体系架构3.基于HADOOP的大数据产品分析4.基于HADOOP的大数据行业应用分析IDC定义:为了更为经济的从高频率获取的、大容量的、不同结构和类型的数据中获取价值,而设计的新一代架构和技术。大数据定义及特点大数据对系统的需求High performance–高并发读写的需求高并发、实时动态获取和更新数据HugeStorage–海量数据的高效率存储和访问的需求类似SNS网站,海量用户信息的高效率实时存储和查询

xcxc 2015-08-24   782   0
P150

  Qemu Libvirt & KVM 教程大全 文档

1.1虚拟化的基本类型无虚拟化CPU一般设为四个RingKernelMode一般跑在Ring0上UserMode一般跑在Ring3上对于一个普通的传统的Linux系统没有问题虚拟化在Guest机器和Host机器中间加一层HypervisorHost机器看它像跑在自己上面的程序Guest机器看它像自己所运行的硬件如果Host机器和Guest机器都跑相同的Linux,它们的Kernel都想运行在Ring0,可怎么办?

billzhou77 2015-08-20   3029   0
虚拟化   报告   Intel   x86   Protocol  
P69

  软件测试的基本理论和方法 文档

软件测试培训测试的基本理论及方法测试的基本理论及方法对软件测试的误解如何理解软件测试软件测试的定义软件测试的对象测试的目的软件测试的分类测试类型的解释黑盒测试的几种典型方法测试的分类与比较测试流程测试规范软件测试的文档和模版软件系统的主要测试内容及技术WEB应用的测试测试工作中需要注意的问题企业的测试策略关于测试的几个问题对软件测试的误解如果发布出去的软件有质量问题,那是软件测试人员的错.软件测试技术要求不高,至少比编程容易多了.软件测试随便找一个能力差的人就能做.

querine 2015-08-13   4740   0
P49

  Maven使用讲解 文档

Maven使用课程内容Maven简介及安装Maven基本使用Maven基本概念Maven插件应用POM介绍Maven多模块项目Maven仓库课程内容Maven简介及安装Maven基本使用Maven基本概念Maven插件应用POM介绍Maven多模块项目Maven仓库Maven是什么Maven是一个项目管理工具,它包含了一个项目对象模型(Project Object Model),一组标准集合(约定优于配置),一个项目生命周期(Project Lifecycle),一个依赖管理系统(Dependency ManagementSystem),和用来运行定义在生命周期阶段(phase)中插件(plugin)目标(goal)的逻辑。当你使用Maven的时候,你用一个明确定义的项目对象模型来描述你的项目,然后Maven可以应用横切的逻辑,这些逻辑来自一组共享的(或者自定义的)插件。

zbb15326 2015-08-09   598   0
Maven   项目构建   报告   Dart   Go  
P27

  手机软件测试-经验分享 文档

Android、ios系统介绍传统手机测试与手机应用软件测试区别手机软件测试定义手机软件的生命周期及大概成分测试的策略测试计划测试用例执行测试测试报告手机测试注意事项测试方法

936890197 2015-08-05   3478   0
P23

  Android平台自动化测试工具Monkey 文档

什么是Monkey,Monkey测试是Android平台自动化测试的一种手段,通过Monkey程序模拟用户触摸屏幕、滑动Trackball、按键等操作来对设备上的程序进行压力测试,检测程序多久的时间会发生异常。可以运行在模拟器里或实际设备中。它向系统发送伪随机的用户事件流,实现对正在开发的应用程序进行压力测试。

tester 2015-07-24   7281   0
P13

  知识分享 - redis 文档

介绍redis命令用例事务复制持久化传统sql数据模型转化例分布式数据服务镜像分区目录介绍redisNosql内存支持主从模式K-V优点。操作不支持rollbackRedis命令只会因为错误的语法而失败(并且这些问题不能在入队时发现),或是命令用在了错误类型的键上面:这也就是说,从实用性的角度来说,失败的命令是由编程错误造成的,而这些错误应该在开发的过程中被发现,而不应该出现在生产环境中。因为不需要对回滚进行支持,所以Redis的内部可以保持简单且快速。

122826206 2015-07-07   2353   0
P27

  系统模块化培训文档 文档

模块化设计平台开发部主讲:史东旭**什么是模块化设计模块化定义:把程序划分成若干个模块,每一个模块完成一个子功能,把这些模块组合起来,完成指定的功能。模块定义:一个有明确定义的输入、输出和特性的程序实体。模块化的特点:重用性,降低开发复杂度,模块关注单一功能,组合,降低耦合度*为什么要用模块化设计非模块化设计*模块化重用性降低开发复杂度降低代码耦合性不用重复发明轮子封装易维护团队同步开发模块化与非模块化对比非模块化代码不可重用代码复杂度随着技术/业务复杂度增加而提高耦合严重代码逻辑暴露很难维护升级单人单功能开发模式MAVENMAEVN是基于项目对象模型(POM)。

zhdalong 2015-06-30   482   0
报告   培训  
1 2 3 4 5 6 7 8 9 10

关键词

最新上传

热门文档