P19

log4j使用手册 文档

程序开发环境中的日志记录是由嵌入在程序中以输出一些对开发人员有用信息的语句所组成。例如,跟踪语句(trace),结构转储和常见的 System.out.println 或 printf 调试语句。log4j 提供分级方法在程序中嵌入日志记录语句。日志信息具有多种输出格式和多个输出级别。

lc0727 2017-06-06   80   0
P40

《flume日志收集与mapreduce模式》 文档

本书分为上下两篇,对flume重要组件及其在日常开发中的使用以及mapreduce编程知识进行了全面而深入的探讨,提供大量实践案例,可以帮助读者快速掌握并灵活运用flume和mapreduce知识解决实际项目中遇到的问题

mozai 2017-03-23   3874   0
P40

log4j 教程 文档

Log4j 是一个使用 Java 语言编写的,可靠、快速、灵活的日志框架(API),使用 Apache Software License授权。Log4j 是一个使用 Java 语言编写的流行类库,它被移植到 C、C++、C#、Perl、Python、Ruby 和 Eiff el 语言中。

zhikai 2017-02-20   40   0
P5

  log4j详解与配置 文档

执念媛 2016-12-07   2912   0
P10

  java_log 文档

他为Log4JLogger;NoOpLog;LogKitLogger;Jdk14Logger;AvalonLogger提供了一共通用的接口进行调用,使得在使用各种不同的第三方日志包时变得非常简单。SimpleLog:是commons_logging自带的一个控制台输出日志。

yu2388353 2016-09-08   37   0
P7

  log4j的使用 文档

Log4j有三个主要的组件:Loggers(记录器),Appenders (输出源)和Layouts(布局)。这里可简单理解为日志类别,日志要输出的地方和日志以何种形式输出。综合使用这三个组件可以轻松地记录信息的类型和级别,并可以在运行时控制日志输出的样式和位置。

lujiao1127 2016-05-16   32   0
P14

Rsyslog的使用 文档

主要内容• Rsyslog的特性与使用场景• Rsyslog的系统架构• Rsyslog常用配置与模块• Rsyslog在收集NGX日志案例

bnwe 2016-01-31   30   0
P15

log4net 用户手册 文档

log4net 是 .Net 下一个非常优秀的开源日志记录组件。 log4net 记录日志的功能非常强大。它可以将日志分不同的等级,以不同 的格式,输出到不同的媒介。 Java 平台下,它还有一个姐妹组件 —— log4j 。

cm74 2016-01-25   44   0
P9

Apache log4net 介绍 文档

本文档编写时,log4net 的最新版本是 1.2.11,本文档的内容基于该版本的 在线文档。 log4net 有三种主要组件:loggers、appenders 和 layouts。 三类组件一起工作使得开发者可以根据信息(message)的种类(type)和 级别(level)记录信息,控制在运行时如何格式化信息以及向何处报告。

cm74 2016-01-25   2883   0
P16

  日志分析系统 文档

MM:/mnt/jrcoreOuter/jrcoreOuter.log查找数据根据字段匹配选择时间段选择时间段(相对时间)选择时间段(绝对时间)刷新频率命中率保存搜索打开已经保存好的搜索

xueyufeihu 2015-12-29   2149   0
P16

log4j入门、详解 文档

log4j入门、详解21.Log4j简介在应用程序中添加日志记录总的来说基于三个目的:监视代码中变量的变化情况,周期性的记录到文件中供其他应用进行统计分析工作;跟踪代码运行时轨迹,作为日后审计的依据;担当集成开发环境中的调试器的作用,向文件或控制台打印代码的调试信息。最普通的做法就是在代码中嵌入许多的打印语句,这些打印语句可以输出到控制台或文件中,比较好的做法就是构造一个日志操作类来封装此类操作,而不是让一系列的打印语句充斥了代码的主体。在强调可重用组件开发的今天,除了自己从头到尾开发一个可重用的日志操作类外,Apache为我们提供了一个强有力的日志操作包Log4j。

owd 2015-12-19   69   0
P269

Flume海量日志聚合的系统使用教程 文档

Flume是一个分布式、可靠、和高可用的海量日志聚合的系统,支持在系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的能力。<br> 设计目标:<br> (1) 可靠性<br> 当节点出现故障时,日志能够被传送到其他节点上而不会丢失。Flume提供了三种级别的可靠性保障,从强到弱依次分别为:end-to-end(收到数据agent首先将event写到磁盘上,当数据传送成功后,再删除;如果数据发送失败,可以重新发送。),Store on failure(这也是scribe采用的策略,当数据接收方crash时,将数据写到本地,待恢复后,继续发送),Best effort(数据发送到接收方后,不会进行确认)。<br> (2) 可扩展性<br> Flume采用了三层架构,分别为agent,collector和storage,每一层均可以水平扩展。其中,所有agent和collector由master统一管理,这使得系统容易监控和维护,且master允许有多个(使用ZooKeeper进行管理和负载均衡),这就避免了单点故障问题。<br> (3) 可管理性<br> 所有agent和colletor由master统一管理,这使得系统便于维护。多master情况,Flume利用ZooKeeper和gossip,保证动态配置数据的一致性。用户可以在master上查看各个数据源或者数据流执行情况,且可以对各个数据源配置和动态加载。Flume提供了web 和shell script command两种形式对数据流进行管理。

nbby 2015-12-01   79   0
P23

  芒果TV ELK 日志系统实践 -刘波涛 文档

芒果TVELK日志系统实践关于我刘波涛芒果TV研发工程师日志文件重要性Linux哲学:万物皆文件运维哲学:日志管理是保障高质量服务的基础日志架构演变日志系统架构ELK系统架构RsyslogNginx:通过syslog模块转发应用程序:通过调用syslog函数写入规范统一格式v8版本以上(原生支持Kafka)Rsyslog-Avoid-Block关闭HUPIsRestart配置选项(低版本)监控rsyslog服务,一旦crashes能够马上重启传输方式由TCP改为UDP(恶性循环)Kafka强大消息堆积能力日志领域高度成熟支持Hadoop数据并行加载高性能(顺序写单机写入TPS约在百万秒/s)

bger 2015-10-28   48   0
P18

Flume 经典自学文档 文档

1.介绍Flume是Cloudera提供的日志收集系统,具有分布式、高可靠、高可用性等特点,对海量日志采集、聚合和传输,Flume支持在日志系统中定制各类数据发送方,同时,Flume提供对数据进行简单处理,并写到各种数据接受方的能力。Flume使用java编写,其需要运行在Java1.6或更高版本之上。

shiyf111 2015-10-28   104   0
P140

Fluentd 用户手册 文档

Fluentd是一个日志收集系统,它的特点在于其各部分均是可定制化的,你可以通过简单的配置,将日志收集到不同的地方。 目前开源社区已经贡献了下面一些存储插件:MongoDB, Redis, CouchDB,Amazon S3, Amazon SQS, Scribe, 0MQ, AMQP, Delayed, Growl 等等。

g4yy 2015-08-07   4371   0
P18

新浪实时日志分析服务进化 文档

技术架构 技术架构 Kafka:接收⽤户⽇志的消息队列 Logstash:将⽇志解析为json输出给 Elasticsearch Elasticsearch:实时⽇志分析服务的核⼼ 技术,⼀个schemaless,实时的数据存储 服务,通过index组织数据,兼具强⼤的 搜索和统计功能。 Kibana:基于Elasticsearch的数据可视化 组件,超强的数据可视化能⼒是众多公司 选择ELK stack的重要原因。

dmc3 2015-07-25   36   0
P24

海量日志实时分析 - 日志搜索引擎 文档

日志的应用场景•过去的做法•现在的做法•日志搜索引擎•日志易产品架构一条

pngg 2015-07-04   39   0
P38

Hadoop的ETL任务 - Flume使用及其优化 文档

Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的能力。

tony2007 2015-06-20   31   0
P7

  大规模日志收集处理项目的技术总结 文档

以下是2012年一个公司内部项目的技术总结,涉及到的方面比较多比较杂,拿出来和大家分享下。如果有更好的方案或者想法请联系我,谢谢~!注:文章中提到的其他系统(如哈勃Agent、EagleEye)是公司内部的其他系统,这里就不详细介绍了。简介TLog是一个分布式的,可靠的,对大量数据进行收集、分析、展现的的系统。主要应用场景是收集大量的运行时日志,分析并结构化存储,提供数据查询和展现。服务能力收集淘宝线上8000+台机器的日志,每天日志量5T+。一般情况下,数据从产生到TLog最终入库有10秒以下的延迟。整个TLog集群有12台机器(虚拟机,5核,8G内存),10台负责日志的收集和解析,2台提供数据的查询和展现。

tony2007 2015-06-19   56   0
P75

日志管理与分析权威指南_迷你书 文档

《日志管理与分析权威指南》由日志管理与分析领域资深安全专家亲笔撰写,从日志的基本概念开始,循序渐进讲解整个日志生命期的详细过程,涵盖日志数据收集、存储分析和法规依从性等主题,并通过丰富的实例,系统阐释日志管理与日志数据分析的实用技术和工具,既包括传统的syslog,也涵盖云计算和大数据环境下新兴的日志分析技术。

tankeryang 2015-05-13   91   0
1 2 3 4 5