专题：日志 -- IT技术博客大学习 -- 共学习共进步！

应朋友们的要求，我还是写一篇关于服务器日志法进行网站分析的原理以及它的优缺点是什么。请朋友们注意，网站服务器日志法并不容易进行，初学者，以及在绝大多数情况下，进行以用户行为分析为核心的网站分析，用不到服务器日志法。不过，作为网站分析历史不可分割的一部分以及重要的基础篇章，服务器日志法仍然值得一书。下面的这篇文章也是我要撰写的书中截取的内容（我要快马加鞭快快写了，已经辜负了太多朋友的重...

AWStats是一个基于Perl的WEB日志分析工具。

AWStats的运行模式
1、统计分析日志：将结果保存在一个txt文件中，最新版本支持xml数据格式。
2、输出分析结果：利用cgi程序输出，或生成静态html文件进行浏览。

日志扫描之利器:否定式前瞻的正则表达式

数据平台的源数据，很大部分来源于日志。一说到日志扫描和解析，不可避免就涉及到正则表达式匹配，没有了正则表达式，日志的匹配就很难做到自动化和高效。在日志匹配中，有种常见的匹配情形，叫“不包含”。就是说，我们希望这条日志，在匹配某个通用特征的情况下，又不包含某个特征，例如说： A pig is running. 我们希望匹配到所有带pig的日志，但是我们不希望匹配到pig带running的日志。而我们不希望改程序，扫描或者解析2次，...

基于网站日志数据挖掘的用户访问行为模式可视化研究

摘要：在进行互联网用户浏览行为的定量研究中，我们采用数据挖掘的方式对网站日志进行分析，用可视化技术展现日志的有效信息，开发了一个基于网站日志的可视化分析系统。这个分析系...

mysql audit-访问日志记录

背景：假设这么一个情况，你是某公司mysql-DBA，某日突然公司数据库中的所有被人为删了。尽管有数据备份，但是因服务停止而造成的损失上千万，现在公司需要查出那个做删除操作的人。但是拥有数据库操作权限的人很多，如何排查，证据又在哪？是不是觉得无能为力？mysql本身并没有操作审计的功能，那是不是意味着遇到这种情况只能自认倒霉呢？本文就将讨论一种简单易行的，用于mysql访问审计的思路。

slow-log中出现极大的执行时间的问题解决

情况描述：最近在分析服务器的slow-log和bin-log的时候，发现这两个log中有某些语句的execute time 极大例如：4294967295。 log信息：#091008 21:40:04 server id 1 end_log_pos 3440531 Query thread_id=63169 exec_time=4294967295 error_code=0 而出现这种极长执行时间的语句却不固定，最终通过以下的分析过程，找到了这个问题出现的原因第一步：确认相关语句没有问题使用以下语句，过滤出执行时间极大SQL语句（...

tomcat catalina.out日志切割每天生成一个文件

tomcat的catalina.out一直增长，太大了会造成tomcat异常，需要对其日志进行切割每天生成一个文件，并且删除7天前的文件。

AWStats简介：Apache/Windows IIS的日志分析工具的下载，安装，配置样例和使用（含6.9中文定义补丁）

日志统计系统在站点的用户行为分析中扮演了重要的角色，尤其是对于来自搜索引擎的关键词访问统计：是很有效的用户行为分析数据来源。随着互联网多年的发展，WEB日志统计工具已经越来越成熟，功能也越来越丰富。其中有很多是开放源代码的， AWStats就是其中非常优秀的一款。

多服务器的日志合并统计――apache日志的cronolog轮循

内容摘要：你完全不必耐心地看完下面的所有内容，因为结论无非以下2点：1 用 cronolog 干净，安全地轮循apache“日”志2 用 sort -m 合并排序多个日志或者用： clfmerge合并日志根据个人的使用经历：1 先介绍apache日志的合并方法；2 然后根据由此引出的问题说明日志轮循的必要性和解决方法，介绍如何通过cronolog对apache日志进行轮循；中间有很多在设计日志合并过程中一些相关工具的使用技巧和一些尝试的失败经历……我相信解决...

sort命令分析日志