SARG是一款基于網(wǎng)絡(luò)的工具,它可以分析Squid日志,并以更詳細(xì)的方式展示分析。系統(tǒng)管理員可以利用SARG來(lái)監(jiān)視哪些網(wǎng)站被訪問(wèn)了,并跟蹤訪問(wèn)量最大的網(wǎng)站和用戶。本文包含了SARG配置工作。SARG提供了很多有用的特性,但是分析一個(gè)原始Squid日志文件并不直接。比如,你如何分析下面Squid日志中的時(shí)間戳和數(shù)字?
1404788984.429 1162 172.17.1.23 TCP_MISS/302 436 GET http://facebook.com/ - DIRECT/173.252.110.27 text/html
1404788985.046 12416 172.17.1.23 TCP_MISS/200 4169 CONNECT stats.pusher.com:443 - DIRECT/173.255.223.127 -
1404788986.124 174 172.17.1.23 TCP_MISS/200 955 POST http://ocsp.digicert.com/ - DIRECT/117.18.237.29 application/ocsp-response
1404788989.738 342 172.17.1.23 TCP_MISS/200 3890 CONNECT www.google.com:443 - DIRECT/74.125.200.106 -
1404788989.757 226 172.17.1.23 TCP_MISS/200 942 POST http://clients1.google.com/ocsp - DIRECT/74.125.200.113 application/ocsp-response
1404788990.839 3939 172.17.1.23 TCP_MISS/200 78944 CONNECT fbstatic-a.akamaihd.net:443 - DIRECT/184.26.162.35 -
1404788990.846 2148 172.17.1.23 TCP_MISS/200 118947 CONNECT fbstatic-a.akamaihd.net:443 - DIRECT/184.26.162.35 -
1404788990.849 2151 172.17.1.23 TCP_MISS/200 76809 CONNECT fbstatic-a.akamaihd.net:443 - DIRECT/184.26.162.35 -
1404788991.140 611 172.17.1.23 TCP_MISS/200 110073 CONNECT fbstatic-a.akamaihd.net:443 - DIRECT/184.26.162.35 –
我們使用yum來(lái)安裝安裝必要的依賴。
# yum install gcc make wget httpd crond
在啟動(dòng)時(shí)加載必要的服務(wù)
# service httpd start; service crond start
# chkconfig httpd on; chkconfig crond on
現(xiàn)在我們下載并解壓SARG
上一節(jié)教程中,我們展示了如何在CentOS上使用Squid配置透明代理。Squid提供了很多有用的特性,但是分析一個(gè)原始Squid日志文件并不直接。比如,你如何分析下面Squid日志中的時(shí)間戳和數(shù)字?
1404788984.429 1162 172.17.1.23 TCP_MISS/302 436 GET http://facebook.com/ - DIRECT/173.252.110.27 text/html
1404788985.046 12416 172.17.1.23 TCP_MISS/200 4169 CONNECT stats.pusher.com:443 - DIRECT/173.255.223.127 -
1404788986.124 174 172.17.1.23 TCP_MISS/200 955 POST http://ocsp.digicert.com/ - DIRECT/117.18.237.29 application/ocsp-response
1404788989.738 342 172.17.1.23 TCP_MISS/200 3890 CONNECT www.google.com:443 - DIRECT/74.125.200.106 -
1404788989.757 226 172.17.1.23 TCP_MISS/200 942 POST http://clients1.google.com/ocsp - DIRECT/74.125.200.113 application/ocsp-response
1404788990.839 3939 172.17.1.23 TCP_MISS/200 78944 CONNECT fbstatic-a.akamaihd.net:443 - DIRECT/184.26.162.35 -
1404788990.846 2148 172.17.1.23 TCP_MISS/200 118947 CONNECT fbstatic-a.akamaihd.net:443 - DIRECT/184.26.162.35 -
1404788990.849 2151 172.17.1.23 TCP_MISS/200 76809 CONNECT fbstatic-a.akamaihd.net:443 - DIRECT/184.26.162.35 -
1404788991.140 611 172.17.1.23 TCP_MISS/200 110073 CONNECT fbstatic-a.akamaihd.net:443 - DIRECT/184.26.162.35 –
我們使用yum來(lái)安裝安裝必要的依賴。
# yum install gcc make wget httpd crond
在啟動(dòng)時(shí)加載必要的服務(wù)
# service httpd start; service crond start
# chkconfig httpd on; chkconfig crond on
現(xiàn)在我們下載并解壓SARG
# wget http://downloads.sourceforge.net/project/sarg/sarg/sarg-2.3.8/sarg-2.3.8.tar.gz?
# tar zxvf sarg-2.3.8.tar.gz
# cd sarg-2.3.8
注意: 對(duì)于64位的Linux,log.c的源代碼需要用下面的文件打補(bǔ)丁。
1506c1506
if (fprintf(ufile->file, "%s\t%s\t%s\t%s\t%"PRIi64"\t%s\t%ld\t%s\n",dia,hora,ip,url,nbytes,code,elap_time,smartfilter)=0) {
---
> if (fprintf(ufile->file, "%s\t%s\t%s\t%s\t%"PRIi64"\t%s\t%ld\t%s\n",dia,hora,ip,url,(int64_t)nbytes,code,elap_time,smartfilter)=0) {
1513c1513
fprintf(fp_log, "%s\t%s\t%s\t%s\t%s\t%"PRIi64"\t%s\t%ld\t%s\n",dia,hora,user,ip,url,nbytes,code,elap_time,smartfilter);
---
> fprintf(fp_log, "%s\t%s\t%s\t%s\t%s\t%"PRIi64"\t%s\t%ld\t%s\n",dia,hora,user,ip,url,(int64_t)nbytes,code,elap_time,smartfilter);
1564c1564
printf("LEN=\t%"PRIi64"\n",nbytes); ---
> printf("LEN=\t%"PRIi64"\n",(int64_t)nbytes);
如下繼續(xù)并編譯/安裝SARG
# ./configure
# make
# make install
SARG安裝之后,配置文件可以按你的要求修改。下面是一個(gè)SARG配置的例子。
# vim /usr/local/etc/sarg.conf
access_log /var/log/squid/access.log
temporary_dir /tmp
output_dir /var/www/html/squid-reports
date_format e ## We use Europian DD-MM-YYYY format here ##
## we don’t want multiple reports for single day/week/month ##
overwrite_report yes
現(xiàn)在是時(shí)候測(cè)試運(yùn)行了,我們用調(diào)試模式運(yùn)行sarg來(lái)查看是否存在錯(cuò)誤。
# sarg -x
如果i一切正常,sarg會(huì)根系Squid日志,并在/var/www/html/squid-reports下創(chuàng)建報(bào)告。報(bào)告也可以在瀏覽器中通過(guò)地址http://服務(wù)器IP>/squid-reports/訪問(wèn)。
SARG可以用于創(chuàng)建日、周、月度報(bào)告。時(shí)間范圍用“-d”參數(shù)來(lái)指定,值的形式很可能為day-n、 week-n 或者 month-n,n的值為向前推移的天/周/月的數(shù)量。比如,使用week-1,SARG會(huì)生成之前一星期的報(bào)告。使用day-2,SARG會(huì)生成之前兩天的報(bào)告。
作為演示,我們會(huì)準(zhǔn)備一個(gè)計(jì)劃任務(wù)來(lái)每天運(yùn)行SARG。
# vim /etc/cron.daily/sarg
#!/bin/sh
/usr/local/bin/sarg -d day-1
文件需要可執(zhí)行權(quán)限。
# chmod 755 /usr/local/bin/sarg
現(xiàn)在SARG應(yīng)該會(huì)每天準(zhǔn)備關(guān)于Squid管理的流量報(bào)告。這些報(bào)告可以很容易地通過(guò)SARG網(wǎng)絡(luò)接口訪問(wèn)。
以上就是利用SARG工具,來(lái)分析分析Squid日志,并以更詳細(xì)的方式展示分析。系統(tǒng)管理員可以利用SARG來(lái)監(jiān)視哪些網(wǎng)站被訪問(wèn)了,并跟蹤訪問(wèn)量最大的網(wǎng)站和用戶。
另外腳本之家小編找來(lái)的這篇文章還包含了SARG配置工作。你可以進(jìn)一步自定義配置來(lái)滿足自己的要求。希望能幫助大家,謝謝有點(diǎn)。