38.99.13.124 - - [31/Jul/2007:18:05:43 +0900] \ 
"GET /modules/moniwiki/wiki.php/data_structure_stack?action=edit HTTP/1.0" 200 10181 
 

#include <unistd.h> 
#include <stdlib.h> 
 
#include <sys/types.h> 
#include <sys/stat.h> 
#include <fcntl.h> 
#include <time.h> 
 
#include <stdio.h> 
#include <string.h> 
 
const char date[13][4] = {"Jan", "Feb", "Mar", "Apr", "May", 
"Jun", "Jul", "Aug", "Sep", "Oct", "Nov", "Dec", ""}; 
 
int getTimeStemp(char *strdate) 
{ 
    struct tm tm_ptr; 
    char seps[] = "/: "; 
    char *tr; 
    int idx = 0; 
 
    tr = strtok(strdate, seps); 
 
    while(tr != NULL) 
    { 
        switch(idx) 
        { 
            case 0: 
                tm_ptr.tm_mday = atoi(tr); 
                break; 
            case 1: 
                tm_ptr.tm_mon =dayIdx(tr); 
                break; 
            case 2: 
                tm_ptr.tm_year = atoi(tr) - 1900; 
                break; 
            case 3: 
                tm_ptr.tm_hour = atoi(tr); 
                break; 
            case 4: 
                tm_ptr.tm_min = atoi(tr); 
                break; 
            case 5: 
                tm_ptr.tm_sec = atoi(tr); 
                break; 
        } 
        idx++; 
 
        tr = strtok(NULL, seps); 
    } 
    return mktime(&tm_ptr); 
} 
 
int main(int argc, char **argv) 
{ 
    char *fname = argv[1]; 
    FILE *fp = NULL; 
    char buf[1024]; 
    char *sp; 
    char *ep; 
    char date[80]; 
    int curtime = 0; 
    int prevtime = 0; 
    int logcount = 0; 
 
    fp = fopen(fname, "r"); 
    if (fp == NULL) 
    { 
        perror("Error :"); 
        return 1; 
    } 
 
    while(fgets(buf, 1024, fp)) 
    { 
        sp = strstr(buf,"["); 
        if (sp == NULL) continue; 
        ep = strstr(buf, "]"); 
        if (ep == NULL) continue; 
        snprintf(date, ep - sp, "%s", sp+1); 
        curtime = getTimeStemp(date); 
        if (!prevtime) prevtime = curtime; 
 
        if ((curtime - prevtime) > 60) 
        { 
            printf("%d %d\n", curtime, logcount); 
            logcount = 0; 
            prevtime = curtime; 
        } 
        else 
        { 
            logcount++; 
        } 
    } 
} 
 
int dayIdx(char *str) 
{ 
    int i; 
    for (i = 0; i < 13; i++) 
    { 
        if(strcmp(str, date[i]) == 0) 
            return i; 
    } 
    return -1; 
} 
 

#!/usr/bin/perl 
 
print  $ARGV[0]; 
 
open(FD, $ARGV[0]) || die ("Cannot open File $ARGV[0]"); 
 
$count = 0; 
while($line = <FD>) 
{ 
    $line =~ s/ /:/; 
    $line =~ s/\n//; 
    system("/usr/local/bin/rrdtool update /usr/local/mutihost/joinc/modules/rrd/webhits.rrd $line"); 
    print $count++,"\n"; 
} 
 

이제 rrdtool graph를 이용해서, 이번주와 지난주의 trend를 비교하기 위한 그래프를 만들었다.

rrdtool graph webhits.png -s "-1 week" \ 
DEF:hits=webhits.rrd:hits:AVERAGE \ 
DEF:lastweek=webhits.rrd:hits:AVERAGE:start="-2 weeks":end="start + 1week" \ 
SHIFT:lastweek:604800 \ 
LINE1=lastweek#00FF00:"last week" LINE1:hits#FF0000:"this week" 
 

이렇게 해서 만들어진 그래프는 분석된 데이터를 정확하게 보여주기는 하지만, Trend를 보여주기에는 너무 들쭉날쭉 함을 알 수 있다. Trend를 좀 더 명확하게 보여주기 위해서는 Log 그래프화 시킬 필요가 있을 것이다. 그래서 다음과 같이 graph를 생성했다.

# rrdtool graph webhits2.png -s "-1 week" -t "Web Server Hits - This week vs Last week" -v "hitss/minute" \ 
DEF:hits=webhits.rrd:hits:AVERAGE:start="-8 days":end="start + 8days" \ 
DEF:lastweek=webhits.rrd:hits:AVERAGE:start="-15 days":end="start + 8 days" \ 
SHIFT:lastweek:604800 \ 
CDEF:t_hits=hits,86400,TREND \ 
CDEF:t_lastweek=lastweek,86400,TREND \ 
LINE1:lastweek#CCFFCC:"last week" LINE1:hits#FFCCCC:"this week" \ 
LINE1:t_lastweek#00FF00:"last week" LINE1:t_hits#FF0000:"this week" 
 

여기에는 2개의 CDEF 가 추가되어 있다. 이것은 86400초(하루)단위로 트랜드를 보여주기 위한 용도로 사용된다. 이렇게 CDEF의 TREND로 다시 계산함으로써, 아래와 같이 일주일간의 트랜드를 보여주는 그래프를 완성했다.

위의 그래프는 처음 그래프와 함께 보여줌으로써 스케일을 맞추기 위해서, 최근 Trend 데이터가 명확히 표시되지 않는다. 해서 최초 그래프를 제회하고, 최근 그래프만 뽑아서 보기로 했다.

# rrdtool graph webhits2.png -s "-1 week" -t "Web Server Hits - This week vs Last week" -v "hitss/minute" \ 
DEF:hits=webhits.rrd:hits:AVERAGE:start="-8 days":end="start + 8days" \ 
DEF:lastweek=webhits.rrd:hits:AVERAGE:start="-15 days":end="start + 8 days" \ 
SHIFT:lastweek:604800 \ 
CDEF:t_hits=hits,86400,TREND \ 
CDEF:t_lastweek=lastweek,86400,TREND \ 
LINE1:t_lastweek#00FF00:"last week" LINE1:t_hits#FF0000:"this week" 
 

지난주와 이번주의 Trend 변화를 좀더 직관적으로 바라볼 수 있는 그래프가 만들어졌음을 알 수 있다.

하는 김에 월별 트랜드도 만들어 보았다.

# rrdtool graph webhitsmon.png -s "-1 month" -t "Web Server Hits - Trend" -v "hits/minute" \ 
DEF:hits=webhits.rrd:hits:AVERAGE CDEF:t_hits=hits,86400,TREND \ 
CDEF:tt_hits=hits,604800,TREND \ 
LINE1:t_hits#00FF00:"Trend/Day" LINE1:tt_hits#FF0000:"Trend/week" 
 

TREND를 위한 2개의 CDEF를 만들었다. 하나는 sliding windows의 크기를 하루, 다른 하나는 sliding windows의 크기를 일주일로 했다.

아래는 일주일단위로 TREND만을 나타낸 그래프이다.

월간 트랜드의 변화를 확실히 알 수 있다. 33주째에 log hits가 줄어든건, 연휴 (광복절)이 끼어있었기 때문이다.

태그 : RRD MRTG QOS