CSV로 PIX/ASA 로그를 포맷하기위한 스크립트가 필요합니다

Question

저는 서버에서 여러 가지를 구문 분석하여 CSV 파일로 만드는 프로젝트를 진행하고 있습니다. 누구나 CSV로 표준 PIX/ASA 로그를 구문 분석 할 수있는 좋은 perl 스크립트 또는 gawk 문을 가지고 있습니까?

감사합니다.

Answer 1

필자는 공유 할 수없는 PIX/ASA 로그에 대한 사내 구문 분석을 작성하는 것을 도왔습니다. 예를 들어 모든 트래픽 관련 메시지에 대한 소스 및 대상 정보를 원했습니다. 각 메시지 코드를 개별적으로 파싱 한 모듈을 만들었습니다. 또 다른 장애물은 프로토콜 이름 및 name 선언과 같은 일부 정보가 로그의 번호 또는 IP가 아닌 별칭으로 표시된다는 것입니다. CPAN 모듈 PIX :: Walker는 이러한 문제를 해결하는 데 도움을 줄 수 있습니다.

당신이 원하는 모든 사용자가 사용할 수있는 심각도 코드 및 메시지 인 경우 :

#!/usr/bin/perl 

use strict; 

if (-e $ARGV[0]) { 
open(INFILE,$ARGV[0]); 
} else { 
die "Cannot open logfile $ARGV[0]\n"; 
} 

foreach my $line (<INFILE>) { 
chomp $line; 
if (/^%(ASA|PIX)-(\d{1})-(\d{6}): (.*)/) { 
    print "\"" . $1 . "\",\"" . $2 . "\",\"" . $3 . "\"\n"; 
} 
} 

는하지만이 있다면 당신은 내가 같은 설정으로 시스템 로그-NG와 MySQL을 사용하는 것이 좋습니다 것입니다 원하는 모든 :

options { 
     long_hostnames(off); 
     sync(100); 
     stats(43200); 
     use_fqdn(no); 
     keep_hostname(yes); 
     owner (nglog); 
}; 

source udpsource { udp(ip(0.0.0.0) port(514));}; 

parser asa { 
csv-parser(colunms("ASA_SEV", "ASA_CODE", "ASA_TXT") 
flags(escape-none) 
delimiters("-:") 
); 
}; 

destination d_sql { 
    sql(type(mysql) 
    host("logserver") username("syslog-ng") password("password") 
    database("logs") 
    table("ASAlogs") 
    columns("datetime", "host", "severity", "code", "message") 
    values("$R_DATE", "$HOST", "$ASA_SEV", "$ASA_CODE", "$ASA_TXT") 
    indexes("datetime", "host", "severity", "code")); 
}; 

log { source{udpsource}; 
    log {parser(asa); destination(d_sql)}; 
}; 

이렇게하면 보고서를 실행할 수있는 데이터베이스에 있습니다. 매우 간단한 PHP 또는 Ruby on Rails 웹 프론트 엔드를 만들 수도 있습니다.