로그 파일의 데이터 문자열을 mysql 데이터베이스에 삽입

Question

나와 내 동료는 다른 데비안 서버의 mysql 서버에 access.log를 통해 squid 서버에서 데이터를 가져오고 싶습니다.

우리는 인터넷에서 그런 종류의 것들에 대한 안내를 발견했으며 access.log 파일의 문자열에서 mysql에 데이터를 넣을 스크립트를 만들었습니다. 그러나이 doesnt는 작동하고있는 것처럼 보인다, 무엇인가 삽입 물건 (여기의 어떤 생각이라도)과 있을지도 모른다. 우리가 정리해야 할 것을 찾아내는 데 도움을주십시오.

을 Heres 스크립트 :

#!/bin/bash 

cp /www/logs/squid/access.log /tmp/squidforparse.log 
>/www/logs/squid/access.log 
awk '{print "INSERT INTO squid (ip,bytes,link,trans,time) \ 
VALUES(\""$3"\","$5",\""$7"\",\""$9"\",from_unixtime("$1"));"};' \ 
< /tmp/squidforparse.log | mysql -D traffics -u root --password=my_sql_passwd 
rm -f /tmp/squidforparse.log 

내가 기본 수준의 연산자와 함수의 대부분을 알고 있지만, 아직 내가 그것을 작동하게하지 무슨 알아낼 수 없습니다, SQL 정말 위대한 아니다 .

Answer 1

로그 파일은 다음과 같습니다

"apple","red",1230,"Newton","Physics","Da vinci code" 
"iphone","black",44500,"Jobs","Mobiles","telephone booth" 
"shoe","brown",9900,"Elizabeth","Fashion","shoe shop" 

내 테이블 구조가 나는 것 다음

table_name = t1 
columns = topic, price, department 

, 아래와 같이 다음과 같은,

mysql -D traffics -u root --password=my_sql_passwd 

LOAD DATA LOCAL INFILE 'file.log' INTO TABLE t1 
FIELDS TERMINATED BY ',' LINES TERMINATED BY '\n' 
(@col1,@col2,@col3,@col4,@col5,@col6) set topic=@col1,price=@col3,department=@col5; 

주를 보이는 경우 :

1. 로그 파일이 쉼표로 구분되어 있다고 가정하면 파이프가 구분 된 경우 FIELDS TERMINATED BY '|'를 사용하십시오.
2. 또한 @ col1, @ col2, ..가 로그 파일 의 값을 저장하는 데 사용되는 방법에 유의하십시오.