모든 .zip 파일에 포함 된 모든 텍스트 파일과 그 내용을 Python을 사용하여 텍스트 파일에 연결하십시오.

Question

폴더의 모든 파일을 읽고 모든 내용을 하나의 단일 파일로 출력하는 프로그램을 작성하려고합니다. 파일은 .gz 확장자로 압축됩니다. 하나의 파일을 읽을 수는 있었지만 그 파일의 나머지 부분은 읽지 못했습니다.

import glob, gzip, re 
import pickle 

filed = open('Logs.txt', 'w') 


logfilenames = glob.glob('*.gz') 




logformat = re.compile(r'^\S+ \S+ \S+ \[([\w:/]+\s[+\-]\d{4})\] "(\S+) (\S+) .*" (\d+) (\d+) "([^"]*)" "[^"]*"') 
with gzip.GzipFile(logfilenames[0],'r') as f: 
    for i in glob.glob('*.gz'): 
     txtline = f.readline() 
     parsedline = logformat.match(txtline) 
     print "time={t} size={s} url={u}".format(t=parsedline.group(1), s=parsedline.group(5), u=parsedline.group(3)) 

     pickle.dump(["time={t} size={s} url={u}".format(t=parsedline.group(1), s=parsedline.group(5), u=parsedline.group(3))],filed) 

filed.close() 

Answer 1

와 파이썬에서 사용 : 여기 내 코드입니다 정규 표현식 터치) :

import glob, gzip, re 
import cPickle 

logformat = re.compile(r'^\S+ \S+ \S+ \[([\w:/]+\s[+\-]\d{4})\] "(\S+) (\S+) .*" (\d+) (\d+) "([^"]*)" "[^"]*"') 

with open('Logs.txt', 'w') as f_out: 
    for i in glob.glob('*.gz'): 
     with gzip.GzipFile(i,'r') as f_in: 
      for txtline in f_in: 
       parsedline = logformat.match(txtline) 
       if parsedline: 
        f_out.write("time={t} size={s} url={u}".format(t=parsedline.group(1), s=parsedline.group(5), u=parsedline.group(3))) 

Answer 2

이 (didn를 '시도 xD.sh

로

mkdir dir 
mv $file dir 
cd dir 
tar -zxvf $file 
for file in `ls -w 1 | grep -v ".gz"`; do 
cat $file >> joint-file 
done 
mv joint-file ../ 
rm -rf dir 

을이 저장 한 다음

import os 
cmd = './xd.sh' 
os.system(cmd) 

=)