파일에서 날짜와 데이터 읽기 (파이썬)

Question

파일에서 시간 문자열과 데이터를 읽고 싶지만 loadtxt을 사용하면 문자열이 부동 상태가 아니기 때문에 문자열과 숫자를 동시에 읽을 수 없습니다. 그래서 나는 genfromtxt을 사용하고 delimiter=[]+[]+[] 내가 가지고있는 열을 지정하여 사용했지만 문자열은 nan처럼 읽혀집니다. 나는 시간 배열 (date2num, datetime 또는 이와 유사한)을 올바른 형식으로 matplotlib에 플롯 할 수있는 시간을 직접 읽고 싶습니다. 그래서 내가 무엇을 할 수 있니? 제안에 따라

이

GOES data for time interval: 20-Feb-2014 00:00:00.000 to 27-Feb-2014 00:00:00.000 
Current time: 23-Mar-2014 21:52:00.00 

Time at center of bin  1.0 - 8.0 A 0.5 - 4.0 A Emission Meas   Temp 
           watts m^-2  watts m^-2 10^49 cm^-3    MK 
20-Feb-2014 00:00:00.959  4.3439e-006 3.9946e-007  0.30841   10.793 
20-Feb-2014 00:00:02.959  4.3361e-006 3.9835e-007  0.30801   10.789 
20-Feb-2014 00:00:04.959  4.3413e-006 3.9501e-007  0.30994   10.743 
20-Feb-2014 00:00:06.959  4.3361e-006 3.9389e-007  0.30983   10.735 
20-Feb-2014 00:00:08.959  4.3361e-006 3.9278e-007  0.31029   10.722 
20-Feb-2014 00:00:10.959  4.3387e-006 3.9278e-007  0.31058   10.719 
20-Feb-2014 00:00:12.959  4.3361e-006 3.9278e-007  0.31029   10.722 
20-Feb-2014 00:00:14.959  4.3361e-006 3.9055e-007  0.31122   10.695 
20-Feb-2014 00:00:16.959  4.3334e-006 3.8721e-007  0.31234   10.657 

, 내가 사용하여 데이터를 읽어 : 나는 아래 마일 목록을두고 (물론, 그것은 더 많은 데이터를 'S)

pd.read_csv('/filename',sep='\s\s+',header=5, 
       names=['time','band1','band2','emeas','temp']) 

을 내가 데이터를 읽을 수있어,하지만 단지 문제, 인쇄 할 때 데이터가 나타납니다.

     time  band1 band2 emeas temp 
0 20-Feb-2014 00:00:03.005 0.000004  0 0.31000 10.866 
1 20-Feb-2014 00:00:05.052 0.000004  0 0.31199 10.819 
2 20-Feb-2014 00:00:07.102 0.000004  0 0.31190 10.811 
3 20-Feb-2014 00:00:09.149 0.000004  0 0.31237 10.798 
4 20-Feb-2014 00:00:11.199 0.000004  0 0.31266 10.795 
5 20-Feb-2014 00:00:13.245 0.000004  0 0.31237 10.798 
6 20-Feb-2014 00:00:15.292 0.000004  0 0.31334 10.770 
7 20-Feb-2014 00:00:17.342 0.000004  0 0.31451 10.732 
8 20-Feb-2014 00:00:19.389 0.000004  0 0.31451 10.732 
9 20-Feb-2014 00:00:21.439 0.000004  0 0.31421 10.735 

따라서 분명히 band1과 band2의 데이터가 반올림되었습니다. 사실, 플롯 할 때 정확한 (둥근 모양이 아닌) 것처럼 보이지만 프레임에서 그 모양이 왜 보이는지.

Answer 1

당신은 pandas.read_csv()를 사용할 수 있습니다. 그런 다음 :

import pandas as pd 

pd.read_csv('test.txt', sep='\s\s+', header=4) 

을 얻을 수 있습니다.

Answer 2

정규 표현식을 사용하면 좀 더 세련된 해결책이 될 수 있지만이 방법도 효과적입니다. sep 매개 변수 (numpy.genfromtxt의 delimiter에 equivalend가) 정규 표현식을 허용하기 때문에

from datetime import datetime 

input_file = open("path/filename") 
for line in input_file: 
    line_parts = line.split() 
    if len(line_parts) > 1: 
     try: 
      # This is now a datetime object 
      timestamp = datetime.strptime(line_parts[0] + " " + line_parts[1], "%d-%b-%Y %H:%M:%S.%f") 
      # Do stuff with data here (each stored seperately in line_parts list) 
      # For instance printing everything. 
      print("DateTime Object: " + str(timestamp)) 
      print("Data: " + str(line_parts[2:])) 

      # Cast data to floats for use in arithmetic 
      data_point_one = float(line_parts[2]) 
      print ("data_point_one * 2 = " + str(data_point_one * 2)) 

     except ValueError: 
      # Lines that don't start with a timestamp take this route... 
      continue