문자열을 반복자로 나누기

Question

파이썬에는 목록이 아닌 반복자를 생성하는 문자열에서 분할을 수행하는 빌드 인 (표준 라이브러리에서의 의미)이 있습니까? 나는 매우 긴 문자열을 작업하고 문자열의 대부분을 사용할 필요가 없다는 것을 명심해야한다.

Answer 1

문자열을 직접 분리하지 않지만 re 모듈은 re.finditer() (및 컴파일 된 일반 표현식에 해당하는 finditer() 메서드)을가집니다.

는 @Zero는 예를 들어 질문 :

>>> import re 
>>> s = "The quick brown\nfox" 
>>> for m in re.finditer('\S+', s): 
...  print(m.span(), m.group(0)) 
... 
(0, 3) The 
(4, 9) quick 
(13, 18) brown 
(19, 22) fox 

Answer 2

S. 로트처럼, 나는 아주 당신이 원하는 것을 모른다. 다음은 도움이 될 수있는 코드입니다.

s = "This is a string." 
for character in s: 
    print character 
for word in s.split(' '): 
    print word 

다음 문자를 찾기위한 s.index() 및 s.find()도 있습니다.

---

나중에 : 좋아요.

>>> def tokenizer(s, c): 
...  i = 0 
...  while True: 
...   try: 
...    j = s.index(c, i) 
...   except ValueError: 
...    yield s[i:] 
...    return 
...   yield s[i:j] 
...   i = j + 1 
... 
>>> for w in tokenizer(s, ' '): 
...  print w 
... 
This 
is 
a 
string. 

Answer 3

당신은 (파이썬 유통 자체에 흡수 된,하지만 표준 라이브러리에서 가져올 수 없습니다) SPARK 같은 것을 사용할 수 있지만 Duncan's answer 아마도 단지뿐만 아니라 서비스를 제공 할 수 있도록 궁극적으로뿐만 아니라 정규 표현식을 사용하여 공백으로 분할하는 것만 큼 쉽습니다.

훨씬 더 힘든 옵션은 속도를 정말로 원한다면 자신의 파이썬 모듈을 C 언어로 작성하는 것이지만 훨씬 많은 시간 투자가 필요합니다.

Answer 4

전체 문자열을 소비 할 필요가 없다면 특정 항목을 찾고 있기 때문입니다. 맞습니까? 그런 다음 분할하는 대신 re 또는 .find()으로 찾으십시오. 그렇게하면 문자열에 관심이있는 부분을 찾아서 분리 할 수 ​​있습니다.

Answer 5

보기 itertools. 여기에는 takewhile, islice 및 groupby과 같은 내용이 포함되어 있습니다. 이터베이스는 인덱스 또는 정렬의 부울 조건에 따라 반복 가능한 다른 반복 가능 요소로 슬라이스 할 수 있습니다.

Answer 6

str.split의 내장 이터레이터 기반 아날로그가 없습니다.

iterator = iter("abcdcba".split("b")) 
iterator 
# <list_iterator at 0x49159b0> 
next(iterator) 
# 'a' 

그러나이 타사 라이브러리에서 도구 가능성이 more_itertools.split_at, 당신이 원하는 것을 제공 : 당신의 필요에 따라 당신은리스트 반복자를 만들 수 있습니다. 예를 들어 this post을 참조하십시오.