내가 내 dataframe을 막기 위해 노력하고 더 속성 '분할'

Question

import pandas as pd 
from nltk.stem import PorterStemmer, WordNetLemmatizer 
porter_stemmer = PorterStemmer() 

df = pd.read_csv("last1.csv",sep=',',header=0,encoding='utf-8') 

df['rev'] = df['reviewContent'].apply(lambda x : filter(None,x.split(" "))) 

Dataset

이 없습니다. 내가

df['rev'] = df['reviewContent'].apply(lambda x : filter(None,x.split(" "))) 

AttributeError이 오류를 얻고있다 토큰 화하는 동안 : 나는 또한 플로트 문제를

df['reviewContent'] = df["reviewContent"].apply(lambda x: [stemmer.stem(y) for y in x]) 

형식 오류를 얻을 형태소 사용하는 동안 '부동'개체가 어떤 속성을 '분할'

이 없습니다 ' float '객체는 반복 가능하지 않습니다.

어떻게해야합니까?

Answer 1

데이터를 토큰 화하는 경우 apply 호출이 필요하지 않습니다. str.split 잘 처리해야합니다. 또한 여러 개의 공백으로 나눌 수 있으므로 빈 문자열을 찾을 필요가 없습니다. 데이터는 어디에

df['rev'] = df['rev'].apply(lambda x: [stemmer.stem(y) for y in x])