【发布时间】:2020-04-14 16:55:22
【问题描述】:
我在 csv 文件中标记了句子,但是当我尝试删除 for 循环中的停用词时,它会停止打印单词并打印所有句子的列标题任何想法最后一行的错误在哪里?
for review in tokenized_docs:
new_review = []
for token in review:
new_token = x.sub(u'', token)
if not new_token == u'':
new_review.append(new_token)
tokenized_docs_no_punctuation.append(new_review)
words=pd.DataFrame(tokenized_docs_no_punctuation)
#print(words)
print([word for word in words if word not in stops])
输出是这样的
应该是单词而不是列标题编号。
【问题讨论】:
标签: python pandas nlp tokenize stop-words