【发布时间】:2017-07-07 23:02:52
【问题描述】:
我已经训练了一个逻辑回归分类器来预测评论是正面的还是负面的。现在,我想将predict_proba-函数返回的预测概率附加到包含评论的 Pandas 数据框中。我尝试做类似的事情:
test_data['prediction'] = sentiment_model.predict_proba(test_matrix)
显然,这是行不通的,因为 predict_proba 返回一个 2D-numpy 数组。那么,最有效的方法是什么?我使用 SciKit-Learn 的 CountVectorizer 创建了test_matrix:
vectorizer = CountVectorizer(token_pattern=r'\b\w+\b')
train_matrix = vectorizer.fit_transform(train_data['review_clean'].values.astype('U'))
test_matrix = vectorizer.transform(test_data['review_clean'].values.astype('U'))
示例数据如下所示:
| Review | Prediction |
| ------------------------------------------ | ------------------ |
| "Toy was great! Our six-year old loved it!"| 0.986 |
【问题讨论】:
-
能否提供一个样本数据集(5 - 7 行)?
-
将预测分配给一个变量,然后从变量中提取要分配给熊猫数据框cols的列。如果
x是带有预测的二维numpy 数组x = sentiment_model.predict_proba(test_matrix)那么你可以这样做test_data['prediction0'] = x[:,0]和test_data['prediction1'] = x[:,1] -
@KarthikArumugham 非常感谢。它就像一个魅力!我需要加强切片和切块数据;)
-
@DBE7 我已将其作为答案分享。请将其标记为正确。
标签: python pandas numpy machine-learning scikit-learn