【问题标题】:Random Forest vs Logistic Regression随机森林与逻辑回归
【发布时间】:2019-04-14 12:40:30
【问题描述】:

我正在处理一个数据集。这是一个分类问题。数据集的一列在总共 30 万个观察值中有大约 11000 个缺失值(它是一个分类变量,因此不可能像数值那样进行缺失值插补)。

是否建议继续使用随机森林而不是逻辑回归,因为随机森林不受缺失值的影响?

在使用 RF 时我还需要注意自变量之间的多重共线性还是不需要?

【问题讨论】:

  • 交叉验证的 This post 可能会有所帮助。

标签: r


【解决方案1】:
  1. 虽然 RFM 可以处理噪声数据和缺失值,但似乎很难说它优于逻辑。因为也可以通过其他预处理(PCA 或缺失数据插补)或集成方法来改进逻辑。

  2. 我认为射频不必考虑多重共线性。这是因为随机选择变量以创建不同的树并产生结果。在这个过程中,选择最重要的属性并将其解释为解决具有相似趋势的多重共线性问题。

【讨论】:

  • 在使用 RF 时我们是否还需要进行异常值处理?还是 RF 会解决这个问题?
  • 您不必担心,因为异常值也可以配置为单个节点。
猜你喜欢
  • 2019-12-06
  • 2018-06-24
  • 2016-04-24
  • 2018-11-02
  • 2019-08-08
  • 2019-10-23
  • 2023-03-14
  • 2019-04-20
  • 2013-05-06
相关资源
最近更新 更多