随机森林算法分类任务中决策树投票平票的处理方式问询

1. 是否存在“是”“否”投票数完全相等的情况？ #

当然存在。当随机森林中决策树的数量为偶数时，很容易出现两类投票数各占一半的情况——比如你提供的图里，Yes和No刚好各得5票，就是典型的平票场景。如果决策树数量是奇数，理论上总票数为奇数，不会出现完全平分的情况，但实际工程中若有部分决策树因特殊原因未输出明确分类（这种情况极少），也可能出现平票。

2. 平票场景的处理方法 #

• 调整决策树数量：直接把森林里的决策树数量改成奇数，从根源上避免平票问题，这是最省心的方案。
• 预设默认规则：提前约定平票时的默认分类，比如优先选择训练样本中占比更高的类别，或者固定指定其中一类作为平票时的结果。
• 用预测概率加权替代硬投票：不单纯统计投票数，而是汇总每棵决策树输出的类别概率，取概率总和更高的类别。比如有的树对“Yes”的预测概率是0.8，有的是0.6，把这些概率加起来和“No”的概率总和对比，就算票数相等，概率总和大概率会有差异。
• 临时补充决策树：遇到平票时，额外训练一棵新的决策树加入投票，直到分出明确的胜负。

内容的提问来源于stack exchange，提问作者ZAbbas