如何为numpy.select动态生成区间条件列表实现Pandas分箱赋值
最优解决方案:修复pd.cut类型问题
你遇到的pd.cut输出无法参与数值运算的问题仅需一步即可解决,将返回的分类类型强转为整数类型即可,这是性能最好、代码最简洁的实现方式:
import pandas as pd import numpy as np d = {'col1': [-1, 0, .1, .6, .8],'col2': [-4,-0.02, 0.07, 1, 2]} df = pd.DataFrame(data=d) # 配置参数:区间划分数量、得分上下界 bin_count = 9 low_bound = 0 high_bound = 0.75 # 生成切分点和对应得分 bins = np.linspace(low_bound, high_bound, bin_count) bins = np.concatenate([[-np.inf], bins, [np.inf]]) scores = list(range(bin_count + 2)) # 转换为int类型直接支持数值运算 df['col3'] = pd.cut(df['col1'], bins=bins, labels=scores).astype(int) df['col4'] = pd.cut(df['col2'], bins=bins, labels=scores).astype(int) # 直接相加不会报错 df['total_score'] = df['col3'] + df['col4']
该方案在数据量、区间数较大的场景下,性能远高于np.select实现。
动态生成np.select条件的方案
如果你需要坚持使用np.select实现,不需要拼接字符串,直接循环生成布尔数组组成条件列表即可,完全符合np.select的参数要求:
import pandas as pd import numpy as np d = {'col1': [-1, 0, .1, .6, .8],'col2': [-4,-0.02, 0.07, 1, 2]} df = pd.DataFrame(data=d) bin_count = 9 low_bound = 0 high_bound = 0.75 # 生成区间分界点 bins = np.linspace(low_bound, high_bound, bin_count + 1) conditions = [] values = list(range(bin_count + 2)) # 第一个条件:小于下界 conditions.append(df['col1'] < low_bound) # 生成中间区间的布尔条件 for i in range(bin_count): left = bins[i] right = bins[i+1] conditions.append((df['col1'] >= left) & (df['col1'] <= right)) # 最后一个条件:高于上界 conditions.append(df['col1'] > high_bound) # 生成得分列 df['col3'] = np.select(conditions, values, default=np.nan)
内容的提问来源于stack exchange,提问作者Ben Church
相关产品推荐
相关产品推荐

