如何在Pandas中获取行最后非空值的列索引以实现无覆盖插入？

问题背景 #

现有如下DataFrame：

x         y
1    -1.808909  0.093380
2     1.733595 -0.380938
3    -1.385898  0.714071

需要在每行的最后非空列之后插入多个值，避免覆盖已有数据，预期输出如下：

x         y      
1    -1.808909  0.093380   5
2     1.733595 -0.380938   6    7
3    -1.385898  0.714071   8

尝试使用df.iloc[1,:].last_valid_index()时，返回的是列名（如"y"）而非列的索引位置，无法直接用于后续插入操作；同时不能依赖固定列名（后续会存在多个y列，固定列名的方法会失效）。

解决方法 #

1. 将列名转为索引位置 #

通过df.columns.get_loc()方法，把last_valid_index()返回的列名转换成对应的索引位置，即可实现后续插入：

# 针对第2行（iloc索引为1）
last_col_name = df.iloc[1, :].last_valid_index()
last_col_idx = df.columns.get_loc(last_col_name)
insert_idx = last_col_idx + 1
# 插入值
df.iloc[1, insert_idx] = 6

2. 批量插入多个值（避免覆盖） #

如果需要给同一行插入多个值，循环处理即可，每次插入前重新获取当前行的最后非空列索引：

row_idx = 1  # 目标行的iloc索引
values_to_insert = [6, 7]

for val in values_to_insert:
    # 获取当前行最后非空列的列名
    last_col_name = df.iloc[row_idx, :].last_valid_index()
    # 转为索引位置
    last_col_idx = df.columns.get_loc(last_col_name)
    insert_idx = last_col_idx + 1
    
    # 若插入位置超出现有列数，先扩展列（防止索引越界）
    if insert_idx >= len(df.columns):
        df[f'col_{insert_idx}'] = None
    
    # 插入值
    df.iloc[row_idx, insert_idx] = val

3. 直接获取最后非空列的索引（替代方案） #

也可以通过判断每行的非空值位置，直接拿到最后非空列的索引：

row_data = df.iloc[1, :]
# 找到最后一个非空值的索引位置
last_col_name = row_data.notna()[::-1].idxmax()
last_col_idx = df.columns.get_loc(last_col_name)
insert_idx = last_col_idx + 1

这种方式完全基于每行的实际非空状态操作，不受后续新增列（如多个y列）的影响，确保每次插入都在当前行的最后非空列之后，不会覆盖已有数据。

内容的提问来源于stack exchange，提问作者Ahmed Nabil