如何用Pandas concat替代append并解决空DataFrame赋值报错

问题1：DataFrame.append()弃用警告 #

原代码使用DataFrame.append()时触发FutureWarning，提示该方法已弃用，需改用pandas.concat()，原代码如下：

import pandas as pd
from datetime import datetime
data = pd.DataFrame()
for i in range(30):
    value = datetime.now()
    value1 = i
    value2 = i + 20
    value3 = i - 10
    if value3 >= 15:
        row = pd.Series([value, value1, value2, value3])
        data = data.append(row, ignore_index=True)
        
data.columns = ['Time', 'Entry Price', 'Target', 'Stop Loss']

print(data)

问题2：空DataFrame设置列名报错及concat格式异常 #

实际场景中if条件动态变化，可能得到空DataFrame，此时设置列名会抛出ValueError（长度不匹配）；自行尝试改用concat后输出格式不符合预期，当前异常输出如下：

runfile('C:/AlgoTrade/test/untitled0.py', wdir='C:/AlgoTrade/test')
                            0
0  2022-11-11 17:06:29.709333
1                          25
2                          45
3                          15
0  2022-11-11 17:06:29.709333
1                          26
2                          46
3                          16
0  2022-11-11 17:06:29.709333
1                          27
2                          47
3                          17
0  2022-11-11 17:06:29.710333
1                          28
2                          48
3                          18
0  2022-11-11 17:06:29.710333
1                          29
2                          49
3                          19

期望输出格式：

runfile('C:/AlgoTrade/test/untitled0.py', wdir='C:/AlgoTrade/test')
                        Time  Entry Price  Target  Stop Loss
0 2022-11-11 17:09:32.104801           25      45         15
1 2022-11-11 17:09:32.104801           26      46         16
2 2022-11-11 17:09:32.104801           27      47         17
3 2022-11-11 17:09:32.104801           28      48         18
4 2022-11-11 17:09:32.104801           29      49         19

解决方案 #

核心修改点 #

• 避免循环中频繁执行concat：先收集符合条件的行数据到列表，最后一次性合并，提升性能
• 将单行数据转为带列名的DataFrame：确保每行结构与最终结果一致，避免格式错乱
• 提前定义带列名的空DataFrame：解决空DataFrame设置列名报错的问题

修改后代码 #

import pandas as pd
from datetime import datetime

# 提前定义列名，后续生成的行数据统一匹配该列结构
columns = ['Time', 'Entry Price', 'Target', 'Stop Loss']
data_list = []

for i in range(30):
    value = datetime.now()
    value1 = i
    value2 = i + 20
    value3 = i - 10
    if value3 >= 15:
        # 将单行数据转为指定列的DataFrame，添加到列表中
        row_df = pd.DataFrame([[value, value1, value2, value3]], columns=columns)
        data_list.append(row_df)

# 一次性合并所有符合条件的行，ignore_index重置索引
data = pd.concat(data_list, ignore_index=True)

print(data)

代码说明 #

• 提前指定列名：即使没有符合条件的行，最终生成的data也是带列名的空DataFrame，不会触发列名长度不匹配的报错
• 批量合并数据：循环中仅收集数据，最后一次合并操作减少Pandas内部的重复开销，运行效率更高
• 统一行数据结构：每行都转为带列名的DataFrame，确保合并后列顺序、格式与预期一致

内容的提问来源于stack exchange，提问作者Jayakumar