如何在JMeter中处理含空列的不平衡CSV数据集？

方案1：预处理CSV文件（最简方案） #

如果可以修改源文件，直接补全空列保证每行格式统一：

• 确保每行的列数和表头完全一致，空列用""或默认值（比如空字符串、null）填充
• 示例：若表头是5列，某行只有3列，修改为val1,val2,val3,,（末尾补两个空列）

方案2：用Groovy脚本读取并动态处理（无需修改源文件） #

如果不想改动原始CSV，可通过Groovy脚本在JMeter内读取并处理不平衡行，步骤如下：

1. 添加JSR223 Sampler（或JSR223 PreProcessor） #

2. 编写Groovy处理脚本 #

// 替换为你的CSV文件路径，也可以用JMeter变量${csvFilePath}
def csvFile = new File("/path/to/your/dataset.csv")
def processedRows = []
def header = []

csvFile.eachLine { line, lineNum ->
    // 按逗号分割，-1参数保留末尾空列，避免丢失空值
    def columns = line.split(",", -1)
    if (lineNum == 1) {
        // 第一行作为表头
        header = columns
    } else {
        // 对齐列数：行数据列数少于表头则补空值，多于则截断
        def alignedColumns = []
        header.eachWithIndex { _, idx ->
            alignedColumns.add(idx < columns.size() ? columns[idx] : "")
        }
        // 转为键值对Map，方便后续调用变量
        def rowMap = [:]
        header.eachWithIndex { colName, idx ->
            rowMap[colName] = alignedColumns[idx]
        }
        processedRows.add(rowMap)
    }
}

// 把处理后的所有行存入全局属性，供后续组件调用
props.put("csvProcessedData", processedRows)

// 示例：取出第一行数据，将列名作为JMeter变量名存入
def currentRow = processedRows.get(0)
currentRow.each { key, value ->
    vars.put(key, value ?: "")
}

3. 配合循环控制器遍历数据 #

如果需要逐行使用数据：

• 添加循环控制器，设置循环次数为处理后的总行数${__groovy(props.get("csvProcessedData").size(),)}
• 在循环内添加JSR223元素，通过循环索引取出对应行：

def rows = props.get("csvProcessedData")
def index = vars.get("__jm__循环控制器__idx") as int
def currentRow = rows.get(index)
currentRow.each { key, value ->
    vars.put(key, value ?: "")
}

方案3：调整CSV Data Set Config配置（仅适用于列数一致的空列场景） #

如果只是部分列为空，但每行列数和表头一致，可直接调整组件配置：

• 勾选Allow quoted data?，确保空列用""表示（比如val1,"",val3）
• 在Variable Names中填写所有列名，用逗号分隔（比如col1,col2,col3,col4）
• 勾选Ignore first line（如果CSV包含表头）

关键注意事项 #

• Groovy脚本中split(",", -1)必须加-1参数，否则会忽略末尾的空列，导致列数不匹配
• 处理大文件时，保持逐行读取的方式，避免一次性加载全部数据导致内存溢出
• 如果CSV分隔符不是逗号，修改脚本中的分隔符即可

内容的提问来源于stack exchange，提问作者Jimin Park