Java调用grep和awk时出现IndexOutOfBoundsException问题排查

你的代码出现IndexOutOfBoundsException及执行异常，核心问题有三个：

1. Runtime.exec无法解析shell管道命令 #

Java的Runtime.getRuntime().exec(String)会直接把整个字符串当作可执行程序名，不会启动shell解析|管道符号。这意味着你的命令会被系统当作一个名为grep key filePath | awk -F ',' '{print $3,$4,$5}'的程序去寻找，显然不存在，最终执行失败，无法获取预期输出，甚至会读取到错误信息，导致后续处理异常。

2. 命令拼接存在安全风险与格式错误 #

直接将key拼接到命令中，如果key包含空格、grep元字符（如.、*、[）或shell特殊字符（如&、;），会导致grep命令逻辑错误：

• 若key含空格，比如"abc def"，命令会变成grep abc def filePath，此时grep会把def当作第二个文件名，导致找不到文件的错误输出。
• 若key含元字符，比如"a.b"，grep会匹配所有中间是任意字符的行，可能抓取到格式不符合a,b,c,d,e,f的行，导致awk输出异常内容。

3. 依赖空格分隔的输出不可靠 #

awk的print $3,$4,$5会用空格分隔三个字段，但如果原文件的第3/4/5列本身包含空格，Java中用split(" ")会把单个字段拆分成多个元素；如果匹配到的行列数不足5，awk会输出空值，split后的数组长度可能远小于预期，后续若按固定索引访问list就会触发IndexOutOfBoundsException。

修复方案 #

方案一：通过shell执行管道命令 #

将命令包装在bash -c中，让shell解析管道和特殊字符：

public static List<String> getThirdFourthFifthColumnBySecondColumnByCliTools(String filePath, String key) throws IOException {
    List<String> list = new ArrayList<>();
    // 转义key中的单引号，避免shell语法错误
    String escapedKey = key.replace("'", "'\\''");
    String command = String.format("grep '%s' %s | awk -F ',' '{print $3,$4,$5}'", escapedKey, filePath);
    // 用bash -c执行命令，处理管道
    Process process = Runtime.getRuntime().exec(new String[]{"bash", "-c", command});
    
    // 同时读取错误流，避免进程阻塞
    try (Scanner sc = new Scanner(process.getInputStream());
         Scanner errSc = new Scanner(process.getErrorStream())) {
        while (sc.hasNextLine()) {
            String line = sc.nextLine();
            // 处理任意数量的空格分隔
            String[] split = line.split("\\s+");
            for (String s : split) {
                list.add(s);
            }
        }
        // 打印错误信息用于调试
        if (errSc.hasNextLine()) {
            System.err.println("命令执行错误: " + errSc.nextLine());
        }
    }
    return list;
}

方案二：完全用Java解析文件（更推荐） #

避免依赖外部命令，直接在Java中读取文件、过滤行、解析列，更安全且易维护：

public static List<String> getThirdFourthFifthColumnBySecondColumn(String filePath, String key) throws IOException {
    List<String> list = new ArrayList<>();
    // 用try-with-resources自动关闭流
    try (BufferedReader reader = Files.newBufferedReader(Paths.get(filePath))) {
        String line;
        while ((line = reader.readLine()) != null) {
            // split第二个参数传-1，保留末尾空列
            String[] columns = line.split(",", -1);
            // 确保行有至少5列，且第二列匹配key
            if (columns.length >= 5 && key.equals(columns[1])) {
                list.add(columns[2]);
                list.add(columns[3]);
                list.add(columns[4]);
            }
        }
    }
    return list;
}

这个方案不会有外部命令的兼容性问题，也能精确控制列的解析，从根源避免IndexOutOfBoundsException。

内容的提问来源于stack exchange，提问作者Ken LEE