Node.js跨操作系统生成与系统工具一致的文件哈希方法咨询

你的矛盾核心在于：系统工具（如shasum）是对文件的原始字节流计算哈希，而跨系统一致哈希文本内容需要修改字节（统一换行符）——这两个需求本质上是对不同的字节内容计算哈希，无法同时满足，但可以根据文件类型和需求优先级选择对应的方案：

1. 针对二进制文件（如zip、图片、编译程序）：恢复原始代码 #

二进制文件的字节内容不会因操作系统换行符差异改变，直接使用你最初的代码即可，它会和shasum等工具的结果完全一致，且跨系统哈希相同：

import { createReadStream } from 'fs';
import { createHash } from 'crypto';
import stream from 'stream/promises';

export async function fileHash(filePath, algorithm = 'sha256') {
  const input = createReadStream(filePath);
  const hash = createHash(algorithm);
  await stream.pipeline(input, hash);
  return hash.digest('hex');
}

你之前修改后的代码因为对二进制文件也做了换行符替换，破坏了原始字节结构，所以和shasum结果不匹配，去掉Transform流即可解决。

2. 针对文本文件：按需选择策略 #

如果是文本文件，需明确需求优先级：

• 优先和系统工具结果匹配：使用上述原始代码。此时跨系统哈希不同是正常的——因为不同系统上的文本文件原始字节（换行符）本身就不同，系统工具本来就是按原始字节计算哈希。
• 优先跨系统哈希一致：保留你修改后的换行符统一代码，但此时结果必然和系统工具的原始字节哈希不匹配，因为你已经修改了文件的字节内容。

3. 折中方案：可选的换行符统一开关 #

给函数添加参数，允许根据文件类型手动选择是否统一换行符，兼顾两种场景：

import { createReadStream } from 'fs';
import { createHash } from 'crypto';
import stream from 'stream/promises';
import { Transform } from 'stream';

export async function fileHash(filePath, algorithm = 'sha256', normalizeEOL = false) {
  const pipelineStreams = [createReadStream(filePath)];
  
  if (normalizeEOL) {
    const normalizeLineEndings = new Transform({
      transform(chunk, encoding, callback) {
        const normalized = chunk.toString('utf8').replace(/\r\n/g, '\n').replace(/\r/g, '\n');
        callback(null, Buffer.from(normalized));
      },
    });
    pipelineStreams.push(normalizeLineEndings);
  }
  
  const hash = createHash(algorithm);
  pipelineStreams.push(hash);
  
  await stream.pipeline(...pipelineStreams);
  return hash.digest('hex');
}

使用示例：

• 计算二进制文件/与系统工具匹配的哈希：fileHash('myfile.zip', 'sha256')
• 计算跨系统一致的文本文件哈希：fileHash('mytext.txt', 'sha256', true)

内容的提问来源于stack exchange，提问作者Kim T