Node.js使用Crypto模块加密.bin二进制文件相关问题咨询

针对方案1（UTF-8编码加解密）的修复 #

该方案的核心问题是：用response.text()读取二进制bin文件时，会默认用UTF-8编码解码原始二进制流，非UTF-8规范的字节会被替换成替代字符，哪怕你看起来解密后的字符串和原text大小一致，实际二进制内容已经失真，无法100%还原原始bin文件。
如果一定要沿用这个方案输出明文加密文件，正确操作如下：

1. 加密阶段不要用response.text()，而是把原始二进制转成base64编码的字符串再做加密，base64是ASCII兼容的，不会有字节损失：

const response = await fetch(URL)
const arrayBuffer = await response.arrayBuffer();
// 二进制转base64字符串
const base64Str = Buffer.from(arrayBuffer).toString('base64');
// 加密
let encrypted = cipher.update(base64Str, 'utf-8', 'hex');
encrypted += cipher.final('hex');
// 存为encrypted.txt明文即可

2. 解密还原阶段：

// 解密得到base64字符串
let decryptedBase64 = decipher.update(encrypted, 'hex', 'utf-8');
decryptedBase64 += decipher.final('utf-8');
// 转回原始二进制Buffer，直接写入.bin文件即可
const originalBinBuffer = Buffer.from(decryptedBase64, 'base64');
// Node.js环境写文件示例：fs.writeFileSync('model.bin', originalBinBuffer)
// 浏览器环境下载示例：const blob = new Blob([originalBinBuffer], {type: 'application/octet-stream'}); 然后触发下载

这样还原的bin文件和原始文件哈希完全一致，不会有失真。

针对方案2（TypedArray直接处理）的报错修复 #

该报错是因为你用的是浏览器端打包的browserify-aes库，它的cipher.update()对TypedArray的支持有缺陷，必须显式转成Node.js兼容的Buffer类型传入即可：

const response = await fetch(URL)
const arrayBuffer = await response.arrayBuffer();
// 显式把TypedArray转成Buffer，不要直接传Uint8Array
const buffer = Buffer.from(arrayBuffer);
// 加密，不用传编码参数
const encryptedBuffer = Buffer.concat([cipher.update(buffer), cipher.final()]);
// 如果要存明文，就把encryptedBuffer转成hex或者base64字符串存
const encryptedPlainStr = encryptedBuffer.toString('hex');

解密还原的时候也对应操作：

// 从明文转成Buffer
const encryptedBuffer = Buffer.from(encryptedPlainStr, 'hex');
const decryptedBuffer = Buffer.concat([decipher.update(encryptedBuffer), decipher.final()]);
// 直接写入就是原始bin文件

场景适配优化方案 #

针对TF.js权重bin文件的场景，优先选择「二进制加密后转base64存明文」的方案：

• 加解密全程无字节损失，100%还原原始权重文件，不会出现TF.js加载权重时报格式错误的问题
• base64明文存储兼容性高，不管是存在数据库、静态文件服务器都不会有编码问题
• 相比hex编码存储，base64的存储体积更小，4MB的bin文件加密后base64存储大概是5.3MB左右，比hex的8MB节省存储空间

内容的提问来源于stack exchange，提问作者Rajdeep Dutta