Node.js中Binary与ASCII Buffer的区别及转换异常问题

咱们一步步拆解这个问题，先搞清楚核心区别，再分析代码差异，最后解释转码结果不一致的原因：

一、binary和ascii编码的本质区别 #

• ascii编码：仅覆盖ASCII字符集（字节范围0x00-0x7F），对于任何超出这个范围的字节（0x80-0xFF），Node.js都会将其替换为�（Unicode替换字符）——因为ASCII本身不支持这些高字节值，所以只能用占位符替代，原始字节信息直接丢失。
• binary编码：它其实是latin1编码的遗留别名（Node.js官方文档明确说明），会直接将每个字节一对一映射为对应的Latin-1字符（覆盖0x00-0xFF全范围），不会做任何替换，完全保留原始字节的所有信息。

二、两行代码的具体差异 #

先看你提供的Hex值：

hex = '4d434750040af215000a00000000000a000000000000000000000029'

把它转成Buffer后，里面包含两类字节：

• 像0x4d（对应字符'M'）、0x43（'C'）这类在ASCII范围内的字节；
• 还有0xF2、0x15这类超出0x7F的高字节（比如0xF2就不在ASCII的覆盖范围内）。

现在看两行代码的差异：

1. var binStr = Buffer.from(hex, 'hex').toString('binary');
   用binary（即latin1）编码转字符串时，所有字节都会被原样映射成对应的字符，包括0xF2这类高字节，原始字节的信息100%保留。
2. var asc = Buffer.from(hex, 'hex').toString('ascii');
   用ascii编码转字符串时，所有超出0x00-0x7F的字节（比如0xF2）都会被替换成�，这些字节的原始值直接丢失，再也无法还原。

三、为什么转回Hex时结果不同？ #

当你尝试把字符串再转回Hex时，两者的本质差异就显现了：

• 对于binStr：因为它是通过latin1（binary）编码生成的，转回Buffer时用Buffer.from(binStr, 'binary')，每个字符都会被准确还原成对应的原始字节，所以最终生成的Hex和原Hex完全一致，结果正确。
• 对于asc：字符串里的�是Unicode替换字符，它对应的字节是0xEF 0xBF 0xBD（UTF-8编码格式），和原始的0xF2完全不同。当你把这个字符串转回Hex时，这些替换字符会被转成错误的字节值，最终得到的Hex自然和原Hex不符，结果错误。

举个直观的例子：原Hex中的0xF2字节，用ascii转字符串后变成�，把�转回字节时得到的是0xEF 0xBF 0xBD，这三个字节和原始的单个0xF2字节完全不同，转出来的Hex肯定不对。

内容的提问来源于stack exchange，提问作者Shubham Batra