为何std::ctype::narrow()的目标缓冲区被默认值填充？

核心原因 #

你误用了std::ctype<wchar_t>::narrow函数——这个函数的设计目的是一对一地将宽字符转换为单字节字符，仅适用于目标字符集中每个字符都能被单个char表示的场景（比如ASCII、ISO-8859-1这类单字节编码）。

而你指定的en_US.utf8是多字节编码的locale，std::ctype::narrow无法完成宽字符到UTF-8多字节序列的转换（一个宽字符可能对应1-4个UTF-8字节），因此所有字符转换均失败，最终目标缓冲区被默认值'-'填充。

正确的转换方式 #

要实现宽字符串到UTF-8窄字符串的编码转换，应该使用专门处理多字节编码转换的工具，比如std::wstring_convert结合std::codecvt_utf8<wchar_t>：

#include <iostream>
#include <string>
#include <codecvt>

int main() {
    std::wstring str = L"ABC";
    std::wstring_convert<std::codecvt_utf8<wchar_t>> converter;
    std::string cstr = converter.to_bytes(str);
    std::cout << cstr << std::endl; // 输出ABC
    return 0;
}

如果使用C++20及以上标准，也可以通过std::u8string和std::from_wstring实现：

#include <iostream>
#include <string>

int main() {
    std::wstring str = L"ABC";
    std::u8string u8str = std::from_wstring(str);
    // 转换为std::string输出（需注意编译器对UTF-8的支持）
    std::cout << reinterpret_cast<const char*>(u8str.data()) << std::endl;
    return 0;
}

补充说明 #

std::ctype系列工具的核心作用是字符分类（比如判断是否是字母、数字）和单字节/宽字符的一对一映射转换，不适合处理UTF-8这类多字节编码的转换需求。如果需要基于locale的编码转换，也可以使用std::codecvt facet结合流操作来实现，但std::wstring_convert是更直接的选择。

内容的提问来源于stack exchange，提问作者Yury