ADF设置TAB为分隔符仍识别逗号为分隔符拆分字段如何解决

我在ADF中将制表符分隔的文本文件转换为CSV文件时遇到问题：部分字段内包含逗号分隔的内容，我希望将这类内容视为单列不拆分，已将分隔符设置为"TAB(\t)"，但ADF仍会同时将TAB和逗号识别为分隔符，导致带逗号的字段被拆分为多列，例如示例中的[pp,aa]也被错误拆分。我已附制表符分隔文件示例截图及ADF配置截图，请问出现该问题的原因是什么？有什么可行的解决方案？

问题原因 #

该问题绝大多数场景是ADF文本数据集默认开启的自动检测分隔符功能导致：即使手动设置了分隔符为TAB，只要自动检测开关未关闭，ADF会自动扫描源文件内容，将出现频次较高的逗号也识别为分隔符，最终同时按TAB和逗号两个符号拆分字段。
少见的触发原因包括：源文件内的字段分隔符不是标准\t制表符（比如用多个空格替代）、源数据集的列Schema被之前自动检测的逗号拆分结果固化，未手动更新。

可行解决方案 #

• 优先关闭自动分隔符检测：进入源文本数据集的「格式」配置页，关闭自动检测分隔符开关，手动明确指定列分隔符为TAB(\t)，行分隔符可根据文件实际情况设置，配置完成后先点击「预览数据」确认字段拆分结果符合预期。
• 校验源文件分隔符格式：用本地编辑器（如VS Code、Notepad++）开启显示所有字符功能，确认源文件的字段之间确实是\t制表符分隔，避免ADF识别不到有效制表符后，自动 fallback 用逗号作为分隔符。
• 输出CSV配置优化：在目标CSV数据集的格式配置中，设置引号字符为双引号"，转义规则选择「引号转义」，这样带逗号的字段会被自动用双引号包裹，后续读取该CSV文件时不会被逗号误拆分。
• 若仍有问题可手动定义源列Schema：在源数据集的「结构」配置页，手动添加所有需要的列名和对应类型，覆盖之前自动检测生成的错误列结构，强制ADF按指定的TAB分隔符和列数量读取数据。

内容的提问来源于stack exchange，提问作者chetan parab