为何Dataverse查找主键名称列在Data Factory数据流中显示为Null？

问题背景 #

Dataverse表中存在以name为后缀的列（如ptl_feeearnername），这类列存储关联查找表主键的名称值，数据库查询可见有效数据，但导入Azure Data Factory（ADF）数据流后，这些列值全部为Null，导致基于此类列的过滤规则（如in(['Stephanie ...', 'Rachel ...'], ptl_feeearnername)）无法生效，数据流无输出；而关联的GUID外键列（如ptl_feeearner）正常有值，且无过滤时数据流可正常输出。

核心原因 #

• 虚拟列特性限制：这类name后缀列是Dataverse的虚拟计算列，并非物理存储的列。ADF的Dataverse连接器默认仅读取物理存储列，不会自动触发虚拟列的计算逻辑，因此预览和运行时均返回Null。
• OData查询默认行为：直接使用普通SQL风格的select语句查询时，Dataverse的OData接口不会主动计算虚拟列的值，必须通过特定语法触发，否则返回空值。
• 权限配置缺失：ADF所使用的服务主体可能未被授予该虚拟列的读取权限，或者该列在Dataverse字段属性中被设置为禁止外部访问。

可行解决方案 #

1. 调整查询语法触发虚拟列计算
   在ADF数据流的Dataverse源查询中，使用Dataverse兼容的OData语法，强制返回虚拟列的计算值。例如：

   select ptl_matterid, ptl_partner, ptl_partnername, ptl_feeearner, ptl_feeearnername from ptl_matterid?$expand=ptl_feeearner($select=name)
   

   该语法通过$expand关联查找表并指定读取名称字段，间接触发ptl_feeearnername虚拟列的计算。

2. 同步虚拟列值到物理列
   如果虚拟列的计算逻辑固定，可在Dataverse中创建一个普通文本类型的物理列，通过Dataverse插件、Power Automate或定期ADF数据流，将虚拟列的值同步到该物理列中。ADF后续直接读取这个物理列即可避免Null问题。

3. 检查并配置权限
   确认ADF使用的服务主体在Dataverse对应的安全角色中，拥有该虚拟列的读取权限；同时检查Dataverse字段属性，确保该列未被设置为“不可外部访问”。

内容的提问来源于stack exchange，提问作者GalaxyWolf