如何阻止Event Grid向Azure Data Explorer推送空文件致摄取失败

这个问题没有原生的一键配置可以直接在Event Grid层面拦截空文件推送，可按三层方案组合解决，从入口到兜底全链路覆盖：

• 入口层拦截：配置Event Grid高级筛选规则过滤无效小文件
  Event Grid原生支持针对事件payload字段做值过滤，不需要额外接入中间服务：
  1. 进入对应Event Grid订阅的「筛选器」配置页，找到高级筛选选项
  2. 添加筛选条件，匹配字段为data.contentLength，判断逻辑设为「大于」，阈值根据实际业务设置：如果是0字节空文件直接设为0即可；如果是带Parquet文件头但无实际数据的空Parquet，这类文件通常大小在3KB以内，可以根据业务生成的最小有效Parquet大小设置阈值（比如设为4096，即4KB）
  3. 保存配置后，所有小于阈值的Blob创建事件会被Event Grid直接丢弃，不会推送到ADX。
• ADX侧兜底：配置无效文件跳过规则，避免触发失败告警
  就算有漏网的空文件推到ADX，也可以通过配置让ADX自动跳过这类文件，不抛出摄取错误：
  1. 找到对应存储账户的ADX Event Grid数据连接，编辑连接属性
  2. 开启忽略格式错误相关配置，或给目标表的摄取默认属性添加allowNoRecords=true参数，针对Parquet格式的无记录文件，ADX会直接跳过不做处理，不会记录为摄取失败。
  3. （可选）配置摄取失败路由，把确实格式异常的文件事件路由到独立的失败日志表，方便后续排查，不影响主表的摄取监控。
• 源头治理：优化上游文件生成逻辑
  排查写入Parquet文件到数据湖的上游任务（包括Spark作业、ADF拷贝任务、流分析任务等），调整写入逻辑：
  1. 当批次/分区内无有效数据时，不生成空Parquet文件，从根源避免空Blob创建事件
  2. 如果业务需要保留空文件做占位符，统一给这类空文件添加.empty特殊后缀，再在Event Grid里添加「主题后缀不等于.empty」的筛选规则，直接排除这类占位文件。

注意：不要尝试通过更换Event Grid监听的事件类型解决问题，目前Azure存储没有提供「非空Blob创建完成」的专属事件类型，Microsoft.Storage.BlobCreated事件会在所有Blob创建完成时触发，不存在原生的空文件排除开关，必须配合上述过滤/配置规则实现需求。

配置完成后可以做简单验证：分别上传1个0字节空Parquet、1个带Parquet头但无数据的空Parquet、1个正常带数据的Parquet到监听容器，查看ADX摄取日志，确认前两个文件不会触发摄取失败，第三个文件可以正常写入即可。

内容的提问来源于stack exchange，提问作者SONIA_29