SQL作业调用平面文件加载包仅写入少量记录无报错求助

1. 权限差异排查 #

• 验证SQL Server Agent服务账户对目标平面文件路径的读取/遍历权限，尤其是修改后的新路径。开发环境手动运行使用当前登录用户权限，Agent账户可能缺少共享目录访问权或文件读取权，导致读取中断。
• 用psexec -s -i cmd.exe模拟Agent服务账户登录，手动尝试打开并读取目标文件，确认无访问异常。

2. 编码与格式适配 #

• 强制指定平面文件连接管理器的编码类型（如UTF-8带BOM、ANSI），避免Agent运行环境的区域设置/代码页与开发环境不一致导致的行识别错误。
• 用Notepad++检查文件换行符类型（\r\n/\n），在连接管理器中手动设置行分隔符，避免自动识别时截断数据。

3. 变量与配置运行时验证 #

• 检查包中动态变量（如文件路径、循环计数器）在Agent运行时的实际赋值，确认配置文件/环境变量已同步到Agent服务器，不存在开发环境本地路径残留。
• 启用SSIS包详细日志：在包属性中开启日志，选择SQL Server作为日志源，记录OnInformation、OnWarning、OnError及数据流组件的RowsRead、RowsWritten事件，对比手动运行与Agent运行的日志差异。

4. 资源与超时排查 #

• 监控Agent服务器CPU、内存使用率，大文件加载时资源不足可能导致包静默终止。调整数据流任务的DefaultBufferMaxRows和DefaultBufferSize参数，优化缓冲区大小。
• 延长OLE DB连接管理器的ConnectTimeout属性，避免批量提交时因数据库连接超时导致数据写入中断。

5. 文件锁定与并发检查 #

• 确认作业执行时目标文件未被其他进程（如同步工具、杀毒软件）锁定，可在作业前增加PowerShell步骤检查文件可用性：

  $filePath = "D:\NewPath\SHIPPED.TXT"
  try {
      $file = [System.IO.File]::Open($filePath, 'Open', 'Read', 'None')
      $file.Close()
      Write-Host "File is accessible"
  } catch {
      Write-Host "File is locked: $_"
  }
  

• 检查循环处理逻辑，确认计数器变量在Agent运行时未提前溢出或终止，导致仅处理部分数据。

内容的提问来源于stack exchange，提问作者201620222023