高延迟场景下优化ODBC Driver 18 for SQL Server的SQLFetch/SQLFetchScroll性能

针对高延迟网络中ODBC取大量数据慢的问题，结合SQL Server ODBC Driver 18和Oracle ODBC驱动的特性，给出以下优化方案：

一、SQL Server ODBC Driver 18 优化 #

1. 调整驱动取数缓冲区与网络数据包大小 #

要解决批量取数仅为“语法糖”的问题，需同时调整取数缓冲区大小和行数组绑定配置，让驱动真正减少网络往返次数：

• 设置SQL_ATTR_FETCH_BUFFER_SIZE：该参数控制驱动每次从服务器拉取的行数，需与SQL_ATTR_ROW_ARRAY_SIZE（绑定的数组大小）保持一致。示例代码：

  // 设置每次批量取1000行
  SQLULONG batchSize = 1000;
  SQLSetStmtAttr(hStmt, SQL_ATTR_ROW_ARRAY_SIZE, (SQLPOINTER)batchSize, 0);
  // 设置驱动从服务器拉取的缓冲区行数
  SQLSetStmtAttr(hStmt, SQL_ATTR_FETCH_BUFFER_SIZE, (SQLPOINTER)batchSize, 0);
  // 设置行绑定类型（若用结构体绑定整行）
  SQLSetStmtAttr(hStmt, SQL_ATTR_ROW_BIND_TYPE, (SQLPOINTER)sizeof(YourRowStruct), 0);
  

• 增大网络数据包大小：默认ODBC数据包大小为4KB，高延迟下可通过连接字符串或SQLSetConnectAttr调整至最大32KB：

  SQLSetConnectAttr(hDbc, SQL_ATTR_PACKET_SIZE, (SQLPOINTER)32767, 0);
  

  或在连接字符串中添加：Packet Size=32767

2. 切换为服务器端静态游标 #

默认客户端游标会在本地缓存结果集，改为服务器端静态游标可让服务器负责结果集缓存，减少多次网络请求：

SQLSetStmtAttr(hStmt, SQL_ATTR_CURSOR_TYPE, (SQLPOINTER)SQL_CURSOR_STATIC, 0);

注意：服务器端游标会占用更多服务器资源，需根据实际场景评估。

3. 启用网络压缩 #

在连接字符串中开启数据压缩，减少传输的数据量：

Driver={ODBC Driver 18 for SQL Server};Server=your_server;Database=your_db;UID=user;PWD=pwd;Compress=True;Use Encryption for Data=Optional;Trust Server Certificate=Yes

二、Oracle ODBC驱动优化 #

1. 调整取数缓冲区大小 #

可通过ODBC数据源配置或连接字符串直接设置FetchBufferSize参数，例如设置为640KB：

Driver={Oracle in OraClient19Home1};Dbq=your_oracle_db;Uid=user;Pwd=pwd;FetchBufferSize=655360

建议根据延迟场景测试不同大小（如640KB、6.4MB），收益递减时停止增大。

2. 批量取数配置 #

确保绑定数组与SQL_ATTR_ROW_ARRAY_SIZE、SQL_ATTR_FETCH_BUFFER_SIZE匹配，Oracle驱动支持SQLFetch批量取数，配置示例：

SQLULONG batchSize = 1000;
SQLSetStmtAttr(hStmt, SQL_ATTR_ROW_ARRAY_SIZE, (SQLPOINTER)batchSize, 0);
SQLSetStmtAttr(hStmt, SQL_ATTR_FETCH_BUFFER_SIZE, (SQLPOINTER)batchSize, 0);
// 绑定列数组（以int列为例）
SQLBindCol(hStmt, 1, SQL_C_SLONG, intArray, sizeof(int), NULL);

三、通用优化方案 #

• 仅查询必要列：避免使用SELECT *，只获取业务需要的字段，减少数据传输量。
• 避免不必要的类型转换：绑定变量时使用与数据库字段匹配的ODBC类型（如int对应SQL_INTEGER，字符串对应SQL_VARCHAR），减少驱动转换开销。
• 分页分批次拉取：如果不需要一次性获取全量数据，可使用分页语法（SQL Server用OFFSET ... FETCH NEXT，Oracle用ROWNUM）分批次查询，降低单次请求的网络负载。

内容的提问来源于stack exchange，提问作者Naryoril