Azure环境下Hangfire定时任务MySQL连接重置问题求助

可能的根因 #

这个偶发问题仅在Azure环境出现、本地无法复现，大概率和以下几点有关：

• Azure网络层（负载均衡、防火墙）会主动重置长时间闲置的TCP连接
• Azure MySQL默认的闲置连接超时设置，可能导致连接被服务器主动断开
• Hangfire.MySqlStorage的连接池配置不合理，复用了已被远端重置的无效连接

具体解决步骤 #

1. 优化MySQL连接字符串 #

在连接字符串中添加TCP心跳和连接生命周期配置，避免闲置连接被判定为无效：

Server=your-mysql-server.mysql.database.azure.com;Database=your-db;Uid=user;Pwd=pass;SslMode=Required;Keepalive=60;Connection Lifetime=1800;Max Pool Size=50;

• Keepalive=60：每60秒发送一次TCP心跳，告知Azure网络层连接仍在活跃
• Connection Lifetime=1800：限制连接池中的连接最多存活30分钟（和任务周期匹配），到期自动销毁，避免复用过期连接
• Max Pool Size=50：根据业务量调整连接池最大容量，防止连接耗尽

2. 调整Hangfire存储配置 #

在Hangfire初始化时，配置更严谨的存储选项，减少无效连接的影响：

services.AddHangfire(config =>
{
    config.UseStorage(new MySqlStorage(
        Configuration.GetConnectionString("HangfireMySql"),
        new MySqlStorageOptions
        {
            CommandBatchMaxTimeout = TimeSpan.FromMinutes(5),
            SlidingInvisibilityTimeout = TimeSpan.FromMinutes(5),
            QueuePollInterval = TimeSpan.Zero,
            UseRecommendedIsolationLevel = true,
            DisableGlobalLocks = true,
            ConnectionTimeout = TimeSpan.FromSeconds(30),
            ConnectionIdleTimeout = TimeSpan.FromMinutes(10) // 闲置10分钟后自动回收连接
        }));
});

3. 给任务加防重复执行机制 #

既然业务逻辑已经完成数据写入，仅在任务收尾时抛出连接错误，完全没必要重试。新增任务执行日志表，给任务加成功标记：

public async Task ExecuteDataSync()
{
    using (var db = new MyDbContext())
    {
        // 检查最近30分钟内是否已经执行成功
        var latestSuccess = await db.TaskExecutionLogs
            .Where(l => l.TaskName == "DataSync" && l.ExecutionTime >= DateTime.UtcNow.AddMinutes(-30))
            .FirstOrDefaultAsync();
        
        if (latestSuccess?.IsSuccess == true)
        {
            return; // 已执行过，直接退出
        }

        // 执行业务逻辑：新增/更新数据
        await SyncData(db);

        // 写入成功标记到数据库
        db.TaskExecutionLogs.Add(new TaskExecutionLog
        {
            TaskName = "DataSync",
            ExecutionTime = DateTime.UtcNow,
            IsSuccess = true
        });
        await db.SaveChangesAsync();
    }
}

注：需提前创建TaskExecutionLogs表，存储任务执行记录

4. 修改Azure MySQL的闲置超时参数 #

登录Azure Portal，找到目标MySQL服务器：

• 进入服务器参数页面
• 找到wait_timeout和interactive_timeout，将值改为3600（1小时），避免MySQL主动断开闲置连接
• 保存参数，等待服务器生效

5. 启用.NET Core全局TCP KeepAlive #

在Program.cs中添加全局配置，强化连接稳定性：

ServicePointManager.DefaultConnectionLimit = 50;
ServicePointManager.SetTcpKeepAlive(true, 60000, 10000); 
// 每60秒发送一次心跳，心跳失败后每10秒重试一次

验证方案 #

• 部署调整后的代码到Azure，开启详细日志（记录连接状态、任务执行标记）
• 查看Azure MySQL的活动连接和连接日志，确认是否还有连接重置情况
• 持续监控3-7天，观察任务是否还会因连接错误触发重试

内容的提问来源于stack exchange，提问作者sundar raj