Apache Ignite自定义区域开启persistence后数据未持久化问题咨询

问题结论 #

这不属于预期行为，你遗漏了3处核心配置和操作规则，才会出现数据丢失的情况： #

问题根因 #

1. 分区表未绑定已开启持久化的自定义区域
   你仅给My_Region开启了持久化，默认的Default_Region未开持久化。你创建的分区表大概率没显式指定数据区域，默认落到了内存级的Default_Region，节点宕机后内存数据直接释放，自然会丢失。而你配置的复制表显式绑定了My_Region，每个节点都有全量持久化副本，所以关闭节点2后节点1仍能查询到数据。
2. 持久化存储路径未显式配置
   你当前的dataStorageConfiguration没有指定storagePath参数，Ignite默认会把持久化文件存在系统临时目录，节点进程退出或操作系统重启时临时目录会被自动清理，重启节点后找不到持久化文件，就会出现所有数据消失的情况。
3. 分区表未配置备份数
   2节点集群下，分区表如果没有设置Backups=1，每个分区仅存在1份副本，只要存储对应分区的节点宕机，就会出现该分区数据不可访问的情况，和你首次关闭节点2后分区表全部丢失的现象完全吻合。

修正方案 #

1. 调整数据存储配置，显式指定持久化路径，可按需选择是否给默认区域开启持久化：

<dataStorageConfiguration storagePath="/your/fixed/persistence/path">
    <defaultDataRegionConfiguration
        name="Default_Region"
        initialSize="104857600"
        persistenceEnabled="true"/>
    <dataRegionConfigurations>
        <dataRegionConfiguration
            name="My_Region"
            initialSize="104857600"
            persistenceEnabled="true" 
            metricsEnabled="true" />
    </dataRegionConfigurations>
</dataStorageConfiguration>

2. 所有缓存/表创建时必须显式指定配置：

• 代码创建分区缓存时补充数据区域和备份数配置：

new CacheClientConfiguration(
    "MY_PARTITIONED_SCHEMA",
    new QueryEntity(typeof(object), typeof(object)))
{
    SqlSchema = "MY_SCHEMA",
    CacheMode = CacheMode.Partitioned,
    DataRegionName = "My_Region",
    Backups = 1
};

• SQL建表时通过WITH子句指定必要参数：

CREATE TABLE 表名 (
    字段名 类型 PRIMARY KEY,
    -- 其他字段
) WITH CACHE_MODE='PARTITIONED', BACKUPS=1, DATA_REGION='My_Region';

3. 开启持久化的集群重启时，需等待持有所有分区副本的节点都上线后再执行激活操作，避免单节点激活导致数据分区被判定为损坏。

内容的提问来源于stack exchange，提问作者herme 0