You need to enable JavaScript to run this app.
优惠活动
大模型
产品
解决方案
定价
更多

Vertex AI现有Dataset导入JSONL数据后标签不显示问题求助

解决Vertex AI数据集追加JSONL数据后未自动标记的问题

核心原因

Vertex AI的自动标注逻辑默认仅在首次导入空数据集时触发,向已有数据的数据集追加导入时,不会自动复用原有标注规则,需显式指定标注配置或手动触发标注同步。


解决方案1:通过API显式指定标注规则导入数据

调用import_data方法时,明确传入标注相关配置,确保新数据被自动标记。

Python代码示例

from google.cloud import aiplatform

# 初始化客户端
aiplatform.init(project="你的项目ID", location="你的区域")

# 获取已存在的数据集
dataset = aiplatform.TabularDataset(
    dataset_name="projects/你的项目ID/locations/你的区域/datasets/你的数据集ID"
)

# 定义导入配置,包含标注规则
import_config = aiplatform.gapic.DatasetImportConfig(
    gcs_source=aiplatform.gapic.GcsSource(uris=["gs://你的存储桶路径/new_data.jsonl"]),
    # 匹配数据集的Schema URI,可从数据集详情页获取
    import_schema_uri="gs://google-cloud-aiplatform/schema/dataset/ioformat/tabular_io_format_1.0.0.yaml",
    # 若为自定义分类标注,指定标注类别
    annotation_specs=[
        aiplatform.gapic.AnnotationSpec(display_name="类别A"),
        aiplatform.gapic.AnnotationSpec(display_name="类别B")
    ]
)

# 执行导入
dataset.import_data(import_config=import_config)
# 等待导入完成
dataset.wait()

解决方案2:验证JSONL数据的标注字段一致性

确保追加的JSONL数据与首次导入的标注字段完全一致,比如首次导入格式为:

{"feature_col": "示例值", "label_col": "类别A"}

追加数据必须使用相同的标注字段名(如label_col),不能出现拼写错误或字段名变更。

解决方案3:控制台手动同步标注

若API导入后仍未标记,可通过控制台手动触发标注同步:

  1. 打开目标数据集的详情页面
  2. 切换到标注标签页
  3. 点击导入标注按钮
  4. 选择从数据集字段导入,选中对应的标注字段
  5. 确认后系统将自动为新数据应用标注

内容的提问来源于stack exchange,提问作者Vindhya Bolisetti

相关产品推荐
方舟 Agent Plan

超全模态模型 × Harness 升级,最新支持 Deepseek-V4.1-Flash、GLM-5.3 系列、Doubao-Seedream-5.0-pro、Kimi-K3 (部分), 限时 9.9 元起

最近更新时间:2026.07.03 11:17:08