数据求交/对齐--隐私计算平台-火山引擎

文档中心

导航

数据求交/对齐

最近更新时间：2022.06.21 17:12:41首次发布时间：2022.06.21 17:12:41

在结果数据集列表页，点击【创建数据集】
进入创建数据集页面，填写数据集名称，选择数据任务类型（求交或对齐），选择我方数据集和合作伙伴数据集（参数配置可使用默认值），选填数据集描述，点击【确认创建】

任务类型	参数	参数说明	选填/必填	填写示例
PSI求交	image	fedlearner镜像地址	必填	`artifact.bytedance.com/fedlearner/fedlearner:882310f`
	num_partitions	数据分区的数量	必填	`2`
	raw_worker_cpu	raw_data 任务的 worker cpu大小	选填	`4000m`
	raw_worker_mem	raw_data 任务的 worker 内存大小	必填	`8Gi`
	batch_size	原始数据是一批一批的从文件系统中读出来，batch_size为batch的大小	必填	`102400`
	psi_worker_cpu	psi_data_join 任务的 worker cpu大小	必填	`4000m`
	psi_worker_mem	psi_data_join 任务的 worker 内存大小	必填	`8Gi`
	master_cpu	任务的 master cpu大小	必填	`2000m`
	master_mem	任务的 master 内存大小	必填	`4Gi`
对齐	driver_cores	spark driver pod 的核数	必填	`1`
	executor_cores	spark executor pod 的核数	必填	`2`
	executor_mem	spark executor pod 的内存大小	必填	`4g`

创建成功后，结果数据集列表页新增一条结果数据集，合作伙伴侧也会同步展示。
点击数据集名称进入数据集详情页
1. 任务详情以流程图展示生成该数据集的流程。
2. 数据探查页可查看样本数据及统计信息。
3. 关联数据集页可查看使用此数据集进行数据任务的数据集。

如需查看数据集关联任务信息，可进入【任务管理】模块查看任务详情。