最近更新时间:2023.08.08 10:35:45
首次发布时间:2021.10.18 21:35:32
本文介绍如何在存储迁移服务控制台使用公共网络创建迁移任务。
存储迁移服务支持以下源端云服务商或数据源类型:
注意
存储迁移服务只支持在相同地域的火山引擎存储桶之间迁移数据。
已获取数据源端相关信息,例如访问 AccessKey ID 及Secret AccessKey、Endpoint、桶名称等。
已在对象存储创建存储桶,具体步骤,请参见创建存储桶。
登录存储迁移服务控制台。
在迁移任务列表页面,单击创建迁移任务。
在选择网络页面,配置以下参数。
参数 | 说明 |
---|---|
任务名称 | 指定该迁移任务的名称,命名规则如下:
|
网络类型 | 选择公共网络。 |
单击下一步:设置源端及目的端,配置如下源端及目的端参数。
源端类型为对象存储
参数 | 说明 |
---|---|
源端类型 | 数据源端的类型,本场景下选择对象存储。 |
数据源 | 选择具体的数据源:
注意 数据源为对象存储-火山引擎时,目的端只可以选择与源端相同 Region 的存储桶,如果您需要跨区域迁移数据,请使用对象存储的跨区域复制功能,跨区域复制功能只支持相同账号之间复制,详细信息,请参见跨区域复制。 |
Access Key ID | 用于访问源端对象存储的 AccessKey ID。 |
Access Key Secret | 用于访问源端对象存储的 AccessKey Secret。 |
源端桶名 | 指定要迁移的源端对象存储桶名称。 |
源端 Region | 指定源端对象存储所在的 Region。 |
Endpoint | 指定源端对象存储的访问域名,地址前需要输入 http:// 或 https://。 注意 Endpoint 不要携带存储桶名称,否则会导致源端连接失败。 |
指定前缀 | 默认为关闭,开启后可自定义迁移的文件前缀,以过滤源端文件。文件前缀限制说明如下:
说明 指定前缀前,请确保拥有存储桶的 HeadBucket、ListObjects 、HeadObject 和 GetObject 权限,否则会导致迁移结果不符合预期。。 |
源端类型为 URL列表
注意
当源端类型为 URL列表时,存储迁移服务只支持迁移 300G 及以下的数据。
参数 | 说明 |
---|---|
源端类型 | 数据源端的类型,本场景下选择URL列表。 |
上传URL列表文件 | 选择 URL 列表文件的上传方式: 说明 使用手动输入或上传文件迁移时,默认将 URL 路径(域名 / 后的部分)作为对象的名称。如果您想重命名文件,可通过 URL + 空格 + 对象文件名的方式。例如您可以通过
注意 仅源端数据源为当前火山引擎账号下的对象存储存储桶,且源端存储桶所在地域和目的端存储桶所在地域保持一致时,才可以使用文件列表的方式迁移数据。 |
参数 | 说明 |
---|---|
目的端类型 | 目的端类型,暂时只支持对象存储(火山引擎 TOS)。 |
目的端写入模式 | 选择目的端写入模式,参数说明如下:
注意 如果您使用了子账号创建迁移任务且选择了跨服务授权模式,您需要授予子账号创建 IAM 策略的权限,详细说明,请参见常见问题。 |
Access Key ID | 用于访问目的端对象存储的 AccessKey ID。 |
Access Key Secret | 用于访问目的端对象存储的 AccessKey Secret。 |
目的端桶名 | 指定目的端对象存储的桶名称。 注意
|
单击下一步:设置任务参数,配置如下任务参数。
注意
单击下一步:设置任务参数,系统会自动校验源端连接信息,如果你设置的信息有误,会弹出权限预检提示对话框,提示您源端或目的端权限不足,继续创建任务有可能导致迁移结果不满足预期。
参数 | 说明 |
---|---|
迁移增量文件 | 默认为关闭,开启后可自定义增量迁移参数,参数说明如下:
|
跳过归档对象 | 设置是否跳过归档对象,默认开启,说明如下:
说明 各个数据源的延迟访问存储类型如下:
|
文件重命名 | 默认为关闭,开启后可设置文件重命名规则,文件重命名支持正则替换,您可以输入需要重命名的正则表达式规则以及需要替换的字符串。例如:
|
覆盖策略 | 可指定当源端和目的端出现同名文件时的覆盖策略,策略说明如下:
|
文件存储方式 | 设置文件迁移至 TOS 的存储类型,支持选择全部使用标准存储、保持原存储属性、全部使用低频存储、全部使用归档闪回存储、全部使用智能分层存储、全部使用归档存储、全部使用冷归档存储。关于 TOS 存储类型的详细介绍,请参见存储类型。以下为保持原存储属性和全部使用智能分层的参数说明:
说明
|
迁移文件起始时间 | 设置需要迁移的文件的起始时间,参数说明如下:
|
流量控制 | 默认关闭,关闭时默认速率为 1024MB/s。
|
单击下一步:确定任务信息,在该页面检查迁移任务的各项参数。
参数检查无误后,阅读并勾选存储产品和服务条款 ,单击提交。
注意
在费用提醒对话框,单击已知晓,下一步。
(可选)如果您选择了跨服务授权,您还需要在弹出的跨服务授权对话框,单击确定。
说明
任务创建完成后会自动启动,您可以在任务列表中查看该任务的创建时间和迁移状态。