You need to enable JavaScript to run this app.
最新活动
产品
解决方案
定价
生态与合作
支持与服务
开发者
了解我们

对象存储的业务场景

基于先进分布式技术,帮助用户灵活高效、稳定可靠的存储并管理海量非结构化数据

社区干货

跨云迁移利器-存储迁移服务正式上线

随着云计算的高速发展和广泛使用,越来越多的用户构建了混合云或者多云架构,跨云的数据迁移及数据同步成为常见的业务场景,而传统的通过命令行工具或脚本进行数据传输的方法,存在迁移速度慢、实施成本高、易用性差等缺陷,为此火山引擎云存储团队推出了存储迁移服务,能够将其他云服务商或自建对象存储中的数据方便快捷地迁移到火山引擎对象存储TOS中。火山引擎存储迁移服务具有以下功能:- **多种数据源**:支持国内外主流云厂商...

火山引擎云存储选型指南 x 自动驾驶场景最佳实践

已经成为存放非结构化数据的首选,并在大数据、数据湖、数据仓库领域逐步成为事实上的数据底座。在大部分业务场景中做云存储大类的选型是相对容易的,比如要为云服务器配置系统盘或数据盘会使用块存储,存放视频、图片、游戏安装包等文件优选对象存储,但在某些业务场景(AI、HPC、大数据等)用户往往面临多样化的选择,需要综合考虑协议兼容性、功能、性能、易用性、扩展性等因素。本文将为您提供一个选型指南,如果您有计划将业务应...

火山引擎云存储选型指南 x 自动驾驶场景最佳实践

已经成为存放非结构化数据的首选,并在大数据、数据湖、数据仓库领域逐步成为事实上的数据底座。在大部分业务场景中做云存储大类的选型是相对容易的,比如要为云服务器配置系统盘或数据盘会使用块存储,存放视频、图片、游戏安装包等文件优选对象存储,但在某些业务场景(AI、HPC、大数据等)用户往往面临多样化的选择,需要综合考虑协议兼容性、功能、性能、易用性、扩展性等因素。本文将为您提供一个选型指南,如果您有计划将业务...

JuiceFS 在火山引擎边缘计算的应用实践

边缘存储主要面向适配边缘计算的典型业务场景,如边缘渲染。[火山引擎边缘渲染](https://www.volcengine.com/product/veRender)依托底层海量算力资源,可助力用户实现百万渲染帧队列轻松编排、渲染任务就近调度、多任务多节点并行渲染,极大提升渲染效率。## 边缘场景存储挑战这里简单介绍一下在边缘渲染中遇到的存储问题:需要对象存储与文件系统的元数据统一,实现数据通过对象存储接口上传以后,可以通过 POSIX 接口直接进行操作...

特惠活动

DCDN国内流量包100G

同时抵扣CDN与DCDN两种流量消耗,加速分发更实惠
2.00/20.00/年
立即购买

2核4G共享型云服务器

Intel CPU 性能可靠,不限流量,学习测试、小型网站、小程序开发推荐,性价比首选
86.00/1908.00/年
立即购买

视频云ImageX媒资存储50G

分布式存储,可靠性高,全链路图像服务
1.00/6月24.07/6月
立即购买

对象存储的业务场景-优选内容

应用场景
本文介绍对象存储 TOS 适用的业务场景。 视频存储对象存储可用于海量视频的存储。配合多媒体智能处理服务,可实现视频转码、抽帧、加水印等操作的在线处理;配合 CDN,可实现海量数据的下载分发,实现一整套视频存储、处理、访问的解决方案。 网页或者 APP 动态静态资源分离对象存储为 WEB 网站或者移动应用提供静态资源的存储,如 js 脚本、css 文件、图片、视频、音频等。配合 CDN 使用,可实现海量用户对同一页面或应用的并发访问。
应用场景
本文介绍存储迁移服务适用的场景。 数据搬迁 将存储于其他云服务商的对象存储数据,或是自建对象存储数据通过线上迁移的方式搬迁至火山引擎对象存储。 数据备份 通过迁移对存储于其他云服务商对象存储服务的数据做备份;或者将火山引擎的对象存储桶迁移至相同地域的另一个对象存储桶中,实现数据备份。
IDC共享云上对象存储服务
请确保已获取到待访问私有存储桶的名称。 配置步骤步骤一:获取终端节点服务名称终端节点服务由对接私网连接服务的业务方创建,您需要获取终端节点服务的名称,如下表所示。 火山引擎云服务 服务名称 对象存储TOS com.volces.privatelink.地域ID.tos-s3 说明 上表服务名称中的地域ID请按需替换。本文中服务名称以com.volces.privatelink.cn-beijing.tos-s3为例进行介绍。 步骤二:创建终端节点请根据实际需求场景选择适当类型的终端...
实现 vePFS 与对象存储 TOS 之间数据流动
本文介绍如何实现文件存储 vePFS 与对象存储 TOS 之间的数据流动。 适用场景加载数据集场景(TOS->vePFS):数据集从 TOS 流动到 vePFS,用于数据清洗和 GPU 训练。 训练数据归档场景(vePFS->TOS):GPU 训练的 CheckPo... 请参见拷贝对象。 参数 说明 bucketname 对象存储 Bucket 名称。 sourcedir 需要拷贝数据的目录名称。 -r 表示执行批量操作。 -j 批量任务的最大并发数,可以根据业务需求调整。 -p 每个分片任务的最大并发数,可以...

对象存储的业务场景-相关内容

通过私有DNS访问对象存储

场景介绍通过私网连接访问对象存储服务(TOS)默认使用HTTP协议,如果您希望通过私网连接可以使用HTTPS协议访问TOS服务,则需要使用私网连接私有DNS功能。本文以下图所示的访问场景为例,为您介绍如何配置私网连接私有DNS功能。 前提条件已创建私有网络VPC及其云服务器,具体操作请参见创建私有网络和购买云服务器实例。 配置步骤步骤一:获取终端节点服务名称终端节点服务由对接私网连接服务的业务方创建,您需要获取终端节点服务的名...

存储选型最佳实践

本节主要介绍使用容器服务(VKE)时如何选择存储(对象存储、文件存储、弹性快存储)类型以及选择时的注意事项。 存储说明不同的业务类型,需要选择不同的存储类型以匹配业务需要,以下内容将对火山引擎提供的存储类型的差异、主要使用场景进行说明。 存储类型 说明 优势 弹性块存储 弹性块存储 EBS(Elastic Block Storage)又称为云盘,是火山引擎提供的高可用、高可靠、高性能、弹性扩展的块存储设备,可以作为云服务器和弹性容器服务的...

存储概述

融合火山引擎弹性快存储 EBS、文件存储 NAS、大数据文件存储 CloudFS 和对象存储 TOS 等,提供容器网络存储能力。本文主要介绍容器服务支持的存储类型和网络存储在各种场景下的对比。 容器服务支持的存储类型容器服... 大数据文件存储是火山引擎面向大数据和机器学习生态的文件存储和加速服务,支持标准的 HDFS 协议访问和数据湖透明访问模式,为您提供低成本、高性能、高吞吐和高可用的大数据文件访问服务。 存放的内容 存放二进制数...

DCDN国内流量包100G

同时抵扣CDN与DCDN两种流量消耗,加速分发更实惠
2.00/20.00/年
立即购买

2核4G共享型云服务器

Intel CPU 性能可靠,不限流量,学习测试、小型网站、小程序开发推荐,性价比首选
86.00/1908.00/年
立即购买

视频云ImageX媒资存储50G

分布式存储,可靠性高,全链路图像服务
1.00/6月24.07/6月
立即购买

电商业务部署及数据库上云

部署业务及数据迁移等。 注意 本文仅为演示操作,文中出现的所有截图、费用等均为示例信息,无实际意义。您在实际操作中请以控制台展示为准。 方案介绍数据库上云有如下两种场景: 场景一:把火山引擎云服务器上自建数据库中的数据,通过火山引擎数据库传输服务DTS,迁移至火山引擎云数据库RDS。 场景二:把其他云厂商云上存储数据,通过火山引擎数据迁移服务DMS,迁移至火山引擎对象存储TOS。 本文仅按照最基础的配置,为您进行介绍。 ...

将 vePFS 中的数据定时备份到对象存储

适用场景保存在 vePFS 的训练的核心数据,对数据安全性要求比较高,需要把数据进行定期备份。 训练过程中的 checkpoint 数据,定期同步到对象存储中,及时释放 vePFS 的存储空间。 前提条件ECS 和 TOS 带宽均满足备... 创建用于存放备份脚本和备份日志信息的目录。本文以创建 backp 目录为例。 bash cd /optmkdir backup 执行以下命令,创建备份脚本,本文以 backup_vepfs_to_tos.sh为例,并使用文本编辑器打开。 bash vim backup_vepf...

使用对象存储静态存储卷

步骤二:创建存储卷(PV)在集群管理页面,选择 存储管理 > 存储卷。 单击存储卷列表左上角 创建存储卷。 在弹出的 创建存储卷 页面,完成参数配置。 配置项 说明 创建方式 选择存储卷的创建方式,目前支持静态创建。 名称 根据系统提示,自定义存储卷的名称,需确保存储卷名称在集群内唯一。 存储卷类型 存储卷类型包括:云盘、文件存储、对象存储。本场景选择 对象存储。 访问模式 选择存储卷的访问方式,目前支持 ReadWriteMany ,此访...

对象存储服务等级协议变更公告

为了给您提供更优质的服务并合法保障您的权益,对象存储将于 2023 年 7 月 10 日变更服务等级协议。 生效日期2023 年 7 月 15 日 变更说明服务等级变更点如下所示: 术语和定义:优化了有效请求和失败请求的场景说明。 服务可用性:明确了存储类型的冗余条件。 赔偿方案:明确了存储类型的冗余条件。 服务等级协议地址最新的服务等级协议地址,请参见对象存储服务等级协议(SLA)。

跨云迁移利器-存储迁移服务正式上线

随着云计算的高速发展和广泛使用,越来越多的用户构建了混合云或者多云架构,跨云的数据迁移及数据同步成为常见的业务场景,而传统的通过命令行工具或脚本进行数据传输的方法,存在迁移速度慢、实施成本高、易用性差等缺陷,为此火山引擎云存储团队推出了存储迁移服务,能够将其他云服务商或自建对象存储中的数据方便快捷地迁移到火山引擎对象存储TOS中。火山引擎存储迁移服务具有以下功能:- **多种数据源**:支持国内外主流云厂商...

跨云迁移神器——火山引擎存储迁移服务正式上线

随着云计算的高速发展和广泛使用,越来越多的用户构建了混合云或者多云架构,跨云的数据迁移及数据同步成为常见的业务场景。然而,传统通过命令行工具或脚本进行数据传输的方法,存在迁移速度慢、实施成本高、易用性差等缺陷。为此火山引擎云存储团队推出了存储迁移服务,将其他云服务商或自建对象存储中的数据,方便快捷地迁移到火山引擎对象存储TOS中。 火山引擎存储迁移服务具有以下功能: 多种数据源:支持国内外主流云厂商对象存储及...

特惠活动

DCDN国内流量包100G

同时抵扣CDN与DCDN两种流量消耗,加速分发更实惠
2.00/20.00/年
立即购买

2核4G共享型云服务器

Intel CPU 性能可靠,不限流量,学习测试、小型网站、小程序开发推荐,性价比首选
86.00/1908.00/年
立即购买

视频云ImageX媒资存储50G

分布式存储,可靠性高,全链路图像服务
1.00/6月24.07/6月
立即购买

产品体验

体验中心

云服务器特惠

云服务器
云服务器ECS新人特惠
立即抢购

白皮书

从ClickHouse到ByteHouse
关于金融、工业互联网,都有对应的场景特性、解决策略、实践效果具体呈现,相信一定能解决你的诸多疑惑
立即获取

最新活动

爆款1核2G共享型服务器

首年60元,每月仅需5元,限量秒杀
立即抢购

火山引擎增长体验专区

丰富能力激励企业快速增长
查看详情

数据智能VeDI

易用的高性能大数据产品家族
了解详情

一键开启云上增长新空间

立即咨询